Il palazzo faceva parte di un complesso molto più articolato che comprendeva anche gli edifici vicini e una serie di altri immobili, sedi di magistrature, poi nei secoli alienati o abbattuti. L'attuale Prefettura occupa una lunga porzione di Piazza del Popolo, limitandosi alle pertinenze della retrostante corte interna, che invece in origine fungeva da spazio di distribuzione e di perno dell'intero complesso