Di struttura planimetrica rettangolare, è suddiviso in due livelli fuori terra e caratterizzato, in facciata principale, da un unico ordine di paraste in mattoni che danno ritmo ai pieni e i vuoti che compongono il prospetto. Il portale d'ingresso è incorniciato da paraste con volute finali composte da conci di pietra a bugnato, in modo da dare volume e movimento in facciata. In corrispondenza del portale al piano superiore è collocato il balcone. Al secondo piano si succedono ritmicamente una serie di archeggiature ribassate, testimonianza forse di un lungo loggiato tamponato nel secolo XX all’interno delle quali si aprono finestre con cornice lineare e soglia modanata in pietra. Analogo motivo nel cortile interno. Il cornicione è molto alto e aggettante. La corte interna, a cui si accede tramite un androne coperto da una volta a botte a sesto ribassato unghiata su peducci, presenta una scala che porta ai piani superiori posta in asse rispetto al portale d'ingresso, allo scopo di dilatare gli spazi e di creare uno scorcio prospettico suggestivo. L'ampia scalinata, inquadrata da due lesene in mattoni su cui poggia un timpano triangolare, si apre in due rampe ed è illuminata da un artistico finestrone. Se alla volta dell'atrio è ormai scomparso lo stemma gentilizio ben visibili restano, invece, i segni e i luoghi della sua trascorsa vitalità: cantina, stalla, magazzino, giardino, cappella, ecc. I molti locali riservati all'abitazione e alla rappresentanza, già variamente decorati, conservano oggi solo tracce di stucchi e di affreschi. Negli appartamenti eleganti porte settecentesche mistilinee. Ammirato da tutti, e intatto nella sua meravigliosa tappezzeria e nei suoi lampadari, è il salone settecentesco del palazzo (salotto Cavalli). Le altre stanze, hanno subito le necessarie modifiche per renderle più idonee alla collocazione del Museo, il cui patrimonio spazia dai reperti neolitici alle testimonianze romane (epigrafi e sculture), dai vasi apuli e dauni alle monete romane e della zecca di Lucera