Il palazzo venne edificato a partire dal 1583 per i due fratelli Spinola, Giacomo e Pantaleo, secondo un progetto che accosta due case speculari cui si accede dalla via da due portali identici, impreziositi da marmo e pietra di Finale.

Le due dimore, per quanto gemelle, differiscono nella decorazioni interne, commissionate dai vari proprietari che si susseguirono nel tempo.

Nel 1624 Lazzaro Tavarone affrescò per gli Adorno imprese familiari negli spazi dell’atrio e del piano nobile; il corpo a levante è invece caratterizzato da una decorazione ottocentesca commissionata dai Cattaneo. Recentemente restaurato, il palazzo ha potuto recuperare l’assetto decorativo, definito da architetture illusive, mascheroni e finestre a cartella a monocromo.