Le propriétaire du palais fut Fermin de Atodo, capitaine des Tercios de Tolosa et ambassadeur de Philippe II à Rome.

Rien qu’en observant les écuries de la façade (la première pour la famille et l’autre pour le rafraichissement des chevaux des postes royales), nous pouvons comprendre l’importance et le pouvoir dont jouissait cette famille.

C’est un palais de style renaissance qui comporte trois étages et une toiture à deux pans.