Este palacio fue edificado a finales del siglo XVI y principios del XVII. Su torre, considerada como una de las más bellas de España, se concibió como un apéndice para mostrarse a la calle Real, la calle principal de la ciudad en esta época.
Consta de cuatro cuerpos profusamente decorados, con balcones esquinados y abundante heráldica.
Actualmente alberga el único hotel de cinco estrellas Gran Lujo de la provincia.