Restos del que fuera Palacio del Condestable de Castilla, D. Miguel Lucas de Iranzo (en realidad, su nombre era Miguel Lucas de Niebla, pero es conocido como "de Iranzo" por el apellido de su padrastro). Del palacio original, que alcanzaba toda la manzana entre las calles Maestra y Cerón, se conserva estupendo artesonado mudéjar en el espacio conocido con el nombre de "Salón Mudéjar", utilizado para actos culturales. En dicho salón también se conserva un arco de yeserías que daba con seguridad paso a dicho salón antes de salir al patio.

En el patio se conservan restos del pavimento original y también, aunque no visitable, existen restos de una torre del palacio en una habitación usada como almacén. El edificio cuenta además con otros muchos ornamentos y dependencias de etapas históricas posteriores, lo que hace de él, en conjunto, un espacio agradable para la visita y su disfrute.

Actualmente alberga la Biblioteca Municipal Central, así como las oficinas de las concejalías de Cultura, que asume además también la temática de festejos. Su entrada principal se ubica en la calle Maestra, frente a la calle Madre de Dios. Es conocido también con el nombre de Palacio Municipal de Cultura.

El Condestable Miguel Lucas de Iranzo es un personaje muy conocido a nivel popular, posiblemente uno de los personajes históricos mas conocidos entre la población. La esposa de Miguel Lucas, Teresa de Torres, fue una importante aristócrata que, además de justificar el poder local del Condestable de Castilla en Jaén gobernó la ciudad por veinte años a la muerte de su esposo, convirtiéndose así, según datos documentales, en la primera mujer, que se sepa, que gobernó Jaén, en las postrimerías del siglo XV.