El Hospital fue fundado en 1443 por la reina doña María, mujer de Juan II.

Su mejor momento fue durante los siglos XVII y XVIII contando incluso con un servicio de urgencia y capacidad para 25 enfermos. Estuvo en uso hasta 1934 y tras un periodo de abandono fue rehabilitado como Casa de Cultura de la villa de Madrigal.

El Real Hospital de la Purísima Concepción es de planta cuadrada con dos alturas y patio interior, construido en ladrillo, tapial y piedra.

Destacan la fachada principal, el patio columnado interior y la hermosa capilla bajo la advocación de la Concepción en la que se venera una antiquísima imagen de Jesucristo, titulado de las Injurias, del siglo XV.