Palazuelo adquirió esta propiedad a finales de la década de los setenta y se recluía en su interior para crear sus obras. Aunque el castillo está situado en la plaza mayor del municipio de Monroy, los vecinos aseguran que son muy pocas las veces que han visto al artista por las calles delpueblo.

El castillo, que se levanta sobre una superficie de más de 19.000 metros cuadrados, fue contruido por Fernán Pérez de Monroy en el siglo XIV.