Palasset ble grunnlagt av prinsesse Juana de Austria, datteren til den hellige romerske keiseren Carlos V, i 1566, og ble omgjort til et kloster av arkitekten som var ansvarlig for El Escorial.
Prinsesse Juana av Østerrike var datter av en tysk keiser.