I 1791 ble regjeringens sete og guvernørens (eller generalkapteinens) residens overført fra fortet til det nybygde, barokke Palacio de los Capitanes Generales (Palace of the Captain Generals) på torgets vestlige flanke.
Regjeringens sete var veldig dyrt å lage.