Der verlassene, dachlose Palast im klassizistischen Stil, der inmitten dieser orientalischen Bauten so deplatziert wirkt, wurde 1538 auf Befehl des Kaisers Karl V. begonnen. Es wurde nie fertiggestellt. Die Absicht des flämischen Kaisers scheint es gewesen zu sein, hier eine dauerhafte Residenz zu errichten, von der aus er die Schönheiten des maurischen Palastes betrachten konnte.
Das Gebäude ist ein Viereck von vier Fassaden, jede siebzehn Meter hoch. Das untere Stockwerk ist toskanischen, das obere ionische. Einige der Marmorportale sind sehr schön. In der Dekoration erscheinen Anspielungen auf die vom Kaiser geleiteten Feldzüge zu Wasser und zu Land, sein Motto Plus ultre und das Emblem des Goldenen Vlieses.
