Fu istituita una commissione, guidata da Francisco de Sabatini, che lasciò la direzione dei lavori a Vicente Ignacio Imperial Digueri nel 1779. Il progetto iniziale costituiva un complesso monumentale, che comprendeva, tra gli altri edifici di vario genere, due caserme per le truppe . La grandezza di questo progetto si ridusse presto ai tempi di Carlo III, e già sotto il regno di Carlo IV l'idea iniziale di Sabatini fu abbandonata, sostituita dalla nuova progettazione del marchese di Ureña, a causa della precaria situazione di il Tesoro Reale.