Der Palazzo sollte nach Vorbild der Residenz seines Urgroßvaters Ludwig der XIV in Versailles erbaut werden. Nur noch größer, noch prächtiger. Zur Realisierung stand ihn mit Luigi Vanvitelli einer der fähigsten Architekte seine Zeit zur Verfügung. Nach dem Motto: "Geld spiel keine Rolle!" wurde 1752 mit dem Bau begonnen.