A partir do reinado de D. Maria II este palácio ficou a ser a residência dos reis da Dinastia de Bragança. Ali existiu uma grande coleção de arte reunida por D. Fernando, marido de D. Maria II. Esta coleção foi espalhada por vários locais após o seu falecimento.
O palácio teve diversas modificações e ampliações pelos diversos reis que entretanto ali habitaram.
O último grande acontecimento real que ali aconteceu foi o funeral do Rei D. Carlos e do Príncipe D. Luís Filipe, em 8 de Fevereiro de 1908.
Ficando vazio após o fim da monarquia, foi ali instalado o Ministério dos Negócios Estrangeiros por volta de 1950.
O conjunto do palácio, os jardins e o respectivo parque, incluindo a fonte monumental, foram classificados como Imóvel de Interesse Público em 1983.