W latach 1593–1818 na południe od pałacu znajdował się kościół parafialny dla Ujazdowa pod wezwaniem św. Anny i św. Małgorzaty wraz z cmentarzem. Kościół i cmentarz zamknięto decyzją Komisji Rządowej Spraw Wewnętrznych w lutym 1818. Szczątki znaczniejszych osób, m.in. Kazimierza Poniatowskiego i Marcella Bacciarellego z żoną, ekshumowano i przeniesiono do podziemi kościoła św. Krzyża i katedry św. Jana, a innych zmarłych na cmentarz Świętokrzyski. Funkcję rozebranej świątyni przejął nowy kościół św. Aleksandra na placu Trzech Krzyży, a w jej miejscu urządzono taras.

Porządek w ogrodzie i na dziedzińcu Belwederu utrzymywali obywatele skazywani za wykroczenia. Jedną z osób odbywających ten rodzaj kary był Maurycy Mochnacki, który zakuty w kajdany przepracował w ogrodzie belwederskim 40 dni.

Podczas ataku na Belweder w czasie nocy listopadowej 29 listopada 1830 powstańcom, wśród których byli m.in. Ludwik Nabielak i Seweryn Goszczyński, nie udało się ująć wielkiego księcia Konstantego, który się ukrył. Od ciosów bagnetów zginął przebywający w tym czasie w pałacu rosyjski generał Aleksiej Gendre.