W 1890 r. w pałacu urodził się grodzieński historyk Józef JodkowskiŚnieżko, Aleksander. Wydobył z ziemi gród, o którym nikt nie wiedział: wspomnienie o Józefie Jodkowskim, Białostockie Towarzystwo Naukowe, 2000.. W budynku pałacowym mieszkał jego ojciec, Józef senior. Według wspomnień historyka Stanisława Kostelkowskiego w dworku mieścił się Syndykat RolniczyStanisław Kościałkowski. Studia i szkice przygodne: z historii i z jej pogranicza z literaturą, Londyn: Społeczność Akademicka USB 1956..

Po II wojnie światowej w dawnym pałacu mieściła się siedziba komendanta wojskowego, który w latach 2000. wyprowadził się z budynku.

11 lutego 2010 roku Google umieścił w swoim logo przeglądarki wizerunek pałacu Czetwertyńskich w rocznicę narodzin Napoleona Ordy, autora akwareli z widokiem na budynek.

Architektura mały|lewo|Budynek Królewskiej Akademii Medycznej w XIX wieku Wygląd pałacu zmienił się stosunkowo niewiele w stosunku do oryginału. Budynek wykonany jest w stylu barokowym z wpływami klasycyzmu. W kompozycji uwydatnione są fasetowane boczne ryzality, przypominające wieże. Wcześniej były one przykryte fasetowanymi kopułami. Po zachodniej stronie budynku znajdowała się szklarnia, łącząca pałac z nieistniejącym pałacem Tyzenhauza.