W 1786 roku właścicielem pałacu został generał Filip Raczyński, który w 1787 roku przekazał go swojemu teściowi – staroście wielkopolskiemu Kazimierzowi Raczyńskiemu. W tym samym roku rozpoczął on przebudowę gmachu w stylu klasycystycznym według projektu przypuszczalnie Jana Chrystiana Kamsetzera lub Stanisława Zawadzkiego. Oś środkową pałacu architekt zaakcentował przyściennym portykiem kolumnowym, umieszczonym na drugiej i trzeciej kondygnacji i zwieńczonym trójkątnym szczytem. Najbardziej reprezentacyjnym pomieszczeniem stała się Sala Balowa, zajmująca dwa piętra. Była ona uznawana za jedną z najpiękniejszych w mieście. Oprócz licznych płaskorzeźb i sztukaterii ozdobiono ją także kopiami czterech obrazów zamówionych w 1766 roku przez Stanisława Augusta Poniatowskiego uosabiających Zgodę, Sprawiedliwość, Współzawodnictwo i Wspaniałomyślność. Prace zakończono najprawdopodobniej w 1789 roku, kiedy to m.in. pałac korytarzem na pierwszym piętrze połączono z lożą właścicieli w kościele św. Ducha.