W latach 1722–1731 na polecenie elektora Fryderyka Augusta I (jednocześnie króla Polski pod imieniem August II Mocny) architekt Johann Georg Maximilian von Fürstenhoff przeprowadził przebudowę gmachu, w wyniku której dotychczas jednokondygnacyjny budynek zyskał drugą kondygnację, a ponadto dobudowano do niego wolnostojące, dwuskrzydłowe schody, zaś jego południową fasadę zwieńczono kartuszem z sasko-polskim herbem. Syn i zarazem następca Fryderyka Augusta I, Fryderyk August II (jednocześnie król Polski jako August III Sas) zarządził ulokowanie w przebudowanym budynku Drezdeńskiej Galerii Obrazów. W związku z tym na górnej, przeznaczonej dla tej placówki kondygnacji dokonano w latach 1744–1746 pod nadzorem architekta Johanna Christopha Knöffela kilku remontów – przede wszystkim wstawiono wysokie, łukowato zakończone okna w celu lepszego doświetlenia wystawy obrazów. Galeria w gmachu została otwarta w 1747 roku i działała w nim do 1856 roku, kiedy to przeniesiono ją do wchodzącego w skład Zwingeru budynku zaprojektowanego przez Gottfrieda Sempera przy Theaterplatz. Z kolei w okresie od 1794 do 1857 roku na parterze mieściła się wystawa reprodukcji starodawnego wyposażenia gabinetów.