W latach 1923–1925, kiedy właścicielem kompleksu był hrabia Hahn, zespół pałacowy został całkowicie przebudowany zyskując obecny wygląd. Przebudowano m.in. ryzalit i ściany skrzydła zachodniego. Z tego okresu zachowały się m.in. malowidła w sali balowej. Ostatnim właścicielem Świerzna, a więc i zespołu pałacowego, od 1936 roku do 1945 roku był baron von Rüxleben. W latach 1937–1938, za rządów Hansa Siegfrieda von Rüxleben, wyremontowano część budynków oraz odrestaurowano wystrój sali balowej.
Po II wojnie światowej obiekt przez kilka lat był użytkowany przez wojska radzieckie. W latach 1952–1993 stanowił własność Państwowego Gospodarstwa Rolnego. W latach 1975–1981 były prowadzone prace remontowo-rewaloryzacyjne przez Pracownię Konserwacji Zabytków ze Szczecina: przeprowadzono remonty dachów, konserwację malowideł w sali balowej oraz odbudowę budynku gospodarczego po zachodniej stronie drogi dojazdowej. Prace te zostały jednak przerwane. Po rozwiązaniu PGR-ów zespół podworski w roku 1993 przeszedł w ręce prywatne.