Do obecnych czasów z tego budynku zachowały się niektóre ściany, dwa przęsła sklepień krzyżowo-żebrowych w północnej części pałacu na poziomie parteru oraz szczyt południowy wraz z gotyckimi oknami w kondygnacji strychowej.
W 1741 roku pałac został prawdopodobnie sprzedany biskupowi wrocławskiemu hrabiemu Gotthardowi von Schaffgotschowi. Następnie odkupiła go szlachecka rodzina von Matuschków (prawdopodobnie około roku 1766), w której rękach budynek znajdował się przez niemal całą drugą połowę XVIII wieku. Według Wojciecha Brzezowskiego pałac był własnością hrabiego von Schaffgotscha na początku XIX wieku. W latach 1806–1807 budynek został zniszczony w wyniku walk garnizonu pruskiego z wojskami napoleońskimi, zakończonych kapitulacją Prusaków. W kolejnych latach został odbudowany już w formach klasycystycznych. W tym okresie od strony południowej dodano skromny portal.