W 1772 roku, w wyniku I rozbioru Polski, zamek przeszedł pod panowanie pruskie. Został wówczas częściowo rozebrany i zaadaptowany przez władze pruskie na siedzibę Zarządu Dóbr Skarbowych. W końcu XVIII i w XIX wieku rozebrano m.in. wieżę w narożu północno-wschodnim, część skrzydła wschodniego z dawnym domem wielkich mistrzów, budynki gospodarcze, skrzydło zachodnie, część murów wieży bramnej i bramy wjazdowej. Osuszono i zagospodarowano tereny dawnej fosy otaczającej zamek. Przebudowano skrzydło południowe na potrzeby intendentury i siedziby sądu. W 1824 roku sąd przeniesiono do skrzydła wschodniego.
Od lat sześćdziesiątych XIX wieku zamek stał się przedmiotem badań architektonicznych, na podstawie których powstały pierwsze opracowania. W drugiej połowie lat sześćdziesiątych XIX wieku przebudowie uległo skrzydło południowe, a w północno-wschodniej części zamku wzniesiono budynki dla sądu, prokuratury, więzienia i mieszkań urzędników. Elewacjom skrzydła wschodniego nadano neogotyckie formy. Na przełomie XIX i XX wieku powstał wolnostojący dom mieszkalny dla kierownictwa i pracowników sądu, a w skrzydle południowym zamku umieszczono przytułek dla sierot fundacji Kalksteina, prowadzony przez siostry Katarzynki z Braniewa.