Po I rozbiorze Polski w 1772 r. Galicja weszła w skład monarchii habsburskiej. W 1782 r. starostwa zostały zniesione i wprowadzono jednostopniowy podział administracyjny (cyrkuł). W 1784 r. Wiktoryn Zaleski został zmuszony do wykupienia zamku wraz z miastem od guberni galicyjskiej i przejęcia go na własność.

Mapa austriackiego kartografa wojskowego Friedricha von Miega Koenigsreiches Galizien und Lodomerien 1779-1782 wyraźnie pokazuje zarysy zamku boreckiego z czterema bastionami połączonymi solidnym muremKarte des Königreichs Galizien und Lodomerien. Skala 1: 28800. Wiedeń: Friedrich von Mieg, 1779—1782;, s. 392..

Właściciel zamku i miasta, hrabia Wiktoryn Zaleski, oraz jego kolejni posiadacze, hr. Adam Starzeński (1796-1825) i hr. Franciszek Wodzicki (1825-1840), nie mieszkali w nim na stałe i stopniowo tracili zainteresowanie obiektem. Zamek przestał być własnością i zaczął stopniowo podupadać. Za kolejnych właścicieli, hrabiów Baworowskich i ich potomków, obiekt przestał istnieć. Zamiast niego pojawiło się kilka murowanych domów, które służyły jako administracja dworu i były tymczasową rezydencją właścicieli majątku.