Od tego momentu Przezmark zaczął się intensywnie rozwijać. Jednak rolę głównego ośrodka przejęło sąsiednie Zalewo, a z czasem Morąg.

W 1752 w wyniku reformy Fryderyka II okręg górnopruski został podzielony na trzy powiaty, a starostwo Przezmark znalazło się w powiecie Morąg (Kreis Mohrungen).

W czasie wojen szwedzkich Przezmark był zajęty przez Szwedów, a w zamku przebywał król Gustaw II Adolf. Od 1717 zamek był stopniowo rozbierany. Do czasów współczesnych zachowała się narożna wieża zamku średniego (przedzamcza), część murów obwodowych oraz piwnice zamku wysokiego. Od 2000 jest własnością prywatną (właściciel odbudował część zabudowań na przedzamczu).

Przezmark nazywany był miasteczkiem (m.in. ze względu na osiadłych tu kupców i rzemieślników oraz odbywające się tu targi i jarmarki), pomimo że nigdy praw miejskich nie uzyskał. W 1782 odnotowano w Przezmarku 71 domów. Rozwój miejscowości zatrzymały zniszczenia w czasie wojen napoleońskich. W 1817 liczba domów spadła do 47, w Przezmarku zanotowano jedynie 357 mieszkańców.

W latach 1818-1975 Przezmark znajdował się w powiecie morąskim.

Przed 1945 w Przezmarku istniała dwuklasowa szkoła, do której uczęszczały dzieci z Przezmarku, Wesołej Kępy i Danielówki.