Zakon zobowiązań nie spłacił, dzięki czemu Schlibenowie zostali właścicielami dwóch miast: Gierdawy i Nordenborka (z zamkami i folwarkami) oraz 24 wsi o powierzchni około 750 łanów, w tym i Brzeźnicy.
W Brzeźnicy urodził się 26 grudnia 1638 wojewoda inflancki i starosta rogoziński Jan Teodor Schlieben.
W XVII w. Brzeźnica należała do rozległego klucza rodziny Schliebenów, do którego należały m.in.: starostwo Gierdawa, Nordenbork, Bejnuny Małe, Zastawno, Głowbity, Łankiejmy, Kałki, Mołtajny, Nunkajmy, Pokrzywno i Suśnik. Przedstawiciele rodziny Schliebenów (w różnym okresie) posiadali majątki w Sorkwitach, majątki w okolicach Pruskiej Iławy, a także na Kujawach w Płowcach i Dobrem. Brzeźnica była w posiadaniu hrabiów Schliebenów do roku 1824. We wsi funkcjonowała karczma.
Po Schliebenach Brzeźnica była w posiadaniu rodziny Totenhoefer. Do rodziny tej należał również majątek ziemski w Kałkach. W latach 1929–1944 Brzeźnica należała do Erny Koch z domu Totenhofer.