Ignacy był żonaty trzykrotnie, ale doczekał się tylko córek, z których Amelia otrzymała w wianie Przysuchę.

Okres zaborów mały|Domy w Przysusze około 1880 mały|Dwór Dembińskich z XIX w., obecnie Muzeum im. Oskara Kolberga Upadek Rzeczypospolitej był także upadkiem Przysuchy. Pomimo przynależności do Księstwa Warszawskiego, a od 1815 do Królestwa Polskiego, Przysucha traciła znaczenie, głównie przez zależność miasta od dworu, odebranie wielu praw mieszczanom a częściowo przez przemarsze wojsk austriackich podczas insurekcji kościuszkowskiej. Wydobycie i wytop niskoprocentowej rudy żelaza (16–18%), występującej w okolicy miasta przestawał się opłacać. W roku 1816 została założona szkoła elementarnaR. Fidos, Nauczyciele szkoły elementarnej w Przysusze w latach 1816–1915, „Ziemia Odrowążów: kwartalnik społeczno-kulturalny: powiat konecki, powiat opoczyński, powiat przysuski, powiat szydłowiecki, R. 2, 2010, nr 3, s. 29..