Przebudowa Krasińskich W 1813 roku spłonął dach pałacu, w miejsce którego około 1852 roku wprowadzono prostą neogotycką attykę kryjącą nową drewnianą konstrukcję dachu pogrążonego. Zamurowano także arkady loggi i dodano nową klatkę schodową z żeliwnymi schodami. Z tego okresu pochodzą XIX wieczne drzwi i marmurowe kominki. Przeprowadzony wówczas remont upamiętnia tablica umieszczona we wschodniej elewacji pałacu z tekstem „Firlej postawił czas zrujnował Wincenty Hr. Krasiński restaurował pod zarządem Józefa Kotarbińskiego rok 1852”. Córka Zygmunta Krasińskiego, Maria Beatrycze (1850-1884), otrzymała majątek czemiernicki jako posag wychodząc w 1877 roku za mąż za Edwarda Aleksandra Raczyńskiego. Ich syn, Karol Roger Raczyński, ożeniony z księżniczką Stefanią Hortensją Taidą Światopełk-Czetwertyńską (1879-1948) odziedziczył majątek Czemierniki i był jego właścicielem do 1944 roku. Podczas II wojny światowej założenie zamkowe zostało zajęte przez Niemców.
Po 1944 roku majątek z zamkiem przejął Skarb Państwa i po remoncie wykonanymi w 1951 roku obiekt służył za dom wczasowy, siedzibę PGR Czemierniki, a w latach 80. XX wieku jako Dom Dziecka. W tym okresie stan budowli mocno się pogorszył.