Stacjonujący tutaj w styczniu 1945 roku czerwonoarmiści mocno zniszczyli obrazy „polskich burżujów”. W 1970 roku zabrano kolekcję do pracowni konserwatorskiej, a po trzech latach pracy nad nimi trafiły do Muzeum Regionalnego w Radomsku.
Część z tych obrazów przedstawiała też przodków Lubomirskich, a także pejzaże ich posiadłości w Kruszynie. Na podstawie tej przesłanki ich spadkobiorca książę Jan Lubomirski-Lanckoroński odzyskał z końcem 2004 roku kolekcję - wygrywając długotrwały proces sądowy. W ten sposób obrazy trafiły do Poznania, do prywatnego muzeum jego teściowej Grażyny Kulczyk.
W okresie okupacji Niemcy częściowo zdewastowali i splądrowali zespół pałacowy. Dzieła zniszczenia dokonali natomiast w latach 1946–1968 gospodarze mieszczącego się tu wówczas Państwowego Domu Dziecka. Następnie działała tu administracja rolniczej spółdzielni produkcyjnej.
27 grudnia 1967 roku wpisano do rejestru zabytków: pałac z 1630 roku, przebudowany w 1867 roku kaplicę Sobieskiego z 2 połowy XVII wieku pustelnię Denhoffa z 2 połowy XVII wieku oficynę Lubomirskich z wieżą zachodnią z 2 połowy XIX wieku budynek gospodarczy z wieżą wschodnią z przełomu XIX i XX wieku W 1946 roku i ponownie w 1967 wpisano do rejestru park z XVII i XIX wieku, a w 1974 roku wpisano aleje dojazdowe z XIX wieku.