Po kolejnych zmianach właścicieli w roku 1839 Gierałtowice nabył Józef von Poraj Madejski. Madejscy wybudowali sobie w Gierałtowicach dworek zwany później „pałacykiem Madejskich”. Przeszedł w roku 1853 w ręce jego córki i zięcia Karola von Raczek. W latach 1898–1904 Raczkowie wybudowali sobie w Przyszowicach okazały zamek w stylu neobarokowym, w którym mieszkali. Majątkiem w Gierałtowicach zarządzał administrator. Majątek po Karolu odziedziczyli jego synowie Konrad i Franciszek. Konrad, który był porucznikiem ułanów, uległ wypadkowi podczas ćwiczeń szermierczych i zmarł w roku 1888 w Berlinie. Po śmierci jego żony wszystkie dobra przypadły Franciszkowi. W 1902 roku Franciszek von Raczek został rotmistrzem, a następnie majorem 13 Pułku Ułanów. W latach 1895–1898 wybudował w Gierałtowicach mały klasztor, który w wieczyste użytkowanie przekazał siostrom Służebniczkom Najświętszej Marii Panny. Zmarł w roku 1926 w Przyszowicach i tam został pochowany. Pozostawił dwie córki z których młodsza, niezamężna Dolores von Raczek mieszkała w Gierałtowicach i zarządzała majątkiem do roku 1929, kiedy sprzedała go Spółce Osadniczej „Ślązak” z Katowic.