Po śmierci Antoniego Urbanowskiego w 1843 roku oraz w 1854 r. żony Elżbiety Ubranowskiej, majątek przejęła dalsza rodzina hrabiów Skarżyńskich. Stopniowo cenny księgozbiór oraz dzieła sztuki zostały rozproszone. Przez blisko dwadzieścia lat nikt nie mieszkał w horodeckim pałacu.

W 1870 roku majątek kupił Rosjanin Kurłow, właścicielem faktycznie był Niemiec Bruch (taka transakcja była związana z ówczesnym prawem w Rosji tj. tylko obywatele rosyjscy mogli nabywać majątki)

Ok. roku 1880 majątek Horodec kupiła belgijska rodzina de Pourbaix. Ok. 1893 majątek od Augusta de Pourbaix przejmuje syn Kamil, który wprowadza wiele zamian w gospodarowaniu, począwszy od wymiany pługów z drewnianych na żeliwne, zmianę zadaszenia z chat pokrytych słomą, na dachówkę. Odbudowuje również dwór w stylu neorenesansowym, który częściowo został spalony w 1889 roku. Zostaje zbudowana gorzelnia, tartaki, a całość była zagospodarowana jak na warunki wołyńskie bardzo nowocześnie.