W czasie trwania II wojny światowej został przekształcony w pensjonat przez żonę Janusza, Halinę Regulską. Dwór zapewnił schronienie wysiedlonymi naukowcami z Uniwersytetu Poznańskiego, niektóre z tych osób mieszkały przez cały okres wojny w Zarybiu. Pod osłoną pensjonatu mogli w nim przebywać goście zupełnie "innego rodzaju". Stał się jednym z ośrodków konspiracji, zaraz po powstaniu warszawskim, a także miejscem schronienia dziesiątków uciekinierów z Warszawy. Chronili się tu ludzie podziemia ukrywający się lub mający do wykonania określone zadania w tej okolicy, czasem przebywali tu ci po prostu zmęczeni i pragnący wytchnienia. W Zarybiu przebywali Zofia Korbońska i Stefan Korboński, rodzina pułkownika Porwita, Jerzy Iłłakowicz, a także młody człowiek, którym okazał się Czesław Miłosz.

W 1959 roku Zarybie zostało sprzedane, z powodu represji komunistycznych, a Regulscy zamieszkali w Warszawie.

Stan obecny Dwór zachował się w bardzo dobrym stanie, obecnie pełni funkcję seminarium Kościoła Adwentystów Dnia Siódmego.

Opis architektury lewo|mały|Spichlerz znajdujący się na terenie dworku, zdjęcie z 2012 r. W skład dworu wchodzi zabytkowy ogród, spichlerz oraz budynek główny.