Jako pierwsi w tej rodzinie nazwiska Żełski zaczęli używać synowie Jana – Wincenty Żelski, kasztelan słoński i dobrzyński oraz Sędziwój Żelski, łowczy dobrzyński.
W rodzinnych Żałach zlokalizowany był zamek księcia Kazimierza kujawskiego, sami Żelscy w połowie XVI wieku zbudowali murowany dwór obronny w tych terenach, który został ostatecznie zniszczony w połowie następnego wieku przez Szwedów.
W XVI wieku, rodzina Żelskich była rozsiedlona głównie w ziemi dobrzyńskiej, gdzie posiadała majątki: Bogucin, Głodowo, Bachorzewo, Strachów, Radziki Małe, Wolę, Złotopole i Żałe. Poza Ziemią Dobrzyńską rodzina posiadała majątki również w Prusach, tj. Bietow (Bietau), Gowin i Milewo, a także na Podlasiu. Na początku XIX wieku jedna z ich gałęzi przeniosła się na Podole rosyjskie, gdzie dziedziczyli na Husiatynie i Józefówce w guberni podolskiej.