Jego starsi bracia: Alfons, Konrad i Franciszek, brali udział w Wojnie Obronnej 1939, m.in. w Bitwie nad Bzurą. Wzięci do niewoli, trafili do obozów jenieckich w Nadrenii Północnej – Westfalii i Dolnej Saksonii oraz do obozu koncentracyjnego Stutthof. W związku z odmową podpisania listy kategorii III DVL, rodzice i młodsze rodzeństwo (Celestyn, Władysława Julianna) wysiedlono i skierowano do pracy przymusowejZob. J. Strzelecki, Pomorska Siłaczka, Gelsenkirchen 2010.. Jego kuzyn, Klemens Babalski, został rozstrzelany przez Niemców 30 grudnia 1944 roku w PokrzydowieRejestr miejsc i faktów zbrodni popełnionych przez okupanta hitlerowskiego na ziemiach polskich w latach 1939-1945 – województwo toruńskie, Warszawa 1983..
W marcu 1941 roku Ryszard Babalski za zaangażowanie w działalność przeciw III Rzeszy został aresztowany przez Gestapo w Iławie i przewieziony do więzienia w Grudziądzu, gdzie był przesłuchiwany i poddawany torturomRyszard Babalski, 1920-1945, [w:] AAN, zespół: Fundacja Polsko-Niemieckie Pojednanie w Warszawie, nr 2680.. Po trzech miesiącach przewieziony do więzienia w Płocku, a następnie do Berlina (Justizvollzugsanstalt Tegel). W kwietniu 1943 roku przetransportowany do Obozu Pracy w Deutsch-Eylau.