Po zajęciu Polski przez nazistów jego rodzice zostali wysłani z Polski do obozów Dachau (KL) i Buchenwald (KL), a później urwał się z nimi kontakt. W listopadzie 1938 Ozjasz Hofstatter poślubił w Brukseli Annę Schebestową, z braku środków finansowych para przeniosła się do belgijskiego obozu przejściowego Marneffe na południe od Brukseli. Obóz został założony przez miejscowy komitet żydowski pomocy uchodźcom.
Po zajęciu Belgii przez nazistów w maju 1940 para została rozdzielona, Hofstatter został internowany w obozie Saint-Cyprien, a następnie w obozie w Gurs we Francji, a jego żonę przeniesiono do innego obozu koncentracyjnego, gdzie pracowała jako krawcowa szyjąc garnitury dla niemieckich oficerów. Brat i siostra Ozjasza znaleźli schronienie w Szwajcarii, w obozie Gurs otrzymywał od siostry farby i pieniądze na papier. Rysował scenki z życia codziennego i portretował współwięźniów. Później jego bratu i siostrze udało się go uwolnić i ukrył się w pobliżu szwajcarskiej granicy. W sierpniu 1942 próbował przekroczyć granicę, został wówczas złapany przez szwajcarską straż graniczną i przeszedł przez obozy pracy Eigel, Wald i Birmensdorf w Szwajcarii.