Jan Kazimierczak w 1933 wstąpił do Związku Nauczycielstwa Polskiego. W 1937 współorganizował strajk nauczycielski w powiecie warszawskim. W okresie okupacji hitlerowskiej w latach 1940–1941 zorganizował w Wilanowie gimnazjalne komplety tajnego nauczania, którymi też kierował. W latach 1941–1947 był przewodniczącym Rady Nadzorczej Spółdzielni Spożywców w Wilanowie (Rada ta udzielała pomocy wysiedleńcom z poznańskiego). Uczestniczył w powstaniu warszawskim w zgrupowaniu Oaza. W 1945 doprowadził do przekształcenia Tajnych Kompletów w Gimnazjum Samorządowe w Wilanowie. W wyniku konkursu został jego kierownikiem. Zorganizował Komitet Odbudowy Szkoły. Gimnazjum to w roku szkolnym 1952/53 przeobraziło się z jego inicjatywy w Jedenastoletnią Szkołą Ogólnokształcącą, której Jan Kazimierczak był dyrektorem do 1970, kiedy przeszedł na emeryturę. Uczniów tego humanistycznego XXXVIII LO kształcono m.in. jako przyszłych przewodników po Muzeum Pałacu w Wilanowie. Dzięki staraniom Jana Kazimierczaka liceum w 1972 otrzymało imię Stanisława Kostki Potockiego.