Miejscowość stała się jednym z ważniejszych ośrodków na południowym Ponidziu. Pod koniec XIX w. miejscowa cukrownia została własnością spółki akcyjnej. Jej prezesem był Julian Tołłoczko. Fabrykę w tym czasie znacznie rozbudowano. Większa część współcześnie istniejących budynków, w tym główny korpus cukrowni, powstała właśnie w tym okresie. Na początku XX w. odnowiono dwór Łubieńskich pochodzący z lat 1752–1755. Wybudowano także budynki mieszkalne dla pracowników oraz basztę (tzw. okrąglak), przeznaczoną na mieszkania dla praktykantów. W tym samym czasie Tołłoczko wybudował pałac według projektu Tadeusza Stryjeńskiego.
II Rzeczpospolita Od 1919 wieś w powiecie pińczowskim w granicach województwa kieleckiego. W okresie międzywojennym osada otrzymała połączenie koleją wąskotorową z Kocmyrzowem.
5 września 1939 w Kazimierzy doszło do walki z Niemcami, w której poległo 60 żołnierzy 55 Dywizji Piechoty. W 1944 miejscowość znalazła się w granicach Republiki Pińczowskiej.