Najważniejszym źródłem do dziejów budowy murowane go zamku jest kronika Jana z Czarnkowa. Według niej roboty prowadzono przez około dwa lata przed śmiercią Kazimierza Wielkiego. Jednocześnie pracowało przy nich około 300 robotników, przy czym transport kamienia, cegły, wapna i drewna wymagał znacznej liczby wozów, koni i wołów.
Nadzór nad inwestycją sprawował z ramienia monarchy prezbiter Wacław z Tęczyna. Dowódcą załogi był natomiast Pietrasz Turski. Budowa była przedsięwzięciem bezpośrednio finansowanym ze skarbu królewskiego. Według interpretacji Serhija Paniszki wydano na nią ponad 3000 grzywien, a Kazimierz przed śmiercią polecił przekazać jeszcze 600 grzywien na zakończenie prac. Kwota ta po śmierci monarchy wróciła jednak do skarbu. Wbrew starszej literaturze popularnej zamek miał kosztować nie 300, lecz ponad trzy tysiące grzywien.