"Sali rycerskiej" pojawiła się ostatnio hipoteza o tym, że inicjatorami jej budowy w końcu XIV wieku była Jadwiga Andegaweńska i Władysław Jagiełło, na co może wskazywać związek stylistyczny tej sali z węgierskim zamkiem w WyszegradzieTomasz Olszacki, Jarosław Olejnik, Jerzy Serafin "Pałac królewski w Szydłowie (tzw. Sala Rycerska): budowla niedorzeczna czy niezrozumiana?" [w:] Zeszyty Sandomierskie, R. XVIII:2012, nr 33 (wrzesień), Sandomierz 2012; s. 31-39. Król Władysław Jagiełło przebywał na zamku aż 17 razy.

thumb|Ruiny Sali Rycerskiej Zamek był przebudowywany w XV w., a następnie dwukrotnie w XVI w., co było związane z pożarami, które miały tu miejsce w 1528 i 1541. W 1564 roku zamek jest już jednak wzmiankowany jako odbudowany. W 1630 roku zamek spłonął po zamieszkach związanych z buntem wojsk najemnych, które domagały się wypłaty zaległego żołdu. Następnie zamek został zniszczony przez wojska szwedzkie i siedmiogrodzkie Jerzego Rakoczego w okresie potopu szwedzkiego.

W 1723 starosta Józef Załuski odnowił zamek, który umieścił na elewacji z tej okazji swój kartusz herbowy. Pod koniec XVIII w. zamek został opuszczony przez mieszkańców, co spowodowało jego powolną destrukcję w XIX wieku. W tym okresie był wykorzystywane przez pewien okres jako stajnia.