W czasie okupacji niemieckiej mieszkająca we wsi rodzina Szymańskich udzieliła pomocy Marii Glass i Oldze Lilien. W 1979 roku Instytut Jad Waszem podjął decyzję o przyznaniu Janinie Szymańskiej z d. Jacuńska oraz Barbarze Szymańskiej (po mężu Szymańska-Makuch) tytułu Sprawiedliwych wśród Narodów Świata.
Po uchwyceniu przyczółka baranowsko-sandomierskiego przez armię radziecką w 1944 roku Rytwiany stały się tymczasową siedzibą Kieleckiej Wojewódzkiej Rady Narodowej oraz Wojewódzkiego Urzędu Bezpieczeństwa Publicznego.
Ze względu na wyjątkowy urok okolicy klasztoru pokamedulskiego, nakręcono tam w 1973 roku IV i X odcinek serialu historycznego Czarne chmury. 28 września 2013 r. w refektarzu otwarto muzeum tego filmu. Zgromadzono w nim eksponaty wykorzystywane przy kręceniu serialu. W ogrodach przyklasztornych posadzono aleję osób związanych z filmem. Składają się na nią 22 drzewa podpisane imieniem i nazwiskiem danej osoby.
W latach 1954–1972 wieś należała i była siedzibą władz gromady Rytwiany.