W 1864 roku, po odbudowaniu pałacu, wszystkie akta przechowywane w Jewel Tower zostały przeniesione do nowo powstałej Victoria Tower.
W 1869 roku wieża przeszła w posiadanie Komisji Handlu. Podczas gdy parter i pierwsze piętro służyły do przeprowadzania badań i testów, na drugim piętrze zorganizowano archiwum. Wraz z pogarszaniem się stanu budowli oraz wzrostem natężenia ruchu ulicznego w jej okolicy, dokonywanie pomiarów istotnych przy prowadzonych badaniach stało się niemożliwe. W latach 20. XX wieku większość aparatury została przeniesiona do Teddington pod Londynem, a w 1938 roku komisja zaprzestała użytkowania wieży.
W maju 1941 roku dach wieży został doszczętnie zniszczony przez bomby zapalające. W 1948 roku wieżę odremontowano, zaś w jej wnętrzu zorganizowano wystawę przedstawiającą przedmioty odnalezione podczas badań archeologicznych na obszarze Londynu. W latach 90. XX wieku dotychczasowe ekspozycje zostały zastąpione przez wystawę poświęconą instytucji Parlamentu. W 1987 roku wieża, wraz z całym Pałacem Westminsterskim, została wpisana na listę światowego dziedzictwa UNESCO. W 2013 roku ponownie przekształcono jej wnętrze.