Rzeźba wraz z cokołem miała około 7,9 m wysokości, 3,7 m długości i 2,4 m szerokości u podstawy cokołu.

Próby usunięcia pomnika W marcu 2016 roku wiceburmistrz Charlottesville, Wes Bellamy, publicznie wezwał Radę Miasta do usunięcia pomnika i zmiany nazwy parku, twierdząc, że jego istnienie „uwłacza” () części społeczności. Lokalny lider Krajowego Stowarzyszenia na rzecz Popierania Ludności Kolorowej, Rick Turner, poparł ideę usunięcie pomnika, nazywając Lee terrorystą. Inni oskarżyli Radę i Bellamy’ego o lekceważenie historycznego znaczenia Lee, pomijanie jego znaczenia dla stanu Wirginia, sianie podziałów i próbę „przepisywania historii”. Ostatecznie wystosowano petycję o usunięcie pomnika, w której stwierdzono, że pomnik symbolizuje „nienawiść” i jest „podświadomym przekazem rasizmu” ().

W kwietniu 2016 Rada Miasta powołała specjalną komisję o nazwie Komisja Błękitnej Wstęgi ds. Rasy, Pomników i Przestrzeni Publicznej (), której zadaniem było zarekomendowanie władzom miasta najlepszych rozwiązań dotyczących pomników Stonewalla Jacksona na Court Square i Lee w Lee Park, a także innych obiektów zabytkowych i monumentów. Na początku listopada 2016 komisja zagłosowała stosunkiem głosów 6 do 3 za pozostawieniem obu pomników w dotychczasowych lokalizacjach.