Ostatnie lata życia Buller spędził w rodzinnej posiadłości Downes. Reputacja Bullera została poważnie nadszarpnięta za sprawą opublikowanej przez Amery’ego wpływowej publikacji dokumentującej II wojnę burską – Times History of the War in South Africa. Mimo to miał wielu sympatyków w swoim najbliższym regionie, czego przejawem było odsłonięcie przedstawiającego go posągu w Exeterze w 1905 roku, którego budowa sfinansowana została ze składek tysięcy osób. Buller był obecny na ceremonii odsłonięcia. Cieszył się też uznaniem wielu podległych mu żołnierzy. W latach 70. XX wieku historiografia brytyjska zaczęła przychylniej oceniać dokonania Bullera. Zaczęły się wówczas pojawiać opinie, że był on wygodnym kozłem ofiarnym, a jego zdymisjonowanie pozwalało odwrócić uwagę od wielu uchybień w dowództwie armii.

Zmarł na raka pęcherzyka żółciowego i wątroby 2 czerwca 1908 roku, pochowany w rodzinnym Crediton.

Nagrody i odznaczenia thumb|W mundurze z odznaczeniami Krzyż Wiktorii (1879) Order Łaźni towarzysz (1874) kawaler komandor (1885) kawaler krzyża wielkiego (1894) Order św. Michała i św. Jerzego towarzysz (1879) kawaler komandor (1882)