Dzięki zdecydowanej postawie rodziców, którzy doceniali odpoczynek w wolnej przyrodzie, D.W. Freshfield od młodości spędzał wakacje w górach, początkowo w szkockim Lake District, a następnie w szwajcarskich i włoskich Alpach. Już w 1854 r. przemierzył z rodziną Szwajcarię od Bazylei po dolinę Chamonix pod Mont Blanc. W następnych latach pokonał szereg wysokich przełęczy i zdobył wiele alpejskich szczytów w masywach Mont Blanc, Monte Rosa i in. 25 sierpnia 1864 r. wraz z M. Beachcroftem, J.D. Walkerem, Bartolo Delpiero i francuskim przewodnikiem z Chamonix, F. Devouassoudem, był pierwszym znanym z nazwiska zdobywcą Cima Presanella w Alpach Retyckich. 22 lipca 1867 r. wraz z J. Backhousem, D. Balleysem, T. Carsonem, M. Payotem i C.C. Tuckerem dokonał pierwszego wejścia na Tour Ronde (3792 m n.p.m.) w masywie Mont Blanc. Przełęcz ograniczająca ten szczyt od wschodu nosi dziś nazwę Col de Freshfield (3587 m n.p.m.).