Najlepsze wyniki w cyklu Pucharu Świata Walchhofer osiągnął w sezonie 2004/2005, kiedy zajął czwarte miejsce w klasyfikacji generalnej. Na podium stawał dziesięć razy, w tym czterokrotnie na najwyższym stopniu: 17 grudnia w Val Gardena w supergigancie oraz 15 stycznia w Wengen, 18 i 19 lutego 2005 roku w Garmisch-Partenkirchen w zjeździe. W klasyfikacji supergiganta był piąty, a w klasyfikacji zjazdu zdobył Małą Kryształową Kulę, wyprzedzając Bode Millera oraz kolejnego Austriaka, Hermanna Maiera. Podczas mistrzostw świata w Bormio nie obronił tytułu mistrzowskiego z Sankt Moritz, zdobył jednak trzy medale. Najpierw wywalczył srebrny medal w supergigancie, rozdzielając na podium Millera i Benjamina Raicha. Parę dni później zajął trzecie miejsce w zjeździe, ulegając tylko Millerowi i Rahlvesowi. Ponadto wspólnie z Renate Götschl, Kathrin Zettel, Nicole Hosp, Rainerem Schönfelderem i Raichem wywalczył srebrny medal w rywalizacji drużynowej.