W sierpniu tego roku Walker pokonał Leo Lomskiego, a 29 października w obronie pasa w wadze średniej (uznawanego przez NYSAC i Komisję Bokserską stanu Kalifornia) ponownie wygrał na punkty z Ace Hudkinsem. Więcej tego tytułu nie bronił, formalnie rezygnując z niego w 1931. W 1930 pokonał m.in. ponownie Leo Lomskiego, a od 1931 walczył głównie z bokserami kategorii ciężkiej. 22 lipca tego roku zremisował z Jackiem Sharkeyem. W 1932 pokonał takich zawodników, jak King Levinsky i Paulino Uzcudun, ale 26 września Max Schmeling wygrał z nim przez techniczny nokaut w 8. rundzie. Od 1933 Walker walczył głównie w wadze półciężkiej. 6 lipca pokonał go Lou Brouillard, a 3 listopada w Madison Square Garden Walker zmierzył się w walce o mistrzostwo świata w kategorii półciężkiej z Maxie Rosenbloomem, ale przegrał na punkty. W 1934 pokonał w towarzyskiej walce Rosenblooma, a przegrał z Young Corbettem III. Ostatnie 8 walk zawodowych stoczył w 1935. Zmarł w 1981.

Walka Walkera z Jackiem Brittonem z 1922 była inspiracją dla Ernesta Hemingwaya do napisania opowiadania Pięćdziesiąt kawałków.