Nazwa Zatoka została nazwana w 1910 roku L'Anse des Baleiniers (ang. Whalers Bay) przez francuskiego badacza Jeana-Baptiste’a Charcota (1867–1936) ze względu na aktywność wielorybników w tym obszarze na początku XX wieku. Wcześniej była znana prawdopodobnie jako Deception Harbour.
Geografia Whalers Bay tworzy zatokę w Port Foster – wypełnionej wodą kalderze wulkanu Deception Island w archipelagu Szetlandów Południowych – położoną między Penfold Point a Fildes Point zaraz przy wejściu do kaldery po północnej stronie Neptunes Bellows. Brzegi Port Foster usiane są maarami, a największym z nich jest Whalers Bay o szerokości 1 km.
Nad zatoką, od Penfold Point na północnym zachodzie do Cathedral Crags na południowym wschodzie rozciąga się półkolista plaża o długości ok. 2 km. Po zachodniej stronie Whalers Bay leży Kroner Lake – jedyna w Antarktyce laguna geotermalna. Od północy nad zatoką wznosi się Ronald Hill (103 m), a na północnym zachodzie strome lodowcowe klify z widocznymi ciemnymi warstwami materiału piroklastycznego. Po stronie południowo-wschodniej zatoki znajduje się skaliste wzgórze Cathedral Crags zapadłe pośrodku, tworząc Neptune’s Window.