Dziadkiem Alfreda Redfielda był (1815–1895), najstarszy syn Williama C. Redfielda. Był znanym botanikiem i konchiologiem, założycielem sekcji botaniki w Akademii Nauk Przyrodniczych przy Uniwersytecie Drexela.

Dziadkiem ze strony matki był (1791–1874), którego nazwisko jest znane z historii kolei w Stanach Zjednoczonych, w tym z historią . Był jednym z pierwszych wspólników (spółka Baldwin & Whitney, 1842–1846). W następnych latach tworzył odrębne przedsiębiorstwo – Asa Whitney Car Wheel Works (później Asa Whitney and Sons' Car Wheel Works), w którym produkowano żeliwne koła kolejowe z zastosowaniem opatentowanego przez A. Whitneya procesu wyżarzania (annealing).

Członkowie rodziny mieli uzdolnienia plastyczne. Ojciec Alfreda, (1849–1923), pasjonował się fotografowaniem natury (m.in. fotografie piktorialne, platynotypia). Kolekcje jego fotografii znajdują się w Princeton University Art Museum, i w Yale. Wcześnie odszedł na emeryturę z rodzinnej firmy Whitney, co pozwoliło mu spędzać z synem dużo czasu.

Rodzina Alfreda Clarensa spędzała lato na Cape Cod, w 1898 roku w Falmouth, a potem w innych miejscowościach hrabstwa Barnstable, nad brzegiem Zatoki Cape Cod (Cape Cod Bay).