W 1933 Homer stracił wzrok z powodu krwotoków w tylnej części oczu. Langley zrezygnował z pracy, by zaopiekować się swoim bratem i obaj zaczęli wycofywać się z życia społecznego. Wraz z upływem czasu bracia zaczęli odczuwać lęk z powodu zmian zachodzących w najbliższej okolicy. Obszar Harlemu, tradycyjnie zamieszkały przez klasę wyższą, zmienił się dramatycznie ze względu na ekonomiczne skutki Wielkiego kryzysu. Bracia czuli się również nieswojo ze względu na zmiany rasowe, ponieważ dzielnicę zasiedlili w dużym stopniu Afroamerykanie, którzy zamieszkali w domach, jakie zostały zbudowane w pobliżu planowanej trasy metraSilverman, Steve (May 14, 2001), Einstein's Refrigerator: And Other Stories from the Flip Side of History, Andrews McMeel Publishing, s. 10–12, Ashton, Jean; Nazionale, Nina (2010), When Did the Statue of Liberty Turn Green?: And 101 Other Questions about New York City, Columbia University Press, s. 95–96, . Kiedy później zapytano, dlaczego obaj zdecydowali się wyłączyć ze świata, Langley Collyer odpowiedział: Nie chcieliśmy, żeby nam przeszkadzanoMaeder, Jay, ed. (December 1, 1998), Big Town, Big Time: A New York Epic : 1898-1998, Sports Publishing LLC. s. 108, .