W 1934 zorganizował w hotelu President klub – Adrian’s Tap Room, gdzie ze swoim zespołem grał przede wszystkim na wibrafonie, który stał się jego instrumentem głównym. Ostatniego nagrania na saksofonie basowym dokonał w 1938. Od 1935 zawiadywał także Whitby Grillem. Klientelę obu lokali stanowili głównie urlopujący muzycy. Otworzył również sklep pn. White Way Musical Products, prowadzący sprzedaż i naprawę instrumentów muzycznych oraz stanowiący atrakcję dla łowców autografów, „polujących” na słynnych bandliderów.
Po zakończeniu ery big-bandów grał w małych zespołach. W latach 40. i 50. występował przede wszystkim w hotelach. Na początku lat 50. w wytwórni Mercury dokonał swoich ostatnich nagrań, grając na wibrafonie. Następnie wziął rozbrat z muzyką i zajął się hotelarstwem. Przeniósł się z Nowego Jorku na Florydę i we wrześniu 1955 otworzył The Eden Roc Hotel w Miami Beach. W Tavernier na wyspie Key Largo w archipelagu Florida Keys prowadził także The Driftwood Inn, gospodę, która w ofercie miała też pełnomorskie wyprawy wędkarskie. W 1960, już po jego śmierci i wyjeździe z Florydy jego żony – Dixie (zm. 1977), huragan doszczętnie zniszczył The Driftwood Inn.
Hobby Był zapalonym wędkarzem i motorowodniakiem.