W 1939 poślubił kasjerkę kinową Betty Hanson z Eugene, która została jego managerem w wrestlingu. Para rozwiodła się w 1952. Potem George związał się z piosenkarką i tancerką rewiową z Las Vegas, Cherie Dupré, która została także jego nowym valetem. Pod koniec życia popadł w alkoholizm i zbankrutował. W kwietniu 1962 jego druga żona wniosła o rozwód, oskarżając George’a o stanie się porywczym i grożenie jej zabójstwem. Pod koniec życia jego partnerką była striptizerka.

Śmierć i upamiętnienie 24 grudnia 1963 w swoim apartamencie hotelowym w Los Angeles doznał zawału mięśnia sercowego. Umarł 26 grudnia. Rada miasta Los Angeles uchwaliła ustawę ku jego pamięci. Na jego pogrzebie wrestlerzy Baron Michel Leone i Jules Strongbow służyli jako karawaniarze, a konferansjer Jimmy Lennon odśpiewał pieśń ku czci zmarłego. Jego trumnę zdobiły orchidee - ulubione kwiaty George’a, które składały się też na jego gimmick. Został pochowany na cmentarzu Valhalla Memorial Park Cemetery w North Hollywood w Los Angeles.

W 1996 został dołączony do galerii sławy Wrestling Observer Newsletter Hall of Fame.