Po zakończeniu kariery związał się z biznesem sportowym, występował w reklamach i filmach fabularnych. Uczestniczył także w rajdach samochodowych (m.in. w Rajdzie Paryż-Dakar i 24-godzinnym rajdzie Le Mans).

W latach 1977–1994 był członkiem zespołu wykonawczego Komitetu Narciarstwa Alpejskiego FIS. Był współprzewodniczącym Komitetu Organizacyjnego igrzysk olimpijskich w Albertville w 1992 r. W latach 1992–2001 przewodniczył Towarzystwu Tour de France. W latach 1995–2008 był członkiem Międzynarodowego Komitetu Olimpijskiego. W 2000 roku został odznaczony orderem Legii Honorowej II klasy.

Życie prywatne Killy urodził się w Saint-Cloud pod Paryżem, ale wychował się w Val d’Isère. Gdy miał siedem lat jego matka opuściła rodzinę i przeprowadziła się na południe, zostawiając jego i dwójkę rodzeństwa. Niedługo później Killy trafił do szkoły z internatem w Chambéry, jednak w wieku 15 lat rzucił szkołę i skoncentrował się na narciarstwie.

Nazwisko odziedziczył po przodku, irlandzkim żołnierzu armii Napoleona, nazwiskiem Kelly.

W latach 1973–1987 jego żoną była francuska aktorka Danielle Gaubert.