W rezultacie takich manewrów Mansell znalazł się bardzo blisko Chapmana i był bardzo załamany po jego śmierci w 1982 r. W swojej autobiografii Mansell mówi, że gdy umarł Chapman: "Świat wywrócił się do góry nogami. Moja cząstka umarła z nim. Straciłem członka rodziny." Po śmierci Chapmana szefem zespołu został Peter Warr, który był nieprzychylny Mansellowi. O pozostaniu Mansella w zespole zadecydował główny sponsor Lotusa, firma John Player Special.
Sezon 1984 Mansell zakończył w czołowej dziesiątce z dorobkiem 13 punktów oraz zdobył w nim po raz pierwszy w swojej karierze pole position. Podczas deszczowego Grand Prix Monako zaskoczył wszystkich wyprzedzając Alaina Prosta i prowadząc w wyścigu przez kilka okrążeń, aż do usterki bolidu. W połowie sezonu Lotus obwieścił, iż w przyszłym roku w barwach zespołu będzie startować Ayrton Senna. Nigel Mansell otrzymał oferty pracy od Arrowsa i Williamsa. W następnym roku postanowił startować w zespole Williams.
Mansell został zapamiętany przez sytuację podczas Grand Prix USA. Po 2 godzinach jazdy w temperaturze powietrza około 40 °C startujący z pole position Mansell na ostatnim okrążeniu doznał awarii skrzyni biegów w jego bolidzie.