World Series by Nissan W 2004 roku przeszedł do serii World Series by Nissan. W pierwszych dwóch rundach startował w barwach ekipy RC Motorsport. W pozostałych wyścigach ścigał się dla Carlina. W ciągu osiemnastu wyścigów, dwukrotnie stanął na podium, z czego raz zwyciężył (w pierwszym wyścigu, w Portugalii). Ostatecznie został sklasyfikowany na 9. miejscu.

Seria GP2 W roku 2005 Francuz podpisał kontrakt z brytyjską stajnią David Price Racing, na starty w nowo powstałej serii GP2. Biorąc udział w dwudziestu trzech wyścigach, sześciokrotnie znalazł się na punktowanych lokatach. Najlepiej zaprezentował się w eliminacjach, na torze Silverstone i Hockenheimring, w których po zajęciu ósmej lokaty, wykorzystał start z pierwszego miejsca, dwukrotnie odnosząc zwycięstwo w niedzielnym sprincie. Zdobyte punkty pozwoliły Olivierowi na zajęcie 13. pozycji, w końcowej klasyfikacji.