Zdaje sobie sprawę, że może popisać się heroizmem i przyczynić się do uratowania pielgrzymów. Paraliżuje go jednak strach. Pozostanie na okręcie oznaczałoby bowiem pewną śmierć. Gdy do okrętu zbliża się szkwał, Jim w akcie tchórzostwa skacze na szalupę, którą opuściła reszta załogi. Po kilku chwilach Patna znika im z oczu.
W piątym rozdziale rozpoczyna się gawędziarska opowieść Marlowa, który opowiada historię Jima zebranym słuchaczom. Dowiadujemy się, że gdy rozbitkowie docierają na szalupie do brzegu okazuje się, iż Patna wcale nie zatonęła. Gródź wytrzymała, a okręt przyholowano do brzegu. Rozpoczyna się więc proces przeciwko załodze. Kapitan ucieka, mechanicy udają chorobę, jedynie Jim, który zawsze uważał się za człowieka honoru, mimo świadomości, że tą ucieczką go stracił, stawia się na procesie. W trakcie jego trwania poznaje Marlowa, człowieka morza. Zaprzyjaźnia się z nim. Marlow głęboko pragnie poznać motywy, które kierowały Jimem, gdy ten wyskoczył z okrętu. Gdy Jim zostaje pozbawiony patentu, Marlow załatwia mu pracę agenta portowego.