Miasto wzięto przez zaskoczenie 23 czerwca i przekazano władzom bizantyńskim.
Wojska krzyżowe pomaszerowały dalej na wschód. Coraz częściej jednak zaczynało brakować jedzenia. Kilidż Arslan, cofający się przed hufcami przeciwnika, dewastował całe okolice, chcąc w ten sposób uniemożliwić im zdobycie prowiantu. Oprócz tego prowadził działania podjazdowe, cały czas nękając krzyżowców. W międzyczasie emir Daniszmendydów, Ghazi, szykując się na przybycie przeciwnika, odnowił przymierze z Seldżukami i pozyskał posiłki od Ridwana z Allepa. Gdy wycieńczeni głodem i lipcowymi upałami krzyżowcy stanęli pod potężnie ufortyfikowaną Gangrą, stało się jasne, że nie zdobędą twierdzy. Wysłuchali wówczas Rajmunda z Tuluzy, doradzającego skierowanie się w stronę Kastamonu, a stamtąd do wybrzeży Morza Czarnego, co dawało szansę na uratowanie armii od całkowitego rozbicia. Ewentualne zdobycie Kastamonu stwarzało też szansę na uzyskanie wybaczenia u cesarza, za zboczenie z uzgodnionej trasy marszu.