W tej sytuacji król Tarondor, w 1640 roku, przeniósł siedzibę monarszą do Minas Anor, a Osgiliath zaczęło popadać w ruinę.
W 2475 roku Trzeciej Ery roku dawna stolica została zajęta przez orków z Mordoru, którzy zniszczyli ostatni kamienny most na rzece. Co prawda, po krótkim czasie miasto odbił Boromir, syna namiestnika Denethora I, ale po tych wydarzeniach Osgiliath całkowicie opustoszało i stało się jedyną placówką wojskową, strzegącą Gondoru przed napaścią ze wschodu.
Wschodnia część miasta została zajęta przez wojska Mordoru, być może około 2954 roku, jednak na początku rządów Denethora II żołnierze Gondoru odbili ją i odbudowali most, by móc przerzucać swoje siły na drugi brzeg rzeki. Stan ten utrzymał się do Wojny o Pierścień.
Wojna o Pierścień i Czwarta Era W wyniku kolejnych starć, wojska Mordoru wpierw zajęły wschodnią część miasta (20 czerwca 3018 rokuWedle kalendarza hobbitów z Shire’u był to dzień 20 miesiąca Forlithe roku 1418. Jedynie z grubsza odpowiada on czerwcowi w kalendarzu gregoriańskim.Hobbici daty roczne liczyli od osiedlenia się w swoim kraju (rok 1601 Trzeciej Ery). Z kolei według kalendarza stosowanego w innych częściach Śródziemia (tzw. Kalendarz Namiestników) miesiąc ten zwał się Nárië.