W związku z rozwojem osadnictwa i stopniowym powiększaniem się ludności wsi zaistniała potrzeba posługi duchowej i powołania samodzielnej parafii. 16 lipca 1981 dekretem bp. Alfonsa Nossola została erygowana parafia pod wezwaniem św. Urbana w Większycach, a jej pierwszym proboszczem został mianowany ks. Leon Kara. W październiku tegoż roku powołano pierwszą radę parafialną. 15 grudnia 1981 do parafii przyłączono wieś Radziejów z jej wiernymi, wyłączając ją tym samym z terytorium parafii św. Sebastiana w Pokrzywnicy. Ponieważ istniejący kościół św. Urbana był niewielki, by pomieścić w nim coraz to większą liczbę parafian, a powiększenie jego i rozbudowa nie były możliwe, postanowiono wybudować znacznie większy kościół.
Dzięki staraniom ówczesnego proboszcza parafii kozielskiej ks. Ludwika Rutyny, ks. Leona Kary oraz zaangażowaniu miejscowej ludności wybudowano w latach 1983–1986 nowy kościół pod wezwaniem Najświętszej Maryi Panny Matki Miłosierdzia według projektu mgr. inż. arch. Zygmunta Wawrzynowicza, który został konsekrowany 15 czerwca 1986 przez bp. Alfonsa Nossola. Wraz z budową kościoła wybudowano również plebanię dla proboszcza. Ponadto blisko kościoła św.