zaś w 1720 roku zbudowano tu drewniany kościół pw. św. Andrzeja Apostoła. Parafia liczyła wówczas 500 wiernych z dwóch miejscowości – Ostrówek i Woli Ostrowieckiej. Pod koniec XVIII wieku ludność parafii Ostrówki zmniejszyła się przypuszczalnie z powodu zarazy.
W 1795 roku Ostrówki wraz z całą ziemią chełmską znalazły się pod zaborem rosyjskim. Mieszkańcy wsi oparli się rusyfikacji i pozostali przy wierze katolickiej. Z powodów ekonomicznych w latach 1905–1910 do USA i Kanady wyemigrowało około 20 rodzin; niektórzy dobrowolnie wyjechali za chlebem także na Syberię.
Podczas I wojny światowej przez Ostrówki przechodził front rosyjsko-austro-węgierski. W 1915 roku w miejscowości stacjonowały wojska austro-węgierskie i konnica Legionów Polskich.
W 1918 roku wieś znalazła się w granicach II Rzeczypospolitej, w województwie wołyńskim, w powiecie lubomelskim w gminie Huszcza. Podczas wojny polsko-bolszewickiej w 1920 roku grupa mieszkańców pod dowództwem rodziny Kuwałków zwanych Krakowiakami rozbroiła i pojmała rosyjskich wartowników pilnujących taborów w Ostrówkach.