W 1921 r. wyszczególniono: wieś Dąbrówka Kościelna. Było tu 65 budynków z przeznaczeniem mieszkalnym i 1 inny zamieszkały oraz 397. mieszkańców (181. mężczyzn i 216 kobiet). Narodowość polską podało 336 osób, 55 żydowską, a 6 inną folwark Dąbrówka Kościelna, gdzie naliczono 3 budynki z przeznaczeniem mieszkalnym oraz 59. mieszkańców (26. mężczyzn i 33 kobiety). Narodowość polską podały 53 osoby, a białoruską 6.
W latach 1954-1972 miejscowość wchodziła w skład gromady Dąbrówka Kościelna W. Jemielity, Podziały administracyjne powiatów wysokomazowieckiego i łapskiego w latach 1919 –1990 z Studia Łomżyńskie, tom VII. Łomża 1996 r. str. 108-109.. W latach 1975–1998 miejscowość administracyjnie należała do województwa łomżyńskiego.
Według stanu ludności z 31 grudnia 2011 r. w Dąbrówce Kościelnej mieszkało 379 osóbUrząd Miejski w Szepietowie – stan ludności z 31.12.2011 r. (bez pobytów czasowych)..
Historia kościoła thumb|240px|Kościół pw. św. Anny w Dąbrówce Kościelnej Pierwszy, znany z dokumentów kościół wzmiankowany w latach 1514-1518. Kolejny, drewniany, fundowany i uposażony przez braci Abrahama, Jakuba, Marcina i Piotra Woynów oraz Piotra Szepietowskiego. Spalony w czasie wojen szwedzkich.