Przy kościele mieszkał także brat zakonny Maria Roch Pieczewski (ur. 10 sierpnia 1856), który zmarł w 1946 rokuKsięga zgonów w parafii Kościoła Starokatolickiego Mariawitów w Nowej Sobótce. Następnie przez pewien okres mieszkał tam również biskup Maria Szymon Bucholc. Ostatnim duszpasterzem posługującym w Kajewie był kapłan Wiktor Maria Lucjan Wierzbicki, który dojeżdżał z Nowej Sobótki, wówczas mieszkania przy kościele wynajmowane były prywatnym osobom. Ze względu na malejącą liczbę wiernych postanowiono zlikwidować odrębną krośniewicką parafię mariawicką w Kajewie i wcielono ją do parafii w Nowej Sobótce jako filię. Z czasem ostatni wyznawcy mariawityzmu odeszli, a kościół pozostał bezużyteczny i przeznaczono go na magazyn. W wyniku opuszczenia kościół niszczał i był systematycznie dewastowany, dlatego władze Kościoła Starokatolickiego Mariawitów w latach 90. XX wieku postanowiły go rozebrać, a działkę sprzedać. Cegłę z rozebranego kościoła przekazano na budowę nowego kościoła mariawickiego w Zgierzu, a na miejscu świątyni prywatny właściciel wybudował stację benzynową.