Żyrowicka Ikona Matki Bożej, czczona również w Kościele katolickim jako cudowny wizerunek, zyskała wielką sławę i pielgrzymowali do niej królowie: Jan Kazimierz, Michał Korybut Wiśniowiecki, Jan III Sobieski z królewiczem Jakubem, którzy ofiarowali tu jako wotum dziękczynne szablę z bitwy pod Wiedniem, August II Mocny i Stanisław August Poniatowski. Na podstawie brewe papieża Benedykta XIII w dniu 19 września 1739 obraz koronował koronami papieskimi biskup unicki Atanazy Szeptycki. W XVIII wieku o Żyrowiczach mówiono jako o Częstochowie unitów albo litewskiej Częstochowie. Leksykon Miejsca święte Rzeczypospolitej podaje: „Do czasów rozbiorów Żyrowicze były najważniejszym miejscem kultu katolików i grekokatolików w Wielkim Księstwie Litewskim”. Pomiędzy rokiem 1810–1839 była tu siedziba biskupa unickiego. Sobór został przebudowany w stylu klasycystycznym w 1828 roku. W 1839 r. po zniesieniu przez carat unii monaster w Żyrowiczach wrócił do Kościoła prawosławnego. Za czasów Józefa Siemaszki w żyrowickim klasztorze więziono kapłanów unickich nie zgadzających się na zmianę wyznania. Jednym z nich był ksiądz Grzegorz Micewicz, późniejszy autor pamiętnika Z męczeńskich dziejów UniiStanisław Tarnowski, O Rusi i Rusinach, w Krakowie 1891, s. 29..