Tam wisiał do 1813, kiedy to w obawie przed wojskami rosyjskimi obraz ukryto w czytelni gimnazjum.
Ponieważ ludność opolska żądała dostępu do obrazu, podjęto decyzję o przeniesieniu go 17 grudnia 1813 do kolegiaty św. Krzyża, a następnego dnia proboszcz Franciszek Paul umieścił obraz w bocznej kaplicy maryjnej. Ks. Paul pisał wówczas:
Mała liczba kapłanów oraz sytuacja polityczna nie pozwalała organizować nabożeństw pielgrzymkowych. Kościół w tym czasie służył katolikom i protestantom. Ostatecznie ks. Paul umieścił obraz w przykościelnej kaplicy Matki Bożej Szkaplerznej służącej bractwu MB Szkaplerznej.
Kult obrazu został ożywiony, kiedy proboszczem kolegiaty został ks. Hermann Gleich, późniejszy wrocławski biskup pomocniczy. Wybudowano i poświęcono nowy ołtarz, który później podniesiono w 1856 do rangi ołtarza uprzywilejowanego, decyzją papieża Piusa IX. Jednak całe życie religijne miasta zamarło w czasie tzw. kulturkampfu. Z tego okresu pochodzi dokument, ukryty pod ozdobną koroną obrazu, w którym m.in. czytamy: