Dlatego rozmyśliła się i zdecydowała odizolować ich gdzieś na pustkowiu. thumb|Twierdza Dyjament na obrzeżach Rygi, rycina z XVII wieku Najpierw przetrzymywano carską rodzinę prawie przez rok w twierdzy ryskiej, aczkolwiek jeszcze wraz z najbardziej zaufanymi sługami. Później przewieziono ich do twierdzy Dyjament, gdzie urodziła się im druga córka – Elżbieta, a następnie izolowano ich w twierdzy Oranienburg koło Tambowa.
Zesłanie thumb|Chołmogory wedle rysunku księżniczki Elżbiety W końcu zesłano ich do klasztoru w Chołmogorach na dalekiej północy Rosji, w Archangielskiej Guberni, ale już bez towarzystwa zaufanych osób. Rodzina Brunszwickich dotarła tam 9 listopada 1744 roku. Zakwaterowano ich w tzw. domu arcybiskupim należącym do kompleksu klasztorno-katedralnego w Chołmogorach.
Specjalnie ściągnięty z Archangielska oddział wojska dbał o to, by rodzinka Brunszwickich (ros.: Брауншвейгское семейство) nie miała kontaktu z obcymi. Jedynie archangielski gubernator miał obowiązek raz w miesiącu przekonać się o stanie więźniów.