Mimo tego Takuan oraz opat Daitoku-ji Gyokushitsu Sōhaku (1572–1641) w 1629 roku zostało skazanychTrzeci z protestujących przywódców Kōgetsu Sōgan (1574–1643) uniknął kary "za nielojalność" na zesłanie do północnej prowincji Kaminoyamy (obecnie Yamagata). Równocześnie abdykował cesarz Go-Mizunoo (後水尾, pan. 1611-1629) na korzyść swojej córki Meishō (明正, pan. 1629-1643)Nobuko Hirose. Immovable Wisdom. Str. 9.
Zesłanie Władze bakufu traktowały Takuana na zesłaniu bardzo troskliwie, organizując jego pobyt pod nadzorem pana zamku Kaminoyamy - Toki Yamashiro no Kami Yoriyuki. Chociaż było to miejsce zesłania, do Takuana przybywali nieustannie goście, aby go zobaczyć. Specjalnie dla niego wybudowano pustelnię Shun'u. Yamashiro zorganizował szkołę mistrzowskiego posługiwania się włócznią (Jitokuki-ryu), a Matsumoto Sadayoshi otworzył podobną szkołę (Isshi-ryu), ale zainspirowaną praktyką medytacji zen Takuana.