Ponieważ warunki lokalowe na ul. Dybowskiej były fatalne (były tam tylko sale lekcyjne; nie było boiska ani internatu; do tego budynek znajdował się na lewym brzegu Wisły, słabo skomunikowanym z resztą miasta) już od 1923 roku KMW nosiło się z zamiarem przeniesienia OSMW do Warszawy lub Bydgoszczy. Z planów tych zrezygnowano, gdy DOK VIII zaproponowało przejęcie zwalnianych przez Flotyllę Wiślaną Koszarach Racławickich - charakterystycznego budynku Twierdzy Toruń, posiadającego unikalny na skalę europejską strop przeciwbombowy między przedostatnią a ostatnią kondygnacją. Przeznaczono je na internat szkoły (drugie i trzecie piętro), czytelnię z biblioteką, kuchnię, jadalnię, areszt, warsztaty szewski i krawiecki, świetlicę, gabinet komendanta oraz mieszkania obsługi szkoły. Sale wykładowe, gabinety naukowe, sala gimnastyczna i gabinet dyrektora nauk znalazły się w byłej Wozowni Artyleryjskiej, dziś nieistniejącej (w jej miejscu jest zjazd z mostu, tzw. Ślimak Getyński).