Do 1944 roku zachowały się już przede wszystkim jego fundamenty, z których przed zniszczeniem zamku archeologicznie przebadano jedynie część wschodnią.
Zniszczenie zamku W sierpniu 1944 roku zamek został ciężko uszkodzony podczas brytyjskich nalotów na Królewiec. Kolejne zniszczenia spowodował ostrzał artyleryjski Armii Czerwonej podczas oblężenia miasta trwającego od końca stycznia do 9 kwietnia 1945 roku. W piwnicach zamku przechowywano w czasie wojny Bursztynową Komnatę.
W 1945 roku przyłączono Królewiec do ZSRR i zmieniono nazwę miasta na Kaliningrad.
W 1953 roku rozebrano zachowaną jeszcze wieżę zamkową. W tym samym okresie prowadzono dyskusje nad możliwością odbudowy zespołu.
Od 1968 roku, mimo protestów, pozostałe ruiny zamku zostały wysadzone z inicjatywy pierwszego sekretarza Komitetu Obwodowego KPZR w Królewcu Nikołaja Konowałowa. W 1970 roku na części dawnego terenu zamkowego rozpoczęto wznoszenie Domu Sowietów według projektu Lwa Misóżnikowa. Budynek, którego projektowaną wysokość zredukowano z 28 do 21 kondygnacji, z powodu problemów konstrukcyjnych nigdy nie został ukończony. Pozostała część dawnego terenu zamkowego została przekształcona w plac miejski.