Położenie i układ przestrzenny Zamek znajdował się na północny wschód od Głównego Miasta i na południowy wschód od Starego Miasta, na terenie pomiędzy dzisiejszym kanałem Raduni, Motławą, ul. Tartaczną i placem Obrońców Poczty Polskiej. Od południa graniczył z Motławą, natomiast od wschodu pierwotnie z korytem Wisły. Po jego przesunięciu w 1371 roku wykonano wschodnią fosę zamkową między dzisiejszymi ulicami Rycerską i Karpią.
Dom konwentualny był od przedzamczy oddzielony fosą. Fosy otaczały także cały zespół od zewnątrz; od zachodu i północy miały miejscami podwójny przebieg.
Układ części murów zewnętrznych został prawdopodobnie uwarunkowany przebiegiem starszych wałów grodu książęcego. Zależność ta, wcześniej rekonstruowana na podstawie topografii, została częściowo potwierdzona przez badania archeologiczne.
Dom konwentualny Główny dom zamkowy znajdował się w południowo-wschodniej części założenia, pomiędzy dzisiejszymi ulicami Grodzką i Czopową. Rekonstruowany jest jako regularny, czteroskrzydłowy kasztel na rzucie zbliżonym do kwadratu o boku około 52–53 m.