Na sąsiedniej wyspie zachowano kościół oraz zachowania gospodarcze, zaś wysunięte najdalej na południe przedzamcze tworzyły podłużne niskie gmachy flankowane otoczone murami z bramą oraz dwoma cylindrycznymi basztami.
W obecnej postaci zamek został zbudowany przez urodzonego tu syna Fryderyka, Chrystiana IV. Tenże monarcha stał się wówczas jednym z najbardziej wpływowych władców i hojnych mecenasów sztuki w Europie Północnej. Sukces ten osiągnął dzięki dochodom z cła pobieranego na cieśninie Sund (Sundzoll), majątkom ziemskim oraz z jego zamków w Gluckstadt, Rosenborg i Halmstad. Częściowo zachowano zabudowania przedzamcza, natomiast zabudowania środkowej i północnej wyspy niemal w całości zniesiono, na ich miejsce powstał nowy kompleks zabudowań. Pierwotny warowny zespół zamkowy został zamieniony na monumentalną pałacową rezydencję, przy czym nie zrezygnowano z elementów o charakterze obronnym co poświadczają zachowane do dziś bastiony. Na wyspie środkowej wzniesiono dwa bliżniacze gmachy (kancelarię i budynek wielkorządcy) ustawione równolegle, prostopadle zaś wzniesiono mury oraz wysoką wieżą bramną od strony południowej. Wewnątrz czworobocznego dziedzińca ustawiono fontannę, dzieło Adriaena van der Vries.