Po jego synu, Kryštofie z Bibrštejna, zamek przeszedł w ręce Lobkoviców, spośród których Kryštof z Lobkovic wraz z żoną Anną sprzedali w 1559 roku Trosky z przynależnościami Jindřichowi ze Smiřic za 6500 kop czeskich groszy.
Właściciele nie rezydowali na Troskach już od drugiej połowy XV wieku i na zamku mieszkali jedynie urzędnicy zarządzający dobrami. Po śmierci Albrechta Jana Smiřickiego w 1618 roku jego majątek został skonfiskowany, a Trosky w 1622 roku uzyskał Albrecht z Valdštejna. W czasie wojny trzydziestoletniej zamek służył jako twierdza, którą w 1639 roku zdobyli Szwedzi. Rok później zamek odbiły wojska cesarskie, a załogi obu stron zmieniały się na nim aż do 1648 roku, kiedy to zamek został po raz ostatni zdobyty i spalony przez wojska cesarskie. Następnie zamek powoli popadał w ruinę, lecz według Bohuslava Balbína w 1681 roku znajdował się jeszcze w stanie umożliwiającym naprawę.