Coraz bardziej popadający w ruinę zamek dotrwał do lat 50. XX w., kiedy to podjęto decyzję o jego ochronie i podjęciu niezbędnych prac archeologiczno-historycznych i budowlanych w celu zachowania obiektu w stanie trwałej ruiny oraz przystosowania do zwiedzania. Zamek figuruje jako obiekt zabytkowy w wydanym w 1953 r. Katalogu Zabytków Sztuki. Prace konserwatorskie i badawcze trwały w latach 1961-1969 i jeszcze do 1975 r. w okolicach przedbramia.
Architektura Lipowiec to typowy gotycki obronny zamek typu wyżynnego. Zbudowany jest on przede wszystkim z kamienia, a cegły zastosowano głównie do sklepień. W przeszłości elewacje zamku górnego były pokryte tynkiem, który zachował się w śladowych ilościach. Nie dotrwały również do naszych czasów obramowania okien i drzwi, a także inne elementy dekoracji wnętrz, co jest efektem pożarów i dewastacji przez lata opuszczenia. Cały obiekt składa się z trzech zasadniczych części: czteroskrzydłowego zamku górnego z wewnętrznym dziedzińcem; przedbramia – dość rzadkiego rozwiązania architektonicznego w średniowiecznym budownictwie obronnym; składały się na nie: fosa z przerzuconym nad nią mostem do wolno stojącej bramy, a ta z kolei była połączona z bramą główną zamku górnego dwoma równoległymi murami (tzw. szyją) – przedbramie zostało zlikwidowane w XVII w., wiemy o nim dzięki badaniom archeologicznym;