Przyczynił się do odrodzenia kultury dworskiej, zwanej „Higashiyama bunka”, którą kultywował w Ginkaku-ji, kontemplując spokój i piękno ogrodów, podczas gdy wojna Ōnin obróciła Kioto w ruinę.

W 1485 Yoshimasa został mnichem buddyjskim zen, a po jego śmierci w 1490 Ginkaku-ji przekształcono w świątynię o nazwie Jishō-ji. Do dzisiaj zachowały się tylko dwa budynki: Srebrny Pawilon i pawilon Tōgu-dō (東求堂) (skarb narodowy) z 1485, w którym znajduje się jedno z najstarszych pomieszczeń (chashitsu) do ceremonii picia herbaty.

Obok świątyni rozciąga się ogród pełen mchu, ze stawami, wysepkami i mostkami, małymi strumieniami i licznymi, różnymi roślinami oraz tradycyjny ogród japoński suchego krajobrazu, zaprojektowany prawdopodobnie przez Sōamiego (1455–1525): Ginshadan („Morze Srebrnego Piasku”), którego częścią jest kopiec piasku o nazwie Kōgetsudai („Platforma do oglądania księżyca”), kojarzony także z górą Fudżi.