W roku 1851 zakupił zamek i dobra w Tucznie od barona Carla von Gersdorffa. W tym samym roku otrzymał nominację na królewskiego szambelana pruskiego. 19 kwietnia 1854 roku w Topcliff ożenił się z Anne Elisabeth Hudson (1830–1874), córką George’a Hudsona. Podróżował po Hiszpanii (1855) i Włoszech (około 1860) wykonując szkice tamtejszej architektury i kopiując obrazy wielkich mistrzów Renesansu. W roku 1859 ufundował w swoich dobrach kościół filialny w Rzeczycy (wówczas Knakendorf) koło Tuczna; obecnie jest to kościół parafialny. W roku 1865 przeprowadził się do miejscowości Tharandt koło Drezna. Rozbudował odkupiony od hrabiego Ariela von der Recke-Volmerstein (1831-1879), arystokraty i artysty amatora dom położony na wzgórzu, obok ruin zamku Tharandt, tworząc utrzymany w mauretańsko-fantastycznym stylu pałac. Rozbudowując go wzorował się m.in. na architekturze pałacu emirów (Alhambra) w Grenadzie. Obok rezydencji wybudował galerię, w której zgromadził bogatą kolekcję malarstwa (ok. 350–400 obrazów). Zbiory wzbogacił m.in. dzięki gestowi papieża Piusa IX, który tanio odsprzedał mu dzieła sztuki ze zbiorów watykańskich chcąc je uchronić od rozgrabienia przez żołnierzy Wiktora Emmanuela II.