Prawdopodobnie z grzeczności i pod wpływem rekomendacji księcia von Metternicha przyznał to samo wyróżnienie księciu von Kaunitz.
thumb|left|200px|Aloys von Kaunitz-Rietberg pędzla Jana Chrzciciela Lampiego W 1822 roku książę von Kaunitz został aresztowany w swoim pałacu przy Dorotheergasse w Wiedniu, gdyż ujawniono jego przestępstwa związane z wykorzystywaniem seksualnym dzieci i młodych. Oskarżono go o ponad dwieście wykroczeń, które miały miejsce w Wiedniu w latach 1811–1814 i ponownie od 1818 roku, kiedy ofiarami były m.in. dziewczęta z grupy baletowej z Theater an der Wien. Prawdopodobnie podobne przestępstwa były powodem wydalenia go z madryckiego dworu w 1817 roku. Po ujawnieniu skandalu książę pozostawał pod ścisłą obserwacją wiedeńskiej policji, a przesłuchania trwały do 1823 roku, kiedy skazano go na karę wygnania z Austrii. W wyniku procesu książę sprzedał swój majątek, aby pokryć wysokie zadośćuczynienia dla ofiar i ich rodzin. Przeprowadził się do swojej posiadłości w Brnie, gdzie popełniał dalsze wykroczenia na tle seksualnym. Ostatecznie przeniósł się do Paryża, gdzie zmarł w 1848 roku.