W 1522 r. nawiązał kontakt z Marcinem Lutrem, ale do śmierci pozostał katolikiem. Karol został pochowany w kościele św. Anny w Ząbkowicach Śląskich. W 1541 r. spoczęła tam również jego żona. Dzieci ufundowały im grobowiec wykonany przez Ulryka z Żagania, który stał pierwotnie w prezbiterium świątyni, a od 1815 do dziś w kaplicy KauffungaKsiążę godny placu..
Potomstwo Ze związku z Anną, córką księcia żagańskiego Jana II Szalonego i Katarzyny Opawskiej miał dwanaścioro dzieci: Henryk (1497–1497) Anna (1499–1504) Katarzyna (1500–1507) Małgorzata (1501–1551), ożeniona z Joachim (1503–1562), biskup brandenburski Kunegunda (Kunhuta) (1504–1532), ożeniona z Krzysztofem Černohorským z Boskovic Urszula (Vorsila) (1505–1539), ożeniona z Hieronimem Biebersteinem Henryk II (1507–1548), książę ziębicko-oleśnicki Jadwiga (1508–1531), ożeniona z Jerzym Hohenzollern-Ansbach Jan (1509–1565), książę ziębicko-oleśnicki Barbara (1511–1539), zakonnica w Strzelinie Jerzy II (1512–1553), książę ziębicko-oleśnicki.