Gorsze czasy dla St Albansa przyszły wraz z rządami szwagierki Wilhelma, Anny, która popierała partię torysów, podczas gdy St Albans był znany ze swoich wigowskich sympatii. Do łask wrócił dopiero za panowania Jerzego I. W 1716 r. został Lordem Namiestnikiem Berkshire, zaś w 1718 r. kawalerem Orderu Podwiązki.
17 kwietnia 1694 r. poślubił słynną z piękności lady Dianę de Vere (ok. 1679 - 15 stycznia 1742), córkę i dziedziczkę Aubreya de Vere, 20. hrabiego Oxford i Diany Kirke, Lady Bedchamber księżnej Walii. Charles i Diana mieli razem dziewięciu synów i trzy córki: Charles Beauclerk (6 kwietnia 1696 - 27 lipca 1751), 2. książę St Albans Diana Beauclerk (ok. 1697 - ?) William Beauclerk (22 maja 1698 - 23 lutego 1733), ożenił się z Charlotte Werden, miał dzieci, jego wnukiem był George Beauclerk, 4. książę St Albans Vere Beauclerk (14 lipca 1699 - 21 października 1781), 1. baron Vere of Hanworth pułkownik Henry Beauclerk (11 sierpnia 1701 - 5 stycznia 1761), ożenił się z Marthą Lovelace, miał dzieci Sidney Beauclerk (27 lutego 1703 - 23 listopada 1744), ożenił się z Mary Norris, miał dzieci George Beauclerk (26 grudnia 1704 - 11 maja 1768) Seymour Beauclerk (24 czerwca 1708 - ?), zmarł w dzieciństwie James Beauclerk (ok. 1709 - 20 października 1787), biskup Hereford Aubrey Beauclerk (ok.