Charles i Harriet mieli razem dwóch synów i trzy córki: Ada Harriet Hepburn-Stuart-Forbes-Trefusis (1860–14 października 1945) Mary Elizabeth Hepburn-Stuart-Forbes-Trefusis (1862–7 czerwca 1954) Charles John Robert Hepburn-Stuart-Forbes-Trefusis (18 stycznia 1863–5 lipca 1957), 21. baron Clinton podpułkownik Henry Walter Hepburn-Stuart-Forbes-Trefusis (8 grudnia 1864–2 czerwca 1948), ożenił się z lady Mary Lygon, miał dzieci Margaret Adela Hepburn-Stuart-Forbes-Trefusis (1866–20 marca 1939), żona Leonarda White-Thomsona, nie miała dzieci
30 marca 1875 r. w Uffculme w hrabstwie Devon poślubił Margaret Walrond (16 listopada 1850–19 stycznia 1930), córkę sir Johna Walronda, 1. baroneta, i Francis Hood, córki 2. barona Bridport. Charles i Margaret mieli razem czterech synów i trzy córki: Edith Hepburn-Stuart-Forbes-Trefusis (12 lutego 1876–13 kwietnia 1934) generał-brygadier John Frederick Hepburn-Stuart-Forbes-Trefusis (14 stycznia 1878–24 października 1915), zmarł z ran odniesionych podczas I wojny światowej Walter Alexander Hepburn-Stuart-Forbes-Trefusis (1 lipca 1879–11 lipca 1926), ożenił się z Marjorie Graham, nie miał dzieci Schomberg Charles Hepburn-Stuart-Forbes-Trefusis (22 marca 1882–11 października 1974), ożenił się z Beatrice Trefusis, nie miał dzieci Evelyn Mary Hepburn-Stuart-Forbes-Trefusis (3 lipca 1883–5 stycznia