Rodzina Pierwszą żoną była Emma Marie Meliss (ur. 22/9 1825 w Bawarii, zm. 26/10 1858 we Francji), z którą zawarł związek małżeński w Norwegii 13 maja 1845 r. Mieli ośmioro dzieci:1846-1863 Władysław Aleksander ur. w Norwegii, zginął pod Kobylanką, pow. cieszanowski, późniejsze Województwo lwowskie1847-1887 Bronisława Emma, popełniła samobójstwo w Cytadeli Warszawskiej1849-1852 Anna Elżbieta1850-1859 Kazimierz Henryk1852-1915 Wanda Thora1853-1930 Amadeusz Olav Stanisław1855-1895 Paulina Julia Frederyka1857-1858 Eugénie Marie
Z drugą żoną Eglantine Bizeuil nie miał dzieciWedług informacji dostarczonej przez potomków Waligórskiego, Eglantine Bizeuil popełniła samobójstwo zażywając truciznę, kiedy dowiedziała się o aresztowaniu jej starego schorowanego męża podczas Komuny Paryskiej..