dwukrotnie żonaty: 1. Mary Potter (1831 - 1835, jej śmierć), 2. Frances Appleton (1843 - 1861, jej śmierć), 6 dzieci: Charles Appleton (1844 ? 1893), Ernest Wadsworth (1845 ? 1921), Fanny (1847 ? 1848), Alice Mary (1850 ? 1928), Edith (1853 ? 1915) i Anne Allegra (1855 ? 1934)