pięciokrotnie żonaty: 1. Pier Angeli (24.11.1954 - 18.12.1958, rozwód), syn Perry (ur. 1955); 2. Judith Rawlins (24.10.1963 - 28.06.1971, rozwód), 3 córki: Victoria, Maria i Daniela; 3. Beckey Ann Jones (12. 04.1974 - 26.02.1982, rozwód); 4. Diahann Carroll (3.01.1987 - 12.09.1996); 5. Rena Rowan (21.04.1998 - 06.11.2016, jej śmierć)