pięciokrotnie żonaty: 1. MaryLou Simpson (1940 - 1942, rozwód); 2. Lynn Bari (28.11.1943 - 26.12.1950, rozwód), 2 dzieci: córka (ur. 1945) i syn John Michael (ur. 18.09.1948); 3. Judy Garland (08.06.1952 - 19.05.1965, rozwód), 2 dzieci: córka Lorna (ur. 21.11.1952) i syn Joey (ur. 29.03.1955); 4. Patricia Potts Hemingway (1972 - 15.02.1980, rozwód); 5. Camille Keaton (od 20.03.1993 do jego śmierci)