Jest dziadkiem Gregg MarxGregga i Brett MarxBretta Marx oraz Laury Guzik.

Ma pięciu braci: Manfreda, Chico, Harpo, Groucho i Zeppo.

Jego ojcem jest Sam Marx.

W późniejszych latach przyłączył się do swojego brata, Zeppo i razem z nim był menagerem braci Marx. Osiągnął dobrą reputację jako agent.

Zmarł w Palm Springs (Kalifornia, USA). Jest pochowany w Forest Lawn Memorial Park w Glendale (Kalifornia, USA).

Przezwiska braci Marx wywodzą się z historyjki obrazkowej "Knocho Mnich". Chodziło o to, że wszystkie przezwiska mają kończyć się na "o" . Gummo wzięło się od zwyczaju podkradania się do ludzi za kulisami, jak jakiś prywatny detektyw ("gumshoe detective").