Ma czworo rodzeństwa - trzy siostry: Susan Silverman-Abramovitz, Sarah Silverman i kostiumolożkę Jodyne L. Speyer, a także brata Jeffreya Michaela, który zmarł w wieku trzech miesięcy.

Ma polskie pochodzenie.