Родилась в Бедфорде, выросла в Манчестере, штат Нью-Гэмпшир, в семье Бет Энн и Дональда Сильверман, выходцев из польских и российских евреев. Бет Энн работала фотографом в период избирательной кампании Джорджа Макговерна и основала театральную труппу New Thalian Players, в то время как Дональд обучался на социального работника, а также являлся владельцем магазина одежды Crazy Sophie’s Outlet. Родители Сары развелись и поженились снова.
Сара Сильверман младшая в семье, у неё три сестры: киносценарист Джоди Спайер, актриса Лора Сильверман и раввин Сюзан Сильверман, — а брат Джеффри Майкл умер во младенчестве. Сара родилась в еврейской семье, которая придерживалась светских взглядов и не была религиозной.
Первое выступление Сильверман в жанре стенд-ап комедии произошло в Бостоне, на тот момент ей было 17 лет, своё выступление она назвала «ужасным». По окончании школы Деррифилд в Манчестере, она посещала, но не закончила Нью-Йоркский университет, выступала в качестве стенд-ап комика в Гринвич-Виллидж.