杰西·艾森柏格的父亲原本是医生，后来成为大学教授，母亲则是职业小丑。其母在家乡新泽西州Brunswick作为一名儿童圣日聚会表演的职业喜剧演员，有着20年的工作经历。 有2个姊妹，前童星Hallie Kate Eisenberg和Kerri。是一个犹太裔的家庭。杰西在皇后区出生，但在五岁时搬到新泽西。艾森柏格在新学院（The New School）就读大学。他本来可以就读纽约大学，但他为了完成一个电影角色(Roger Dodger)而拒绝入学。