Аллен Нью-Йорк ҡалаһында (Бруклиндың Мидвуд кварталында) йәһүд ғаиләһендә тыуып үҫә. Буласаҡ режиссёр тыуғанда Аллен Стюарт Конигсберг исемен ала. Аллендың олатайҙары һәм өләсәйҙәре Литванан (Исаак Кенигсберг[17] һәм Дженни Коплин) һәм Австриянан (Леон Шерри һәм Сара Хофф) килгән эмигранттар була, уларҙың туған теле — иҙиш[18]. Уның әсәһе Нетти (1906—2002) ғаилә кондитер магазинында бухгалтер булып эшләй, ә атаһы — Мартин Конигсберг (1900—2001) — официант һәм гравер-ювелир һөнәрҙәрен белә. Атаһы менән әсәһе икеһе лә Манхэттенда Түбәнге Ист-Сайдта үҫә.