Ell i la seva germana, Letty (nascuda el 1943), van ser criats a Midwood, Brooklyn. Ell és el fill de Woody Nettie (née Cherry; 8 de novembre de 1906 <unk> 27 de gener de 2002), un llibrer en el delicatessen de la seva família, i Martin Konigsberg (25 de desembre de 1900 <unk> 8 de gener de 2001), un gravador de joies i cambrer. La seva família era jueva, i els seus avis van emigrar als Estats Units des de Rússia i Àustria i parlaven iiddish, hebreu i alemany. Tots dos pares d'Allen van néixer i van créixer al Lower East Side de Manhattan. La seva infància no va ser feliç; els seus pares no es van entendre, i ell mateix va tenir una relació estreta amb la seva mare, Letty Allen (nascuda el 1943), van ser criats a Midwood, Brooklyn. Ell és el fill de Woody Nettie (née Cherry; 8 de novembre de 1906 <unk> 27 de gener de 2002), un llibrer en el delicatessen de la seva família, i Martin Konigsberg (25 de desembre de 1900 <unk> 8
17 anys