Handler va néixer a San Francisco, Califòrnia, fill de Sandra Handler (de soltera Walpole), decana jubilada del City College de San Francisco, i Louis Handler, un comptable. El seu pare era un refugiat jueu d'Alemanya, i està relacionat de lluny amb l'escriptor britànic Hugh Walpole a través de la seva mare. Té una germana menor, Rebecca Handler. Handler ha estat un lector voraç des de la infància, i el seu autor preferit era William Keepers Maxwell, Jr. Va assistir a Commodore Sloat Elementary, Herbert Hoover Middle School, i Lowell High School. Es va graduar de la Wesleyan University el 1992. Va ser guardonat amb el Premi de Poeta Estudiant de Connecticut de 1992, que afirma que es va guanyar robant Elizabeth Bishop. És exalumne del San Francisco Boys Chorus. Pregunta: Quina professió tenia el pare de Handler?
comptable