Penzias Alemaniako Munich-en jaio zen, Justine-ren (Eisenreich) eta Karl Penziasen semea, larru-negozio bat zuzentzen zuena. Bere aiton-amonak Poloniatik Munichera etorri ziren eta Reichenbach Strasse Shul-eko buruzagien artean zeuden. Sei urte zituela, bera eta bere anaia Gunther Kindertransport erreskate operazioaren barruan Britainia Handira ebakuatutako haur juduen artean zeuden.
Brooklyneko Institutua.