Władysław Komar syntyi Kaunasissa, Liettuassa 11. huhtikuuta 1940 Władysław Komar-Zabożyński ja Wanda Jasińska. Puolalaisena jalosukuperheenä he omistivat kartanon Rogówekissa (liettuaksi Raguvėlė). Molemmat hänen vanhempansa olivat urheilijoita <unk> isä kilpaili Liettuan puolesta Vladas Komarasina vuoden 1934 Euroopan urheilukilpailussa
Korkeanhyppy- ja 110-metrisissä esteissä. Äiti oli syöttäjä, joka teki kansallisen ennätyksen 1930-luvun alussa. Toisen maailmansodan aikana perhe muutti Gulbinyyn (liettuaksi: Didieji Gulbinai). Hänen isänsä, joka sodan aikana auttoi Puolan anti-saksalaista vastarintaliikettä, Kotiarmeijaa, murhattiin vuonna 1944 Glitiškėsissa Ypatingasis būrysin miliisin ryhmällä.