1159an, Yoshitomo eta Fujiwara no Nobuyori-k Go-Shirakawa etxean atxilotu zuten eta bere laguntzailea, Fujiwara no Michinori, hil zuen Heiji matxinadan. Azkenean, Taira no Kiyomori-k, Go-Shirakawa-ren alde eginez, Yoshitomo garaitu zuen. Kiototatik ihes egiten zuen bitartean, Yoshitomo bere seme Tomonaga hiltzera behartu zuten. Geroago, Yoshitomo traizionatu eta bere bainuan hil zuten. Bere semeetako hiru, Yoritomo, Minamoto no Yoshitsune eta Minamoto no Noriyori, geroago Kiyomori-k salbatu eta erbesteratu zituen. Hala ere, Aichihira Yoshi eta Nobuyori hil egin zituzten.
Yoritomo, Minamoto no Yoshitsune eta Minamoto no Noriyori