Герберт адмяніў паломніцтва ў Іерусалім, але калі ён чытаў імшу ў царкве Святой Марыі Іерусалімскай (таксама званай «Іерусалімская царква») у Рыме, яму стала дрэнна і, паміраючы, ён прасіў сваіх кардыналаў рассекчы яго цела, каб яно не дасталася д'яблу.