Паблізу храма, пад хорамі, знаходзіцца фамільная пахавальня Тышкевічаў. Тут жа быў пахаваны і заснавальнік храма - Язэп. У 1866 годзе па распараджэнні царскай улады касцёл зачынілі і аддалі яго праваслаўнай царкве. Да 1919 года праіснавала царква Святога праведнага Язэпа, пасля чаго храм зноў вярнулі каталікам.