كان ولى عهد «أنوجور» فى الحكم ولدًا صغيرًا هو «أحمد بن أبى الحسن على»، فحال «كافور» دون توليته بحجة صغر سنه، واستصدر كتابًا من الخليفة العباسى يقره فيه على توليته «مصر» سنة (966) بدلا من هذا الطفل الصغير، فتولى «كافور» «مصر» وما يليها من البلاد ولم يغير لقبه «الأستاذ»، ودُعِى له على المنابر بعد الخليفة.