A partir d'esi momentu y debíu en gran midida a una serie de pestes qu'afararon la contorna dende'l s. XVI, Castrotorafe entró nun capítulu de silenciu, hasta'l s. XVIII, nel qu'empezó'l procesu de despoblamientu de la villa, llegando hasta l'estáu de ruina y abandonu en que se topa anguaño, siendo l'últimu alcalde de la Villa Antonio Entrecanales, qu'en 1815 yá vivía en San Cebrián de Castro.