Le site de Château-Roussillon connaît son heure de gloire du avant l’ère chrétienne à la période du haut Moyen Âge. Baptisé "Ruscino" – d’où le nom de « Roussillon » donné par la suite à toute la province – il s’organise en une importante cité, capitale du peuple celte des "Sardones". L’occupation romaine en fait une ville prospère, dotée d’un forum, de basiliques, de thermes et de demeures patriciennes. Elle décline ensuite au profit de la ville d’Elne, qui devient le siège épiscopal et le siège du pouvoir comtal. 