Un habitat fortifié dénommé Le Broc (de Braco vers 1200, de Broco en 1235) est mentionné dans la première moitié du XIIIe siècle. Il comportait un château qui était situé sur le rocher, en bordure orientale de l'agglomération, où l'on voit encore quelques traces.