La guerre de Cent Ans apporta l’insécurité. En 1356, le Prince Noir, fils du roi d’Angleterre, n’ayant pu prendre le château Raoul, fit brûler la ville. Des pillages eurent lieu en 1374. Il fallut fortifier la cité, ce qui fut autorisé par le roi en 1447. Le château Raoul fut reconstruit à cette époque. 