Les fouilles de sauvetages, lors des travaux sur le territoire de la commune, ont permis de vérifier que ce site fut occupé dès le Néolithique. Dans le seconde moitié du XIe siècle, un pont de pierre fut construit en remplacement d'un vétuste pont de bois. Désormais la cité, dès 1063, prit le nom de Pons Sorgie "(Pons-de-Sorgo en provençal et Pont-de-Sorgue en français)". Jean XXII fit édifier, en 1317 le premier palais pontifical sur les bases de l'ancien castrum. Ce fut en 1322, que l'abbé de Cluny rétrocéda à la papauté ses droits sur l'église paroissiale. Et en 1354, l'Hôtel des monnaies, installé à l'intérieur du palais pontifical, cessa d'émettre pour être transféré à Avignon. Urbain V, en 1364, fit apporter plus de commodités au palais et en fit sa résidence d'été. Il fut brûlé en 1562. 