Die Abtei wurde von Bischof Agricolus (660-700) über römischen Resten innerhalb der Stadt gegründet. Agricolus war zuvor Mönch in Lérins, dann wurde er Bischof in Avignon. Von den Vorgängerbauten ist nichts bekannt. Im 10. Jahrhundert musste der Bau nach Verwüstungen durch die Sarazenen neu erbaut werden. Der bestehende dreischiffige Bau entstand 1321-1326 mit Unterstützung durch den in Avignon residierenden Papst Johannes XXII.

L'abbaye fut fondée par l'évêque Agricolus (660-700) sur des vestiges romains situés à l'intérieur de la ville. Agricolus avait auparavant été moine à Lérins, puis devint évêque d'Avignon. On ne sait rien des édifices antérieurs. Au Xe siècle, l'édifice dut être reconstruit à la suite des ravages causés par les Sarrasins. L'édifice actuel, à trois nefs, fut érigé entre 1321 et 1326 avec le soutien du pape Jean XXII, qui résidait à Avignon.