Первоначально мост имел 22 арочных пролёта и длину 915 м. Он связывал между собой территории Франции и Папского государства, и был первой переправой для путешественников и торговцев, двигавшихся по реке со стороны моря. Здесь находились пограничные заставы, а также посты сборщиков налогов и пошлин. Первая арка рухнула в 1603 году, затем еще три в 1605 году. Однако в 1628 году все четыре пролёта были восстановлены. Новое обрушение произошло через несколько лет после открытия обновленного моста — в 1633 году обрушились две арки, а в 1669 году после сильного наводнения на Роне осталось лишь четыре пролёта, сохранившихся до сегодняшнего времени, вместе с небольшой капеллой Святого Николая смешанного романско-готического стиля на втором пилоне. Мост добился мировой известности в XV веке, после посвящения ему французской песни ʺSur Le Pont d’Avignonʺ (ʺНа мосту в Авиньонеʺ).
