Œuvre architecturale du 14e siècle puis renforcée pour mieux résister à l’artillerie, la Porte Notre-Dame était l’une des 2 entrées de la cité ; située à l’extrémité Ouest de la Grande Rue, elle débouchait sur un imposant éperon défensif de forme triangulaire dont l’actuelle Place Toullier a gardé l’empreinte. À partir de 1785, les portes de la ville disparaissent pour servir de carrières de pierres.