Revenez sur vos pas vers la porte Sud-Est, dont il subsiste un mur arrondi, pour emprunter la rue Notre-Dame en direction du Roc Castel. Ce lieu fortifié, mentionné dès 1112, conserve les remparts de l’ancien château des évêques de Lodève, démantelé en 1629 sur ordre de Richelieu. Le sentier serpente entre les traces du passé, comme l’ancien lavoir et la place de l’Orme. Une bifurcation sur votre droite vous conduit au Claustre puis à la chapelle Notre-Dame du Roc Castel. Partiellement creusée dans le roc au XIIe siècle puis reconstruite au XVIIIe, elle se dresse fièrement à côté de son clocher.