
En contrebas de la chapelle, sur le rocher, quelques pans de murs du château des seigneurs de La Chambre sont encore visibles. D'une surface de 3500 m², il a probablement été construit fin XIème, début XIIème siècle.Guillaume 1er (1038-1093) serait le premier seigneur à y avoir habité. Les seigneurs de La Chambre en firent leur résidence principale durant 4 siècles.