Origine du nom : Castanetum (lieu planté de châtaigniers)
On pense que le site, à l'origine, occupe un bois de châtaigniers. Paroisse et seigneurie dès le 12ème siècle, l'église primitive, dédiée à Notre-Dame est donnée en 1180 par Osberne de Cailly au prieuré de Saint-Lô de Rouen. Mais, selon certains écrits, la paroisse est d'abord rattachée à celle de Crevon. Le fief aurait appartenu à la châtellenie dont les possesseurs auraient été, à l'époque, la famille de Montmorency-Luxembourg. Au début du 20ème siècle, le peintre nabi Ker Xavier Roussel, habite le village. Il y représente alors les scènes familières de la région, portraits ou paysages. À la même époque la paroisse compte encore 318 âmes et on y recense trois épiceries, deux cafés et deux charrons charpentiers.