Le Manoir du Vivier fut construit au début du XVIème siècle en pierre, brique et silex. Son nom provient d'un plan d'eau, le vivier, situé à proximité qui était une réserve à poissons pour les moines de l'abbaye de Valmont qui possédaient terres et biens à Riville.
L'influence de la Renaissance italienne se fait sentir dans la polychromie de l'agencement des matériaux qui rappelle l'architecture du manoir d'Ango près de Dieppe.