Le nom « Quengo » se réfère à une terre située sur une paroisse au sud de Dol qui appartenait aux premiers propriétaires du lieu. L’architecture de cet hôtel a révélé qu’il a été édifié en deux temps, d’où son second nom de double-hôtel. Au XVIe siècle, un premier corps de bâtiment est construit, flanqué de deux tourelles. Au siècle suivant, un second bâtiment est accolé avec un toit galbé à l’impériale, surmonté d’un lanternon. Son jardin renferme un colombier.
D’abord hôtel particulier et demeure noble, il devient une maison d’arrêt et une salle de discipline pendant la Révolution. L’hôtel des postes et la mairie y trouveront place un temps avant que l’édifice ne retrouve sa destination initiale.