Un oratoire, construit pour abriter les reliques de saint Gangulphe, est déjà consacré par Notger, évêque de Liège (mort en 1008). C'est à l'intérieur de l'édifice que la facture romane est bien visible. Les 5 premières arcades en plein cintre de la nef centrale, retombant sur des piliers carrés, correspondent au style mosan habituel du XIès. La tour, bâtie sur 4 épaisses murailles formant un carré, s'inscrit dans la largeur de la nef romane.