A son arrivée en 1662, le Cardinal de Retz souhaite faire du château un lieu de vie agréable : son architecte, Dieudevant, utilise l’enceinte extérieure de la forteresse des Comtes de Sarrebruck (XVe) comme soubassement au nouveau château. Du côté de la rivière, sur l'épaisseur des murs de la courtine, augmentée de l'avancée formée par les mâchicoulis, il aménage une terrasse qui offre une belle vue sur la vallée. Emplacement de la Porte-à-Meuse en son centre.
Cette vallée est totalement remodelée par Stanislas, aidé d’Héré, dès 1744 : le bassin de Neptune est créé et se voit relié au château d’eau par le grand canal, long de 550 mètres. Malheureusement, le tout est détruit en 1766 par les garnisons installées au château.