En 1754, le gouverneur des Pays-Bas autrichiens, Charles-Alexandre de Lorraine, décide de raser le précédent château du domaine pour en construire un autre totalement neuf et au goût du jour. Mais l’édifice est incendié au cours des combats qui précèdent l’annexion des Pays-Bas autrichiens à la jeune république française en 1794.