A l’exception du « Petit Château » construit au 16ème siècle, le château actuel est une reconstruction du 19ème siècle pour l’avant-dernier fils du roi Louis-Philippe Ier , Henri d’Orléans, duc d’Aumale, héritier du Domaine, qui y installa ses collections de peintures, de dessins et de livres anciens. Le château et ses dépendances font l’objet de plusieurs protections au titre des Monuments Historiques durant l’année 1988.