L'actuel château est construit à partir des années 1630 pour Pierre Hérouard, sur l'emplacement d'un ancien château. Endetté, celui-ci revend le bâtiment encore en travaux à Claude Cornuel, conseiller de Louis XIII et intendant des finances. Divers petits propriétaires se succèdent ensuite, puis Daniel François Voisin, futur chancelier et garde des sceaux de Louis XIV, en hérite par sa mère. Il l'embellit en faisant intervenir l'architecte Robert de Cotte. Le bâtiment est alors constitué d'un corps de logis entouré de deux ailes et devancé par deux gros pavillons. Des communs de grande envergure flanquent la cour seigneuriale sur la droite. Délaissé au XXe siècle, le château tombe en ruine, avant d'être racheté à la fin du XXe siècle. Depuis, une importante campagne de restauration est en cours.