Il est attesté un seigneur de Grisy au xiie siècle3.
Le château actuel est construit à la fin du xvie siècle et remanié au xviie siècle et au premier quart2 du xviiie siècle4.
L'aile droite est datée du règne d'Henri II, la façade est essentiellement datée de celui de Louis XIII. La porte est refaite au début du xviiie siècle4.
La famille protestante qui possède l'édifice s'enfuit pendant les Guerres de religion. Une autre famille doit fuir au moment de la Révolution française3.
La même famille possède l'édifice depuis 19103.
L'édifice est utilisé par l'occupant allemand pendant la Seconde Guerre mondiale comme dépôt de carburant. Bien que bombardé le site n'est pas détruit et libéré au milieu du mois d'3.
L'édifice fait l'objet d'une inscription comme monument historique par arrêté du : les façades et les toitures du château et des communs, l'escalier principal en ferronnerie, la pièce d'eau, la mare et le pré face à l'édifice font l'objet de la protection2.
Le château fait l'objet de restaurations depuis les années 1980 et est ouvert aux visiteurs de début juillet à mi-août3.