Édifice aux origines médiévales, le château de la Forêt-Grailly remonte au 15e siècle. Ses premiers seigneurs sont attestés dès 1380. Une restauration importante intervient au 16e siècle (1586-1587). Au début du 18e siècle, le château se compose d'un corps de logis en pavillon flanqué de trois tours d'angles — la quatrième ayant disparu une dizaine d'années auparavant. L'ensemble est alors protégé par des douves en eau et des murs d'enceinte, avec cour et basse-cour. Au fil du temps, les douves ont été comblées et les fortifications démolies. Une deuxième tour disparaît au 19e siècle. Le château fait l'objet d'une nouvelle restauration vers 1880.