Édifié en 1777, le château des Barres doit sa physionomie actuelle aux transformations menées par Claude-Étienne Chaillou des Barres (1784-1857). Ce préfet de la Creuse et de l'Ardèche, ami du roi Frédéric II de Prusse, a profondément remanié le domaine : création d'une bibliothèque, construction d'une aile de liaison, édification d'une chapelle funéraire ornée de trompe-l'œil, aménagement du parc. Chaillou des Barres fut aussi le créateur de la Société historique des sciences de l'Yonne. Le château conserve un fonds d'archives d'intérêt local et national, témoignant de son rôle dans l'histoire régionale.