Ancien château des abbés du monastère cistercien de Candeil, le château de Serres fut construit entre 1430 et 1453, puis achevé au milieu du 16e siècle. Après 1514, les abbés abandonnèrent les lieux. Cette maison forte de plan barlong, élevée de trois étages et comble, servait principalement à abriter les récoltes et les dîmes. Deux tours fortifiées subsistent, accompagnées de dépendances agricoles. Les caves voûtées à pilier central et l'escalier à vis restent bien conservés. Au troisième étage, la chapelle conserve des peintures murales remarquables, dont un panneau montrant les moines aux pieds de la Vierge. L'ensemble des parois, murs et voûtes a jadis été recouvert de peintures. Le site a subi d'importants remaniements aux 19e siècle.