Le château de Scey-sur-Saône a connu une histoire mouvementée. D'abord édifié au 16e siècle, il fut reconstruit à partir de 1697 avant d'être détruit par un incendie durant la Révolution. Au 19e siècle, la famille Bauffrémont entreprit sa reconstruction en 1837, mais le nouveau logis disparut après 1918. Aujourd'hui, subsistent les écuries et les dépendances : un temple à l'antique attribué à l'architecte Luc Breton, un lavoir, des pavillons et des grilles qui témoignent de l'ampleur passée du domaine.