Édifié en 1872, le château de Rouffiac a été entièrement transformé au cours du dernier quart du XIXe siècle. À partir d'une simple bâtisse rectangulaire attestée au cadastre de 1811, on y a ajouté progressivement pavillons, tours rondes et carrées, ainsi que tourelles et échauguettes, composant un ensemble architectural résolument romantique. L'intérêt majeur du château réside dans la préservation intacte de ses décors intérieurs d'époque : boiseries, papier peint, tapisseries et peintures demeurent en place. À l'est s'étend un bâtiment de dépendances, tandis qu'en contrebas subsiste un ancien poulailler, témoignage rare de l'architecture utilitaire du XIXe siècle en Périgord.