Originaire du 14e siècle, le château d'Auzers a été entièrement reconstruit au début du 16e siècle. Malgré cette modernisation, son architecture reste résolument médiévale : un imposant corps de logis rectangulaire flanqué de deux grosses tours d'angle et d'une tour d'escalier, le tout couronné d'une galerie de machicoulis.

L'intérieur révèle un palimpseste de décors à travers les âges. L'oratoire conserve de remarquables peintures murales du 16e siècle. Aux périodes suivantes appartiennent une cheminée monumentale ainsi que des boiseries, cheminées et parquets des 18e et 19e siècles, témoignant des évolutions du confort et du goût successifs de ses habitants.