Le château d'Avauges possède des racines médiévales profondes, puisque la seigneurie remonte au 14e siècle. L'aile ouest conserve d'importantes maçonneries de cette époque. En 1555, la propriété passe à la famille d'Albon, qui s'y établit à la fin du 16e ou au début du 17e siècle et entreprend de notables remaniements. Les voûtes du sous-sol et du rez-de-chaussée datent probablement de cette période, tandis qu'une cheminée du sous-sol porte les armes de la famille. En 1765, d'importants travaux restructurent la façade nord du corps central. Plus tard, au Second Empire, le château subit une relecture néo-gothique qui transforme la façade ouest. La chapelle, consacrée à Saint-Camille en 1730, arbore un décor de style Empire, tandis que la grande salle à manger se distingue par ses boiseries néo-rocaille.