Édifié à partir de 1309 sur autorisation de Philippe le Bel, le château d'Aurouze s'est construit progressivement jusqu'au 15e siècle. Cette forteresse rectangulaire était flanquée de tours à chaque angle : la tour ouest servait de donjon, tandis que la tour est abritait un escalier à vis distribuant les étages. Aujourd'hui partiellement ruiné, le château conserve sa façade sud entre deux tours circulaires, bien que largement endommagée.

La salle hexagonale du second étage du donjon reste le joyau du site. Elle s'élance sous une voûte d'ogives finement profilées, aux branches rayonnantes retombant en pénétration dans les angles depuis une clef centrale. La décoration peinte qui couronnait les murs révèle le raffinement du lieu : une frise héraldique présentait des blasons enluminés dans des médaillons ornés de feuillages.