Édifié au 13e siècle, le château d'Aurignac mêle formes gothiques et détails romans, ce qui en fait l'un des rares monuments militaires gothiques de la région. Son organisation défensive reposait sur trois enceintes successives, dont deux restent visibles. La première entoure la ville moderne et abrite l'ancienne chapelle castrale, devenue église paroissiale. À l'est s'étend l'enceinte intérieure, véritable forteresse de plan rectangulaire flanquée de tourelles et de contreforts aux quatre angles. Un bâtiment longiligne, probablement la grande salle d'honneur, l'occupait autrefois. Au sud se dresse le donjon cylindrique, répartissant l'espace sur trois étages : l'accès se faisait au premier niveau, tandis que le rez-de-chaussée servait d'oubliettes. Les deux étages supérieurs disposent de salles voûtées en coupoles. À proximité se distinguent les vestiges d'une chapelle castrale, identifiée par le monogramme du Christ gravé sur sa porte.