Le château de Clermont-sur-Lauquet repose sur les vestiges d'un castrum mentionné en 1110. Détruit au 13e siècle, seul subsiste son donjon de plan barlong, datant du 12e siècle. Cette tour offre un intéressant témoignage de l'architecture militaire romane : entrée basse au nord, salle voûtée en berceau au rez-de-chaussée, et deux longues archères à étrier triangulaire caractéristiques de la seconde moitié du 12e siècle. La paroi orientale s'ajoure d'une fenêtre au linteau finement sculpté en arcature trilobée. Remarquablement préservé jusqu'à la fin du 19e siècle, le donjon a alors commencé à être progressivement démoli, pour des raisons restées énigmatiques.