Le donjon de l'Abbé de Ventenac est une robuste tour carrée édifiée entre le 12e et le 14e siècle. Construite sur un passage voûté en berceau, elle ne s'accède que par les bâtiments adjacents. Son premier étage conserve une fenêtre amputée de son meneau, tandis que des vestiges de chéneau et une corniche romane témoignent de l'élévation originelle. L'étage supérieur s'ouvre sur une fenêtre gothique à chapiteau sculpté. Cet édifice reflète l'histoire tumultueuse de Ventenac : longtemps partagée entre l'abbé de Montolieu et les seigneurs locaux, la place connut les troubles des guerres de Religion, occupée par les réformés en 1574, puis par la Ligue en 1589. La légende prétend qu'un souterrain relierait autrefois le donjon au monastère de Montolieu.