Dès le 12e siècle s'élève sur ce site une forteresse qui connaît son apogée à la fin du Moyen Âge. Le château du Cluzeau, relevant de la châtellenie de Montmorillon, conserve les traces de multiples remodelages. Jusqu'au début du 20e siècle, un imposant donjon carré à contreforts ronds dominait la cour ; rasé depuis, ses fondations servent de socle au logis édifié aux 14e et 15e siècles. Deux puissantes tours cylindriques flanquent les murailles extérieures, tandis qu'une troisième tour, côté cour, abrite un escalier en vis à la porte richement décorée. Les baies d'époque subsistent avec leurs moulures d'origine. On y découvre des cheminées médiévales remarquables, dont une exceptionnelle par sa taille. Un escalier en spirale conduit à un réseau de souterrains creusés dans le roc. Un exemple singulier d'architecture militaire médiévale prolongée et transformée aux derniers siècles du Moyen Âge.