Perché au-dessus de la Loire, le château d'Arlempdes s'étage sur plusieurs siècles de construction. Mentionné dès 1267 dans une bulle de Clément IV, il entre dans la famille de Poitiers en 1450 lors du mariage d'une fille du baron de Maubec avec Charles de Poitiers. C'est alors que Diane de Poitiers devient Dame d'Arlempdes. La famille entreprend d'importants travaux de restauration et reconstruction. Le château subit les ravages des guerres de Religion en 1585.

De la forteresse primitive subsistent la chapelle romane du 12e siècle et quelques soubassements du 13e. L'essentiel des défenses date des 15e et 16e siècles : une enceinte flanquée de six tours rondes et d'une tour carrée, un chemin de ronde au sud-ouest, des murailles au nord. La face sud-est, qui surplombe la Loire à pic, ne fut pas fortifiée. Une massive tour ronde divise le château en deux parties : au sud s'étend une grande esplanade ; au nord se concentrent l'entrée et les bâtiments résidentiels.

Aujourd'hui en ruines, seule la chapelle et l'édifice adjacent demeurent en état, ainsi qu'un rez-de-chaussée voûté d'un corps de bâtiment.