Perché sur le rocher, le château de Ramefort domine la route qui longe la rivière, à mi-chemin entre Brantôme et Bourdeilles. Ce repaire, fondé au 11e siècle, s'affirme comme un véritable nid d'aigle avec son enceinte fortifiée percée de meurtrières. Le corps de logis principal s'appuie sur trois tours, aujourd'hui rasées lors de la Révolution. Un châtelet ferme la cour qui constituait une enceinte complète. Du donjon médiéval subsiste un mur ancien orné d'une belle fenêtre trilobée. Les bâtiments annexes ont cédé la place au 19e siècle à des constructions nouvelles, dont une galerie à colonnes.