Édifié vers 1498 par Dauphin Pastoureau, maître de forge à Nontron, le château de Javerlhac occupe une position de seigneurie dépendant de la baronnie de Nontron, sous la suzeraineté des vicomtes de Limoges. Son architecture actuelle s'organise autour de deux corps de logis en retour d'équerre, reliés par une tour polygonale à mâchicoulis qui abrite l'escalier desservant l'ensemble. Le logis ouest, surélevé à la fin du 19e siècle, conservait autrefois un chemin de ronde se prolongeant vers une tour ronde. À l'angle nord-ouest, une imposante tour ronde à mâchicoulis, ornée de trilobes et portée sur des corbeaux à trois redans, marque fortement la composition. Une description de 1730 mentionnait trois tours carrées et rondes ; le donjon carré qui existait alors a disparu avant 1888.