Édifié aux 14e et 15e siècles, le château de Rochebaron s'est construit sur les vestiges d'un ancien oppidum. Les seigneurs de Rochebaron en furent les principaux bâtisseurs, jusqu'à sa perte en 1419. Peu habité depuis le 17e siècle, le château a traversé les âges en déclin. La Révolution française lui porta un coup supplémentaire : un incendie ravagea sa chapelle. Aujourd'hui subsistent plusieurs témoins de son passé : la tour des prisonniers, l'imposante tour triangulaire, le corps de bâtiment d'entrée et les vestiges de la chapelle sur la façade sud.