Le château de Barjac superpose plusieurs siècles d'histoire. Son donjon médiéval, dont subsistent des parties du 12e siècle, a été réaménagé à la fin du 15e siècle, puis partiellement reconstruit après la paix d'Alès en 1629. Le chemin de ronde et le crénelage du donjon pourraient remonter à la construction du premier rempart communal en 1379.

L'édifice se compose de trois volumes : la masse cubique du château des Roure, une aile en retour d'équerre au sud-ouest ajoutée ultérieurement, et le donjon à l'extrémité sud-est. À l'intérieur, une chambre a conservé son plafond à la française et sa cheminée du 17e siècle. Au premier étage du donjon, les voûtes d'arêtes datent de 1777, époque où la pièce accueillit les archives familiales.

L'ancienne galerie, côté cour, renferme des vestiges du 18e siècle : elle était alors voûtée et abritait un petit théâtre, une chapelle et un jardin en étage. Les pièces ont été complétées de plafonds et de cheminées à la fin du 18e siècle.