Le château de Saint-Blancard s'enracine dans une longue histoire. Des fouilles ont révélé une occupation du site dès l'Antiquité, poursuivie tout au long du Moyen Âge. Un premier château existait au 13e siècle ; en 1303, un nouvel édifice a été entrepris selon un accord entre les habitants et Pierre d'Orbessan. Les maçonneries du 14e siècle constituent le cœur du bâtiment, enrichi de percements au 16e siècle.

Au 19e siècle, le château s'est transformé. Un incendie en 1888 a précédé de grands travaux : création d'un donjon à l'ouest, décors intérieurs néo-gothiques sous la direction des architectes Urbain Vitry et Léopold Gentil. Les murailles ouest et sud ont été abattues pour ouvrir la vue sur les Pyrénées. Communs et serre datent de cette fin de siècle. Plus tard, en 1926, une nouvelle portion d'enceinte, inspirée de la seconde enceinte de Carcassonne, a complété l'ensemble.