Le château de Lacassagne s'est construit par strates successives autour d'un noyau primitif : une tour salle dont la tour ronde abritant l'escalier, sur la façade nord-est, demeure le cœur de l'édifice. Au 17e siècle, deux tours rondes ont été adjointes de part et d'autre, reliées par un balcon élégant porté sur corbeaux — cette liaison date probablement du 18e siècle. L'intérieur réserve une merveille : la salle des Chevaliers de Malte, datant de la première moitié du 17e siècle, somptueusement décorée de lambris, de peintures et d'un plafond peint qui reproduisait fidèlement la salle du grand conseil du palais du Grand Maître à Malte, avant sa destruction par Bonaparte en 1798. Une aile d'habitation fut ajoutée à l'ouest au 19e siècle, tandis que les communs bordant la cour datent de 1850.