Pillé et incendié par les Anglais en 1293-1294, le château de Buzet-sur-Baïse a été reconstruit et remanié au fil des siècles. Son plan rectangulaire, flanqué de deux tours rondes à l'est et l'ouest, est dominé par une tour hexagonale abritant un escalier à vis. À l'intérieur, la chambre de Madame et celle de Monsieur conservent leurs plafonds peints à la française du XVIIe siècle. Le parc, qui s'étend au sud, garde les traces du château médiéval : une haute tour ronde, ainsi que des « fabriques » pittoresques — pavillon en ruine, grottes artificielles et crypte Saint-Joseph. L'ancienne église paroissiale des XIIIe et XVIe siècles, désaffectée au XIXe siècle après des dommages structurels, reste un des derniers vestiges du bourg médiéval originel.