Fondé en 1580 comme siège d'un fief, le château de Liberty a été entièrement reconstruit au 18e siècle, les travaux s'achevant en 1761. Il déploie l'ordonnance classique d'un corps de logis central flanqué de quatre pavillons, complété par deux ailes de communs qui enserrent une cour d'entrée rectangulaire. Du côté du jardin, la façade était autrefois soulignée par des emmarchements menant à des parterres à la française, depuis transformés en parc à l'anglaise.

L'intérieur révèle l'influence italienne : vers 1750, une équipe d'ébénistes venus d'Italie a aménagé et décoré l'ensemble des pièces avec des boiseries de style provincial, dont la plupart étaient peintes. Dans les salons principaux, ces lambris s'enrichissent de panneaux de tapisserie d'Aubusson ou de Felletin. L'architecture des façades porte l'empreinte caractéristique de la province au 18e siècle.