Édifié au 15e siècle, le château de Puy-Guillon s'organise initialement autour d'un gros donjon carré protégé par une courtine quadrangulaire et flanqué d'une tour ronde. Une basse-cour fortifiée s'étend en contrebas à l'ouest. Le 17e siècle marque un tournant : une nouvelle demeure est construite le long de l'enceinte supérieure, face à des jardins ordonnancés, offrant des conditions de vie plus agréables. Des communs apparaissent progressivement aux 17e et 18e siècles autour de la basse-cour. Vers 1870, d'importants travaux de modernisation unifient l'ensemble : de nouveaux bâtiments forment désormais un front continu le long des côtés ouest, nord et est de la cour inférieure, tandis qu'une aile est relie les deux parties du château. Cet ajout du 19e siècle s'inspire du bâtiment du 17e siècle, mais un petit corps de bâtiment s'en distingue par ses références médiévales : baies cintrées et tour d'escalier crénelée.