L'existence de Puymège est attestée dès le 13e siècle et son propriétaire est alors collecteur des impôts d'une partie de la vicomté de Turenne. Des traces anciennes encore visibles (tour de défense avancée et mur d'enceinte du potager) témoignent d'une certaine étendue des constructions. L'aspect villégiature se développe surtout à partir de la fin du 17e siècle avec le réaménagement du château largement ouvert sur l'extérieur. Ces transformations se poursuivent au 19e siècle. Le bâtiment de deux étages sur la voûte d'entrée avec son escalier en vis, prolongé de chaque côté par des constructions basses à usage d'habitation et de cellier, a été construit à la fin du 16e siècle. Décor intérieur du château du 18e siècle. Jardin de la seconde moitié du 18e siècle.