Ancienne forteresse aux courtines et échauguettes, Puymartin a connu une histoire mouvementée. Les Anglais s'en emparèrent en 1357 ; bien plus tard, durant les guerres de Religion, le capitaine catholique Puymartin en fit son repaire avant de reprendre Sarlat aux Calvinistes en 1534. L'architecture témoigne de ces siècles troublés : un châtelet contrôle l'accès à la cour, deux corps de logis des 15e et 16e siècles sont reliés par des tours à mâchicoulis flanquées d'une poivrière abritant un escalier à vis. Le chemin de ronde est percé de trous à couleuvrines. À l'intérieur, une grande salle conserve une belle cheminée, des tapisseries et des poutres peintes au pochoir. Le cabinet lambrissé attenant surprend par ses peintures en trompe-l'œil de sujets païens et chrétiens, réalisées à la colle comme des fresques au début du 17e siècle.