Établi à une dizaine de kilomètres de Pézénas, le château de Peyrat est né de la transformation progressive d'une simple métairie. La famille Peyrat, implantée à Pézénas depuis le 15e siècle, ajouta des tours au 16e siècle à sa « maison des champs », connue sous le nom de Montplaisir. Le 17e siècle l'embellit avec un escalier à balustres et les remarquables fresques de sa chapelle, où les saints sont peints en camaïeu sur les murs, le plafond conservant son décor de bois peint d'époque.

Le domaine reprend le plan de la villa gallo-romaine : quatre corps de bâtiment ordonnés autour d'une cour carrée centrale, la « cour du propriétaire ». À l'est s'ajoute la « cour du fermier », flanquée autrefois de deux tours cylindriques dont seule celle du nord-est subsiste. L'entrée nord s'ouvre par un passage voûté d'arêtes, surmonté d'un colombier. Chaque angle du château était autrefois couronné d'une tour carrée.

Passé à la famille Reboul dans la seconde moitié du 18e siècle, le domaine subit des modifications : on dit que François-Jacques Reboul, homme de conviction janséniste, aurait fait abaisser les tours et rebaptisé la demeure, soucieux d'austérité.