Au début du XVIIe siècle, le château de Saint-Hilaire-sur-Risle a remplacé une ancienne forteresse médiévale édifiée sur motte. Son nouveau propriétaire, ayant des attaches en région de Lisieux, fit appel à des artisans augerons pour cette reconstruction au goût Henri IV. L'édifice se distingue par sa construction en briques roses, rehaussée de losanges noirs formés de briques vernissées selon la tradition augéronne. Cantonné de quatre tours d'angle sur plan carré, le logis central voit sa façade principale couronnée d'un fronton triangulaire. La partie haute des murs s'orne de consoles figurant de faux mâchicoulis. Au XVIIIe siècle ont été ajoutés les bâtiments de communs qui limitent la cour d'honneur, ainsi que le colombier.