Bâti aux XVe et XVIe siècles par Jean et Pierre de Tournebu, le château de Saint-Germain-de-Livet associe deux périodes de construction bien distinctes : un logis à pans de bois du XVe siècle et une aile Renaissance du XVIe siècle, célèbre pour son appareil de briques vernissées et de pierre formant un damier coloré. Au XVIe siècle, le domaine s'enrichit d'un logis de gardien, d'un moulin et d'une ferme, signe de son importance économique.

Propriété de la ville de Lisieux, le château est aujourd'hui une annexe du musée d'Art et d'Histoire de Lisieux et se visite comme un musée : on y découvre des salles meublées, des peintures murales anciennes et des collections de peintures, de mobilier et d'objets d'art. Il est inscrit au titre des monuments historiques.