Le château fort de la Faye, dont une famille féodale du même nom est attestée dès le 12e siècle, a connu plusieurs phases de construction entre le 14e et le 17e siècle. Son plan défensif classique comprend une enceinte quadrangulaire flanquée de tours, avec une tour sud-est dominant l'entrée. À l'intérieur s'élevaient deux corps de logis adossés aux courtines nord et sud, le corps sud abritant une chapelle seigneuriale. Au 15e siècle, la courtine sud fut largement percée pour mieux éclairer le logis. Le 17e siècle apporta des transformations à visée résidentielle : un long bâtiment à arcades fut édifié près de l'entrée principale. Abandonné au 19e siècle et progressivement dépecé, le château ne conserve que des vestiges fragmentaires : une porte avec chambranle à accolade et, à la tour nord-est, un bandeau mouluré portant les corbeaux qui soutiendraient autrefois les mâchicoulis disparus.