Ancien château seigneurial des 12e et 13e siècles, le site a été transformé en demeure épiscopale aux périodes suivantes. Subsistent de la campagne des 15e-16e siècles une remarquable salle voûtée d'ogives nervurées, un couloir voûté et une tour d'escalier à vis de plan octogonal. La galerie à arcades de la maison Riey pourrait dater de cette même époque ou du 17e siècle. On observe également des corbeaux sur la façade ouest et une croisée au gothique tardif. Au premier étage, une exceptionnelle cheminée monumentale à consoles a été préservée, accompagnée de sols et plafonds anciens. Diverses baies et ouvertures murées témoignent de la conservation partielle des anciens bâtiments, bien que le site ait subi d'importants remaniements aux 18e et 19e siècles. Divisée aujourd'hui en trois propriétés privées, la motte conserve les traces d'une architecture médiévale et moderne.