Construit en 1591 pour répondre aux menaces des guerres de Religion, le château de Geay est une maison forte au plan original. Son corps de logis rectangulaire, renforcé d'un talus à la base, s'accompagne de deux pavillons carrés disposés en diagonale aux angles nord-est et sud-ouest, débordant sur les grands côtés de la construction. L'édifice occupait autrefois le centre d'une cour quadrangulaire défendue par quatre tours aux angles ; seules deux de ces tours ont subsisté jusqu'à nos jours, témoignant de la puissance architecturale du site à sa création.