Le château de Genillé a conservé la structure défensive de ses origines, édifiées entre le XVe et le XVIe siècle. Deux massives tours cylindriques flanquent les angles nord-ouest et sud-ouest du corps de bâtiment principal, tandis que des échauguettes couronnent les angles opposés. Une tour octogonale percée d'une vis s'élève en saillie sur la façade orientale. Le site connut son apogée administratif en 1515, quand Genillé fut érigé en châtellenie et rattaché au domaine des Roches Saint-Quentin. Adam Fumée, médecin des rois Charles VII et Louis XI, en fut le premier seigneur connu. Une aile courte ajoutée au XVIIe siècle, en retour d'équerre à la façade orientale, révèle les transformations ultérieures du bâtiment. Les douves qui le protégeaient ont presque entièrement disparu.