Né de la reconstruction après l'incendie de 1862, le château de la Brosse est une création originale de la seconde moitié du XIXe siècle. Construit entre 1862 et 1866 pour Georges Gardye de la Chapelle Crosville, il adopte le style néo-gothique avec un décor sculpté puisant dans le répertoire de l'architecture civile médiévale. Cette recherche d'unité stylistique s'étend à la décoration intérieure, notamment aux pièces de réception et au grand escalier.

Le domaine révèle une conception d'ensemble remarquable : résidence de chasse nichée au cœur d'un parc paysager, le château s'inscrit dans un programme achevé vers 1870 qui associe harmonieusement bâtiment principal, dépendances et paysage. Le parc, dessiné en 1862 par Paul de Lavenne de Choulot, constitue l'une des dernières réalisations de ce paysagiste renommé. Ses principes de simplicité et d'harmonie avec la nature environnante y restent lisibles. Les écuries organisées autour d'une cour fermée, la ferme et la maison du régisseur à l'entrée, une machine d'élévation des eaux construite en 1870 en bordure du Cher complètent cet ensemble cohérent. Un incendie en 1973 a endommagé les toitures des tourelles et pavillons.