Château de pierre et d'histoire, Chavagneux a connu plus de cinq siècles de transformations. Édifié au XIIe siècle par les seigneurs d'Authon en briques, cette forteresse commandait un passage stratégique de la Saône et prélevait des péages substantiels. Passé aux mains des Sires de Beaujeu à la fin du XIIIe siècle, puis à la famille de La Porte, le château fut vendu en 1546 à Johannas Kleberger. Après plusieurs héritages et un legs aux pauvres de la Charité de Lyon en 1656, l'édifice fut cédé en 1770 à Jean de Bona de Peyrex, gouverneur de Beaujeu. Entre 1772 et 1776, ce dernier entreprit une refonte radicale : il construisit une villa de style italien, réutilisant partiellement les matériaux du château fort démoli, dont ne subsistaient alors que le donjon et le corps de logis principal. Le donjon, bâti sans fondations en carrons savoyards, témoigne de cette ancienneté. Côté Saône, le domaine s'ornait de terrasses à la française avec vue panoramique sur la vallée et les monts du Beaujolais. Le château a ensuite appartenu à la famille de Varey jusqu'en 1910, puis à la famille Rohan-Chabot avant d'être acquis en 1911 par M. Frèrejean, issu d'une lignée de maîtres de forge régionaux.