Édifié au 14e siècle en maison forte aux murs épais renforcés de tours carrées, le château de Castelferrus a été profondément remanié au 17e siècle pour devenir une imposante bâtisse à deux étages. Ses différents corps de bâtiments s'organisent en équerre. À l'intérieur subsistent de vastes pièces aux plafonds à la française, desservies par de longs couloirs, et quelques cheminées en stuc ornées de décors du 18e siècle. Une remarquable pièce du premier étage conserve des poutres peintes aux thèmes singuliers : scènes de bataille aux portes d'une ville, squelette sur un char tiré par des cerfs ailés, démons ailés, scène de chasse et putti assis sur un crâne. À l'ouest, un mur de briques aujourd'hui disparu bordait autrefois un fossé encore partiellement visible.