Un ancien monastère transformé en forteresse au XIe siècle, puis en demeure seigneuriale : telle est l'histoire mouvementée de Goudourville. Hugues de Gasques le reconstruisit en 1081 après sa destruction par les Normands. Le château connut bien des assauts : Simon de Montfort l'assiégea en vain en 1211, le Prince Noir s'en empara en 1360. Au XVe siècle, on l'aménagea en résidence avec escalier Renaissance et grandes fenêtres à meneaux. Henri IV y séjourna en 1587. Mais le coup dur vint en 1652 : durant la Fronde, les troupes de Condé s'y réfugièrent. Après deux mois de siège, Mazarin ordonna l'arasement des tours et la destruction des ouvrages militaires. Au XVIIIe siècle seulement, le château fut relevé de ses ruines. On modifia les niveaux, on perça les façades, on remplaça les toits plats à créneaux par de hautes charpentes en châtaignier en forme de carène de navire renversée. Les oubliettes furent comblées, les souterrains murés, la douve partiellement remblayée. Une terrasse s'éleva sur les anciens remparts. Subsistent aujourd'hui les mâchicoulis à l'ouest du château, vestige de sa vigueur passée.