Taillebourg a connu son heure de gloire en 1242, quand Saint-Louis y affronta Henri III d'Angleterre dans une bataille décisive. Le château fort médiéval qui dominait alors le site ne survécut pas aux guerres de religion et à la Fronde : seule subsiste aujourd'hui une tour de cette époque. Au début du 18e siècle, entre 1717 et 1739, un nouveau château d'esprit classique a été édifié avec sa terrasse, accompagné de communs du 17e siècle remaniés au 18e siècle. À la Révolution, le domaine a été vendu et divisé. Le château classique a disparu dans un incendie en 1822, ne laissant que la tour médiévale en témoignage de ce passé mouvementé.