Édifié à partir de la fin du 15e siècle, le château de Saint-Pau se distingue par son plan original : deux ailes en retour d'équerre s'articulent autour d'une tour carrée qui abrite l'escalier. Une seconde tour carrée, en saillie, renforce l'angle sud-ouest du bâtiment ouest. L'ensemble s'inscrit dans une enceinte fortifiée, renforcée aux extrémités par deux pigeonniers carrés et percée d'un portail à double accès (charretier et piétonnier). Le château renferme également un réseau de souterrains aménagés en T. Les 16e et 17e siècles ont vu des aménagements successifs du domaine.