La tour Pey-Berland, isolée du reste de l'édifice, a été construite entre 1440 et 1450. Elle est quadrangulaire avec des contreforts, une galerie extérieure et une flèche octogonale avec au sommet, une statue de Notre-Dame d'Aquitaine réalisée en 1862 et restaurée dernièrement