Du haut de son promontoire dominant toute la basse vallée du Jaunay, autrefois largement ouverte sur la mer, la commune de La Chaize Giraud occupe un site stratégique. Un château fort, nommé "la Casa Giraldi" y fut construit au Xème siècle par Emery Giraud mais détruit au XIVème siècle par un seigneur voisin. Il n'en reste aujourd'hui que quelques fondations derrière l'église.