La ciudad de Airvault se extiende en el valle de Thouet alrededor de tres monumentos catalogados, la abadía y la iglesia de Saint-Pierre, dominada por la ciudadela construida sobre una colina. Esta posición estratégica la convirtió en una parte importante del poderoso sistema defensivo de la ciudad en la Edad Media.
El castillo de Airvault es considerado por el historiador Henri Bodin como "uno de los pocos ejemplares supervivientes de la arquitectura militar del siglo XI". De esta época queda el recinto con sus dos torres sin corona y su torreón cuya silueta bien conservada marca el paisaje urbano.Los edificios del interior del recinto sustituyeron a las construcciones originales de los siglos XIV y XV.

Según Henri Bodin, el castillo fue construido en el sitio del antiguo oppidum galo y los constructores del castillo se inspiraron en las torres cuadradas de este antiguo oppidum y la forma de colocarlas en las murallas. Es esta peculiaridad de la construcción la que permite que el castillo de Airvault se feche al menos en el siglo XI (algunos creen que sería anterior al inicio de la construcción de la iglesia).
Entre los edificios queda la prisión con sus dos celdas abovedadas iluminadas por una laguna.El castillo fue sitiado y conquistado en 1207 por Philippe Auguste.El 22 de septiembre de 1565, Jean Ysoré, barón de Airvault tuvo el honor de recibir a Carlos IX y al principito de Navarra (más tarde el rey Enrique IV).

El 3 de octubre de 1569, después de la batalla de Moncontour que vio la victoria del duque de Anjou (el futuro Enrique III), Coligny, que comandó a los calvinistas golpeados, ordenó prender fuego al castillo para vengarse de René Ysoré (hijo de Jean Ysoré) que había contribuido a su derrota.
Hoy, propietarios del castillo, estamos abriendo el castillo al público ofreciendo cinco habitaciones muy cómodas.