Les vestiges du château médiéval sont composés de deux tours rondes à toits coniques couverts d'ardoises. Le premier étage de la tour nord est constitué d'une chapelle. Une courtine relie ces deux tours. Ce sont ces parties qui sont inscrites aux Monuments historiques.
Pendant la guerre de Vendée, le château accueille Lescure, blessé, qui vient y trouver refuge. En 1794, le château féodal est incendié lors d'un combat ; n'en subsistent alors que deux tours, en bordure de l'étang actuel. Le château est reconstruit dans un style néo-classique, en 1845, puis agrandi d'une aile en 1875 pour y accueillir la bibliothèque du marquis de Villoutreys3.
En 1982, l'aile de la bibliothèque est démontée, pierre par pierre, afin de redonner au château « sa ligne architecturale d'origine » ; les ouvrages sont transférés à l'Université Catholique de l'Ouest3. L'édifice est inscrit au titre des monuments historiques en 1992
Le parc est ouvert toute l'année, la ballade est agréable en famille,merci de ne pas détériorer les lieus