Avant la révolution, Grissay appartenait à un Seigneur du Landreau, qui vendit la propriété en 1787 à Mr Guyet. En 1895, le château est restauré par un architecte réputé, Mr Libaudière. De la Roche sur Yon. La tour et le pavillon datent de cette même époque.
En 1879, les 2 frères Armand et Victor Batiot vont dans la Nièvre chercher le premier reproducteur charolais : c'est l’introduction de cette race bovine en Vendée. L'objectif de ces éleveurs est d'améliorer la forme des vaches parthenaises et dès 1895, comme le montrent ces plaques, ils obtiennent des prix aux concours d'animaux. Ils introduisent en 1900 les premières vaches charolaises, et vers 1910 les premiers concours de Charolais purs ont lieu en Vendée. Cette région est aujourd'hui considérée comme un « berceau de la race charolaise ».