Le domaine de la Roulière relevait féodalement du fief Aguillon. En 1401, le château, dépendant de la paroisse de Pompaire, est la propriété de Jacques Pizon. Après la Révolution, le château est vendu comme bien national. L’accès se faisait à l’origine par la poterne au pont-levis du donjon carré. Cet ouvrage défensif fut détruit en 1920, permettant de mettre en valeur l’édifice Renaissance couvert d’une haute toiture d'ardoises et qui s'orne de deux fenêtres au fronton arrondi, d'une porte à l'archivolte triangulaire qui la surmontait et d'un cadran solaire. Le château est bordé à l’ouest par un bel étang.