Fin VIe, début VIIe siècle, vécut ici un ermite au grand renom et sainteté nommé Victor. Une tradition constante rapporte qu’il est né à la Croletais vers l’an 560. Son oratoire, près du bourg fut détruit par les Normands, mais une chapelle fut édifiée au XIe siècle sur son emplacement. Elle devint lieu de pèlerinage, la St Victor célébrée le 31 août servait de terme pour le paiement des redevances fiscales dans la baronnie de Pontchâteau : mention en est faite en 1389.
L'ermite vécut d'abord près d'une source intermittente à Bouvron, avant d'aller s'établir près d'une source intarissable, au bas du bourg de Campbon. Une légende veut que les campbonnais emportèrent une statue du saint d'une chapelle proche de sa fontaine, située dans le bois de la Gautrais, en la cachant dans une charette de fagots.