La "voie de Vezelay" emprunte l'ancien chemin entre Issigeac et Beaumont. Dès le Moyen Âge, les hommes prirent leur bâton de pélerin pour se rendre de Bergerac au tout nouveau sanctuaire de Rocamadour en passant entre autre par Cadouin et sa célèbre abbaye.
Au XIème siècle, trois moines de cette abbaye furent envoyés pour christianiser ce village où les cultes païns étaient encore vivaces. C'est ainsi que fut construit l'église actuelle de style roman primitif.
Le château de Bardou, à l'écart du village, englobe les restes d'une forteresse anglaise du XIIIème siècle appelée à l'époque "Fort Saint John". Le capitaine anglais finança la petite chappelle gothique qu'il fit adjoindre à l'église pour suivre la messe en famille.