L’histoire de cette commune se perd dans un passé obscur et son nom présente quelque mystère.
Le BARRY, dans la langue d’Oc, désigne un quartier isolé d’une agglomération d’une certaine importance.
Quant à ISLEMADE, attesté au XII ème siècle sous la forme « Insula Amata », il fait penser à ces îles que le Tarn enserre de ses flots en aval de son confluent avec l’Aveyron, à 3 Km au nord du bourg actuel.
ISLEMADE pourrait donc être un village situé sur la rive droite, dont le BARRY aurait été un quartier, qui aurait été anéanti lors des invasions barbares du V ème siècle ou par une crue du Tarn ou de l’Aveyron
VENTILHAC- Lat : Ventilius, de ventum, vent - a pour origine la villa gallo-romaine d’un propriétaire terrien nommé Ventilius. Placée à l’est du ruisseau de Payrol, ce fut une possession des Templiers, puis des Hospitaliers de Saint-Jean de Jérusalem qui dépendaient de la commanderie de La VILLE-DIEU-DU-TEMPLIER.
BARRY d’ISLEMADE a été formée en 1834 par la fusion des deux communes créées en l’an III, VENTILHAC et le BARRY