Le Château de Vaite a été construit au XIIIème, il surplombait la vallée du Doubs. Il fut incendié en 1480 par les troupes de Louis XI, la famille Lallemand l’entretint jusqu’en 1792 et c’est en 1793 que le Conseil Général du Doubs le fit démolir en redoutant qu’il devienne un repaire de brigands.
Ces ruines sont le long de la crête, à une dizaines de mètres de la cache.