Le vieux village de Charmes-sur-Rhône s’étage sur le flanc d’une petite colline rocheuse, au-dessus de la vallée du Rhône. De cette même colline descend une rivière tumultueuse, l’Embroye, le long de laquelle on trouve cinq moulins : celui de la Cime, le moulin du Milieu et le moulin des Roches, puis celui du Bas et enfin celui du Pied situé après le pont et qui, en son temps, servait de péage au seigneur de Charmes. Ces moulins ont eu diverses utilités : pour l’huile, le blé et aussi pour y battre les draps de laine.
Autour de ces ouvrages, des moulinages ont été construits. La spécificité de ces usines était la torsion du fil de soie, procédé qui conférait une grande robustesse à ces fils. M. Isaac Marmet, ayant fait fortune dans la soie, fit construire un de ces moulinages dans les années 1852-1856. En 1879, à la suite de la crise de la sériciculture, il s’exila en Algérie avec sa famille.
Connu aujourd’hui sous le nom d’usine « Bellevue », cet énorme et magnifique bâtiment, très rectiligne, surplombe la vallée du Rhône et domine le vieux village. La construction est en granit rougeâtre, les linteaux sont en grès de Planès (carrière située sur la commune de Gilhac et Bruzac). Ce fut autrefois une filature en plus d’un moulinage. Son architecture, spécifique des bâtiments industriels du XIXe siècle, utilise avec science et avantage un très fort dénivelé qui conduit en contrebas à la rivière, dont le courant actionnait les divers mécanismes des machines.