Au début du XVIIIe siècle, les pénitents de l'ordre de Saint-François firent construire une chapelle à la suite de la découverte, par des bûcherons, d'une statue de la Vierge dans un chêne. La chapelle est agrandie d'une nef et de deux travées en 1687 par François-Bernard Potier, deuxième duc de Tresmes, de l'ordre de Saint-François, et approuvée par l'évêque de Meaux en 1722 ainsi que par le roi en 1723. Un pèlerinage annuel y est institué le 8 septembre pour la Nativité de la Vierge et un couvent est construit. En 1792, la chapelle est vendue comme bien national. Chapelle et couvent disparaissent au XIXe siècle pour laisser la place à une maison bourgeoise et à une nouvelle chapelle. Cette dernière accueille tous les ans une messe pour le pèlerinage de Notre-Dame-du-Chêne.