Située à 10 km à l’est de Bray-sur-Seine l'église Sainte-Anne de Baby est une chapelle seigneuriale, probablement fondée au XIIIe siècle.
À l'origine, cette chapelle dédiée à sainte Anne, mère de Marie, était rattachée au château de Baby, démoli au début du XIXe siècle. Selon la légende, un propriétaire de Baby assistait autrefois à la messe sur son cheval.
En 1640, la chapelle devient un édifice paroissial. Son agrandissement, probablement entre 1640 et 1659 (date gravée au-dessus du portail), est peut-être lié à son changement de statut.
La nef est construite en damier de craie et silex. Cette architecture, typique de cette partie de la Bassée (vallée de la Seine entre Nogent-sur-Seine et Montereau), est fréquente dans les constructions rurales mais inédite dans l'architecture religieuse locale. C'est un choix qui témoigne d'une construction non ostentatoire, trahissant la pauvreté des moyens de la paroisse ou l'urgence d'une construction fonctionnelle indispensable.
La plupart des objets de l’église sont aujourd’hui inscrits au titre des Monuments historiques. Ils ont fait l’objet de campagnes de restauration, notamment les sculptures en bois polychrome des XVIIe et XVIIIe siècles.