L’église Notre-Dame, fut bâtie en 1757, comme chapelle du collège. Sa façade est inspirée de celle du Gésu à Rome. En 1762, on élargit la terrasse afin de créer un axe face à la chapelle. Au cour de la Révolution, elle est devenue salle de réunion, entrepot, même arcenal. Elle fut réaffectée au culte en 1801. Les Jésuites édifient à son emplacement un premier sanctuaire béni par Monseigneur de la Magdeleine de Ragny, évêque de la ville, le 15 février 1643. Ce premier édifice restera greffé sur les nouveaux bâtiments du collège élevés de 1709 à 1731. La première pierre de la nouvelle chapelle est posée le 6 avril 1757 par Toussaint-Roux, maire de la cité. Trois ans plus tard le gros oeuvre est achevé. Les travaux ont été conduits par Michel-Ange cariste et Jean-Antoine son fils architecte entrepreneur originaire de la vallée de Sez au diocèse de Novare en Italie, et fixé en Bourgogne.
