En 1652,
les
ursulines de Tréguier, par lettres patentes de Louis XIV, avec le
consentement de l'évêque de Cornouaille, de l'abbé de Sainte-Croix et
de la communauté de la ville, sont autorisées à fonder un
établissement. La communauté s'installe d'abord en basse ville, dans le
quartier du Gorréquer. Dans un vaste périmètre à la limite de la haute ville, Claude de Kerouartz, première supérieure, fait l'acquisition, en 1665, de la métairie de Bel Air en vue d'établir la communauté qui se destine à l'instruction et l'éducation des filles.
Sous Claude de Kerouartz, le chantier débute en 1667 (église Notre-Dame, premiers murs de clôture). En 1674, les bâtiments conventuels sont achevés, tout comme l'église. Dans la chapelle, le lambris de couvrement reçoit un décor peint qui sera détruit par un incendie en 1683. La nef de l'église communiquait, à l'ouest, avec le choeur des religieuses, à l'est avec une chapelle dédiée à saint Joseph.
En 1683, un incendie ravage la totalité des parties supérieures du bâtiment nouvellement construit.
Une campagne de reconstruction, en grande partie à l'identique, avec reprises visibles au niveau des combles, a lieu entre 1684 et 1689.
Entre 1688 et 1690, construction, dans le sud-est de l'enclos, de la chapelle Notre-Dame du Grand Pouvoir ; l'édifice qui figure sur le cadastre de 1825 et le plan de Troalen de 1924, a disparu au début des années 1930.