Un couvent de moines Capucins est édifié à Vannes en 1614. A la Révolution, le couvent est vendu comme bien national. Il est racheté en 1806 par les soeurs Ursulines qui construisent, de 1857 à 1878, plusieurs nouveaux bâtiments afin d’y installer une école et un pensionnat. L'ancien cloître des Capucins est également réaménagé.

​

A la Séparation, en 1907, les Ursulines sont expulsées et l’ancien couvent est vendu par l'Etat au diocèse qui le transforme en Grand Séminaire, lieu de formation des prêtres. Il est agrandi sur l’emplacement de la chapelle de l’ancien couvent des Capucins ainsi que sur une partie des bâtiments des Ursulines.

En 1999, le Grand Séminaire deviendra l’Evêché de Vannes.