En un principio el Seminario estaba ubicado en dos casas de la actual calle Alfonso VII.
Durante el pontificado de Cos y Macho tiene lugar una ampliación del Seminario, en la que se le añadió un piso.
En los tiempos del Obispo Solís se volvió a reformar añadiendo un pabellón destinado a cocina y comedor del seminario, el cual fue destruido a mediados del siglo XX, época en la que monseñor Quiroga Palacios empezó la gran ampliación del seminario con la construcción de nuevos pabellones, obras que durarán diez años, y será bajo el pontificado de monseñor Vega Mestre cuando se inaugure la nueva capilla mayor y se terminen las obras realizadas por Quiroga Palacios.
La biblioteca histórica del Seminario, que comenzó con 245 obras, contiene actualmente más de 25000 volúmenes.
En este seminario estudiaron importantes escritores como Xosé Crecente Vega, Antonio Noriega Varela, Nicomedes Pastor Díaz, Xosé María Díaz Castro o Aquilino Iglesia Alvariño entre otros muchos.