El Colegio se fundó en mayo de 1660, aunque el edificio se construyó en 1750 en estilo barroco y planta hexagonal, con una gran portada, que incluye hornacina con estatua del santo titular.Pero tras el cierre de la Universidad en 1836, el colegio fue comprado por el Estado y destinado a dependencia militar.Durante la Guerra Civil Española el edificio se destinó a Cuartel de Automovilismo.En torno a 1970 el edificio se incendió y al poco fue abandonado por los militares.[3] En 1991 se inicia la rehabilitación del edificio, y en 1996 lo compra la Universidad de Alcalá destinándolo a centro cultural.