El Colegio se fundó en mayo de 1660, aunque el edificio se construyó en 1750 en estilo barroco y planta hexagonal, con una gran portada, que incluye hornacina con estatua del santo titular.
Pero tras el cierre de la Universidad en 1836, el colegio fue comprado por el Estado y destinado a dependencia militar.
Durante la Guerra Civil Española el edificio se destinó a Cuartel de Automovilismo.
En torno a 1970 el edificio se incendió y al poco fue abandonado por los militares.
[3] En 1991 se inicia la rehabilitación del edificio, y en 1996 lo compra la Universidad de Alcalá destinándolo a centro cultural.