En 1595 surgió la necesidad de establecer un colegio religioso para preparar a los frailes carmelitas, por lo que en 1601 se realizó un primer intento en la Ciudad de México, hecho que se vio frustrado por diversas circunstancias.

Así los religiosos dispusieron de un extenso terreno para establecer un nuevo colegio y casa.

La fundación definitiva del colegio carmelita dedicado a San Ángel se realizó en 1613.

La huerta, que estaba cercada en todo su perímetro, se extendía hacia el lado oriente del colegio, ocupando gran parte de la actual colonia Chimalistac, y fue destinada a la plantación de árboles frutales, los cuales con el tiempo proporcionaron al colegio ingresos suficientes para subsistir y ayudar a otras fundaciones de la provincia, ganándose con esto fama y prestigio.

En 1833 con las disposiciones liberales de Valentín Gómez Farías se mermaron las rentas del colegio.

Finalmente la parte medular del colegio fue entregada a la Secretaría de Educación Pública en 1921.

En 1939, cuando surgió el Instituto Nacional de Antropología e Historia se le entregó esa parte del inmueble en custodia, tal y como hasta la fecha lo mantiene.