Durante su primer siglo fue conocido como Stapeldon Hall y era bastante pequeño, con sólo doce o catorce estudiantes.En el siglo XVI, las donaciones de Sir William Petre, un antiguo graduado del Exeter, ayudaron a expandir y transformar el college.El salón principal actual fue construido en 1618 y el resto del college se terminó en 1710, exceptuando la puerta de entrada, la Torre Palmer, que data de 1432.En el siglo XVIII el college experimentó una decadencia en cuanto a popularidad, paralela a la del resto de los colleges de Oxford.Hasta 1979 el college no aceptó a mujeres, pero en 1993 fue el primero de los colleges que antes fueron completamente masculinos, que eligió a una mujer como rectora, Marilyn Butler.
