El Marco de Excelencia Docente y Resultados Estudiantiles ( TEF ) es una evaluación gubernamental de la calidad de la enseñanza de pregrado en universidades y otros proveedores de educación superior en Inglaterra , que podrá usarse a partir de 2020 para determinar si los proveedores financiados por el estado pueden aumentar las tasas de matrícula. Los proveedores de educación superior de otras partes del Reino Unido pueden optar por participar, pero la calificación no tiene ningún impacto en su financiación. El TEF clasifica a las universidades como Oro , Plata o Bronce , en orden de calidad de la enseñanza. [1] [2] [3] Los primeros resultados se publicaron en junio de 2017. Este fue considerado un "año de prueba" (aunque las calificaciones no provisionales otorgadas son válidas por 3 años [4] ) y será seguido por un "ejercicio de lecciones aprendidas" que se incorporará al TEF de 2018 y a los planes a más largo plazo para las calificaciones a nivel de materias. [5] [6]
En octubre de 2017, el título oficial del ejercicio pasó a llamarse Marco de Excelencia Docente a Marco de Excelencia Docente y Resultados de los Estudiantes . [7]
Las calificaciones del TEF se basan en estadísticas como las tasas de deserción escolar, los resultados de las encuestas de satisfacción de los estudiantes y las tasas de empleo de los graduados. [1] Estos son evaluados por expertos en enseñanza y aprendizaje que hacen una recomendación a un panel del TEF, que incluye académicos y estudiantes, que otorgará el premio final. Las universidades se miden en tres áreas: calidad de la enseñanza, entorno de aprendizaje y resultados de los estudiantes y ganancia de aprendizaje. [8] Para 2017, todas las instituciones que cumplan los estándares básicos podrán aumentar las tarifas. [2] Las primeras calificaciones debían haberse anunciado el 14 de junio de 2017, ya que su publicación se retrasó desde mayo debido a las elecciones generales del Reino Unido , [9] pero se pospusieron hasta el 22 de junio después de que las elecciones resultaron en un parlamento sin consenso . [10] Se esperaba que entre el 20% y el 30% de las instituciones obtuvieran la calificación de oro, entre el 50% y el 60% de plata y el 20% de bronce. [11] La distribución real, en todas las instituciones calificadas, incluidos los proveedores de educación superior y alternativos, fue 26% oro, 50% plata y 24% bronce. [12]
El Departamento de Educación describe las calificaciones como: [13]
Las instituciones que no ingresen al TEF o que no cumplan con el umbral mínimo de calidad no recibirán premio. [14] Las instituciones con datos insuficientes para una evaluación completa pero que cumplen con los estándares de calidad pueden recibir una adjudicación provisional sin calificación. [15]
Las calificaciones del TEF no miden el desempeño absoluto, como las tablas de clasificación universitarias tradicionales, sino más bien el desempeño en comparación con puntos de referencia basados en la admisión de estudiantes. [16] Una universidad con una tasa de deserción absoluta baja del 2% y un punto de referencia del 2% sería peor calificada en esta medida que una universidad con una tasa de deserción absoluta mucho más alta del 8% pero un punto de referencia del 11%. Las calificaciones son, por tanto, una medida de si una universidad supera, cumple o no cumple con las expectativas en función del perfil de los estudiantes admitidos y las materias impartidas. [17]
La "hipótesis inicial" para las calificaciones se basa en seis métricas centrales, para las cuales las instituciones reciben una señal doble positiva, una señal positiva, ninguna señal, una señal negativa o una señal doble negativa, dependiendo de si superan o no alcanzan. de su índice de referencia en determinados umbrales. Estos son: [18]
Las instituciones que recibieron tres o más indicadores positivos y ningún indicador negativo se consideran inicialmente Oro; las instituciones con dos o más banderas negativas se consideran inicialmente Bronce; todas las demás instituciones se consideran inicialmente Plata. Luego, el panel puede modificar esta hipótesis inicial basándose en las presentaciones escritas y las métricas 'divididas' (un desglose de las métricas principales por género, origen étnico, edad, discapacidad, etc.). Si bien se esperaba que el alcance de estas modificaciones fuera limitado, se realizaron cambios en la hipótesis inicial en el 22% de los casos. Entre las instituciones de educación superior y proveedores alternativos, tres fueron degradados, 17 pasaron de Bronce a Plata, 15 pasaron de Plata a Oro y uno pasó de Bronce a Oro. [19]
Tras la publicación de los resultados del "año de prueba" de 2017, el TEF se someterá a un "ejercicio de lecciones aprendidas" que se incorporará al ejercicio de 2018, así como a una revisión independiente completa sobre su uso de las estadísticas para 2020. [5] [6 ] [20]
Después de la publicación de los resultados, el director en funciones del Grupo Russell dijo que "TEF no mide la calidad absoluta y hemos expresado su preocupación de que el enfoque actual de las banderas y la evaluación comparativa podría tener un impacto no deseado significativo". [21] mientras que el rector de la Universidad de Southampton , que obtuvo el bronce, dijo: "No hay ninguna lógica en nuestro resultado", y que tenía "profundas preocupaciones sobre su evaluación subjetiva, su falta de transparencia y con diferentes puntos de referencia para cada institución eliminando cualquier sensación de equidad e igualdad de evaluación". También señaló que superar el punto de referencia por lo que el TEF consideraba un margen significativo era mucho más fácil para las instituciones con puntos de referencia más bajos: para superar su punto de referencia sobre la tasa de deserción del 4,5% en los dos puntos porcentuales requeridos, Southampton tendría que haber logrado una tasa de abandono de sólo el 2,5%, lo que le llevó a concluir que "la evaluación comparativa es fundamentalmente defectuosa". [22]
El análisis de los resultados y las declaraciones del panel realizado por el grupo de expertos en política de educación superior Wonkhe señaló que la Universidad de Nottingham , que tenía una bandera positiva para el empleo altamente calificado y una bandera negativa para la satisfacción de los estudiantes, recibió el premio de oro, "la presunción de que una bandera negativa Descarto que el panel haya anulado Gold, tal vez porque la guía del TEF también alejó al panel de una dependencia excesiva de las puntuaciones NSS". De manera similar, la Universidad de Bristol superó dos banderas negativas, ambas en categorías relacionadas con NSS, para obtener la plata, pero la Universidad de Liverpool , con el mismo número de banderas negativas, recibió el bronce, "quizás porque una no estaba en una NSS". categoría derivada". Wonkhe señaló además que "parece perverso que una institución - en el caso de Bristol - que estaba 'notablemente' por debajo del punto de referencia reciba un resultado más alto que Liverpool, para el cual la declaración es más suave" y que "para instituciones con un patrón de datos similar al de Bristol, como Southampton (con dos banderas negativas en las mismas categorías, pero que no fue ascendido a Plata) podría haber un enojo bien merecido. Y si miras a Durham, con su única bandera positiva, y ninguna negativa, solo tiene un resultado de Plata en comparación con el Oro de Nottingham." [23] [22] [24]
Nick Hillman , director del Instituto de Políticas de Educación Superior (HEPI), dijo después de que se publicaron los resultados que "el hecho de que algunos de los resultados parezcan sorprendentes sugiere que está funcionando", ya que fue diseñado para ser diferente de otras tablas de clasificación. Sin embargo, añadió que "en esta versión inicial, el TEF está lejos de ser una evaluación perfecta de la enseñanza y el aprendizaje. Si bien nos dice muchas cosas útiles, ninguna de ellas refleja con precisión lo que sucede en las salas de conferencias". [25]
En respuesta a algunos de estos puntos, Chris Husbands , presidente del panel del TEF, dijo que no se suponía que el TEF fuera una "medida directa de la enseñanza", sino más bien "una medida basada en algunos de los resultados de la enseñanza", que diferentes Los resultados para instituciones con métricas similares debían indicarse como "El TEF está dirigido por métricas, no determinado por métricas" y que el TEF era "una medida relativa, más que absoluta, del desempeño de las universidades y colegios". También señaló que "si bien las universidades han sido impresionantes a la hora de ampliar la participación, han sido menos asiduas a la hora de combatir el impacto de la desventaja después de que los estudiantes se matriculan", y dijo que el TEF estaba a favor de hacerlo, ya que había "elevado el perfil de la enseñanza" y "enfocado atención a las cosas que hay que hacer mejor". [26]
En una conferencia celebrada a finales de junio, la vicerrectora del Imperial College de Londres , Simone Buitendijk , afirmó que el TEF era una "recompensa del cielo" para la educación superior. Ella afirmó: "Para personas como yo, vicerrectora, los ejercicios TEF son en realidad una bendición porque lo que sucede es que, por primera vez, el presidente y el rector comienzan a prestar mucha atención a la calidad de la enseñanza... No es una "No sería nada bueno que se prestara mucha atención a la enseñanza en las universidades que hacen un uso intensivo de la investigación". El presidente del University College London , Michael Arthur , sugirió que el TEF traería beneficios a las universidades a largo plazo. [27]
Dieciocho instituciones optaron por apelar sus calificaciones de 2017, incluidas al menos cuatro del Russell Group. De once instituciones que dijeron que estaban apelando, tres obtuvieron la Plata y ocho el Bronce. Las apelaciones deben demostrar una "irregularidad procesal significativa" y no pueden cuestionar el juicio académico de los paneles del TEF. Al menos una institución, la Universidad de Swansea , presentó un intento de apelar, pero su caso fue declarado inadmisible. [28] Sólo la Universidad de East Anglia fue recalificada en apelación, pasando de plata a oro, y el único otro cambio realizado fue una revisión de la declaración de resultados de la Universidad de Durham ; todas las demás apelaciones fueron rechazadas. Además, cuatro instituciones apelaron su elegibilidad para premios TEF provisionales, de las cuales tres tuvieron éxito. [29]
Antes de su publicación, se esperaba que los resultados del TEF fueran significativamente diferentes de las clasificaciones habituales de universidades del Reino Unido . The Guardian informó en mayo de 2017 que varias universidades "de renombre mundial" corrían el riesgo de recibir una calificación de bronce; particularmente las instituciones de Londres, que normalmente tienen puntuaciones más bajas de satisfacción de los estudiantes. El Times Higher Education también informó a principios de junio de 2017 que los miembros del Grupo Russell (dos en Londres) estaban en peligro de ser clasificados como bronce, mientras que se esperaba que a las universidades posteriores a 1992 les fuera bien. Sin embargo, las universidades también presentaron información escrita adicional al TEF para aclarar su contexto institucional: el director del King's College de Londres dijo que esperaba que esto elevara a la institución de una calificación de bronce a una de plata, mientras que SOAS señaló que el costo financiero de la vida en Londres significó que la tasa de retención de estudiantes en la ciudad fuera más baja que el promedio nacional. El director de HEPI, Nick Hillman, dijo que tal vez no haya universidades con calificación oro en Londres, pero que para instituciones como la London School of Economics esto no tendría un impacto significativo ya que "[u]s nombre y reputación de la excelencia en la investigación prevalecerá sobre cualquier prensa negativa que reciba del TEF". [9] [30] De manera similar, un "TEF simulado" llevado a cabo por el equipo de análisis de datos de Times Higher Education en 2016 mostró que, si bien las instituciones del Grupo Russell obtuvieron buenos resultados en resultados absolutos, una vez que los resultados se ajustaron para la admisión de estudiantes solo Cambridge , Durham , Birmingham , Exeter y Newcastle (en orden de clasificación) fueron definitivamente calificados como oro, aunque esto no incluye ningún ajuste que pueda realizarse en las presentaciones cualitativas de las instituciones. [31]
El vínculo entre el TEF y las tasas de matrícula ha sido criticado, y la Unión Nacional de Estudiantes (NUS) votó en 2016 a favor de boicotear la Encuesta Nacional de Estudiantes (NSS), cuyos resultados se incorporan al TEF, a menos que se rompiera el vínculo. [32] Hubo sugerencias de que el boicot pudo haber sido contraproducente ya que los niveles de participación en la Encuesta Nacional de Estudiantes aumentaron a nivel nacional y algunos comentaristas vincularon esto con la publicidad adicional del boicot. [33] Sin embargo, 12 instituciones, incluidas Cambridge , Oxford y varias otras universidades del Grupo Russell , fueron omitidas de los resultados de la NSS en 2017 debido a que menos del 50% requerido de estudiantes del último año completaron la encuesta; lo que se considera prueba de que el boicot tuvo éxito en al menos algunas de esas instituciones. Sin embargo, dado que el boicot llegó demasiado tarde para impedir el uso del NSS en el TEF de 2017, sería necesario mantenerlo durante dos años más para que tuviera algún efecto y la conferencia nacional NUS votó en 2017 a favor de no debatir un continuar con el boicot o enviarlo a su Comité Ejecutivo Nacional. El boicot también puede beneficiar a universidades como Bristol , donde la satisfacción de los estudiantes tradicionalmente ha sido baja. [34] También se ha cuestionado si métricas como la satisfacción de los estudiantes y los datos de empleabilidad son medidas válidas de la calidad de la enseñanza. [35]
Algunas universidades importantes amenazaron con boicotear el TEF, temiendo que el daño a su reputación pudiera superar los posibles beneficios. [36] Sin embargo, en enero de 2017, justo antes de la fecha límite para inscribirse, el ministro de educación superior dijo que "casi todas" las universidades, después de todo, participarían, y Times Higher Education pudo confirmar que todas menos cinco de ellas Las universidades inglesas del Russell Group se habían comprometido a participar, y las demás aún no lo habían decidido. [37]
Un premio tendrá una validez de hasta tres años.
Como se establece en su libro blanco, El éxito como economía del conocimiento (mayo de 2016), el gobierno comenzará en breve un ejercicio de lecciones aprendidas en este primer año de prueba del TEF.
Los resultados del ejercicio de lecciones aprendidas informarán el funcionamiento del TEF en 2018 y la intención de pasar a evaluaciones a nivel de materias.
El gobierno introdujo el TEF en 2016 como un año de prueba, del cual se aprenderán lecciones para años futuros.
Los proveedores que cumplan rigurosos requisitos de calidad nacionales pero que aún no tengan datos suficientes para ser evaluados en su totalidad pueden optar por una adjudicación provisional.