stringtranslate.com

Marco de Excelencia en la Investigación

El Marco de Excelencia en Investigación ( REF ) es una evaluación del impacto de la investigación de las instituciones de educación superior británicas (IES). Es el sucesor del Ejercicio de Evaluación de Investigación y se utilizó por primera vez en 2014 para evaluar el período 2008-2013. [1] [2] El REF lo llevan a cabo los cuatro organismos de financiación de la educación superior del Reino Unido: Research England , el Consejo de Financiación Escocés (SFC), el Consejo de Financiación de la Educación Superior de Gales (HEFCW) y el Departamento de Economía de Irlanda del Norte (DfE).

Sus objetivos declarados son:

Los críticos argumentan, entre otras cosas, que se presta demasiada atención al impacto de la investigación fuera del sistema universitario y que ese impacto no tiene relevancia real para la calidad de la investigación. [ cita requerida ] Se sugiere que el REF en realidad fomenta la mediocridad en la investigación publicada y desalienta la investigación que podría tener valor a largo plazo. [ cita requerida ] Se ha argumentado repetidamente que el REF hace más daño que bien a la educación superior. [ 4 ]

El último REF se realizó en 2021, y sus resultados se publicaron en mayo de 2022, siguiendo el modelo de evaluación anterior que se centraba en los resultados de la investigación, el impacto de la investigación y el entorno de investigación. [5] Este proceso se retrasó ligeramente debido a la pandemia de COVID-19 . [6]

En junio de 2023, se anunció que el próximo ejercicio concluiría en 2028 y que las presentaciones se realizarían en 2027. [7]

Historia

En junio de 2007, el Consejo de Financiamiento de la Educación Superior de Inglaterra (HEFCE) emitió una carta circular en la que anunciaba que un nuevo marco para evaluar la calidad de la investigación en las universidades del Reino Unido reemplazaría al Ejercicio de Evaluación de la Investigación (RAE), después del RAE de 2008. [8] La siguiente cita de la carta indica parte de la motivación original:

Nuestros objetivos clave para el nuevo marco serán:

La carta también establece un calendario para el desarrollo de la REF. HEFCE llevó a cabo un ejercicio de consulta durante septiembre-diciembre de 2009, solicitando respuestas de las partes interesadas sobre las propuestas. [9] Estas incluyen, por ejemplo, la respuesta de Universities UK [ 10] y la respuesta de University and College Union [11] .

En julio de 2010 (después de las elecciones generales de mayo de 2010 ), el Ministro de Universidades y Ciencia, David Willetts, anunció que el REF se retrasaría un año para evaluar la eficacia de la medida de impacto. [12]

En julio de 2016, se publicó la revisión de Lord Nicholas Stern , en la que se redactaban las directrices generales para el próximo REF en 2021. [13] En general, la revisión apoyó la metodología utilizada en 2014 para evaluar la investigación de las universidades, sin embargo, enfatizó la necesidad de una mayor participación del público en general y el aumento del número de estudios de caso que emprendieron un enfoque interdisciplinario . [13] El equipo Research-impact.org de la Escuela de Negocios y Economía de la Universidad de Loughborough ha estado experimentando con la financiación colectiva para la investigación con el fin de aumentar la participación pública de los investigadores de la universidad. [14]

Impacto de la investigación

El impacto del REF se define como “un efecto, cambio o beneficio para la economía, la sociedad, la cultura, las políticas o servicios públicos, la salud, el medio ambiente o la calidad de vida, más allá del ámbito académico”. [15]

Criterios de calificación

Las presentaciones se evaluarán de acuerdo con los siguientes criterios: [16]

Clasificaciones de desempeño

Dos editoriales, Times Higher Education [17] (THE) y Research Professional News [18] (RPN; utilizada por The Guardian y otros periódicos) [19] [20] elaboraron clasificaciones generales de los resultados institucionales en el REF 2021 en función del poder de investigación, la cuota de mercado y la calidad (GPA). El GPA institucional de THE es un promedio del GPA de cada institución en las unidades de evaluación ponderado por la cantidad de personal equivalente a tiempo completo presentado a cada unidad de evaluación, la medida de "poder de investigación" es este GPA institucional multiplicado por la cantidad de personal equivalente a tiempo completo presentado por la institución, y la medida de "cuota de mercado" utiliza la ponderación utilizada para calcular las subvenciones en bloque a partir de los perfiles institucionales, con calificaciones de 4* que reciben una ponderación de cuatro, calificaciones de 3* que reciben una ponderación de uno y calificaciones de 2* y menores que reciben una ponderación de cero. [21]

Controversias y críticas

Una fuente particular de críticas ha sido el elemento del REF que aborda el "impacto" de la investigación. Los artículos que se presentan a continuación plantean dos objeciones. La principal es que se ha definido el "impacto" como el impacto fuera del ámbito académico. Si se exigiera a los investigadores que persiguieran esta forma de impacto, se socavaría la libertad académica . La otra es que el impacto, tal como se interpreta actualmente, es difícil de medir de una manera que se considere justa e imparcial. [22] [23] [24]

El Consejo de Financiación de la Educación Superior de Inglaterra sostiene que su medida de "impacto" es amplia y abarcará el impacto sobre la "economía, la sociedad, las políticas públicas, la cultura y la calidad de vida". [22] Sin embargo, la estructura de evaluación hace que el impacto que se puede reivindicar en la práctica sea bastante limitado (límite de 4 páginas, sin sección de métodos, 10 referencias de impacto, 10 referencias de investigación y solo 1 página para resumir la investigación y el impacto respectivamente). Estas estrictas directrices discursivas junto con la noción anticuada del REF de cómo funciona el impacto de la investigación (excluyendo el impacto de la investigación docente, modelo lineal, etc.) restringen el impacto que es más adecuado en la práctica para la evaluación. [ cita requerida ]

Otro aspecto de crítica, que el REF heredó de la estructura de la RAE, es que, para la mayoría de los miembros del personal a tiempo completo, la presentación normalmente consiste en cuatro "artículos de resultados de investigación" publicados. No se reconoce la diferencia entre un libro y un artículo en términos de valor de investigación. Por lo tanto, el sistema del REF desalienta los proyectos a largo plazo que buscan la excelencia. Este problema es particularmente evidente en las humanidades, donde la mayor parte de la investigación innovadora tradicionalmente no se publica en artículos. Por lo tanto, muchos investigadores se ven obligados a realizar una actividad relativamente mediocre, que les permitirá producir uno o dos libros durante el período de evaluación, pero no el tipo de monografía que normalmente requeriría cuatro o cinco años de investigación y redacción. [ cita requerida ]

Además, el sistema de los cuatro artículos publicados desalienta los proyectos a largo plazo con un riesgo de investigación relativamente alto en las ciencias, ya que los investigadores son reacios a participar en proyectos o experimentos que pueden no tener éxito y no conducir a una publicación. Dado que la mayor parte de la investigación pionera en las ciencias se lleva a cabo precisamente con proyectos tan arriesgados e imaginativos, el tipo de actividad de investigación que se fomenta mediante la estructura del REF es bastante conservadora. Además, en términos del impacto de la investigación examinada, en la historia de las ciencias y las humanidades no es raro que transcurra algún tiempo hasta que se produzca el impacto completo de un descubrimiento. El sistema actual tiene una perspectiva de sólo cuatro o cinco años. [ cita requerida ]

El Times Higher Education también reveló que algunas universidades parecían estar "jugando" con el sistema REF. Esto incluía la "captura furtiva del REF", en la que se buscaba personal con antecedentes de investigación establecidos en sus universidades inmediatamente antes del REF, dándole a la institución que la cazaba todo el crédito por sus publicaciones sin haber asumido el riesgo de apoyar al investigador. También incluía emplear a un gran número de personal con contratos de 0,2 FTE, el nivel de empleo más bajo que los califica para la presentación de trabajos al REF. [25]

Además de estas preocupaciones sobre lo que realmente se puede medir con cuatro elementos de resultados de investigación y cómo se puede medir el impacto, a menudo se critica todo el sistema por ser innecesariamente complejo y costoso, mientras que la evaluación de la calidad en la era digital podría ser mucho más simple y efectiva. [26]

El sistema, con sus implicancias financieras asociadas, también ha sido criticado por desviar recursos de la enseñanza. Por ello, los aumentos en las tasas estudiantiles a menudo no han tenido como resultado que el personal dedique más tiempo a la enseñanza. [ cita requerida ]

En julio de 2016 se publicó el informe de Lord Nicholas Stern , en el que se redactaban las directrices generales para el próximo REF de 2021. [27] Una de las recomendaciones era aumentar la participación del público en la investigación. La participación en la investigación significa mejorar la distribución de los beneficios de la investigación. También significa hacer que el público sea más consciente de los resultados de la investigación y sus implicaciones. Un mecanismo para la participación pública es el crowdfunding para la investigación, en el que plataformas dedicadas organizan campañas de crowdfunding para la investigación universitaria, en una variedad de temas. El crowdfunding para la investigación tiene dos ventajas: una, es una fuente de financiación garantizada relativamente alta, con una tasa de alrededor del 50%, y la segunda, es una herramienta muy eficaz para interactuar con el público en general. [14]

Un problema que la revisión de Stern no abordó en relación con la evaluación del impacto de la investigación es que la estructura de la plantilla de diseño de estudios de caso en la que se evalúa el impacto no contiene una sección de método, por lo que la evaluación del tipo de impacto reclamado se convierte en un juego retórico de quién puede reclamar más (cf. Brauer, 2018). [28] De este modo, las grandes afirmaciones se ven incentivadas por la estructura de la evaluación. El problema ocurre porque los juicios cualitativos sobre la importancia y el alcance del impacto (sin tener en cuenta el método subyacente) consolidan los valores contemporáneos en la evaluación, como tal; “[…] llámelo construcción social, aprendizaje mutuo, práctica social como sea, la clave es que no podemos separar las características del Impacto del proceso impuesto sobre el valor y reconocerlo como tal ”. (Derrick, 2018:160) [29] Al verificar la referencia de las afirmaciones actuales, estas no eran accesibles (por ejemplo, se eliminaron los sitios web relevantes), se referenciaban de tal manera que no reflejaban la autoría propia o los testimonios de personas relacionadas con el investigador (Brauer, 2018:142-147). De manera similar, Sayer (2014) [30] critica la revisión por pares general del proceso REF, describiéndolo como un simulacro deficiente de calidad académica estándar y que el proceso de evaluación se complica aún más por la gran carga de trabajo de la evaluación (p. 35). En una nota similar, un estudio de RAND encontró que la mayoría de las referencias nunca se consultaron, se desaconsejó a ciertos paneles de evaluación usar Internet y la estructura de ayuda de referencia del REF tardó a veces dos semanas en producir referencias asociadas. [31] De este modo, el enfoque del impacto externo disciplina la evaluación para centrarse en los valores externos. [32]

En 2018, se dijo que el REF tiene efectos negativos en las humanidades. [33]

El Marco de Excelencia en Investigación como inspiración para las evaluaciones en toda Europa

A pesar de sus críticas, el sistema de evaluación del impacto de la investigación del Reino Unido (que evalúa la calidad de los resultados de la investigación, el impacto de la investigación y el entorno de investigación) ha inspirado los diseños de evaluaciones de la excelencia en la investigación y/o sistemas de financiación de la investigación basados ​​en el rendimiento en otros países europeos, entre ellos Italia, Noruega, Portugal y Eslovaquia. [34]

Véase también

Referencias

  1. ^ "Resultados y presentaciones: REF 2014" . Consultado el 22 de diciembre de 2014 .
  2. ^ Atkinson, Peter M. (11 de diciembre de 2014). "Evaluar el costo real de la evaluación de la investigación". World View. Nature (artículo). 516 (7530): 145. Bibcode :2014Natur.516..145A. doi : 10.1038/516145a . PMID  25503199.
  3. ^ "Decisiones preliminares tomadas para el REF 2028". www.ukri.org . 2023-06-15 . Consultado el 2023-06-20 .
  4. ^ Bishop, Dorothy (3 de marzo de 2016). "Claridad de propósito en el TEF y el REF". Times Higher Education (THE) . Consultado el 5 de agosto de 2022 .
  5. ^ Inglaterra, Consejo Superior de Financiación de. "2017: Los organismos de financiación confirman la forma del REF 2021 - REF 2021". www.ref.ac.uk . Consultado el 29 de junio de 2018 .
  6. ^ "Actualización adicional sobre el coronavirus (COVID-19) y el calendario del REF - REF 2021".
  7. ^ "Decisiones preliminares tomadas para el REF 2028". www.ukri.org . 2023-06-15 . Consultado el 2023-06-20 .
  8. ^ Eastwood, David (6 de marzo de 2007). «Future framework for research assessment and funding» (Marco futuro para la evaluación y financiación de la investigación). Carta circular número 06/2007 del HEFCE . Archivado desde el original el 2 de febrero de 2010.
  9. ^ "Marco de excelencia en la investigación: segunda consulta sobre la evaluación y financiación de la investigación". HEFCE . Septiembre de 2009. 2009/38 . Consultado el 10 de enero de 2015 .
  10. ^ "Respuesta de Universityes UK a la consulta de HEFCE sobre el marco de excelencia en investigación (REF)". Universities UK . 13 de diciembre de 2009. Archivado desde el original ( .doc ) el 16 de julio de 2011.
  11. ^ "Respuesta al Marco de Excelencia en Investigación: Segunda consulta sobre la evaluación y financiación de la investigación" (PDF) . University and College Union . Diciembre de 2009.
  12. ^ Baker, Simon (8 de julio de 2010). "REF pospuesto mientras Willetts espera un 'consenso' sobre el impacto". Times High. Educ.
  13. ^ ab Stern, Lord Nicholas; et al. (julio de 2016). "Building on Success and Learning from Experience" (PDF) . gov.uk . Gobierno del Reino Unido . Consultado el 3 de enero de 2017 .
  14. ^ ab Rubin, Tzameret (2017). "¿Es posible conseguir que la gente financie la investigación? ¿No es ese el papel del gobierno?". AESIS . Consultado el 23 de diciembre de 2016 .
  15. ^ McLellan, Timothy (25 de agosto de 2020). "Impacto, teoría del cambio y los horizontes de la práctica científica". Estudios sociales de la ciencia . 51 (1): 100–120. doi : 10.1177/0306312720950830 . ISSN  0306-3127. PMID  32842910. S2CID  221326151.
  16. ^ "Marco de evaluación y orientación para la presentación de candidaturas" (PDF) . Research Excellence Framework. Julio de 2011. pág. 43. REF 02.2011.
  17. ^ "Tabla principal en línea REF 2021". Times Higher Education . 12 de mayo de 2022.
  18. ^ "REF 2021: Los 10 mejores". Noticias profesionales de investigación . 12 de mayo de 2022.
  19. ^ "Se prevé que Oxford y la UCL obtengan la mayor parte de las subvenciones en la auditoría de investigación del Reino Unido". The Guardian . 12 de mayo de 2022.
  20. ^ "Las universidades del noreste son consideradas 'potencias' con el equipo de investigadores más sólido fuera de Londres". 12 de mayo de 2022.
  21. ^ "REF 2021: Metodología de tablas de Times Higher Education". Times Higher Education . 12 de mayo de 2022.
  22. ^ ab Shepherd, Jessica (13 de octubre de 2009). "La investigación en humanidades amenazada por las demandas de 'impacto económico'". Educación. The Guardian . Londres.
  23. ^ Oswald, Andrew (26 de noviembre de 2009). "El REF debería mantenerse al margen del juego". The Independent . Londres.
  24. ^ Fernández-Armesto, Felipe (3 de diciembre de 2009). "Impacto venenoso". Times Educación Superior .
  25. ^ Jump, Paul (26 de septiembre de 2013). "Los contratos aumentan un veinte por ciento en el período previo al REF". Times Higher Education .
  26. ^ Dunleavy, Patrick (10 de junio de 2011). "El marco de excelencia en la investigación es engorroso y costoso. Por una fracción del costo, un censo digital de la investigación académica generaría información genuina e inigualable sobre el desempeño de la investigación de las universidades del Reino Unido". London School of Economics .
  27. ^ Stern, L. (2016). Construir sobre el éxito y aprender de la experiencia: una revisión independiente del marco de excelencia en investigación.
  28. ^ Brauer, R. (2018): ¿Qué impacto tiene la investigación? El turismo y el cambiante ecosistema de investigación del Reino Unido. Guildford: Universidad de Surrey (tesis doctoral). Disponible en: http://epubs.surrey.ac.uk/id/eprint/846043
  29. ^ Derrick, G. (2018). La mirada del evaluador: evaluación de impacto y revisión por pares académicos. Berlín: Springer.
  30. ^ Sayer, D. (2014). Hipocresías de rango: El insulto del REF. Sabio.
  31. ^ "Evaluación del proceso de presentación del elemento de impacto del REF". www.rand.org . Consultado el 3 de mayo de 2019 .
  32. ^ "Medición del impacto social y el valor de la investigación". www.rand.org . Consultado el 3 de mayo de 2019 .
  33. ^ Personal de Study International (7 de diciembre de 2018). «Cuidado con la clasificación del «Marco de Excelencia en Investigación» en humanidades». SI News . Consultado el 19 de septiembre de 2019 .
  34. ^ Sivertsen, Gunnar (15 de agosto de 2017). "¿Única, pero aún así la mejor práctica? El marco de excelencia en investigación (REF) desde una perspectiva internacional". Palgrave Communications . 3 (1): 1–6. doi :10.1057/palcomms.2017.78. hdl : 11250/2456576 . ISSN  2055-1045.

Enlaces externos