Métrica de revistas académicas
La clasificación de revistas se utiliza ampliamente en los círculos académicos para evaluar el impacto y la calidad de una revista académica . Las clasificaciones de revistas pretenden reflejar el lugar de una revista dentro de su campo, la dificultad relativa de ser publicada en esa revista y el prestigio asociado a ella. Se han introducido como herramientas oficiales de evaluación de investigaciones en varios países.
Medidas
Tradicionalmente, las "medidas" o evaluaciones de clasificación de revistas se han proporcionado simplemente a través de listas institucionales establecidas por líderes académicos o mediante votación de un comité. Estos enfoques han sido notoriamente politizados y reflejos inexactos del prestigio y la calidad reales, ya que a menudo reflejarían los prejuicios y los objetivos profesionales personales de quienes participan en la clasificación de las revistas; causando también el problema de evaluaciones muy dispares entre instituciones. [1] En consecuencia, muchas instituciones han requerido fuentes externas de evaluación de la calidad de las revistas. El enfoque tradicional en este caso ha consistido en encuestas a académicos destacados en un campo determinado, pero este enfoque también tiene potencial de sesgo, aunque no tan profundo como el que se observa con las listas generadas por instituciones. [2] En consecuencia, gobiernos, instituciones y líderes en la investigación cienciométrica han recurrido a una letanía de medidas bibliométricas observadas a nivel de revistas que pueden usarse como sustitutos de la calidad y eliminar así la necesidad de una evaluación subjetiva. [1]
En consecuencia, se han propuesto varias métricas a nivel de revista, la mayoría basadas en citas :
- Factor de impacto y CiteScore : refleja el número promedio de citas de artículos publicados en revistas científicas y de ciencias sociales.
- SCImago Journal Rank : una medida de la influencia científica de las revistas académicas que representa tanto el número de citas recibidas por una revista como la importancia o el prestigio de las revistas de donde provienen dichas citas.
- Índice h : normalmente se utiliza como medida de la productividad científica y el impacto científico de un científico individual, pero también se puede utilizar para clasificar revistas.
- Índice h5: esta métrica, calculada y publicada por Google Scholar , se basa en el índice h de todos los artículos publicados en una revista determinada en los últimos cinco años. [3]
- Encuesta de expertos: una puntuación que refleja la calidad o contribución general de una revista se basa en los resultados de la encuesta de investigadores, profesionales y estudiantes de campo activos (es decir, lectores o contribuyentes reales de la revista), que clasifican cada revista según criterios específicos. [4]
- Recuento de citas del cuartil superior (TQCC): refleja el número de citas acumuladas por el artículo que se encuentra en el cuartil superior (el percentil 75) de los artículos de una revista cuando se clasifica por recuento de citas; por ejemplo, cuando una revista publica 100 artículos, el recuento de citas del artículo número 25 más citado es el TQCC. [5]
- Enfoque del poder de publicación (PPA): la posición en el ranking de cada revista se basa en el comportamiento editorial real de los principales académicos titulares durante un período de tiempo prolongado. Como tal, la posición en el ranking de la revista refleja la frecuencia con la que estos académicos publicaron sus artículos en esta revista. [6] [7]
- Altmetrics : califica revistas según referencias académicas agregadas a sitios académicos de redes sociales. [8]
- diamScore: una medida de la influencia científica de las revistas académicas basada en la ponderación de citas recursivas y las comparaciones por pares entre revistas. [9]
- Impacto normalizado de fuente por artículo (SNIP): un factor publicado en 2012 por Elsevier basado en Scopus para estimar el impacto. [10] La medida se calcula como SNIP=RIP/(R/M), donde RIP=impacto bruto por artículo, R = potencial de citas y M = potencial medio de citas de la base de datos. [11]
- Nivel de revista: uno de los pocos indicadores que no se basa en citas, sino en calificaciones y reseñas objetivas de los usuarios. [12]
- PageRank: en 1976 se propuso un factor de impacto recursivo que otorga mayor peso a las citas de revistas de alto impacto que a las de revistas de bajo impacto. [13] Este factor de impacto recursivo se parece al algoritmo PageRank de Google , aunque el artículo original utiliza un enfoque de "balanza comercial" en el que las revistas obtienen la puntuación más alta cuando se las cita con frecuencia pero rara vez citan a otras revistas; Varios estudiosos han propuesto enfoques relacionados. [14] [15] [16] [17]
- El factor propio es otra medida de influencia de las revistas tipo PageRank, [18] con clasificaciones disponibles gratuitamente en línea. [19]
Discusión
Las consecuencias negativas de las clasificaciones generalmente están bien documentadas y se relacionan con la performatividad del uso de clasificaciones de revistas con fines de medición del desempeño. [20] [21] Los estudios de calidad metodológica y confiabilidad han encontrado que "la confiabilidad de los trabajos de investigación publicados en varios campos puede estar disminuyendo a medida que aumenta la clasificación de las revistas", [22] contrariamente a las expectativas generalizadas. [23]
Por ejemplo, McKinnon (2017) ha analizado cómo el ranking ABS-AJG, que a pesar de sus carencias metodológicas es ampliamente aceptado en las escuelas de negocios británicas, ha tenido consecuencias negativas para las disciplinas de gestión del transporte y la logística. [24] Un estudio publicado en 2021 comparó el factor de impacto, la puntuación del factor propio, el SCImago Journal & Country Rank y el impacto normalizado de la fuente por artículo, en revistas relacionadas con farmacia, toxicología y bioquímica. Descubrió que había "una correlación significativa de moderada a alta" entre ellos. [25]
Miles de universidades y organismos de investigación emitieron declaraciones oficiales denunciando la idea de que la calidad de la investigación se puede medir basándose en la escala unidimensional de una clasificación de revistas, en particular mediante la firma de la Declaración de San Francisco sobre Evaluación de la Investigación (DORA), que pedía "no [ para] utilizar métricas basadas en revistas... como una medida sustituta de la calidad de los artículos de investigación individuales, para evaluar las contribuciones de un científico individual, o en decisiones de contratación, promoción o financiación". [26] La Comunidad para la Investigación Responsable en Gestión Empresarial (cRRBM) se pregunta si "incluso la academia se beneficia cuando los miembros del profesorado son valorados por la cantidad y ubicación de sus artículos, no por el beneficio que su investigación puede tener para el mundo". [27] Algunas disciplinas académicas, como la gestión, presentan una paradoja en las listas de clasificación de revistas: por un lado, los investigadores son conscientes de las numerosas limitaciones de las listas de clasificación y de su impacto nocivo en el progreso científico; por otro lado, generalmente encuentran útiles las listas de clasificación de revistas y las emplean, en particular, cuando sus instituciones no exigen su uso. [28]
Clasificaciones nacionales
Existen varios rankings nacionales e internacionales de revistas, por ejemplo:
- La revista ERA Australia enumera el ranking de revistas del Consejo Australiano de Investigación en todo el mundo [29]
- Ranking CORE, emitido por la Asociación de Educación e Investigación en Computación de Australasia (CORE, Inc.). [30] [31]
- Clasificación de Brasil
- Publindex de Colombia
- Dinamarca Ministerio danés de Educación Superior y Ciencia (2014) [32]
- Foro de publicaciones Julkaisufoorumi (JUFO) de Finlandia [33]
- Índice científico noruego Registro noruego de revistas, series y editores científicos: búsqueda avanzada [34]
- Índice VHB de Alemania (negocios)
- Clasificación CNRS de Francia (economía)
- Clasificación ANVUR italiana de revistas ANVUR Clase A [35]
- Guía de revistas académicas de la Chartered Association of Business Schools [36]
- Lista de Pakistán de revistas reconocidas por HEC [37]
- Puntuación NAAS de revistas científicas de la Academia Nacional de Ciencias Agrícolas de la India (en vigor a partir del 1 de enero de 2022) [38]
- Ranking polaco de revistas [39] [40]
- Lista DHET de revistas sudafricanas aprobadas
Se han introducido como herramientas oficiales de evaluación de investigaciones en varios países. [41]
Ver también
Referencias
- ^ ab Lowry, Paul Benjamín; Gaskin, James; Humpherys, Sean L.; Moody, Gregorio D.; Galletta, Dennis F.; Barlow, Jordania B.; Wilson, David W. (2013). "Evaluación de la calidad de las revistas y la canasta de revistas de académicos senior de la Asociación de Sistemas de Información mediante medidas bibliométricas: ¿agregan valor las evaluaciones de revistas de expertos?". Sistemas de Información de Gestión Trimestral . 37 (4): 993–1012. doi :10.25300/MISQ/2013/37.4.01. JSTOR 43825779. SSRN 2186798.Consulte también el vídeo narrativo de YouTube de este artículo en: Yukon
- ^ Lowry, Paul Benjamín; Romanos, Denton; Curtis, Aarón (2004). "Prestigio de revistas globales y disciplinas de apoyo: un estudio cienciométrico de revistas de sistemas de información". Revista de la Asociación de Sistemas de Información . 5 (2): 29–77. doi : 10.17705/1jais.00045 . SSRN 666145.
- ^ Minasny, Budiman; Hartemink, Alfred E.; McBratney, Alex; Jang, Ho-Jun (22 de octubre de 2013). "Citas e índice h de revistas y investigadores del suelo en Web of Science, Scopus y Google Scholar". PeerJ . 1 : e183. doi : 10.7717/peerj.183 . ISSN 2167-8359. PMC 3807595 . PMID 24167778.
- ^ Serenko, Alejandro; Dohan, Michael (2011). "Comparación de los métodos de clasificación de revistas de impacto de citas y encuestas de expertos: ejemplo del campo de la inteligencia artificial" (PDF) . Revista de Informetría . 5 (4). Elsevier : 629–648. doi :10.1016/j.joi.2011.06.002.
- ^ "Acerca de OOIR: datos a nivel de revista" . Consultado el 14 de marzo de 2023 .
- ^ Holsapple, Clyde W. (2008). "Un enfoque de poder de publicación para identificar revistas de sistemas de información de primer nivel". Revista de la Asociación de Ciencia y Tecnología de la Información . 59 (2). Biblioteca en línea Wiley : 166–185. doi :10.1002/asi.20679.
- ^ Serenko, Alejandro; Jiao, Changquan (2012). "Investigación de la investigación de sistemas de información en Canadá" (PDF) . Revista Canadiense de Ciencias Administrativas . 29 . Biblioteca en línea Wiley: 3–24. doi :10.1002/CJAS.214.
- ^ Alhoori, Hamed; Furuta, Richard (2013). ¿Pueden los sistemas de gestión de referencias sociales predecir una clasificación de lugares académicos? Apuntes de conferencias sobre informática. vol. 8092. Saltador . págs. 138-143. CiteSeerX 10.1.1.648.3770 . doi :10.1007/978-3-642-40501-3_14. ISBN 978-3-64240-500-6.
- ^ Cornillier, Fabien; Charles, Vicente (2015). "Medir el atractivo de las revistas académicas: un modelo de agregación de influencia directa" (PDF) . Cartas de investigación operativa . 43 (2): 172-176. doi :10.1016/j.orl.2015.01.007. S2CID 13310055.
- ^ "Elsevier anuncia métricas de revistas mejoradas SNIP y SJR ahora disponibles en Scopus" (Presione soltar). Elsevier . Consultado el 27 de julio de 2014 .
- ^ Modo, Henk (2010). "Medición del impacto contextual de las citas de revistas científicas". Revista de Informetría . 4 (3). Elsevier: 256–277. arXiv : 0911.2632 . doi :10.1016/j.joi.2010.01.002. S2CID 10644946.
- ^ "Lista de niveles de revistas". www.journaltierlist.com . Consultado el 31 de julio de 2024 .
- ^ Pinski, Gabriel; Narín, Francis (1976). "Influencia de las citas para agregados de revistas de publicaciones científicas: teoría con aplicación a la literatura de física". Procesamiento y Gestión de la Información . 12 (5): 297–312. doi :10.1016/0306-4573(76)90048-0.
- ^ Liebowitz, SJ; Palmer, JP (1984). "Evaluación de los impactos relativos de las revistas de economía" (PDF) . Revista de Literatura Económica . 22 (1): 77–88. JSTOR 2725228.
- ^ Palacios-Huerta, Ignacio; Volij, Óscar (2004). "La medición de la influencia intelectual". Econométrica . 72 (3): 963–977. CiteSeerX 10.1.1.165.6602 . doi :10.1111/j.1468-0262.2004.00519.x.
- ^ Kodrzycki, Yolanda K.; Yu, Pingkang (2006). "Nuevos enfoques para clasificar las revistas de economía". Contribuciones al análisis y la política económicos . 5 (1). CiteSeerX 10.1.1.178.7834 . doi :10.2202/1538-0645.1520.
- ^ Bollen, Johan; Rodríguez, Marko A.; Van De Sompel, Herbert (diciembre de 2006). "MESUR: Métricas de impacto académico basadas en el uso". Actas de la séptima conferencia conjunta ACM/IEEE-CS sobre bibliotecas digitales . vol. 69, págs. 669–687. arXiv : cs.GL/0601030 . Código Bib : 2006cs.......1030B. doi :10.1145/1255175.1255273. ISBN 978-1-59593-644-8. S2CID 3115544.
- ^ Bergstrom, CT (mayo de 2007). "Factor propio: medir el valor y el prestigio de las revistas académicas". Noticias de bibliotecas universitarias y de investigación . 68 (5): 314–316. doi : 10.5860/crln.68.5.7804 .
- ^ Oeste, Jevin Darwin. "Eigenfactor.org". Factor propio . Consultado el 18 de mayo de 2014 .
- ^ Espeland, Wendy Nelson; Sauder, Michael (2007). "Rankings y reactividad: cómo las medidas públicas recrean mundos sociales". Revista Estadounidense de Sociología . 113 : 1–40. doi :10.1086/517897. hdl : 1885/30995 . S2CID 113406795.
- ^ Conceder, David B.; Kovács, Gyöngyi; Spens, Karen (2018). "Prácticas de investigación cuestionables en la academia: Antecedentes y consecuencias". Revista de empresas europeas . 30 (2): 101–127. doi :10.1108/EBR-12-2016-0155.
- ^ Brembs, Björn (2018). "Las prestigiosas revistas científicas luchan por alcanzar incluso una confiabilidad promedio". Fronteras de la neurociencia humana . 12 : 37. doi : 10.3389/fnhum.2018.00037 . PMC 5826185 . PMID 29515380.
- ^ Trigger, Chris R; MacDonald, Ross; Triggle, David J.; Grierson, Donald (3 de abril de 2022). "Réquiem por factores de impacto y elevados costes de publicación". Responsabilidad en la investigación . 29 (3): 133–164. doi : 10.1080/08989621.2021.1909481 . PMID 33787413. S2CID 232430287.
Por lo tanto, se podría esperar que un factor JIF alto indique un mayor nivel de interés, precisión y confiabilidad de los artículos publicados allí. Esto es cierto a veces, pero lamentablemente no siempre es así (Brembs 2018, 2019). Así, Björn Brembs (2019) concluyó: "Existe un creciente conjunto de evidencia en contra de nuestra noción subjetiva de que las revistas más prestigiosas publican ciencia 'mejor'. De hecho, las revistas más prestigiosas pueden estar publicando la ciencia menos confiable".
- ^ McKinnon, Alan C. (2017). "Starry-eyed II: revisión del debate sobre el ranking de revistas de logística". Revista internacional de distribución física y gestión logística . 47 (6): 431–446. doi :10.1108/IJPDLM-02-2017-0097.
- ^ Aquino-Canchari, Christian Renzo; Ospina-Meza, Richard Fredi; Guillén-Macedo, Karla (30-07-2020). "Las 100 revistas de mayor impacto sobre farmacología, toxicología y farmacia". Revista Cubana de Investigaciones Biomédicas . 39 (3). ISSN 1561-3011.
- ^ "Inicio". DORA .
- ^ Glick, William; Tsui, Ana; Davis, Gerald (2 de mayo de 2018). Cutler, Dave (ed.). "El dilema moral de la investigación empresarial". Revista BizEd . Archivado desde el original el 7 de mayo de 2018.
- ^ Serenko, Alejandro; Bontis, Nick (2024). "Bailando con el diablo: el uso y las percepciones de las listas de clasificación de revistas académicas en el campo de la gestión" (PDF) . Revista de Documentación . en prensa. doi :10.1108/JD-10-2023-0217. S2CID 266921800.
- ^ "Ranking de revistas del mundo del Consejo Australiano de Investigación". 2011-06-12. Archivado desde el original el 12 de junio de 2011.
- ^ Li, Xiancheng; Rong, Wenge; Shi, Haoran; Tang, Jie; Xiong, Zhang (11 de mayo de 2018). "El impacto de los sistemas de clasificación de conferencias en informática: un análisis de regresión comparativo". Cienciometría . 116 (2). Springer Science y Business Media LLC: 879–907. doi :10.1007/s11192-018-2763-1. ISSN 0138-9130. S2CID 255013801.
- ^ "Portal de clasificaciones CORE". core.edu.au. Consultado el 27 de diciembre de 2022 .
- ^ "Uddannelses- og Forskningsministeriet".
- ^ "Julkaisufoorumi". Diciembre de 2023.
- ^ "Buscar en la lista noruega | Registro noruego".
- ^ "Calificación de Revistas Científicas - ANVUR - Agenzia Nazionale di Valutazione del Sistema Universitario e della Ricerca".
- ^ "Asociación Autorizada de Escuelas de Negocios - Guía de revistas académicas".
- ^ "Lista de revistas reconocidas por HEC".
- ^ "Puntuación NAAS de revistas científicas" (PDF) . Academia Nacional de Ciencias Agrícolas . 2022-01-01. Archivado (PDF) desde el original el 15 de marzo de 2023.
- ^ "Ministerio polaco de Educación Superior y Ciencia (2019)". www.bip.nauka.gov.pl . Consultado el 12 de octubre de 2019 .
- ^ "Ministerio polaco de Educación Superior y Ciencia (2021)". www.bip.nauka.gov.pl . Consultado el 9 de febrero de 2021 .
- ^ Pontille, David; Torny, Didier (2010). "Las controvertidas políticas de calificación de revistas: evaluación de las ciencias sociales y las humanidades". Evaluación de la investigación . 19 (5): 347–360. doi :10.3152/095820210X12809191250889. S2CID 53387400.