Estudio cuantitativo de la literatura académica
La cienciometría es un subcampo de la informetría que estudia los aspectos cuantitativos de la literatura académica . Los principales temas de investigación incluyen la medición del impacto de los artículos de investigación y las revistas académicas, la comprensión de las citas científicas y el uso de dichas mediciones en contextos de políticas y gestión. [1] En la práctica, existe una superposición significativa entre la cienciometría y otros campos científicos como los sistemas de información , la ciencia de la información , la ciencia de la política científica , la sociología de la ciencia y la metaciencia . Los críticos han argumentado que la dependencia excesiva de la cienciometría ha creado un sistema de incentivos perversos , produciendo un entorno de publicar o morir que conduce a una investigación de baja calidad.
Desarrollo histórico
[2] [3] [4] [5]
La cienciometría moderna se basa principalmente en el trabajo de Derek J. de Solla Price y Eugene Garfield . Este último creó el Science Citation Index [1] y fundó el Institute for Scientific Information , que se utiliza ampliamente para el análisis cienciométrico. En 1978 se estableció una revista académica dedicada, Scientometrics . La industrialización de la ciencia aumentó el número de publicaciones y resultados de investigación y el auge de las computadoras permitió un análisis eficaz de estos datos. [6] Mientras que la sociología de la ciencia se centró en el comportamiento de los científicos, la cienciometría se centró en el análisis de publicaciones . [1] En consecuencia, la cienciometría también se conoce como el estudio científico y empírico de la ciencia y sus resultados. [7] [8]
La Sociedad Internacional de Cienciometría e Informetría, fundada en 1993, es una asociación de profesionales en este campo. [9]
Más tarde, a principios del siglo XX, la evaluación y la clasificación de científicos e instituciones cobraron mayor importancia. Basado en el análisis bibliométrico de publicaciones científicas y citas, el Ranking Académico de Universidades del Mundo ("ranking de Shanghai") fue publicado por primera vez en 2004 por la Universidad Jiao Tong de Shanghai . Los factores de impacto se convirtieron en una herramienta importante para elegir entre diferentes revistas. Rankings como el Ranking Académico de Universidades del Mundo y el Ranking de Universidades Mundiales de Times Higher Education (THE-ranking) se convirtieron en un indicador del estatus de las universidades. El índice h se convirtió en un indicador importante de la productividad y el impacto del trabajo de un científico. Sin embargo, se han propuesto métricas alternativas a nivel de autor . [10] [11]
Casi al mismo tiempo, aumentó el interés de los gobiernos por evaluar la investigación con el fin de evaluar el impacto de la financiación de la ciencia. Cuando las inversiones en investigación científica se incluyeron en la Ley de Recuperación y Reinversión Estadounidense de 2009 (ARRA), un importante paquete de estímulo económico, se crearon programas como STAR METRICS para evaluar si el impacto positivo en la economía realmente se produciría. [12]
Métodos y hallazgos
Los métodos de investigación incluyen enfoques cualitativos, cuantitativos y computacionales. El enfoque principal de los estudios se ha centrado en las comparaciones de productividad institucional, las clasificaciones de investigación institucional, las clasificaciones de revistas [7] [8] [13], el establecimiento de estándares de productividad y permanencia del profesorado [14] , la evaluación de la influencia de los mejores artículos académicos [15] y el desarrollo de perfiles de los principales autores e instituciones en términos de desempeño de investigación [16] .
Un hallazgo significativo en este campo es un principio de escalada de costos, según el cual lograr más hallazgos a un nivel de importancia dado se vuelve exponencialmente más costoso en términos de gasto de esfuerzo y recursos. Sin embargo, nuevos métodos algorítmicos en búsqueda, aprendizaje automático y minería de datos están demostrando que ese no es el caso de muchos problemas basados en la recuperación y extracción de información. [ cita requerida ]
Los métodos más recientes se basan en fuentes y datos abiertos para garantizar la transparencia y la reproducibilidad en línea con los requisitos de la ciencia abierta moderna. Por ejemplo, el índice Unpaywall y la investigación que lo acompaña sobre las tendencias de acceso abierto se basan en datos recuperados de los puntos finales OAI-PMH de miles de archivos abiertos proporcionados por bibliotecas e instituciones de todo el mundo. [17]
Las recomendaciones para evitar errores comunes en la cienciometría incluyen: seleccionar temas con datos suficientes; utilizar minería de datos y web scraping, combinar métodos y eliminar los "falsos positivos". [18] [19] También es necesario comprender los límites de los motores de búsqueda (por ejemplo, Web of Science, Scopus y Google Scholar) que no logran indexar miles de estudios en revistas pequeñas y países subdesarrollados. [20]
Índices cienciométricos comunes
Los índices pueden clasificarse como métricas a nivel de artículo , métricas a nivel de autor y métricas a nivel de revista según la característica que evalúen.
Factor de impacto
El factor de impacto (FI) o factor de impacto de revista (FIR) de una revista académica es una medida que refleja el promedio anual de citas de artículos recientes publicados en esa revista. Se utiliza con frecuencia como indicador de la importancia relativa de una revista dentro de su campo; las revistas con factores de impacto más altos suelen considerarse más importantes que las que tienen factores más bajos. El factor de impacto fue ideado por Eugene Garfield , el fundador del Instituto de Información Científica (ISI).
Índice de citas científicas
El Science Citation Index (SCI) es un índice de citas producido originalmente por el Institute for Scientific Information (ISI) y creado por Eugene Garfield . Fue lanzado oficialmente en 1964. Ahora es propiedad de Clarivate Analytics (anteriormente el negocio de Propiedad Intelectual y Ciencia de Thomson Reuters ). [21] [22] [23] [24] La versión más grande (Science Citation Index Expanded) cubre más de 8.500 revistas notables y significativas , en 150 disciplinas, desde 1900 hasta la actualidad. Estas se describen alternativamente como las revistas líderes mundiales de ciencia y tecnología , debido a un riguroso proceso de selección. [25] [26] [27]
Índice de agradecimientos
Un índice de reconocimiento (índice de reconocimiento británico) [28] es un método para indexar y analizar los reconocimientos en la literatura científica y, por lo tanto, cuantifica el impacto de los reconocimientos . Por lo general, un artículo académico tiene una sección en la que los autores reconocen a entidades como financiación, personal técnico, colegas, etc. que han contribuido con materiales o conocimientos o han influido o inspirado su trabajo. Al igual que un índice de citas , mide las influencias en el trabajo científico, pero en un sentido diferente; mide las influencias institucionales y económicas, así como las influencias informales de personas individuales, ideas y artefactos. A diferencia del factor de impacto, no produce una única métrica general, sino que analiza los componentes por separado. Sin embargo, se puede medir el número total de reconocimientos a una entidad reconocida y también el número de citas a los artículos en los que aparece el reconocimiento. La relación entre este número total de citas y el número total de artículos en los que aparece la entidad reconocida se puede interpretar como el impacto de esa entidad reconocida. [29] [30]
Altmétricas
En la publicación académica y científica, las altmétricas son bibliometrías no tradicionales [31] propuestas como una alternativa [32] o complemento [33] a las métricas de impacto de citas más tradicionales , como el factor de impacto y el índice h . [34] El término altmétricas se propuso en 2010, [35] como una generalización de las métricas a nivel de artículo , [36] y tiene sus raíces en el hashtag #altmetrics . Aunque las altmétricas a menudo se consideran métricas sobre artículos, se pueden aplicar a personas, revistas, libros, conjuntos de datos, presentaciones, videos, repositorios de código fuente, páginas web, etc. Las altmétricas utilizan API públicas en todas las plataformas para recopilar datos con scripts y algoritmos abiertos. Las altmétricas originalmente no cubrían los recuentos de citas , [37] pero calculan el impacto académico basándose en diversos resultados de investigación en línea, como las redes sociales, los medios de noticias en línea, los administradores de referencias en línea, etc. [38] [39] Demuestra tanto el impacto como la composición detallada del impacto. [35] Las altmetrics podrían aplicarse a filtros de investigación, [35] expedientes de promoción y titularidad, solicitudes de subvenciones [40] [41] y para clasificar artículos recién publicados en motores de búsqueda académicos . [42]
Críticas
Los críticos han argumentado que la excesiva dependencia de la cienciometría ha creado un ambiente de publicar o morir con incentivos perversos que conducen a una investigación de baja calidad. [43] [44]
En la cultura popular
El personaje principal de la novela Skios de Michael Frayn es un profesor de cienciometría.
Véase también
Revistas
Referencias y notas a pie de página
- ^ abc Leydesdorff, L. y Milojevic, S., "Scientometrics" arXiv:1208.4566 (2013), próximamente en: Lynch, M. (editor), International Encyclopedia of Social and Behavioral Sciences subsección 85030. (2015)
- ^ Nalimov, Vasily Vasilyevich; Mulchenko, BM (1969). ""Cienciometría". Estudios de la ciencia como proceso de información". Ciencia . Moscú, Rusia.
- ^ Garfield, Eugene (2009). "De la ciencia de la ciencia a la Cienciometría: visualización de la historia de la ciencia con el software HistCite" (PDF) . Journal of Informetrics . 3 (3): 173–179. doi :10.1016/j.joi.2009.03.009. ISSN 1751-1577 . Consultado el 15 de mayo de 2021 .
- ^ Валеев, Д. Х.; Голубцов, В. Г. (2018). Юридическая Наукометрия И Цивилистические Исследования. Problemas metodológicos Цивилистических Исследований(en ruso): 45–57 . Consultado el 15 de mayo de 2021 .
- ^ Борисов, М. B.; Майсуразде, А. И. (2014). Восстановление связей в научном рубрикаторе на основе кластеризации гетерогенной сети (PDF) (Tesis). Universidad de Moscú de imágenes M. B. Ломоносова . Consultado el 15 de mayo de 2021 .
- ^ De Solla Price, D. , declaración editorial . Cienciometría, volumen 1, número 1 (1978)
- ^ ab Lowry, Paul Benjamin; Romans, Denton; Curtis, Aaron (2004). "Prestigio de revistas globales y disciplinas de apoyo: un estudio cienciométrico de revistas de sistemas de información". Revista de la Asociación de Sistemas de Información . 5 (2): 29–80. doi : 10.17705/1jais.00045 . SSRN 666145.
- ^ ab Lowry, Paul Benjamin; Moody, Gregory D.; Gaskin, James; Galletta, Dennis F.; Humpherys, Sean; Barlow, Jordan B.; y Wilson, David W. (2013). "Evaluación de la calidad de las revistas y la canasta de revistas de los académicos sénior de la Association for Information Systems (AIS) mediante medidas bibliométricas: ¿las evaluaciones de las revistas por parte de expertos añaden valor?", MIS Quarterly (MISQ), vol. 37(4), 993–1012. Además, puede ver un video narrativo de YouTube de este artículo en: https://www.youtube.com/watch?v=LZQIDkA-ke0.
- ^ "Acerca de". Sociedad Internacional de Cienciometría e Informetría . Consultado el 18 de enero de 2021 .
- ^ Belikov, AV; Belikov, VV (2015). "Un índice logarítmico normalizado por edad y autor basado en citas para la evaluación de investigadores individuales independientemente del número de publicaciones". F1000Research . 4 : 884. doi : 10.12688/f1000research.7070.1 . PMC 4654436 .
- ^ Kinouchi, O. (2018). "Un índice de centralidad simple para el reconocimiento social científico". Physica A: Mecánica estadística y sus aplicaciones . 491 : 632–640. arXiv : 1609.05273 . Código Bibliográfico : 2018PhyA..491..632K. doi : 10.1016/j.physa.2017.08.072. S2CID 22795899.
- ^ Lane, J (2009). "Evaluación del impacto de la financiación de la ciencia". Science . 324 (5932): 1273–1275. doi :10.1126/science.1175335. PMID 19498153. S2CID 206520769.
- ^ Lowry, Paul Benjamin; Humphreys, Sean; Malwitz, Jason; Nix, Joshua C (2007). "Un estudio cienciométrico de la calidad percibida de las revistas de comunicación empresarial y técnica". IEEE Transactions on Professional Communication . 50 (4): 352–378. doi :10.1109/TPC.2007.908733. S2CID 40366182. SSRN 1021608.Ganador del premio Rudolph Joenk al mejor artículo publicado en IEEE Transactions on Professional Communication en 2007.
- ^ Dean, Douglas L; Lowry, Paul Benjamin; Humpherys, Sean (2011). "Perfiles de la productividad investigadora de profesores titulares de sistemas de información en instituciones estadounidenses". MIS Quarterly . 35 (1): 1–15. doi :10.2307/23043486. JSTOR 23043486. SSRN 1562263.
- ^ Karuga, Gilbert G.; Lowry, Paul Benjamin; Richardson, Vernon J. (2007). "Evaluación del impacto de la investigación de sistemas de información de primer nivel a lo largo del tiempo". Comunicaciones de la Asociación de Sistemas de Información . 19 (7): 115–131. doi : 10.17705/1CAIS.01907 . SSRN 976891.
- ^ Lowry, Paul Benjamin; Karuga, Gilbert G.; Richardson, Vernon J. (2007). "Evaluación de instituciones líderes, profesores y artículos en revistas de investigación de sistemas de información de primer nivel". Comunicaciones de la Asociación de Sistemas de Información . 20 (16): 142–203. doi : 10.17705/1CAIS.02016 . SSRN 1021603.
- ^ Piwowar, Heather; Priem, Jason; Orr, Richard (9 de octubre de 2019). "El futuro del acceso abierto: un análisis a gran escala que proyecta la publicación y el número de lectores de acceso abierto". bioRxiv 10.1101/795310 .
- ^ Jiawei, H., Kamber, M., Han, J., Kamber, M., Pei, J. 2012. Minería de datos: conceptos y técnicas. Morgan Kaufmann, Wlatham, EE.UU.
- ^ Quintero, Erika; Saavedra, Dalys; Murillo, Danny (2018). "Extracción de datos de perfiles en Google Scholar utilizando un algoritmo en el lenguaje R para hacer minería de datos". I+D Tecnológico . 14 : 94-104. doi : 10.33412/idt.v14.1.1807 . S2CID 165340425.
- ^ Añino Ramos, Yostin Jesús; Monge Nájera, Julián; Murillo-González, Danny; Michán-Aguirre, Layla (2021). "Cómo aplicar la cienciometría a la investigación ecológica". Ecosistemas . 30 (2): 1–4. doi : 10.7818/ECOS.2256 . S2CID 238733389.
- ^ Garfield, E. (1955). "Índices de citas para la ciencia: una nueva dimensión en la documentación a través de la asociación de ideas". Science . 122 (3159): 108–111. Bibcode :1955Sci...122..108G. doi :10.1126/science.122.3159.108. PMID 14385826.
- ^ Garfield, Eugene (2011). "La evolución del Science Citation Index" (PDF) . Microbiología internacional . 10 (1): 65–69. doi :10.2436/20.1501.01.10. PMID 17407063.
- ^ Garfield, Eugene (1963). "Science Citation Index" (PDF) . Biblioteca Garfield de la Universidad de Pensilvania . págs. v–xvi . Consultado el 27 de mayo de 2013 .
- ^ "Historia de la indexación de citas". Clarivate Analytics . Noviembre de 2010 . Consultado el 4 de noviembre de 2010 .
- ^ "Science Citation Index Expanded" (Índice de citas científicas ampliado) . Consultado el 17 de enero de 2017 .
- ^ Ma, Jiupeng; Fu, Hui-Zhen; Ho, Yuh-Shan (diciembre de 2012). "Artículos sobre humedales más citados en Science Citation Index Expanded: características y puntos críticos". Ciencias ambientales de la tierra . 70 (3): 1039. Bibcode :2009EnGeo..56.1247D. doi :10.1007/s12665-012-2193-y. S2CID 18502338.
- ^ Ho, Yuh-Shan (2012). "Los trabajos de investigación más citados en el Science Citation Index Expanded" (PDF) . Scientometrics . 94 (3): 1297. doi :10.1007/s11192-012-0837-z. S2CID 1301373.
- ^ "Reconocimiento vs. Reconocimiento". 22 de septiembre de 2012.
- ^ Councill, Isaac G.; Giles, C. Lee ; Han, Hui; Manavoglu, Eren (2005). "Indexación automática de reconocimientos: expansión de la semántica de la contribución en la biblioteca digital CiteSeer". Actas de la 3.ª conferencia internacional sobre captura de conocimiento . K-CAP '05. págs. 19–26. CiteSeerX 10.1.1.59.1661 . doi :10.1145/1088622.1088627. ISBN. 1-59593-163-5.
- ^ Giles, CL ; Councill, IG (15 de diciembre de 2004). "Who gets grateful: Measuring scientific contributes through automatic acknowledgment indexing" (PDF) . Proc. Natl. Sci. USA 101 (51): 17599–17604. Bibcode :2004PNAS..10117599G. doi : 10.1073/pnas.0407743101 . PMC 539757 . PMID 15601767.
- ^ "Colecciones PLOS". Biblioteca Pública de Ciencias (PLOS) . 3 de noviembre de 2021.
Altmetrics es el estudio y uso de medidas de impacto académico no tradicionales que se basan en la actividad en entornos web.
- ^ "El "alt" significa en realidad "alternativa"" Jason Priem, autor principal del Manifiesto Altmetrics, comentario 592
- ^
- ^ Chavda, Janica; Patel, Anika (30 de diciembre de 2015). "Medición del impacto de la investigación: bibliometría, redes sociales, altmetría y el BJGP". British Journal of General Practice . 66 (642): e59–e61. doi :10.3399/bjgp16X683353. PMC 4684037 . PMID 26719483.
- ^ abc Priem, Jason; Taraborelli, Darío; Groth, Pablo; Neylon, Cameron (28 de septiembre de 2011). "Altmetrics: un manifiesto (v 1.01)". Altmétricas .
- ^ Binfield, Peter (9 de noviembre de 2009). "Métricas a nivel de artículo en PLoS: ¿qué son y por qué debería importarle?" (Video) . Universidad de California, Berkeley . Archivado desde el original el 12 de diciembre de 2021.
- ^ Bartling, Sönke; Friesike, Sascha (2014). Abriendo la ciencia: la guía en evolución sobre cómo Internet está cambiando la investigación, la colaboración y la publicación académica. Cham: Springer International Publishing. pág. 181. doi :10.1007/978-3-319-00026-8. ISBN 978-3-31-900026-8. OCLC 906269135.
Las altmetrics y las métricas a nivel de artículo a veces se usan indistintamente, pero existen diferencias importantes: las métricas a nivel de artículo también incluyen citas y datos de uso; ...
- ^ Mcfedries, Paul (agosto de 2012). "Medición del impacto de las altmétricas [técnicamente hablando]". IEEE Spectrum . 49 (8): 28. doi :10.1109/MSPEC.2012.6247557. ISSN 0018-9235.
- ^ Galligan, Finbar; Dyas-Correia, Sharon (marzo de 2013). "Altmetrics: Rethinking the Way We Measure" (Altmétricas alternativas: repensando la forma en que medimos). Serials Review . 39 (1): 56–61. doi :10.1016/j.serrev.2013.01.003.
- ^ Moher, David; Naudet, Florian; Cristea, Ioana A.; Miedema, Frank; Ioannidis, John PA; Goodman, Steven N. (29 de marzo de 2018). "Evaluación de científicos para contratación, promoción y permanencia". PLOS Biology . 16 (3): e2004089. doi : 10.1371/journal.pbio.2004089 . ISSN 1545-7885. PMC 5892914 . PMID 29596415.
- ^ Nariani, Rajiv (24 de marzo de 2017). "Complementación de las formas tradicionales de medir el impacto académico: el método Altmetrics". Actas de la conferencia ACRL 2017 . hdl :10315/33652.
- ^ Mehrazar, Maryam; Kling, Christoph Carl; Lemke, Steffen; Mazarakis, Athanasios; Peters, Isabella (8 de abril de 2018). "¿Podemos contar con las métricas de las redes sociales? Primeros conocimientos sobre el uso académico activo de las redes sociales". Actas de la 10.ª Conferencia de la ACM sobre ciencia web . pág. 215. arXiv : 1804.02751 . doi : 10.1145/3201064.3201101 . ISBN . 978-1-4503-5563-6.
- ^ Roche, Christopher (31 de agosto de 2022). "El espectro de conducta investigadora de los cirujanos: ¿su carrera está en sus manos que doblan las reglas?". Bull Roy Coll Surg Engl . 104 (6): 274–277. doi : 10.1308/rcsbull.2022.112 .
- ^ Weingart, Peter (1 de enero de 2005). "Impacto de la bibliometría en el sistema científico: ¿consecuencias involuntarias?". Cienciometría . 62 (1): 117–131. doi :10.1007/s11192-005-0007-7. ISSN 0138-9130. S2CID 12359334.
Enlaces externos
- Harnad, S. (2009). "Scientometrics de acceso abierto y el ejercicio de evaluación de la investigación en el Reino Unido". Scientometrics . 79 (1): 147–156. arXiv : cs/0703131 . CiteSeerX 10.1.1.561.7204 . doi :10.1007/s11192-009-0409-z. S2CID 3183215.
- Harnad, S (2008). "Validación de métricas de desempeño de investigación frente a clasificaciones de pares". Ética en ciencia y política ambiental . 8 (11): 103–107. doi : 10.3354/esep00088 .
- Exposición Lugares y espacios: mapeo de la ciencia en el Museo Americano de Ciencia y Energía , del 7 de septiembre de 2007 al 7 de enero de 2008.
- Optimización excesiva de las métricas de publicación académica: observando la Ley de Goodhart en acción GigaScience, Volumen 8, Número 6, junio de 2019