stringtranslate.com

Evaluación por pares

La evaluación por pares , o autoevaluación , es un proceso mediante el cual los estudiantes o sus compañeros califican tareas o exámenes basándose en los puntos de referencia de un maestro . [1] La práctica se emplea para ahorrar tiempo a los profesores y mejorar la comprensión de los estudiantes de los materiales del curso, así como mejorar sus habilidades metacognitivas . Las rúbricas se utilizan a menudo junto con la autoevaluación y la evaluación por pares. [2]

Ventajas

Ahorra tiempo a los profesores

Las tareas de calificación de los estudiantes pueden ahorrarle tiempo al maestro [3] porque se puede calificar un salón de clases completo en el tiempo que le tomaría a un maestro calificar un trabajo. Además, en lugar de que un profesor se apresure a revisar cada trabajo, los estudiantes pueden tomarse su tiempo para corregirlos. Los estudiantes pueden dedicar más tiempo a un trabajo porque solo tienen que calificar uno y, por lo tanto, pueden hacer un trabajo más completo. [4]

Comentarios más rápidos

Hacer que los estudiantes califiquen trabajos en clase o evalúen las presentaciones orales de sus compañeros reduce el tiempo que tardan los estudiantes en recibir sus comentarios. En lugar de tener que esperar a recibir comentarios sobre su trabajo, la autoevaluación y la evaluación por pares permiten calificar las tareas poco después de su finalización. Entonces los estudiantes no tienen que esperar hasta que hayan pasado a material nuevo y la información ya no esté fresca en sus mentes. [1]

También se ha demostrado que un tiempo de respuesta más rápido de los comentarios aumenta la probabilidad de adopción por parte del destinatario de los comentarios. Un experimento controlado realizado en un entorno de curso masivo abierto en línea (MOOC) encontró que las calificaciones finales de los estudiantes mejoraron cuando la retroalimentación se entregó rápidamente, pero no si se retrasó 24 horas. [5]

Pedagógico

El papel evaluador del profesor hace que los estudiantes se centren más en las calificaciones y no en buscar retroalimentación. [6] Los estudiantes pueden aprender calificando los trabajos [1] o evaluando las presentaciones orales de otros. A menudo, los profesores no repasan las respuestas de los exámenes y no dan a los estudiantes la oportunidad de aprender qué hicieron mal. La autoevaluación y la evaluación por pares permiten a los profesores ayudar a los estudiantes a comprender los errores que han cometido. Esto mejorará el trabajo posterior y permitirá a los estudiantes tener tiempo para digerir la información y puede conducir a una mejor comprensión. [7] Un estudio de Sadler y Good encontró que los estudiantes que autocalificaron sus exámenes obtuvieron mejores resultados en exámenes posteriores. Los estudiantes pudieron ver lo que habían hecho mal y pudieron corregir dichos errores en tareas posteriores. Después de la calificación de sus pares, los estudiantes no necesariamente obtuvieron mejores resultados. [8]

La retroalimentación entre pares también puede mejorar la conciencia de la audiencia de los estudiantes, promover el aprendizaje colaborativo y desarrollar un sentido de propiedad del texto. El análisis de texto de la encuesta realizada por Fan, Yumei y Jinfen Xu mostró que estos estudiantes proporcionaron retroalimentación evaluativa centrada en el contenido y en la forma a sus compañeros, mientras que sus compañeros proporcionaron retroalimentación sobre manuscritos u orales en clase. [9]

Los experimentos de Turpin y Kristen M descubrieron que la retroalimentación de los pares es muy importante para que los alumnos participen en el proceso de aprendizaje. En segundo lugar, la calidad de la retroalimentación entre pares también es crucial. La retroalimentación capacitada sistemáticamente permite a los pares brindar retroalimentación procesable y de alta calidad. [10]

Metacognitivo

A través de la autoevaluación y la evaluación de sus compañeros, los estudiantes pueden ver errores en su pensamiento y corregir cualquier problema en tareas futuras. Al calificar las tareas, los estudiantes pueden aprender cómo completarlas con mayor precisión y cómo mejorar los resultados de sus exámenes. [1]

Los profesores Lin-Agler, Moore y Zabrucky llevaron a cabo un experimento en el que descubrieron "que los estudiantes pueden utilizar su experiencia previa al prepararse y realizar un examen para ayudarlos a establecer un vínculo entre su asignación de tiempo de estudio". [11] Los estudiantes no sólo pueden mejorar su capacidad para estudiar para un examen después de participar en una autoevaluación y una evaluación por pares, sino que también pueden mejorar su capacidad para evaluar a otros a través de un pensamiento metacognitivo mejorado. [12]

Sin embargo, en los experimentos de Christensen, Vibeke y Peter Hobel, encontraron que el contenido que los estudiantes evaluaban tenía que ver con el contenido, la estructura y la forma. La retroalimentación sobre las frases mismas es casi inexistente. [13]

Actitud

Si se implementa la autoevaluación y la evaluación por pares, los estudiantes pueden llegar a ver las pruebas no como castigos sino como retroalimentación útil. [12] Hal Malehorn dice que al utilizar la evaluación entre pares, los compañeros de clase pueden trabajar juntos para lograr un "bienestar intelectual común" y que puede crear una "atmósfera cooperativa" para los estudiantes en lugar de una en la que los estudiantes compitan por las calificaciones. [2] Además, cuando los estudiantes evalúan los trabajos de sus compañeros, también reflexionan sobre sus propios trabajos. Este proceso reflexivo estimula la acción para la mejora. [14]

Sin embargo, en el caso del Tribunal Supremo Distrito Escolar Independiente de Owasso contra Falvo , la escuela fue demandada luego de victimizar a un individuo después de que otros estudiantes se enteraran de que había recibido una puntuación baja en el examen. [15] Malehorn intenta mostrar lo que la versión idealizada de la evaluación por pares puede hacer por la actitud en el aula. En la práctica, pueden surgir situaciones en las que los estudiantes sean victimizados, como se vio en el caso de la Corte Suprema.

En una investigación experimental realizada por Yallop, Roger, Piia Taremaa y Djuddah Leijen, descubrieron que el proceso de retroalimentación puede inducir fuertes emociones negativas en los revisores (p. ej., frustración) y en los receptores de la retroalimentación (p. ej., ansiedad). Por tanto, el proceso de retroalimentación tiene un gran impacto. Esta influencia puede moldear las actitudes. Una actitud positiva fomenta una mayor participación en el proceso de retroalimentación. [dieciséis]

Defectos

La investigación realizada por Garner, Joe y Oliver Hadingham encontró graves fallas. Los estudiantes toman a este grupo muy en serio y rara vez hacen comentarios negativos. Y no hay críticas constructivas a los escritos de otras personas. En el estudio se utilizó la evaluación anónima para solucionar este problema, permitiendo a los estudiantes evaluar a otros sin presión, pero también perdieron la capacidad de interactuar. [17]

Acuerdo de calificación del maestro

Una preocupación acerca de la autoevaluación y la evaluación por parte de los compañeros es que los estudiantes puedan obtener calificaciones más altas que los profesores. Los profesores quieren reducir el tiempo de calificación, pero no a costa de perder precisión. [18]

Apoyo

Un estudio de Saddler y Good ha demostrado que existe un alto nivel de acuerdo entre las calificaciones asignadas por profesores y estudiantes siempre que los estudiantes sean capaces de comprender los requisitos de calidad del profesor. También informan que las calificaciones de los docentes pueden ser más precisas como resultado del uso de la autoevaluación y la evaluación por pares. Si los profesores observan cómo los estudiantes se califican a sí mismos, entonces tendrán más información disponible para asignar una calificación más precisa. [19]

Oposición

Sin embargo, Saddler y Good advierten que existe cierto desacuerdo. Sugieren que los profesores implementen sistemas para moderar las calificaciones de los estudiantes con el fin de detectar trabajos insatisfactorios. [19] Otro estudio informó que la inflación de calificaciones se produjo cuando los estudiantes tendieron a calificarse a sí mismos más alto que lo que habría hecho un maestro. Esto sugeriría que la autoevaluación y la evaluación por pares no son un método preciso de calificación debido a resultados divergentes. [20]

Comparación

Según el estudio de Saddler y Good, los estudiantes que reciben calificaciones de sus pares tienden a subestimar y los estudiantes que se califican a sí mismos tienden a sobrecalificar. Sin embargo, una gran mayoría de estudiantes se sitúan dentro del 5% de la calificación del profesor. Relativamente pocos autocalificadores subestiman y relativamente pocos compañeros calificadores tienden a sobrecalificar. [18]

Quizás uno de los modelos más destacados de evaluación por pares se pueda encontrar en los estudios de diseño. [21] [22] Uno de los beneficios de estos estudios proviene de los contrastes estructurados que pueden ayudar a los principiantes a notar diferencias que de otro modo podrían haber sido accesibles solo para los expertos. [23] De hecho, es una estrategia bien conocida entre los diseñadores utilizar comparaciones para inspirarse. [24] [25] Algunos investigadores diseñaron sistemas que respaldan ejemplos comparativos para mostrar comparaciones útiles en entornos educativos. [26] [27] [28] Sin embargo, lo que constituye una buena comparación aún no está claro; La guía general de buena retroalimentación de Sadler describe tres características: específica, procesable y justificada, [29] y ha sido ampliamente adoptada en la investigación de retroalimentación. Sin embargo, dado que cada trabajo a evaluar difiere enormemente en contenido, el camino hacia esas cualidades en una actuación de retroalimentación específica sigue siendo en gran medida desconocido. La retroalimentación efectiva no sólo está escrita de manera práctica, específica y justificada, sino que, lo que es más importante, contiene buen contenido; bueno en el sentido de que señala cosas relevantes, aporta nuevos conocimientos y cambia la mentalidad de sus destinatarios para que consideren el problema desde un ángulo diferente o lo representen por completo. Esto requiere una personalización específica del contenido.

Rúbricas

Objetivo

Los estudiantes necesitan pautas a seguir antes de poder calificar preguntas más abiertas. A menudo vienen en forma de rúbricas , que establecen diferentes objetivos y cuánto vale cada uno a la hora de calificar. [12] Las rúbricas se utilizan a menudo para tareas de escritura. [30]

Ejemplos de objetivos

Trabajo en equipo

Un área en la que se aplica la autoevaluación y la evaluación por pares es en los proyectos grupales. Los profesores pueden dar a los proyectos una calificación final, pero también deben determinar qué calificación merece cada individuo del grupo. Los estudiantes pueden calificar a sus compañeros y las calificaciones individuales pueden basarse en estas evaluaciones. Sin embargo, existen problemas con este método de calificación. Si los estudiantes se califican entre sí de manera injusta, las calificaciones generales se inclinan en diferentes direcciones. [31]

exceso de generosidad

Algunos estudiantes pueden otorgar a todos los demás calificaciones notablemente altas, lo que hará que sus puntajes sean más bajos en comparación con los demás. Esto se puede solucionar haciendo que los estudiantes se califiquen a sí mismos y así su generosidad también se extenderá hacia ellos mismos y aumentará sus calificaciones en la misma cantidad. Sin embargo, esto no compensa a los estudiantes que sienten que no trabajaron lo mejor posible y se autocalifican con demasiada dureza. [32]

Contabilidad creativa

Algunos estudiantes otorgarán a todos calificaciones bajas y a ellos mismos calificaciones extremadamente altas para sesgar los datos. Esto se puede contrarrestar verificando las calificaciones de los estudiantes y asegurándose de que sean consistentes con el lugar del grupo donde las calificaron sus compañeros. [33]

Penalización individual

Si todos los estudiantes van en contra de uno porque sienten que ese individuo hizo poco trabajo, recibirán una calificación excepcionalmente baja. Esto está permitido si el estudiante en cuestión realmente hizo muy poco trabajo pero puede requerir la intervención del instructor antes de que llegue al resultado final. [33]

Participación en el aula

Si bien es difícil calificar a los estudiantes por su participación en el aula debido a su naturaleza subjetiva, un método para calificar la participación es utilizar la autoevaluación y la evaluación por parte de los compañeros. Los profesores Ryan, Marshall, Porter y Jia llevaron a cabo un experimento para ver si utilizar a los estudiantes para calificar la participación era efectivo. Descubrieron que había una diferencia entre la evaluación de la participación de un profesor y la de un estudiante. Sin embargo, no hubo significancia académica, lo que indica que las calificaciones finales de los estudiantes no se vieron afectadas por la diferencia en la evaluación de un maestro y la de un estudiante. Llegaron a la conclusión de que la autoevaluación y la evaluación por pares es una forma eficaz de calificar la participación en el aula. [34]

A escala

El mecanismo de evaluación por pares es también el estándar de oro en muchas tareas creativas, desde revisar la calidad de artículos académicos o propuestas de subvenciones hasta estudios de diseño. Sin embargo, a medida que aumenta el número de evaluaciones por realizar, surgen desafíos. Una es que, como nadie que realiza la evaluación tiene una comprensión global de todo el conjunto de presentaciones, se pueden introducir sesgos locales en el juicio (por ejemplo, el rango de una escala utilizada para evaluar puede verse afectado por el conjunto de presentaciones que revisa el evaluador) y ruidos. en la clasificación agregada de la evaluación individual por pares se pueden agregar. Por otro lado, debido a que el resultado clasificado es de sumo interés en muchas situaciones (por ejemplo, asignar becas de investigación a propuestas o asignar calificaciones con letras a los estudiantes), las formas de agregar sistemáticamente evaluaciones entre pares para recuperar el orden clasificado de las presentaciones tienen muchas implicaciones prácticas. .

Para abordar esto, algunos investigadores estudiaron (1) esquemas de evaluación (por ejemplo, calificación ordinal, [35] (2) algoritmos para agregar evaluaciones por pares para estimar de manera más sólida la clasificación global de las presentaciones, [36] y (3) producir pares más óptimos para intercambiar comentarios ya sea considerando conflictos de intereses [37] o (4) modelando un marco que reduzca el error entre el juicio a nivel individual y comunitario sobre el valor de un artículo académico [38] .

Legalidad

La legalidad de la autoevaluación y la evaluación por pares fue cuestionada en el caso de la Corte Suprema de los Estados Unidos de Owasso Independent School District v. Falvo . Kristja Falvo demandó al distrito escolar donde asistía su hijo porque utilizaba la evaluación de pares y se burlaban de él por una puntuación baja. El tribunal confirmó el derecho del profesor a utilizar la autoevaluación y la evaluación por sus compañeros. [39]

Notas

  1. ^ abcd Sadler, Philip M. y Eddie Good El impacto de la autocalificación y la calificación de los pares en el aprendizaje de los estudiantes p.2
  2. ^ ab Malehorn, Hal Ten mide mejor que calificar p.323
  3. ^ Searby, Mike y Tim Ewers Una evaluación del uso de la evaluación entre pares en la educación superior: un estudio de caso en la Escuela de Música p.371
  4. ^ Sadler, Philip M. y Eddie Good El impacto de la autocalificación y la calificación de los pares en el aprendizaje de los estudiantes p.2
  5. ^ Kulkarni, Chinmay E., Michael S. Bernstein y Scott R. Klemmer. "PeerStudio: la retroalimentación rápida entre pares enfatiza la revisión y mejora el rendimiento". Actas de la segunda conferencia ACM (2015) sobre aprendizaje a escala. ACM, 2015.
  6. ^ J. Scott Armstrong (2012). "Aprendizaje Natural en la Educación Superior". Enciclopedia de las Ciencias del Aprendizaje .
  7. ^ Ngar-Fun, Liu y David Carless Comentarios de los pares: el elemento de aprendizaje de la evaluación entre pares p.281
  8. ^ Sadler, Philip M. y Eddie Good El impacto de la autocalificación y la calificación de los pares en el aprendizaje de los estudiantes p.24
  9. ^ Fan, Yumei; Xu, Jinfen (diciembre de 2020). "Explorando la participación de los estudiantes con comentarios de sus pares sobre la escritura en L2". Revista de escritura en un segundo idioma . 50 : 100775. doi : 10.1016/j.jslw.2020.100775. ISSN  1060-3743.
  10. ^ Turpin, Kristen M. (26 de marzo de 2019). "Capacitación de estudiantes de lenguas extranjeras para que respondan entre pares: un enfoque de multialfabetización". Diario L2 . 11 (1). doi : 10.5070/l211140673 . ISSN  1945-0222.
  11. ^ Lin-Agler, Lin Miao, DeWayne Moore y Karen M. Zabrucky Efectos de la personalidad en las autoevaluaciones metacognitivas p. 461
  12. ^ abc Sadler, Philip M. y Eddie Good El impacto de la autocalificación y la calificación de los pares en el aprendizaje de los estudiantes p.3
  13. ^ Christensen, Vibeke; Hobel, Peter (18 de diciembre de 2020). "Tutores de escritura disciplinaria en el trabajo: un estudio del carácter de la retroalimentación brindada sobre la escritura académica en los programas de licenciatura en el Departamento de Humanidades". Revista de escritura académica . 10 (1): 113–127. doi : 10.18552/joaw.v10i1.613. ISSN  2225-8973.
  14. ^ Kristanto, Yosep Dwi (2018). "Evaluación por pares previa a la instrucción mejorada con tecnología: exploración de las percepciones de los estudiantes en un curso de métodos estadísticos". Investigación y Evaluación en Educación . 4 (2): 105-116. arXiv : 2002.04916 . doi : 10.21831/reid.v4i2.20951. S2CID  149711864.
  15. ^ Sadler, Philip M. y Eddie Good El impacto de la autocalificación y la calificación de los pares en el aprendizaje de los estudiantes p.1
  16. ^ Gritar, RMA; Taremaa, P.; Leijen, DAJ (febrero de 2021). "El efecto y el efecto de los comentarios de retroalimentación escrita asincrónica en el proceso de retroalimentación entre pares: un enfoque de estudio de caso etnográfico dentro de un grupo de redacción de doctorado en inglés L2". Revista de investigación escrita . 12 (3): 531–600. doi : 10.17239/jowr-2021.12.03.02 . ISSN  2030-1006.
  17. ^ Ozkul, Altay. Respuesta de los pares en escritura L1: impacto en las revisiones y las percepciones de los estudiantes (tesis). Universidad del Estado de Iowa.
  18. ^ ab Sadler, Philip M. y Eddie Good El impacto de la autocalificación y la calificación de los pares en el aprendizaje de los estudiantes p.16
  19. ^ ab Sadler, Philip M. y Eddie Good El impacto de la autocalificación y la calificación de los pares en el aprendizaje de los estudiantes p.23
  20. ^ Strong, Brent, Mark Davis y Val Hawks AUTOCALIFICACIÓN EN CLASES GRANDES DE EDUCACIÓN GENERAL p.52
  21. ^ Dannels, Deanna P. y Kelly Norris Martin. "Críticas críticas: un análisis de género de la retroalimentación entre estudios de diseño desde principiantes hasta expertos". Revista de Comunicación Técnica y Empresarial 22.2 (2008): 135-159.
  22. ^ Goldschmidt, Gabriela, Hagay Hochman e Itay Dafni. "El estudio de diseño “crítico”: comunicación profesor-alumno". AI EDAM 24.3 (2010): 285-302.
  23. ^ Schwartz, Daniel L., Jessica M. Tsang y Kristen P. Blair. El ABC de cómo aprendemos: 26 enfoques científicamente probados, cómo funcionan y cuándo usarlos. WW Norton & Company, 2016.
  24. ^ Arenque, Scarlett R. y col. "¡Inspírate!: comprender cómo y por qué se utilizan los ejemplos en la práctica del diseño creativo". Actas de la Conferencia SIGCHI sobre factores humanos en sistemas informáticos. ACM, 2009.
  25. ^ Newman, Mark W. y James A. Landay. "Mapas del sitio, guiones gráficos y especificaciones: un esbozo de la práctica del diseño de sitios web". Actas de la 3ª conferencia sobre Diseño de sistemas interactivos: procesos, prácticas, métodos y técnicas. ACM, 2000.
  26. ^ Cambre, Julia, Scott Klemmer y Chinmay Kulkarni. "Juxtapeer: la revisión comparativa por pares produce comentarios de mayor calidad y promueve una reflexión más profunda". Actas de la Conferencia CHI de 2018 sobre factores humanos en sistemas informáticos. ACM, 2018.
  27. ^ Kang, Hyeonsu B. y col. "Paragon: una galería en línea para mejorar los comentarios sobre el diseño con ejemplos visuales". Actas de la Conferencia CHI de 2018 sobre factores humanos en sistemas informáticos. ACM, 2018.
  28. ^ Potter, Tiffany y otros. "ComPAIR: una nueva herramienta en línea que utiliza el juicio comparativo adaptativo para respaldar el aprendizaje con comentarios de pares". Investigación de enseñanza y aprendizaje 5.2 (2017): 89-113.
  29. ^ Sadler, D. Royce. "La evaluación formativa y el diseño de sistemas instruccionales". Ciencias de la instrucción 18.2 (1989): 119-144.
  30. ^ Andrade, Heidi y Ying Du Respuestas de los estudiantes a la autoevaluación basada en criterios p.287
  31. ^ Li, Lawrence KY Algunas mejoras en la evaluación por pares de proyectos grupales p.5
  32. ^ Li, Lawrence KY Algunas mejoras en la evaluación por pares de proyectos grupales p.8
  33. ^ ab Li, Lawrence KY Algunas mejoras en la evaluación por pares de proyectos grupales p.9
  34. ^ Ryan, Gina J. y col. Pares, profesores y autoevaluación de la participación en clase p.56
  35. ^ Raman, Karthik y Thorsten Joachims. "Métodos de calificación ordinal entre pares". Actas de la vigésima conferencia internacional ACM SIGKDD sobre descubrimiento de conocimiento y minería de datos. ACM, 2014.
  36. ^ Chen, Xi y col. "Agregación de clasificación por pares en un entorno de colaboración colectiva". Actas de la sexta conferencia internacional ACM sobre búsqueda web y minería de datos. ACM, 2013.
  37. ^ Kotturi, Yasmine y col. "Superando los conflictos de intereses: algoritmos e interfaces para evaluar a los pares de manera imparcial". 2013.
  38. ^ Noothigattu, Ritesh, Nihar B. Shah y Ariel D. Procaccia. "Elegir cómo elegir los papeles". Preimpresión de arXiv arXiv:1808.09057 (2018).
  39. ^ Sadler, Philip M. y Eddie Good El impacto de la autocalificación y la calificación de los pares en el aprendizaje de los estudiantes p.9

Referencias

Otras lecturas