stringtranslate.com

Evaluación del centro de redacción

La evaluación de los centros de escritura se refiere a un conjunto de prácticas que se utilizan para evaluar los espacios de los centros de escritura . La evaluación de los centros de escritura se basa en las teorías más amplias de los métodos y aplicaciones de evaluación de la escritura , centrándose en cómo se pueden aplicar esos procesos a los contextos de los centros de escritura. En muchos casos, la evaluación de los centros de escritura y cualquier evaluación de las estructuras de apoyo académico en los entornos universitarios también se basa en los principios de la evaluación programática. [1] Como resultado, la evaluación de los centros de escritura puede considerarse una rama de la evaluación programática, y los métodos y enfoques utilizados aquí pueden aplicarse a una variedad de estructuras de apoyo académico, como los espacios de estudio digitales .

Historia

Si bien los centros de escritura han sido características prominentes en los entornos universitarios desde la década de 1970 en la educación superior estadounidense , quedan preguntas sobre el papel del centro de escritura en la mejora de la capacidad de escritura de los estudiantes. [2] Al discutir la falta de discusión sobre la evaluación del centro de escritura, Casey Jones compara los centros de escritura con el grupo Alcohólicos Anónimos , afirmando que "tanto AA como los laboratorios de escritura tienen características similares" pero "la estructura de AA complica la investigación empírica , el resultado deseado, la sobriedad , puede definirse y medirse claramente. La evaluación clara del desempeño de la escritura es una tarea mucho más difícil". [2] Entre 1985 y 1989, el Writing Lab Newsletter, una publicación popular entre los directores de centros de escritura, carecía de una discusión sobre la evaluación dura de los centros de escritura, lo que ilustra la falta temprana de discusión sobre la evaluación en el contexto de los centros de escritura, centrándose principalmente en consejos y guías prácticas. [3] En muchos casos, los directores de los centros de redacción o los administradores de los programas de redacción (WPAs) son responsables de evaluar los centros de redacción y deben comunicar estos resultados a la administración académica y a las distintas partes interesadas . [4] La evaluación se considera beneficiosa para los centros de redacción porque nos lleva a asumir los comportamientos profesionales y éticos importantes no solo para los centros de redacción sino para toda la educación superior. [5]

Métodos

Una de las principales fuentes de métodos y enfoques para la evaluación de los centros de redacción proviene de la evaluación de la escritura en general y de la evaluación programática. James Bell sostiene que los directores de los centros de redacción deberían "recurrir a la evaluación del programa educativo y seleccionar los tipos generales de evaluaciones más apropiados para los centros de redacción". [6] Los métodos de evaluación de los centros de redacción se pueden dividir en gran medida en dos formas principales de métodos: cualitativos y cuantitativos. Los métodos cualitativos se basan en el deseo de comprender la enseñanza y el aprendizaje desde las acciones y perspectivas de los profesores y los alumnos, y han dominado en gran medida la creación de conocimiento en los estudios de composición , particularmente en los últimos veinte años. [7] Mientras tanto, los métodos cuantitativos se derivan de la creencia de que el mundo funciona en patrones predecibles, que pueden estar aislados en términos de sus causas y efectos o las fortalezas de sus relaciones (es decir, correlación). [7] Sin embargo, el uso de métodos cuantitativos en los contextos de los centros de redacción deja espacio para que surjan problemas, como la interpretación incorrecta de los datos para apoyar el trabajo del centro de redacción, [8] o la no elección de datos apropiados para medir el éxito de los estudiantes, como las puntuaciones de la prueba de redacción del ACT o las calificaciones de los cursos de composición de primer año . [9] [10] Algunos académicos de la escritura apoyan los métodos cuantitativos más a fondo que otros, y los consideran más útiles cuando se los reformula en una epistemología posmoderna , ya que la mayoría de los directores de centros de escritura suscriben una teoría de la epistemología que ve el conocimiento como construido, tenue y relativo. [11] Los académicos de los centros de escritura como Stephen North agrupan estas metodologías en tres enfoques más amplios: Reflexiones sobre la experiencia, o mirar atrás a los eventos de los centros de escritura para ayudar a otros en situaciones similares; Especulación, o una teoría de cómo deberían funcionar los centros de escritura; y Encuestas, o lo que él defiende como enumeración. [12] Encajando y combinando estos métodos, varios académicos de los estudios de escritura han publicado artículos sobre los métodos utilizados para evaluar diferentes elementos de los centros de escritura que se pueden ver en las secciones siguientes.

Grupos focales

Un método de evaluación utilizado en los centros de redacción son los grupos de discusión . En estos centros, el uso de este método permite a los directores de los centros recopilar respuestas a preguntas específicas y utilizar la dinámica social del grupo para permitir que los participantes intercambien respuestas entre sí, lo que da como resultado cambios que se pueden implementar rápidamente para hacer que su organización o producto sea más productivo. [13] Para la evaluación de los centros de redacción, los grupos de discusión deben estar compuestos por entre 7 y 12 personas. [13]

Encuestas

Otro método común para evaluar los centros de escritura es el uso de encuestas , uno de los métodos cuantitativos más comunes utilizados para recopilar datos en los centros de escritura. [12] Esto encaja en la noción de enumeración mencionada por North anteriormente. Las encuestas se utilizan comúnmente para determinar información como la satisfacción de los estudiantes con las sesiones de tutoría en forma de una encuesta posterior a la sesión, o la confianza de los estudiantes como escritores después de sus sesiones en el centro de escritura. [11] Debido a la naturaleza de las sesiones de tutoría, la recopilación de este tipo de datos en medio de las sesiones puede resultar difícil y, como tal, mientras escribía en 1984, North afirmó que "no hay un solo estudio publicado sobre lo que sucede en las tutorías de los centros de escritura". [12] Por lo general, las encuestas determinan el número de estudiantes vistos, el número de horas de tutoría, la reacción de los estudiantes al centro, la reacción de los maestros al centro, etc. [12]

Sesiones de grabación

Algunos académicos de centros de escritura consideran que las sesiones de grabación son un método viable de recopilación de datos que responde a las críticas de personas como Stephen North sobre la falta de investigación sobre lo que sucede durante las sesiones de tutoría. [12] Para lograr esto, los directores de centros de escritura que utilizan este método estudian explícitamente lo que sucede durante una sesión de tutoría utilizando cintas de audio o video y analizando las transcripciones. [5]

Planes de evaluación

Algunos académicos de centros de redacción fomentan los planes de evaluación como un medio para planificar y poner en práctica mejoras en los centros. Varios académicos de centros de redacción recomiendan a los directores que desarrollen planes de evaluación y ofrecen una serie de enfoques para hacerlo. Estos suelen comenzar con determinar qué medir, validar estos planes y presentar estos hallazgos a las partes interesadas pertinentes.

Desarrollo de planes de evaluación

Un ejemplo destacado de un plan de evaluación se puede ver en el Plan de Evaluación de la Mancomunidad de Virginia . [5] Al analizar el VCAP, Isabelle Thompson enumera seis heurísticas generales de evaluación de programas que encajan en este contexto. Según ella, la evaluación y la mejora de los programas deberían ser: [5]

Según Thompson, para desarrollar un plan de evaluación, los directores de centros de escritura deberían: [5]

  1. Preparar una declaración de misión para el centro de redacción basada en los servicios que el centro proporciona y aspira a proporcionar. [7] [14]
  2. Desarrollar metas, objetivos o resultados educativos previstos para el centro [1] [7] [15]
  3. Determinar métodos de evaluación adecuados para el centro de redacción. [10]
  4. Realizar la evaluación de los servicios del centro de redacción.
  5. Analizar los resultados de la evaluación y sacar conclusiones sobre los resultados en términos de resultados y las fortalezas y debilidades actuales del centro de escritura.
  6. Utilizar los resultados para generar mejoras en los servicios del centro. [7]

Otros, como Neal Lerner, apoyan marcos para planes de evaluación de centros de escritura que consisten en heurísticas como determinar: quién participa en el centro de escritura, qué necesitan los estudiantes del centro de escritura, qué tan satisfechos están los estudiantes con el centro de escritura, identificar los entornos del campus, los resultados, encontrar evaluaciones institucionales comparables, analizar estándares aceptados a nivel nacional y medir la relación costo-efectividad. [15]

Validación de planes de evaluación

La evaluación de la escritura se basa en el concepto de validez , o en asegurar que se mide lo que se pretende medir. [16] Chris Gallagher apoya el desarrollo de evaluaciones de escritura a nivel local, algo que muchos académicos en evaluación de escritura apoyan firmemente, [17] [18] [19] pero agrega que deberíamos validar nuestros métodos y elecciones de evaluación a mayor escala [20] y sugiere las siguientes heurísticas para hacerlo en su Heurística de revisión de calidad de evaluación:

  1. Describa brevemente el programa de escritura, incluidos los objetivos curriculares y didácticos, las limitaciones y oportunidades institucionales (por ejemplo, cuestiones de recursos, condiciones laborales, ofertas de desarrollo profesional) y la demografía de los estudiantes y los docentes. Adjunte la documentación pertinente.
  2. Describa brevemente la evaluación y su relación, si la hubiera, con otras evaluaciones realizadas en el programa. Si esta evaluación forma parte de un plan de evaluación general, adjunte el plan.
  3. Responda las siguientes preguntas sobre la evaluación en revisión:
    • Significativo:
      • ¿Cuáles son los propósitos de esta evaluación? ¿Cuáles son sus usos previstos? ¿Cómo se llegó a estos propósitos? ¿Quién los formuló? ¿Por qué y para quién son importantes esos propósitos? ¿Cómo se dieron a conocer estos propósitos a los estudiantes y profesores? ¿Cómo se corresponde el contenido de la evaluación con su propósito?
    • Adecuado
      • ¿En qué medida la evaluación es adecuada para este contexto, estos participantes y sus propósitos y usos previstos? ¿En qué medida la evaluación refleja los valores, creencias y aspiraciones de los participantes y sus comunidades inmediatas?
    • Útil
      • ¿Cómo ayuda la evaluación a los estudiantes a aprender y ayuda a los docentes a enseñar? ¿Cómo proporciona la evaluación información que puede utilizarse para mejorar la enseñanza y el aprendizaje, el currículo, el desarrollo profesional, las políticas del programa, la rendición de cuentas, etc.? ¿Quién utilizará la información generada a partir de esta evaluación y con qué fines?
    • Justo
      • ¿Cómo garantiza la evaluación que todos los estudiantes puedan hacer y demostrar su mejor trabajo? ¿Cómo contribuye la evaluación a la creación o el mantenimiento de condiciones de trabajo adecuadas para profesores y estudiantes? ¿Cómo garantiza una remuneración y/o un reconocimiento adecuados por el trabajo necesario para producirla?
    • Confiable
      • ¿Cómo se obtienen los resultados de la evaluación y quién los obtiene? ¿Cómo garantiza la evaluación que estos resultados representan el mejor criterio profesional de los educadores? ¿Cómo garantiza la evaluación que los resultados se deriven de un proceso que respeta las diferencias articuladas al mismo tiempo que busca puntos en común para las decisiones?
    • Justo
      • ¿Cuáles son las consecuencias previstas e imprevistas de esta evaluación para los estudiantes, los profesores, los administradores, el programa, la institución, etc.? ¿Cómo garantiza la evaluación que estas consecuencias sean en beneficio de los participantes, especialmente los estudiantes y los profesores?
  4. A la luz de esta revisión, ¿qué cambios, si los hay, planea hacer en esta evaluación? [20]

Presentación de los resultados a las partes interesadas

Después de diseñar e implementar un plan de evaluación en contextos de centros de redacción, los expertos en evaluación recomiendan considerar cómo se proporciona esta información al resto de los administradores en el entorno universitario. [21] [22] Los profesionales de los centros de redacción recomiendan que los directores de estos espacios equilibren la utilidad de los hallazgos en las evaluaciones de los centros de redacción con la mejora del espacio en sí y el atractivo retórico para la audiencia prevista . [7] Algunos administradores aconsejan utilizar datos cuantificables y conectar esos datos con conceptos importantes en una universidad determinada, como la retención , la persistencia y el tiempo hasta la titulación , aunque los factores importantes a evaluar y presentar pueden variar según lo que valore la administración de una universidad determinada. [22]

En su libro Building Writing Center Assessments that Matter, Ellen Schendel y William J. Macauley Jr. ofrecen un conjunto de heurísticas para presentar información a las partes interesadas en el ámbito universitario:

Algunos de estos consejos, como el deseo de contar una historia sobre el espacio del centro de escritura, entran en conflicto directo con los consejos de administradores como Josephine Koster, quien afirma que "los administradores no quieren leer ensayos. Los directores deberían utilizar listas con viñetas, encabezados, gráficos y cuadros, y resúmenes ejecutivos en los documentos enviados a los administradores". [22] Estos conflictos parecen apoyar la mayor importancia que se otorga a las prácticas locales de evaluación de la escritura [17] [18] [19] a la hora de determinar lo que los administradores locales pueden esperar.

Véase también

Referencias

  1. ^ ab Bell, James H. (2001). "Cuando se hacen preguntas difíciles: evaluación de los centros de redacción". The Writing Center Journal . 21 (1): 7–28.
  2. ^ ab Jones, Casey (2001). "La relación entre los centros de escritura y la mejora de la capacidad de escritura: una evaluación de la literatura". Educación : 3–20.
  3. ^ Bell, James (marzo de 1989). "What are We Talking About?: A Content Analysis of the Writing Lab Newsletter" (PDF) . Boletín del Laboratorio de Escritura . Consultado el 30 de octubre de 2015 .
  4. ^ Gallagher, Chris (otoño de 2009). "¿Qué deben saber las WPA sobre la evaluación de la escritura? Una propuesta inmodesta". WPA: administración de programas de escritura . Consultado el 30 de octubre de 2015 .
  5. ^ abcde Thompson, Isabelle (2006). "Evaluación del centro de escritura: por qué y un poco de cómo". Writing Center Journal . 26 (1): 33–54.
  6. ^ Bell, James H. (1998). "Cuando se plantean preguntas difíciles: evaluación de los centros de redacción". {{cite journal}}: Requiere citar revista |journal=( ayuda )
  7. ^ abcdefg Schendel, Ellen; Macauley, William J. (1 de enero de 2012). Building Writing Center Evaluaciones que importan. Logan: Utah State University Press. ISBN 9780874218343.
  8. ^ Enders, Doug (2005). "Evaluación del centro de escritura: un relato cualitativo de un estudio cuantitativo" (PDF) . Boletín del Laboratorio de Escritura . Consultado el 30 de octubre de 2015 .
  9. ^ Lerner, Neal (septiembre de 1997). "Contar frijoles y hacer que los frijoles cuenten" (PDF) . Boletín del Laboratorio de Escritura . Consultado el 30 de octubre de 2015 .
  10. ^ ab Lerner, Neal (septiembre de 2001). "Elegir los frijoles con sabiduría" (PDF) . The Writing Lab Newsletter . Consultado el 30 de octubre de 2015 .
  11. ^ ab Carino, Peter; Enders, Doug (2001). "¿La frecuencia de visitas al centro de redacción aumenta la satisfacción de los estudiantes? Un estudio de correlación estadística (o una historia)". Writing Center Journal . 22 (1): 83–103. ISSN  0889-6143.
  12. ^ abcde North, Stephen (1 de septiembre de 1984). "Investigación en centros de redacción: cómo poner a prueba nuestras suposiciones". Centros de redacción: teoría y administración . Urbana, Ill.: Consejo Nacional de Maestros. págs. 24–35. ISBN 9780814158784.
  13. ^ ab Cushman, Tara; Marx, Lindsey; Brower, Carleigh; Holahan, Katie; Boquet, Elizabeth (marzo de 2005). "Uso de grupos de discusión para evaluar la eficacia de los centros de redacción" (PDF) . Boletín del Laboratorio de Redacción . Consultado el 30 de octubre de 2015 .
  14. ^ Building Writing Center Evaluaciones que importan (1.ª ed.). Logan, Utah: Utah State University Press. 6 de septiembre de 2012. pág. 40. ISBN 9780874218169.
  15. ^ ab Lerner, Neal (1 de octubre de 2003). "Evaluación del centro de redacción: en busca de la "prueba" de nuestra eficacia". Center Will Hold (1.ª ed.). Logan, Utah: Utah State University Press. págs. 58-73. ISBN 9780874215700.
  16. ^ Yancey, Kathleen Blake (1 de febrero de 1999). "Mirar hacia atrás mientras miramos hacia adelante: la historicización de la evaluación de la escritura". Redacción y comunicación universitaria . 50 (3): 487. doi :10.2307/358862. JSTOR  358862.
  17. ^ ab O'Neill, Peggy; Moore, Cindy; Huot, Brian (20 de marzo de 2009). Guía para la evaluación de la escritura universitaria (1.ª edición). Logan, Utah: Utah State University Press. pág. 57. ISBN 9780874217322.
  18. ^ ab Broad, Bob (1 de marzo de 2003). Lo que realmente valoramos: más allá de las rúbricas en la enseñanza y la evaluación de la escritura (1.ª ed.). Logan: Utah State University Press. ISBN 9780874215533.
  19. ^ ab Adler-Kassner, Linda; O'Neill, Peggy (1 de agosto de 2010). Reformular la evaluación de la escritura para mejorar la enseñanza y el aprendizaje (1.ª ed.). Logan, Utah: Utah State University Press. pág. 2. ISBN 9780874217988.
  20. ^ ab Gallagher, Chris (2010). "Evaluar localmente, validar globalmente: Heurísticas para validar evaluaciones de escritura locales" (PDF) . WPA: Writing Program Administration . 34 (1): 10–32 . Consultado el 30 de octubre de 2015 .
  21. ^ Simpson, Jeanne (23 de marzo de 2006). "Gestión de encuentros con la administración central". The Writing Center Director's Resource Book (Libro de recursos para el director del centro de redacción). Mahwah, Nueva Jersey: Routledge. pp. 199–214. ISBN 9780805856088.
  22. ^ abc Koster, Josephine (1 de octubre de 2003). "Administración en todo el currículo: sobre cómo practicar lo que predicamos". Center Will Hold (1.ª edición). Logan, Utah: Utah State University Press. págs. 151–165. ISBN 9780874215700.