stringtranslate.com

Educación informática

Niños de escuela primaria codificando en un programa de robótica

La educación en ciencias de la computación o educación en computación es el campo de la enseñanza y el aprendizaje de la disciplina de la ciencia de la computación , [1] [2] [3] [4] [5] [6] y el pensamiento computacional . [7] [8] [9] El campo de la educación en ciencias de la computación abarca una amplia gama de temas, desde habilidades básicas de programación hasta diseño avanzado de algoritmos y análisis de datos. Es un campo de rápido crecimiento que es esencial para preparar a los estudiantes para carreras en la industria de la tecnología y otros campos que requieren habilidades computacionales. [10]

La formación en informática es esencial para preparar a los estudiantes para la fuerza laboral del siglo XXI. A medida que la tecnología se integra cada vez más en todos los aspectos de la sociedad, aumenta la demanda de informáticos cualificados. Según la Oficina de Estadísticas Laborales, se prevé que el empleo en ocupaciones relacionadas con la informática y la tecnología de la información "crezca un 21 por ciento entre 2021 y 2031", mucho más rápido que el promedio de todas las ocupaciones. [11]

Además de preparar a los estudiantes para carreras en la industria tecnológica, la educación en ciencias de la computación también promueve habilidades de pensamiento computacional, que son valiosas en muchos campos, incluidos los negocios, la atención médica y la educación. Al aprender a pensar algorítmicamente y resolver problemas de manera sistemática, los estudiantes pueden convertirse en solucionadores de problemas más efectivos y pensadores críticos.

Fondo

En los primeros tiempos de la programación informática, no era necesario establecer ningún tipo de sistema educativo, ya que las únicas personas que trabajaban con ordenadores en ese momento eran los primeros científicos y matemáticos. La programación informática no era lo suficientemente popular como para justificar su enseñanza, ni tampoco se había llegado a un punto en el que cualquiera que no fuera un experto pudiera sacar provecho de ella. Sin embargo, pronto se comprendió que los matemáticos no eran adecuados para el trabajo en informática y que se necesitarían personas totalmente centradas en el tema. [12] A medida que pasaba el tiempo, había una mayor necesidad de personas formadas específicamente en programación informática para satisfacer las demandas de un mundo cada vez más dependiente del uso de ordenadores. Inicialmente, solo los colegios y universidades ofrecían cursos de programación informática, pero con el tiempo, las escuelas secundarias e incluso las escuelas medias implementaron programas de informática. [12]

En comparación con la educación científica y la educación matemática , la educación en ciencias de la computación (CS) es un campo mucho más joven. [13] En la historia de la computación , las computadoras digitales recién se construyeron alrededor de la década de 1940, aunque la computación ha existido durante siglos desde la invención de las computadoras analógicas . [14]

Otro diferenciador de la educación en ciencias de la computación es que hasta hace poco se ha enseñado principalmente solo a nivel universitario, con algunas excepciones notables en Israel, Polonia y el Reino Unido con la BBC Micro en la década de 1980 como parte de la educación en ciencias de la computación en el Reino Unido . [6] [15] La informática ha sido parte de los planes de estudio escolares desde los 14 o 16 años en algunos países durante algunas décadas, pero típicamente como una materia optativa.

La educación primaria y secundaria en ciencias de la computación es relativamente nueva en los Estados Unidos y muchos profesores de informática de K-12 enfrentan obstáculos para integrar la instrucción de informática, como el aislamiento profesional, los recursos limitados de desarrollo profesional de informática y los bajos niveles de autoeficacia en la enseñanza de informática . [16] [17] [18] Según un informe de 2021, solo el 51% de las escuelas secundarias en los EE. UU. ofrecen informática. [19] Los profesores de informática de primaria, en particular, tienen una menor eficacia en la enseñanza de informática y tienen menos posibilidades de implementar informática en su instrucción que sus compañeros de secundaria y preparatoria. [16] Se ha demostrado que conectar a los profesores de informática con recursos y compañeros utilizando métodos como las comunidades virtuales de práctica ayuda a los profesores de informática y STEM a mejorar su autoeficacia docente e implementar temas de informática en la instrucción de los estudiantes. [16] [17]

Plan de estudios

Al igual que con la mayoría de las disciplinas, la informática se beneficia del uso de diferentes herramientas y estrategias en diferentes puntos del desarrollo de un estudiante para garantizar que aprovechen al máximo la enseñanza. Los lenguajes de programación visual como Scratch y MIT App Inventor son efectivos en las escuelas primarias y secundarias como una buena introducción a cómo funcionan los lenguajes de programación con una estructura de programación basada en bloques simple y fácil de entender. [20] Una vez que los estudiantes han comprendido los conceptos básicos de la programación a través de estos lenguajes, generalmente los maestros pasarán a un lenguaje de programación basado en texto fácil de usar, como Python , donde la sintaxis es mucho más simple en comparación con los lenguajes más complejos. Generalmente, a los estudiantes se les enseña con lenguajes que son populares entre las empresas profesionales y los programadores para que puedan familiarizarse con los lenguajes que realmente se usan en la fuerza laboral. Por lo tanto, en la escuela secundaria y la universidad, las clases tienden a centrarse en usos más complejos de Python, así como otros lenguajes como Java , C++ y HTML . [21] A pesar de esto, no es completamente necesario centrarse en los lenguajes de codificación más populares o utilizados, ya que gran parte de la ciencia informática se basa en el aprendizaje de buenas prácticas de codificación que se pueden aplicar a cualquier lenguaje de alguna forma.

Métodos de enseñanza

Los métodos de enseñanza eficaces en informática suelen diferir de los de otras materias, ya que se ha comprobado que el formato estándar de presentación de diapositivas y libro de texto que se suele utilizar en las escuelas es menos eficaz en comparación con las materias académicas estándar. [22] Debido a la naturaleza de resolución de problemas de la informática, se ha comprobado que un tipo de plan de estudios centrado en problemas es el más eficaz, ya que ofrece a los estudiantes rompecabezas, juegos o pequeños programas con los que interactuar y crear. En lugar de aplicar técnicas o estrategias aprendidas a pruebas o cuestionarios, los estudiantes deben utilizar el material aprendido en clase para completar los programas y demostrar que están siguiendo la clase. [22] Además de esto, se ha comprobado que desarrollar métodos de enseñanza que busquen mejorar y guiar a los estudiantes en la resolución de problemas y las habilidades creativas tiende a ayudarlos a tener éxito en informática y otras clases. [20] El aspecto de resolución de problemas de la educación en informática es a menudo la parte más difícil de abordar, ya que muchos estudiantes pueden tener dificultades con el concepto, especialmente cuando es probable que no hayan tenido que aplicarlo de esa manera antes de este punto.

Otra cosa que se ha vuelto popular en los últimos tiempos son los cursos de programación en línea y los bootcamps de programación. Debido a la naturaleza de la informática como disciplina, hay muchas personas que se dan cuenta de su interés por ella recién más tarde en la vida, o tal vez no estaba ampliamente disponible cuando asistían a la escuela secundaria o la universidad. Estas oportunidades a menudo implican cursos rigurosos que están más orientados a preparar a las personas para la fuerza laboral en lugar de un enfoque más académico. [23] Los bootcamps de programación se han convertido en una excelente manera para que las personas ingresen al mercado de la informática sin tener que volver a la escuela.

Investigación en educación informática

La investigación en educación informática (CER) o investigación en educación en ciencias de la computación es un campo interdisciplinario que se centra en el estudio de la enseñanza y el aprendizaje de la informática. [5] [24] Es un subcampo tanto de la investigación en ciencias de la computación como de la educación, y se ocupa de comprender cómo se enseña, aprende y evalúa la informática en una variedad de entornos, como escuelas primarias y secundarias, colegios y universidades, y entornos de aprendizaje en línea. [ cita requerida ]

Fondo

La investigación en el campo de la enseñanza de la informática surgió como campo de estudio en la década de 1970, cuando los investigadores comenzaron a explorar la eficacia de diferentes enfoques para enseñar programación informática. Desde entonces, el campo ha crecido hasta abarcar una amplia gama de temas relacionados con la enseñanza de la informática, incluidos el diseño curricular, la evaluación, la pedagogía y la diversidad e inclusión. [ cita requerida ]

Temas de estudio

Uno de los objetivos principales de la investigación en el ámbito de la enseñanza de la informática es mejorar la enseñanza y el aprendizaje de la informática. Para ello, los investigadores estudian diversos temas, entre ellos:

Diseño curricular

Los investigadores en el campo de la enseñanza de la informática buscan diseñar planes de estudio que sean eficaces y atractivos para los estudiantes. Esto puede implicar el estudio de la eficacia de diferentes lenguajes de programación o el desarrollo de nuevos enfoques pedagógicos que promuevan el aprendizaje activo. [ cita requerida ]

Evaluación

Los investigadores de la enseñanza de las ciencias de la computación están interesados ​​en desarrollar formas eficaces de evaluar los resultados del aprendizaje de los estudiantes. Esto puede implicar el desarrollo de nuevas medidas de los conocimientos o las habilidades de los estudiantes, o la evaluación de la eficacia de diferentes métodos de evaluación. [ cita requerida ]

Pedagogía

Los investigadores en el campo de la enseñanza de la informática están interesados ​​en explorar diferentes métodos de enseñanza y estrategias de enseñanza. Esto puede implicar estudiar la eficacia de las clases magistrales, los tutoriales en línea o el aprendizaje entre pares. [ cita requerida ]

Diversidad e inclusión

Los investigadores de la enseñanza de las ciencias de la computación están interesados ​​en promover la diversidad y la inclusión en la enseñanza de las ciencias de la computación. Esto puede implicar el estudio de los factores que contribuyen a la subrepresentación de ciertos grupos en las ciencias de la computación y el desarrollo de intervenciones para promover la inclusión y la equidad. [ cita requerida ]

Comunidades de investigación

Las 50 mejores universidades de informática de América del Norte [25]

La Asociación de Maquinaria Informática (ACM) dirige un Grupo de Interés Especial (SIG) sobre educación en ciencias de la computación conocido como SIGCSE , que celebró su 50.° aniversario en 2018, lo que lo convierte en uno de los Grupos de Interés Especial de la ACM más antiguos y de mayor duración. [26] Un resultado de la investigación sobre educación informática son los problemas de Parsons . [ cita requerida ]

Perspectivas de género en la educación informática

En muchos países, existe una brecha de género significativa en la educación en ciencias de la computación. En 2015, el 15,3% de los estudiantes de ciencias de la computación que se graduaron de instituciones que no otorgaban títulos de doctorado en los EE. UU. eran mujeres, mientras que en las instituciones que otorgaban títulos de doctorado, la cifra fue del 16,6%. [27] El número de mujeres que recibieron un doctorado en los EE. UU. fue del 19,3% en 2018. [28] En casi todas partes del mundo, menos del 20% de los graduados en ciencias de la computación son mujeres. [29]

Este problema surge principalmente debido a la falta de interés de las niñas por la informática desde el nivel primario. A pesar de los numerosos esfuerzos de los programas diseñados específicamente para aumentar la proporción de mujeres en este campo, no se ha observado ninguna mejora significativa. Además, se ha observado una tendencia a la baja en la participación de las mujeres en las últimas décadas. [30]

La principal razón del fracaso de estos programas es que casi todos ellos se centraban en las niñas de la escuela secundaria o de niveles superiores de educación. Los investigadores sostienen que para entonces las mujeres ya han tomado una decisión y empiezan a formarse estereotipos sobre las científicas informáticas. La informática se percibe como un campo dominado por los hombres, seguido por personas que son nerds y carecen de habilidades sociales. [30] Todas estas características parecen ser más perjudiciales para una mujer que para un hombre. Por lo tanto, para romper estos estereotipos e involucrar a más mujeres en la informática, es crucial que existan programas especiales de divulgación diseñados para desarrollar el interés en las niñas desde el nivel de la escuela secundaria y prepararlas para una trayectoria académica hacia las ciencias duras. [29]

Es evidente que hay algunos países en Asia y África donde no existen estos estereotipos y se alienta a las mujeres a seguir una carrera científica desde el nivel primario, lo que da como resultado una brecha de género que es prácticamente inexistente. En 2011, las mujeres obtuvieron la mitad de los títulos en informática en Malasia. [31] En 2001, el 55 por ciento de los graduados en informática en Guyana eran mujeres. [32]

Tendencias y desarrollos recientes

Recientemente, la educación computacional ha tenido un mayor énfasis en la incorporación de conocimientos computacionales en la educación en todos los niveles. Esto se debe a que el mundo se está volviendo cada vez más impulsado por la tecnología. Organizaciones como Code.org e iniciativas como la Hora del Código y los cursos masivos abiertos en línea (MOOC) han desempeñado un papel importante en la promoción de la educación en ciencias de la computación y en hacer que la codificación sea accesible para estudiantes de todo el mundo; especialmente marcando una diferencia para las mujeres, las comunidades desfavorecidas y subrepresentadas. Estas plataformas de aprendizaje en línea también han hecho que la educación en computación sea más accesible, permitiendo que las personas aprendan a codificar de forma remota. Además, vemos que la tecnología se encuentra cada vez más en numerosos campos como la salud, los negocios y la tecnología. [33] [34]

Desafíos

A lo largo de los años, la enseñanza de la informática se ha enfrentado a muchos problemas diversos que, de una forma u otra, han contribuido a su impopularidad. Uno de los problemas más impactantes es el coste del equipo necesario para enseñar la disciplina de forma eficaz. [35] En el pasado, no había muchas opciones asequibles para proporcionar ordenadores a todos y cada uno de los estudiantes que querían aprender la disciplina. Debido a esto, la enseñanza de la informática se vio afectada en muchas áreas, con poco o ningún financiamiento restante para enseñar adecuadamente la materia. [36] Esta es la razón principal por la que la enseñanza de la informática es extremadamente mediocre o inexistente en muchas escuelas de Estados Unidos y el Reino Unido. La impopularidad de la materia durante muchos años se debe principalmente a que estaba reservada a quienes podían permitirse el equipo y el software necesarios para enseñarla de forma eficaz. [36]

También ha habido problemas a la hora de encontrar y formar buenos profesores para la materia. En el pasado, muchas escuelas no veían el valor de pagar la formación de los profesores para poder enseñar informática o conseguir las licencias necesarias. Esto ha llevado a que muchas escuelas de zonas desfavorecidas, o simplemente de zonas con poca población, tengan dificultades para contratar a los profesores necesarios para ofrecer un buen plan de estudios de informática. [35] Otro problema con el lado docente de la disciplina es la naturaleza de la propia informática, y que una estructura de enseñanza estándar que utilice diapositivas y libros de texto a menudo ha resultado ineficaz. La informática es una materia muy orientada a la resolución de problemas y a menudo se ha comprobado que la enseñanza puede ser más eficaz cuando se aborda desde esta perspectiva en lugar del formato de clase estándar. [22]

La informática también es conocida por ser una materia muy difícil en las escuelas, con altas tasas de fracaso y abandono a lo largo de los años que se ha enseñado. [22] Esto suele atribuirse al hecho de que la informática como materia es muy intensa en la resolución de problemas y muchos estudiantes pueden tener dificultades con este aspecto. Esto es especialmente cierto en el caso de la escuela secundaria, donde pocas otras materias exigen un calibre tan alto de capacidad de resolución de problemas como la informática. Esto se ve agravado por el hecho de que la informática es una disciplina muy diferente de la mayoría de las demás materias, lo que significa que muchos estudiantes que se enfrentan a ella por primera vez pueden tener muchas dificultades. [22]

A pesar de los desafíos que enfrenta la disciplina, la informática continúa creciendo en popularidad como materia a medida que la tecnología crece y las computadoras se vuelven cada vez más importantes en el aula y en la vida cotidiana.

Véase también

Referencias

  1. ^ Fincher, Sally ; Petre, Marian (2004). Investigación en educación en ciencias de la computación . Londres: Taylor & Francis. ISBN 90-265-1969-9.OCLC 54455019  .
  2. ^ Sentance, Sue ; Barendsen, Erik; Schulte, Carsten (2018). Educación en informática: perspectivas sobre la enseñanza y el aprendizaje en la escuela . Londres: Bloomsbury. ISBN 978-1-350-05711-1.OCLC 999588195  .
  3. ^ Bruckman, Amy; Biggers, Maureen; Ericson, Barbara; McKlin, Tom; Dimond, Jill; DiSalvo, Betsy; Hewner, Mike; Ni, Lijun; Yardi, Sarita (2009). "¡Georgia computa! Mejorando el proceso de formación en informática". Boletín ACM SIGCSE . 41 (1): 86. doi :10.1145/1539024.1508899. ISSN  0097-8418.
  4. ^ Anónimo (2017). "Educación informática". royalsociety.org .
  5. ^ ab Fincher, Sally A .; Robins, Anthony V. (2019). Manual de Cambridge para la investigación en educación informática (PDF) . Cambridge University Press . doi :10.1017/9781108654555. ISBN . 9781108654555. OCLC  1090781199. S2CID  243000064.
  6. ^ ab Furber, Steve (2017). Después del reinicio: educación informática en las escuelas del Reino Unido (PDF) . Londres: Royal Society . ISBN. 9781782522973.
  7. ^ Guzdial, Mark (2008). "Educación: allanando el camino para el pensamiento computacional". Comunicaciones de la ACM . 51 (8): 25–27. doi :10.1145/1378704.1378713. ISSN  0001-0782. S2CID  35737830.
  8. ^ Wing, Jeanette M. (2006). "Pensamiento computacional" (PDF) . Comunicaciones de la ACM . 49 (3): 33–35. doi :10.1145/1118178.1118215. hdl : 10818/29866 . S2CID  : 1693513.
  9. ^ Wing, Jeanette M. (2008). "Pensamiento computacional y pensamiento sobre la computación". Philosophical Transactions of the Royal Society A: Mathematical, Physical and Engineering Sciences . 366 (1881): 3717–3725. Bibcode :2008RSPTA.366.3717W. doi :10.1098/rsta.2008.0118. PMC 2696102 . PMID  18672462. 
  10. ^ Fincher, Sally; Petre, Marian, eds. (26 de septiembre de 2005). Investigación en educación en ciencias de la computación. Taylor & Francis. doi :10.1201/9781482287325. ISBN 978-1-4822-8732-5.
  11. ^ "Científicos de investigación informática y de la información: Manual de perspectivas ocupacionales: Oficina de Estadísticas Laborales de Estados Unidos". www.bls.gov . Consultado el 13 de abril de 2023 .
  12. ^ ab Tedre, M., Simon y Malmi, L.  [fi] (2018). Cambios en los objetivos de la educación informática: un estudio histórico. Computer Science Education , 28 (2), 158–186.
  13. ^ Tedre, Matti; Simon, Simon; Malmi, Lauri (2018). "Objetivos cambiantes de la educación informática: un estudio histórico". Educación en Ciencias de la Computación . 28 (2): 158–186. Bibcode :2018CSEd...28..158T. doi :10.1080/08993408.2018.1486624. S2CID  52884221.
  14. ^ Tedre, Matti (2015). La ciencia de la informática: la configuración de una disciplina . Boca Raton. ISBN 978-1-4822-1769-8.OCLC 870289913  .{{cite book}}: CS1 maint: location missing publisher (link)
  15. ^ Rogers, Yvonne; Shum, Venus; Marquardt, Nic; Lechelt, Susan; Johnson, Rose; Baker, Howard; Davies, Matt (2017). "Del BBC micro al micro:bit y más allá". Interacciones . 24 (2): 74–77. doi :10.1145/3029601. ISSN  1072-5520. S2CID  24258819.
  16. ^ abc Schwarzhaupt, Robert; Liu, Feng; Wilson, Joseph; Lee, Fanny; Rasberry, Melissa (8 de octubre de 2021). "Participación y autoeficacia de los docentes en una comunidad virtual de práctica de docentes de informática desde preescolar hasta 12.º grado". Revista de integración de la informática . 4 (1): 1. doi : 10.26716/jcsi.2021.10.8.34 . ISSN  2574-108X. S2CID  240864514.
  17. ^ ab Kelley, Todd R.; Knowles, J. Geoffery; Holland, Jeffrey D.; Han, Jung (16 de abril de 2020). "Aumento de la autoeficacia de los profesores de secundaria para la instrucción STEM integrada a través de una comunidad de práctica colaborativa". Revista internacional de educación STEM . 7 (1): 14. doi : 10.1186/s40594-020-00211-w . ISSN  2196-7822. S2CID  216034569.
  18. ^ Yadav, Aman; Gretter, Sarah; Hambrusch, Susanne; Sands, Phil (8 de diciembre de 2016). "Expansión de la educación en ciencias de la computación en las escuelas: comprensión de las experiencias y los desafíos de los docentes". Educación en Ciencias de la Computación . 26 (4): 235–254. Bibcode :2016CSEd...26..235Y. doi :10.1080/08993408.2016.1257418. ISSN  0899-3408. S2CID  33792019.
  19. ^ "Estado de la educación en informática en 2021: acelerar la acción mediante la promoción" (PDF) . Code.org, CSTA y ECEP Alliance. 2021.
  20. ^ ab Garneli, V., Giannakos, MN, y Chorianopoulos, K. (marzo de 2015). Educación informática en escuelas primarias y secundarias: una revisión de la literatura. En la Conferencia de Educación en Ingeniería Global IEEE 2015 (EDUCON) (pp. 543–551). IEEE.
  21. ^ [email protected] (28 de septiembre de 2015). "Los lenguajes de la informática". Universidad de Florida Online . Consultado el 4 de agosto de 2024.
  22. ^ abcde Cheah, CS (2020). Factores que contribuyen a las dificultades en la enseñanza y el aprendizaje de la programación informática: una revisión de la literatura. Tecnología educativa contemporánea , 12 (2), ep272.
  23. ^ Wilson, G. (2017). Construyendo una nueva mitología: el fenómeno de los campamentos de entrenamiento de codificación. ACM Inroads , 8 (4), 66–71.
  24. ^ Cooper, Steve; Grover, Shuchi ; Guzdial, Mark; Simon, Beth (2014). "Un futuro para la investigación en educación informática". Comunicaciones de la ACM . 57 (11): 34–36. doi :10.1145/2668899. ISSN  0001-0782. S2CID  34034556.
  25. ^ "Las mejores universidades de informática de América del Norte [Ranking]". 11 de agosto de 2021.
  26. ^ Morrison, Briana; Settle, Amber (2018). "¡Celebramos el 50.° aniversario de SIGCSE!". Boletín ACM SIGCSE . 50 (1): 2–3. doi :10.1145/3183559.3183560. ISSN  0097-8418. S2CID  19169248.
  27. ^ "Noticias contradictorias sobre la diversidad y el aumento de las inscripciones". CRA . 10 de febrero de 2017 . Consultado el 5 de mayo de 2020 .
  28. ^ Encuesta Taulbee 2018, Asociación de Investigación Informática. https://cra.org/wp-content/uploads/2019/05/2018_Taulbee_Survey.pdf
  29. ^ ab Happe, Lucia; Buhnova, Barbora; Koziolek, Anne; Wagner, Ingo (1 de mayo de 2021). "Medidas efectivas para fomentar el interés de las niñas en la educación secundaria en informática". Educación y Tecnologías de la Información . 26 (3): 2811–2829. doi : 10.1007/s10639-020-10379-x . ISSN  1573-7608. S2CID  228817008.
  30. ^ ab Vitores, Anna; Gil-Juárez, Adriana (1 de noviembre de 2016). "El problema con 'las mujeres en la informática': un examen crítico del despliegue de la investigación sobre la brecha de género en la ciencia de la computación". Revista de Estudios de Género . 25 (6): 666–680. doi :10.1080/09589236.2015.1087309. ISSN  0958-9236. S2CID  146570525.
  31. ^ "Qué género tiene la ciencia" (PDF) . Archivado (PDF) del original el 24 de septiembre de 2015 . Consultado el 24 de octubre de 2024 .
  32. ^ James, Justin (19 de septiembre de 2023). "Brecha de género en TI: ¿dónde están las programadoras?". TechRepublic .
  33. ^ Actividad de Code Studio (2012). "Acerca de nosotros". code.org .
  34. ^ Brahimi, T., y Sarirete (2015). "Aprendizaje fuera del aula a través de MOOC". Computadoras en el comportamiento humano . Computación para el aprendizaje humano, el comportamiento y la colaboración en la era de las redes sociales y móviles. 51 : 604–609. doi :10.1016/j.chb.2015.03.013.{{cite journal}}: CS1 maint: multiple names: authors list (link)
  35. ^ ab Morreale, P., y Joiner, D. (2011). Cambios en la percepción de la informática y el pensamiento computacional entre los profesores de secundaria. Journal of Computing Sciences in Colleges , 26 (6), 71–77.
  36. ^ ab Goode, J., y Margolis, J. (2011). Explorando la informática: un estudio de caso de reforma escolar. ACM Transactions on Computing Education (TOCE) , 11 (2), 1–16.