Amazon Mechanical Turk ( MTurk ) es un sitio web de crowdsourcing con el que las empresas pueden contratar "crowdworkers" ubicados de forma remota para realizar tareas discretas a pedido que las computadoras actualmente no pueden hacer de manera económica. Funciona bajo Amazon Web Services y es propiedad de Amazon . [1] Los empleadores, conocidos como solicitantes, publican trabajos conocidos como tareas de inteligencia humana (HIT), como identificar contenido específico en una imagen o video, escribir descripciones de productos o responder preguntas de encuestas. Los trabajadores, conocidos coloquialmente como Turkers o crowdworkers , navegan entre los trabajos existentes y los completan a cambio de una tarifa establecida por el solicitante. Para publicar trabajos, los solicitantes utilizan una interfaz de programación de aplicaciones (API) abierta o el sitio MTurk Requester más limitado. [2] A partir de abril de 2019 [actualizar], los solicitantes podían registrarse desde 49 países aprobados. [3]
El servicio fue concebido por Venky Harinarayan en una patente estadounidense divulgada en 2001. [4] Amazon acuñó el término inteligencia artificial para los procesos que externalizan algunas partes de un programa informático a los seres humanos, para aquellas tareas que los seres humanos llevan a cabo mucho más rápido que las computadoras. Se afirma [¿ por quién? ] que Jeff Bezos fue responsable de proponer el desarrollo de Mechanical Turk de Amazon para realizar este proceso. [5]
El nombre Mechanical Turk se inspiró en " El Turco ", un autómata que jugaba al ajedrez en el siglo XVIII, fabricado por Wolfgang von Kempelen , que viajó por Europa y derrotó a Napoleón Bonaparte y Benjamin Franklin . Más tarde se reveló que esta "máquina" no era un autómata, sino un maestro de ajedrez humano escondido en el gabinete debajo del tablero y que controlaba los movimientos de un muñeco humanoide. De manera análoga, el servicio en línea Mechanical Turk utiliza mano de obra humana remota escondida detrás de una interfaz de computadora para ayudar a los empleadores a realizar tareas que no son posibles utilizando una máquina real.
MTurk se lanzó al público el 2 de noviembre de 2005. Su base de usuarios creció rápidamente. A principios y mediados de noviembre de 2005, había decenas de miles de trabajos, todos ellos subidos al sistema por la propia Amazon para algunas de sus tareas internas que requerían inteligencia humana. Los tipos de HIT se ampliaron para incluir transcripción, calificación, etiquetado de imágenes, encuestas y redacción.
En marzo de 2007, se informó de que había más de 100.000 trabajadores en más de 100 países. [6] Esta cifra aumentó a más de 500.000 trabajadores registrados de más de 190 países en enero de 2011. [7] Ese año, Techlist publicó un mapa interactivo que señalaba las ubicaciones de 50.000 de sus trabajadores de MTurk en todo el mundo. [8] En 2018, la investigación demostró que, si bien más de 100.000 trabajadores estaban disponibles en la plataforma en cualquier momento, solo alrededor de 2.000 estaban trabajando activamente. [9]
Un usuario de Mechanical Turk puede ser un "Trabajador" (contratista) o un "Solicitante" (empleador). Los trabajadores tienen acceso a un panel que muestra tres secciones: ingresos totales, estado de HIT y totales de HIT. Los trabajadores establecen sus propias horas y no tienen ninguna obligación de aceptar ninguna tarea en particular.
Amazon clasifica a los trabajadores como contratistas en lugar de empleados y no paga impuestos sobre la nómina. Clasificar a los trabajadores como contratistas le permite a Amazon evitar cuestiones como el salario mínimo , las horas extra y la compensación laboral , una práctica común entre las plataformas de la "economía gig". Los trabajadores están obligados por ley a declarar sus ingresos como ingresos por cuenta propia.
En 2013, el salario promedio por las múltiples microtareas asignadas, si se realizaban rápidamente, era de aproximadamente un dólar por hora, y cada tarea costaba en promedio unos pocos centavos. [10] Sin embargo, calcular las ganancias promedio por hora de las personas en un sitio de microtareas es extremadamente difícil y varias fuentes de datos muestran ganancias promedio por hora en el rango de $5 a $9 por hora [11] [12] [13] [14] entre una cantidad sustancial de trabajadores, mientras que los trabajadores más experimentados, activos y competentes pueden ganar más de $20 por hora. [15]
Los trabajadores pueden tener una dirección postal en cualquier parte del mundo. El pago por completar tareas se puede canjear en Amazon.com mediante un certificado de regalo (los certificados de regalo son la única opción de pago disponible para los trabajadores internacionales, aparte de la India) o se pueden transferir a la cuenta bancaria estadounidense de un trabajador.
Los solicitantes pueden pedir a los trabajadores que cumplan con las calificaciones antes de participar en una tarea, y pueden establecer una prueba diseñada para verificar la calificación. También pueden aceptar o rechazar el resultado enviado por el trabajador, lo que afecta la reputación del trabajador. A partir de abril de 2019 [actualizar], los solicitantes pagaron a Amazon una comisión mínima del 20% sobre el precio de los trabajos completados con éxito, con montos mayores para servicios adicionales [ aclaración necesaria ] . [6] Los solicitantes pueden usar la API de Amazon Mechanical Turk para integrar programáticamente los resultados del trabajo directamente en sus procesos y sistemas comerciales. Cuando los empleadores configuran un trabajo, deben especificar
así como los detalles específicos sobre el trabajo que desean realizar.
Los trabajadores han estado ubicados principalmente en los Estados Unidos desde el inicio de la plataforma [16] con una demografía generalmente similar a la población general de Internet en los EE. UU. [17] Dentro de los EE. UU., los trabajadores están distribuidos de manera bastante uniforme entre los estados, proporcional a la participación de cada estado en la población estadounidense. [18] A partir de 2019 [actualizar], entre 15 y 30 mil personas en los EE. UU. completan al menos un HIT cada mes y aproximadamente 4500 personas nuevas se unen a MTurk cada mes. [19]
Los pagos en efectivo para los trabajadores indios se introdujeron en 2010, lo que actualizó la demografía de los trabajadores, que sin embargo permanecieron principalmente dentro de los Estados Unidos. [20] Un sitio web que muestra la demografía de los trabajadores en mayo de 2015 mostró que el 80% de los trabajadores estaban ubicados en los Estados Unidos, y el 20% restante en otras partes del mundo, la mayoría de los cuales estaban en la India. [21] En mayo de 2019, aproximadamente el 60% estaban en los EE. UU., el 40% en otros lugares (aproximadamente el 30% en la India). [22] A principios de 2023, aproximadamente el 90% de los trabajadores eran de los EE. UU. y aproximadamente la mitad del resto de la India. [23]
Desde 2010 [actualizar], numerosos investigadores han explorado la viabilidad de Mechanical Turk para reclutar sujetos para experimentos de ciencias sociales. Los investigadores han descubierto en general que, si bien las muestras de encuestados obtenidas a través de Mechanical Turk no coinciden perfectamente con todas las características relevantes de la población estadounidense, tampoco son demasiado erróneas. [24] [25] Como resultado, cada año se publican miles de artículos que se basan en datos recopilados de los trabajadores de Mechanical Turk, incluidos cientos en revistas académicas de primer nivel.
Uno de los desafíos que presenta el uso de MTurk para la investigación con sujetos humanos ha sido mantener la calidad de los datos. Un estudio publicado en 2021 descubrió que los tipos de enfoques de control de calidad utilizados por los investigadores (como la verificación de bots, usuarios de VPN o trabajadores dispuestos a enviar respuestas deshonestas) pueden influir significativamente en los resultados de las encuestas. Lo demostraron a través del impacto en tres herramientas comunes de detección de salud mental y conductual. [26] Si bien la gestión de la calidad de los datos requiere trabajo por parte de los investigadores, existe una gran cantidad de investigaciones que muestran cómo recopilar datos de alta calidad de MTurk. [27] El costo de usar MTurk es considerablemente menor que el de muchos otros medios para realizar encuestas, por lo que muchos investigadores continúan usándolo.
El consenso general entre los investigadores es que el servicio funciona mejor para reclutar una muestra diversa; es menos exitoso con estudios que requieren poblaciones definidas con mayor precisión o que requieren una muestra representativa de la población en su conjunto. [28] Se han publicado muchos artículos sobre la demografía de la población de MTurk. [18] [29] [30] Los trabajadores de MTurk tienden a ser más jóvenes, más educados, más liberales y ligeramente menos ricos que la población estadounidense en general. [31]
Los algoritmos de aprendizaje automático supervisado requieren grandes cantidades de datos anotados por humanos para ser entrenados con éxito. Los investigadores de aprendizaje automático han contratado a trabajadores a través de Mechanical Turk para producir conjuntos de datos como SQuAD, un conjunto de datos de preguntas y respuestas . [32]
Desde 2007 [actualizar], el servicio se ha utilizado para buscar personas desaparecidas importantes. Este uso se sugirió por primera vez durante la búsqueda de James Kim , pero su cuerpo fue encontrado antes de que se hiciera ningún progreso técnico. Ese verano, el científico informático Jim Gray desapareció en su yate y Werner Vogels de Amazon , un amigo personal, hizo arreglos para que DigitalGlobe , que proporciona datos satelitales para Google Maps y Google Earth , colocara fotografías recientes de las Islas Farallón en Mechanical Turk. Una historia de portada en Digg atrajo a 12.000 buscadores que trabajaron con profesionales de la imagen en los mismos datos. La búsqueda no tuvo éxito. [33]
En septiembre de 2007, se repitió un procedimiento similar en la búsqueda del aviador Steve Fossett . Los datos satelitales se dividieron en secciones de 85 metros cuadrados (910 pies cuadrados) y se pidió a los usuarios de Mechanical Turk que marcaran las imágenes con "objetos extraños" que pudieran ser el lugar del accidente u otras pruebas que deberían examinarse más de cerca. [34] Esta búsqueda tampoco tuvo éxito. La mayoría de las imágenes satelitales se encontraban en un radio de 50 millas, [35] pero el lugar del accidente fue finalmente encontrado por excursionistas aproximadamente un año después, a 65 millas de distancia. [36]
MTurk también se ha utilizado como herramienta para la creación artística. Una de las primeras artistas que trabajó con Mechanical Turk fue xtine burrough, con The Mechanical Olympics (2008), [37] [38] Endless Om (2015) y Mediations on Digital Labor (2015). [39] Otra obra fue Ten Thousand Cents (2008) del artista Aaron Koblin . [ se necesita más explicación ]
Los programadores han desarrollado extensiones y scripts para navegadores diseñados para simplificar el proceso de realización de tareas. Amazon ha declarado que desaprueba los scripts que automatizan por completo el proceso y excluyen el elemento humano. Esto se debe a la preocupación de que el proceso de finalización de tareas (por ejemplo, responder a una encuesta) pueda ser manipulado con respuestas aleatorias y los datos recopilados resultantes puedan ser inútiles. [40] Se han prohibido las cuentas que utilizan los llamados bots automatizados. Hay servicios que amplían las capacidades a MTurk. [ Aclaración necesaria ]
Amazon pone a disposición una interfaz de programación de aplicaciones (API) para el sistema MTurk. La API de MTurk permite a un programador enviar trabajos, recuperar el trabajo completado y aprobar o rechazar ese trabajo. [41] En 2017, Amazon lanzó soporte para los kits de desarrollo de software (SDK) de AWS, lo que permitió que nueve nuevos SDK estuvieran disponibles para los usuarios de MTurk. [¿ Importancia? ] MTurk es accesible a través de la API desde los siguientes lenguajes: Python, JavaScript, Java, .NET, Go, Ruby, PHP o C++. [42] Los sitios web y los servicios web pueden usar la API para integrar el trabajo de MTurk en otras aplicaciones web, lo que proporciona a los usuarios alternativas a la interfaz que Amazon ha creado para estas funciones.
Amazon Mechanical Turk ofrece una plataforma para procesar imágenes, una tarea muy adecuada para la inteligencia humana. Los solicitantes han creado tareas que piden a los trabajadores que etiqueten objetos encontrados en una imagen, seleccionen la imagen más relevante en un grupo de imágenes, filtren contenido inapropiado, clasifiquen objetos en imágenes satelitales o digitalicen texto de imágenes como formularios escaneados y completados a mano. [43]
Las empresas con grandes catálogos en línea utilizan Mechanical Turk para identificar duplicados y verificar los detalles de las entradas de artículos. Por ejemplo: eliminar duplicados en listados de directorios de páginas amarillas, verificar detalles de restaurantes (por ejemplo, número de teléfono y horario) y encontrar información de contacto en páginas web (por ejemplo, nombre y correo electrónico del autor). [10] [43]
La diversificación y la escala del personal de Mechanical Turk permiten recopilar información a gran escala, lo que sería difícil fuera de una plataforma de masas. Mechanical Turk permite a los solicitantes reunir una gran cantidad de respuestas a varios tipos de encuestas, desde datos demográficos básicos hasta investigaciones académicas. Otros usos incluyen la redacción de comentarios, descripciones y entradas de blogs en sitios web y la búsqueda de elementos de datos o campos específicos en documentos gubernamentales y legales de gran tamaño. [43]
Las empresas utilizan el trabajo colaborativo de Mechanical Turk para comprender y responder a distintos tipos de datos. Los usos más comunes incluyen la edición y transcripción de podcasts, la traducción y la búsqueda de coincidencias con resultados de motores de búsqueda. [10] [43]
La validez de la investigación realizada con el grupo de trabajadores de Mechanical Turk ha sido debatida durante mucho tiempo entre los expertos. [44] Esto se debe en gran medida a que las cuestiones de validez [45] son complejas: involucran no solo preguntas sobre si los métodos de investigación fueron apropiados y si el estudio se ejecutó bien, sino también preguntas sobre el objetivo del proyecto, cómo los investigadores utilizaron MTurk, quiénes fueron muestreados y qué conclusiones se extrajeron.
La mayoría de los expertos coinciden en que MTurk es más adecuado para algunos tipos de investigación que para otros. Parece ser adecuado para preguntas que buscan entender si dos o más cosas están relacionadas entre sí (investigación correlacional; por ejemplo, ¿las personas felices son más saludables?) y preguntas que intentan demostrar que una cosa causa otra cosa (investigación experimental; por ejemplo, ser feliz hace que las personas sean más saludables). Afortunadamente, estas categorías abarcan la mayor parte de la investigación realizada por científicos del comportamiento, y la mayoría de los hallazgos correlacionales y experimentales encontrados en muestras representativas a nivel nacional se replican en MTurk. [46]
El tipo de investigación que no es adecuada para MTurk se denomina a menudo "investigación descriptiva". La investigación descriptiva busca describir cómo o qué piensan, sienten o hacen las personas; un ejemplo son las encuestas de opinión pública. MTurk no es adecuada para este tipo de investigación porque no selecciona una muestra representativa de la población general. En cambio, MTurk es una muestra no probabilística, [ jerga ] de conveniencia. La investigación descriptiva se lleva a cabo mejor con una muestra representativa basada en la probabilidad de la población que los investigadores quieren comprender. En comparación con la población general, las personas en MTurk son más jóvenes, con un nivel educativo más alto, más liberales y menos religiosas. [47] [18] [30]
Periodistas y activistas han criticado a Mechanical Turk por sus interacciones con la mano de obra y su uso de ella. El científico informático Jaron Lanier señaló que el diseño de Mechanical Turk "permite pensar en las personas como componentes de software" de una manera que evoca "una sensación de magia, como si se pudieran extraer resultados de la nube a un coste increíblemente bajo". [48] Un punto similar se plantea en el libro Ghostwork de Mary L. Gray y Siddharth Suri. [49] [ ¿importancia? ]
Los críticos de MTurk sostienen que los trabajadores se ven obligados a trabajar en el sitio debido a las precarias condiciones económicas y que luego son explotados por solicitantes con salarios bajos y falta de poder cuando surgen disputas. El artículo de la periodista Alana Semuels "Internet está permitiendo un nuevo tipo de infierno mal pagado" en The Atlantic es un ejemplo típico de este tipo de críticas a MTurk. [50]
Algunos artículos académicos [¿ quiénes? ] han obtenido resultados que apoyan o sirven como base para tales críticas comunes, [51] pero otros las contradicen. [52] Un comentario académico reciente sostuvo que a los participantes de estudios en sitios como MTurk se les debería advertir claramente sobre las circunstancias en las que más tarde se les podría negar el pago como una cuestión de ética, [53] aunque tales declaraciones pueden no reducir la tasa de respuestas descuidadas. [54]
Un artículo publicado por un equipo de CloudResearch [14] muestra que solo alrededor del 7% de las personas en MTurk consideran que completar HIT es algo parecido a un trabajo de tiempo completo. La mayoría de las personas informan que MTurk es una forma de ganar dinero durante su tiempo libre o como un trabajo secundario. En 2019, el trabajador típico dedicaba de cinco a ocho horas por semana y ganaba alrededor de $ 7 por hora. Los trabajadores de la muestra no informaron sobre un maltrato generalizado [ aclaración necesaria ] a manos de los solicitantes; informaron que confiaban más en los solicitantes que en los empleadores fuera de MTurk. Se presentaron hallazgos similares en una revisión de MTurk realizada por la organización Fair Crowd Work, un colectivo de trabajadores de crowdsourcing y sindicatos. [55] [ ¿ Fuente poco confiable? ]
El pago mínimo que Amazon permite por una tarea es de un centavo. Debido a que las tareas suelen ser simples y repetitivas, la mayoría de las tareas pagan solo unos pocos centavos, [56] pero también hay tareas que pagan bien en el sitio.
Muchas críticas a MTurk se deben al hecho de que la mayoría de las tareas ofrecen salarios bajos. Además, los trabajadores son considerados contratistas independientes en lugar de empleados. Los contratistas independientes no están protegidos por la Ley de Normas Laborales Justas u otra legislación que proteja los derechos de los trabajadores. [ Centrado en Estados Unidos ] Los trabajadores de MTurk deben competir con otros para obtener buenas oportunidades de HIT, así como dedicar tiempo a buscar tareas y otras acciones por las que no reciben compensación.
El bajo salario ofrecido por muchas tareas ha alimentado las críticas a Mechanical Turk por explotar y no compensar a los trabajadores por el verdadero valor de la tarea que completan. [57] Un estudio de 3,8 millones de tareas completadas por 2.767 trabajadores mostró que "los trabajadores ganaron un salario medio por hora de aproximadamente 2 dólares por hora" y el 4% de los trabajadores ganaron más de 7,25 dólares por hora. [58]
El Pew Research Center y la Oficina Internacional del Trabajo publicaron datos que indican que las personas ganaban alrededor de $5,00 por hora en 2015. [12] [59] Un estudio centrado en los trabajadores de los EE. UU. indicó salarios promedio de al menos $5,70 por hora, [60] y los datos del estudio CloudResearch encontraron salarios promedio de aproximadamente $6,61 por hora. [14] Algunas evidencias sugieren que las personas muy activas y experimentadas pueden ganar $20 por hora o más. [61]
La revista Nation informó en 2014 que algunos solicitantes se habían aprovechado de los trabajadores al pedirles que hicieran las tareas y luego rechazar sus envíos para evitar pagarles. [62] Los datos disponibles indican que los rechazos son bastante raros. Los trabajadores informan que se les ha rechazado una pequeña minoría de sus HIT, tal vez tan solo el 1%. [14]
En el escándalo de datos de Facebook y Cambridge Analytica , Mechanical Turk fue uno de los medios para recopilar de forma encubierta información privada para una base de datos masiva. [63] El sistema pagaba a las personas uno o dos dólares para que instalaran una aplicación conectada a Facebook y respondieran preguntas personales. La tarea de la encuesta, como trabajo por encargo, no se utilizó para un proyecto de investigación demográfica o psicológica, como podría haber parecido. El propósito era, en cambio, incitar al trabajador a revelar información personal sobre su identidad que no hubiera sido recopilada ya por Facebook o Mechanical Turk.
Otros han criticado que el mercado no permite a los trabajadores negociar con los empleadores. En respuesta a las críticas de evasión de pagos y falta de representación, un grupo desarrolló una plataforma de terceros llamada Turkopticon que permite a los trabajadores dar retroalimentación sobre sus empleadores. Esto permite a los trabajadores evitar trabajos potencialmente inescrupulosos y recomendar empleadores superiores. [64] [65] Otra plataforma llamada Dynamo permite a los trabajadores recopilar [ aclaración necesaria ] de forma anónima y organizar campañas para mejorar su entorno de trabajo, como las Directrices para solicitantes académicos y la Campaña Dear Jeff Bezos. [66] [67] [68] [69] Amazon dificultó que los trabajadores se inscribieran en Dynamo al cerrar la cuenta de solicitud que proporcionaba a los trabajadores un código requerido para la membresía de Dynamo. Los trabajadores crearon complementos de terceros para identificar tareas mejor pagadas, pero Amazon actualizó su sitio web para evitar que estos complementos funcionen. [70] Los trabajadores se han quejado de que el sistema de pago de Amazon en ocasiones deja de funcionar. [70]
Mechanical Turk es comparable en algunos aspectos al servicio Google Answers , que ya no está en funcionamiento . Sin embargo, Mechanical Turk es un mercado más general que puede ayudar a distribuir cualquier tipo de tareas laborales en todo el mundo. El Collaborative Human Interpreter (CHI) de Philipp Lenssen también sugirió utilizar la inteligencia humana distribuida para ayudar a los programas informáticos a realizar tareas que las computadoras no pueden hacer bien. MTurk podría utilizarse como motor de ejecución para el CHI. [ cita requerida ]
En 2014, el gigante de búsqueda ruso Yandex lanzó un sistema similar llamado Toloka que es similar a Mechanical Turk. [71]
{{cite journal}}: Requiere citar revista |journal=( ayuda ){{cite book}}: CS1 maint: location missing publisher (link){{cite journal}}: Requiere citar revista |journal=( ayuda ){{cite journal}}: CS1 maint: DOI inactive as of September 2024 (link)