Amazon Mechanical Turk ( MTurk ) es un sitio web de crowdsourcing con el que las empresas pueden contratar "crowdworkers" ubicados remotamente para realizar tareas discretas bajo demanda que las computadoras actualmente no pueden realizar de manera tan económica. Se opera bajo Amazon Web Services y es propiedad de Amazon . [1] Los empleadores (conocidos como solicitantes ) publican trabajos conocidos como Tareas de Inteligencia Humana (HIT), como identificar contenido específico en una imagen o video, escribir descripciones de productos o responder preguntas de encuestas. Los trabajadores, conocidos coloquialmente como Turkers o crowdworkers , navegan entre trabajos existentes y los completan a cambio de una tarifa fijada por el empleador. Para colocar trabajos, los programas solicitantes [ se necesita aclaración ] utilizan una interfaz de programación de aplicaciones (API) abierta o el sitio más limitado MTurk Requester. [2] A partir de abril de 2019 [actualizar], los solicitantes podían registrarse desde 49 países aprobados. [3]
El servicio fue concebido por Venky Harinarayan en una divulgación de patente estadounidense en 2001. [4] Amazon acuñó el término inteligencia artificial para procesos que subcontratan algunas partes de un programa informático a humanos, para aquellas tareas realizadas mucho más rápido por humanos que por computadoras. Es reclamado [ ¿por quién? ] que Jeff Bezos fue el responsable de proponer el desarrollo del Mechanical Turk de Amazon para realizar este proceso. [5]
El nombre Mechanical Turk se inspiró en " El Turco ", un autómata jugador de ajedrez del siglo XVIII fabricado por Wolfgang von Kempelen que realizó una gira por Europa y venció tanto a Napoleón Bonaparte como a Benjamín Franklin . Más tarde se reveló que esta "máquina" no era un autómata, sino un maestro de ajedrez humano escondido en el gabinete debajo del tablero y que controlaba los movimientos de un muñeco humanoide. De manera análoga, el servicio en línea Mechanical Turk utiliza mano de obra humana remota oculta detrás de una interfaz de computadora para ayudar a los empleadores a realizar tareas que no son posibles usando una máquina real.
MTurk se lanzó públicamente el 2 de noviembre de 2005. Su base de usuarios creció rápidamente. Desde principios hasta mediados de noviembre de 2005, había decenas de miles de trabajos, todos subidos al sistema por la propia Amazon para algunas de sus tareas internas que requerían inteligencia humana. Los tipos de HIT se ampliaron para incluir transcripción, calificación, etiquetado de imágenes, encuestas y redacción.
En marzo de 2007, se informó que había más de 100.000 trabajadores en más de 100 países. [6] Esto aumentó a más de 500.000 trabajadores registrados de más de 190 países en enero de 2011. [7] Ese año, Techlist publicó un mapa interactivo que señala las ubicaciones de 50.000 de sus trabajadores de MTurk en todo el mundo. [8] En 2018, la investigación demostró que, si bien más de 100.000 trabajadores estaban disponibles en la plataforma en cualquier momento, solo alrededor de 2.000 estaban trabajando activamente. [9]
Un usuario de Mechanical Turk puede ser un "Trabajador" (contratista) o un "Solicitante" (empleador). Los trabajadores tienen acceso a un panel que muestra tres secciones: ingresos totales, estado de HIT y totales de HIT. Los trabajadores fijan sus propios horarios y no están obligados a aceptar ninguna tarea en particular.
Amazon clasifica a los trabajadores como contratistas en lugar de empleados y no paga impuestos sobre la nómina. Clasificar a los trabajadores como contratistas le permite a Amazon evitar cosas como el salario mínimo , las horas extras y la compensación laboral ; esta es una práctica común entre las plataformas de "economía colaborativa". Los trabajadores están obligados legalmente a declarar sus ingresos como ingresos del trabajo por cuenta propia.
En 2013, el salario promedio para las múltiples microtareas asignadas, si se realizaban rápidamente, era de aproximadamente un dólar la hora, y cada tarea promediaba unos pocos centavos. [10] Sin embargo, calcular los ingresos promedio por hora de las personas en un sitio de microtareas es extremadamente difícil y varias fuentes de datos muestran ingresos promedio por hora entre $ 5 y $ 9 por hora [11] [12] [13] [14] entre un número sustancial de Trabajadores, mientras que los trabajadores más experimentados, activos y competentes pueden ganar más de $20 por hora. [15]
Los trabajadores pueden tener una dirección postal en cualquier parte del mundo. El pago por completar tareas se puede canjear en Amazon.com mediante un certificado de regalo (los certificados de regalo son la única opción de pago disponible para los trabajadores internacionales, aparte de la India) o se puede transferir a la cuenta bancaria de un trabajador en EE. UU.
Los solicitantes pueden solicitar que los trabajadores cumplan con las calificaciones antes de realizar una tarea y pueden establecer una prueba diseñada para verificar la calificación. También pueden aceptar o rechazar el resultado enviado por el Trabajador, lo que afecta la reputación del Trabajador. A partir de abril de 2019 [actualizar], los Solicitantes pagaron a Amazon una comisión mínima del 20 % sobre el precio de los trabajos completados con éxito, con montos mayores por servicios adicionales [ se necesita aclaración ] . [6] Los solicitantes pueden utilizar la API de Amazon Mechanical Turk para integrar mediante programación los resultados del trabajo directamente en sus procesos y sistemas comerciales. Cuando los empleadores crean un trabajo, deben especificar
así como los detalles específicos sobre el trabajo que desean realizar.
Los trabajadores han estado ubicados principalmente en los Estados Unidos desde el inicio de la plataforma [16] con una demografía generalmente similar a la población general de Internet en los EE. UU. [17] Dentro de los EE. UU., los trabajadores están distribuidos de manera bastante uniforme entre los estados, proporcionalmente a la participación de cada estado en los EE. UU. población. [18] A partir de 2019 [actualizar], entre 15 y 30 mil personas en los EE. UU. completan al menos un HIT cada mes y alrededor de 4.500 nuevas personas se unen a MTurk cada mes. [19]
Los pagos en efectivo para los trabajadores indios se introdujeron en 2010, lo que actualizó la demografía de los trabajadores, que sin embargo permanecieron principalmente en los Estados Unidos. [20] Un sitio web que mostraba datos demográficos de los trabajadores en mayo de 2015 mostró que el 80% de los trabajadores estaban ubicados en los Estados Unidos, y el 20% restante estaba ubicado en otras partes del mundo, la mayoría de los cuales estaban en la India. [21] En mayo de 2019, aproximadamente el 60% estaban en los EE. UU., el 40% en otros lugares (aproximadamente el 30% en la India). [22] A principios de 2023, alrededor del 90% de los trabajadores eran de Estados Unidos y aproximadamente la mitad del resto de la India. [23]
Desde 2010 [actualizar], numerosos investigadores han explorado la viabilidad de Mechanical Turk para reclutar sujetos para experimentos de ciencias sociales. En general, los investigadores han descubierto que, si bien las muestras de encuestados obtenidas a través de Mechanical Turk no coinciden perfectamente con todas las características relevantes de la población estadounidense, tampoco son tremendamente tergiversadas. [24] [25] Como resultado, cada año se publican miles de artículos que se basan en datos recopilados de los trabajadores de Mechanical Turk, incluidos cientos en revistas académicas de primer nivel.
Un desafío al utilizar MTurk para la investigación con sujetos humanos ha sido mantener la calidad de los datos. Un estudio publicado en 2021 encontró que los tipos de enfoques de control de calidad utilizados por los investigadores (como verificar si hay bots, usuarios de VPN o trabajadores dispuestos a enviar respuestas deshonestas) pueden influir significativamente en los resultados de la encuesta. Lo demostraron a través del impacto en tres herramientas comunes de detección de salud mental y conductual. [26] Aunque la gestión de la calidad de los datos requiere el trabajo de los investigadores, existe una gran cantidad de investigaciones que muestran cómo recopilar datos de alta calidad de MTurk. [27] El costo de usar MTurk es considerablemente menor que el de muchos otros medios para realizar encuestas, por lo que muchos investigadores continúan usándolo.
El consenso general entre los investigadores es que el servicio funciona mejor para reclutar una muestra diversa; tiene menos éxito con estudios que requieren poblaciones definidas con mayor precisión o que requieren una muestra representativa de la población en su conjunto. [28] Se han publicado muchos artículos sobre la demografía de la población de MTurk. [18] [29] [30] Los trabajadores de MTurk tienden a ser más jóvenes, más educados, más liberales y ligeramente menos ricos que la población estadounidense en general. [31]
Los algoritmos de aprendizaje automático supervisado requieren grandes cantidades de datos anotados por humanos para entrenarse con éxito. Los investigadores de aprendizaje automático han contratado trabajadores a través de Mechanical Turk para producir conjuntos de datos como SQuAD, un conjunto de datos de respuesta a preguntas . [32]
Desde 2007 [actualizar], el servicio se utiliza para buscar personas destacadas desaparecidas. Este uso se sugirió por primera vez durante la búsqueda de James Kim , pero su cuerpo fue encontrado antes de que se hiciera ningún progreso técnico. Ese verano, el científico informático Jim Gray desapareció en su yate y Werner Vogels , un amigo personal de Amazon, hizo arreglos para que DigitalGlobe , que proporciona datos satelitales para Google Maps y Google Earth , publicara fotografías recientes de las Islas Farallón en Mechanical Turk. Un artículo de primera plana en Digg atrajo a 12.000 buscadores que trabajaron con profesionales de la imagen con los mismos datos. La búsqueda no tuvo éxito. [33]
En septiembre de 2007 se repitió un arreglo similar en la búsqueda del aviador Steve Fossett . Los datos satelitales se dividieron en secciones de 85 metros cuadrados (910 pies cuadrados) y se pidió a los usuarios de Mechanical Turk que marcaran imágenes con "objetos extraños" que podrían ser el lugar del accidente u otra evidencia que debería examinarse más de cerca. [34] Esta búsqueda tampoco tuvo éxito. Las imágenes de satélite estaban en su mayoría dentro de un radio de 50 millas, [35] pero los excursionistas finalmente encontraron el lugar del accidente aproximadamente un año después, a 65 millas de distancia. [36]
MTurk también se ha utilizado como herramienta de creación artística. Uno de los primeros artistas en trabajar con Mechanical Turk fue xtine burrough, con The Mechanical Olympics (2008), [37] [38] Endless Om (2015) y Mediations on Digital Labor (2015). [39] Otro trabajo fue Ten Thousand Cents (2008) del artista Aaron Koblin . [ Se necesita más explicación ]
Los programadores han desarrollado extensiones de navegador y scripts diseñados para simplificar el proceso de realización de trabajos. Amazon ha declarado que desaprueba los scripts que automatizan completamente el proceso y excluyen el elemento humano. Esto se debe a la preocupación de que el proceso de finalización de la tarea (por ejemplo, responder una encuesta) pueda jugarse con respuestas aleatorias y que los datos recopilados resultantes no tengan ningún valor. [40] Se han prohibido las cuentas que utilizan los llamados bots automatizados. Hay servicios que amplían las capacidades de MTurk. [ se necesita aclaración ]
Amazon pone a disposición una interfaz de programación de aplicaciones (API) para el sistema MTurk. La API de MTurk permite a un programador enviar trabajos, recuperar el trabajo completado y aprobarlo o rechazarlo. [41] En 2017, Amazon lanzó soporte para los kits de desarrollo de software (SDK) de AWS, lo que permitió nueve nuevos SDK disponibles para los usuarios de MTurk. [ importancia? ] Se puede acceder a MTurk a través de API desde los siguientes lenguajes: Python, JavaScript, Java, .NET, Go, Ruby, PHP o C++. [42] Los sitios web y los servicios web pueden utilizar la API para integrar el trabajo de MTurk en otras aplicaciones web, proporcionando a los usuarios alternativas a la interfaz que Amazon ha creado para estas funciones.
Amazon Mechanical Turk proporciona una plataforma para procesar imágenes, una tarea muy adecuada para la inteligencia humana. Los solicitantes han creado tareas que piden a los trabajadores etiquetar objetos encontrados en una imagen, seleccionar la imagen más relevante en un grupo de imágenes, filtrar contenido inapropiado, clasificar objetos en imágenes satelitales o digitalizar texto de imágenes como formularios escaneados completados a mano. [43]
Las empresas con grandes catálogos en línea utilizan Mechanical Turk para identificar duplicados y verificar los detalles de las entradas de artículos. Por ejemplo: eliminar duplicados en listados de directorios de páginas amarillas, verificar los detalles del restaurante (por ejemplo, número de teléfono y horario) y buscar información de contacto en páginas web (por ejemplo, nombre del autor y correo electrónico). [10] [43]
La diversificación y la escala del personal de Mechanical Turk permiten recopilar información a gran escala, lo que sería difícil fuera de una plataforma multitudinaria. Mechanical Turk permite a los Solicitantes acumular una gran cantidad de respuestas a varios tipos de encuestas, desde datos demográficos básicos hasta investigaciones académicas. Otros usos incluyen escribir comentarios, descripciones y entradas de blogs en sitios web y buscar elementos de datos o campos específicos en grandes documentos gubernamentales y legales. [43]
Las empresas utilizan el trabajo colectivo de Mechanical Turk para comprender y responder a diferentes tipos de datos. Los usos comunes incluyen la edición y transcripción de podcasts, la traducción y la comparación de resultados de motores de búsqueda. [10] [43]
La validez de la investigación realizada con el grupo de trabajadores de Mechanical Turk ha sido debatida durante mucho tiempo entre los expertos. [44] Esto se debe en gran medida a que las cuestiones de validez [45] son complejas: implican no sólo preguntas sobre si los métodos de investigación fueron apropiados y si el estudio estuvo bien ejecutado, sino también preguntas sobre el objetivo del proyecto, cómo los investigadores utilizó MTurk, quién fue muestreado y qué conclusiones se sacaron.
La mayoría de los expertos coinciden en que MTurk es más adecuado para algunos tipos de investigación que otros. MTurk parece adecuado para preguntas que buscan comprender si dos o más cosas están relacionadas entre sí (llamada investigación correlacional; por ejemplo, ¿las personas felices son más saludables?) y preguntas que intentan mostrar que una cosa causa otra (investigación experimental; ej., ser feliz hace que las personas estén más sanas). Afortunadamente, estas categorías capturan la mayor parte de la investigación realizada por científicos del comportamiento, y la mayoría de los hallazgos experimentales y correlacionales encontrados en muestras representativas a nivel nacional se replican en MTurk. [46]
El tipo de investigación que no es adecuado para MTurk suele denominarse "investigación descriptiva". La investigación descriptiva busca describir cómo o qué piensan, sienten o hacen las personas; un ejemplo son las encuestas de opinión pública. MTurk no es adecuado para este tipo de investigaciones porque no selecciona una muestra representativa de la población general. En cambio, MTurk es una muestra de conveniencia [ jerga ] no probabilística . La investigación descriptiva se realiza mejor con una muestra representativa y basada en probabilidades de la población que los investigadores quieren comprender. En comparación con la población general, la gente de MTurk es más joven, más educada, más liberal y menos religiosa. [47] [18] [30]
Mechanical Turk ha sido criticado por periodistas y activistas por sus interacciones y uso de la mano de obra. El científico informático Jaron Lanier observó cómo el diseño de Mechanical Turk "te permite pensar en las personas como componentes de software" de una manera que evoca "una sensación de magia, como si pudieras extraer resultados de la nube a un costo increíblemente bajo". ". [48] Un punto similar se plantea en el libro Ghostwork de Mary L. Gray y Siddharth Suri. [49] [¿ importancia? ]
Los críticos de MTurk argumentan que los trabajadores son obligados a ingresar al sitio debido a condiciones económicas precarias y luego explotados por solicitantes con salarios bajos y falta de poder cuando surgen disputas. El artículo de la periodista Alana Semuels "Internet está permitiendo un nuevo tipo de infierno mal pagado" en The Atlantic es típico de este tipo de críticas a MTurk. [50]
¿ Algunos que? ] artículos académicos han obtenido hallazgos que respaldan o sirven de base para tales críticas comunes, [51] pero otros las contradicen. [52]
Un artículo publicado por un equipo de CloudResearch [14] muestra que sólo alrededor del 7% de las personas en MTurk ven completar HIT como algo parecido a un trabajo de tiempo completo. La mayoría de la gente informa que MTurk es una forma de ganar dinero durante su tiempo libre o como trabajo paralelo. En 2019, el trabajador típico dedicaba de cinco a ocho horas a la semana y ganaba alrededor de 7 dólares la hora. Los trabajadores incluidos en la muestra no denunciaron maltrato generalizado [ se necesita aclaración ] por parte de los solicitantes; Informaron que confiaban más en los solicitantes que en los empleadores fuera de MTurk. Hallazgos similares fueron presentados en una revisión de MTurk realizada por la organización Fair Crowd Work, un colectivo de trabajadores colectivos y sindicatos. [53] [ ¿ fuente poco confiable? ]
El pago mínimo que permite Amazon por una tarea es de un céntimo. Debido a que las tareas suelen ser simples y repetitivas, la mayoría de ellas pagan sólo unos pocos centavos, [54] pero también hay tareas bien remuneradas en el sitio.
Muchas críticas a MTurk surgen del hecho de que la mayoría de las tareas ofrecen salarios bajos. Además, los trabajadores se consideran contratistas independientes y no empleados. Los contratistas independientes no están protegidos por la Ley de Normas Laborales Justas ni por otra legislación que proteja los derechos de los trabajadores. [ Centrado en Estados Unidos ] Los trabajadores de MTurk deben competir con otros por buenas oportunidades HIT, así como dedicar tiempo a buscar tareas y otras acciones por las que no reciben compensación.
El bajo pago ofrecido por muchas tareas ha alimentado las críticas a Mechanical Turk por explotar y no compensar a los trabajadores por el verdadero valor de la tarea que completan. [55] Un estudio de 3,8 millones de tareas realizadas por 2.767 trabajadores mostró que "los trabajadores ganaban un salario medio por hora de aproximadamente 2 dólares por hora" y el 4% de los trabajadores ganaban más de 7,25 dólares por hora. [56]
El Centro de Investigación Pew y la Oficina Internacional del Trabajo publicaron datos que indican que las personas ganaron alrededor de $5,00 por hora en 2015. [12] [57] Un estudio centrado en trabajadores en los EE. UU. indicó salarios promedio de al menos $5,70 por hora, [58] y los datos del estudio de CloudResearch encontró salarios promedio de alrededor de $6,61 por hora. [14] Alguna evidencia sugiere que las personas muy activas y experimentadas pueden ganar $20 por hora o más. [59]
La revista Nation informó en 2014 que algunos Solicitantes se habían aprovechado de los Trabajadores al pedirles que hicieran las tareas y luego rechazaron sus presentaciones para evitar pagarles. [60] Los datos disponibles indican que los rechazos son bastante raros. Los trabajadores informan que han rechazado una pequeña minoría de sus HIT, tal vez tan solo el 1%. [14]
En el escándalo de datos de Facebook-Cambridge Analytica , Mechanical Turk fue uno de los medios para recopilar de forma encubierta información privada para una base de datos masiva. [61] El sistema pagaba a la gente uno o dos dólares para instalar una aplicación conectada a Facebook y responder preguntas personales. La tarea de encuesta, como trabajo por encargo, no se utilizó para un proyecto de investigación demográfica o psicológica como podría haber parecido. En cambio, el propósito era provocar que el trabajador revelara información personal sobre su identidad que aún no había sido recopilada por Facebook o Mechanical Turk.
Otros han criticado que el mercado no permite a los trabajadores negociar con los empleadores. En respuesta a las críticas por evasión de pagos y falta de representación, un grupo desarrolló una plataforma de terceros llamada Turkopticon que permite a los trabajadores dar retroalimentación sobre sus empleadores. Esto permite a los trabajadores evitar trabajos potencialmente sin escrúpulos y recomendar mejores empleadores. [62] [63] Otra plataforma llamada Dynamo permite a los trabajadores recopilar [ aclaración necesaria ] de forma anónima y organizar campañas para mejorar su entorno laboral, como las Directrices para solicitantes académicos y la campaña Dear Jeff Bezos. [64] [65] [66] [67] Amazon dificultó que los trabajadores se inscribieran en Dynamo al cerrar la cuenta de solicitud que proporcionaba a los trabajadores un código requerido para ser miembro de Dynamo. Los trabajadores crearon complementos de terceros para identificar tareas mejor pagadas, pero Amazon actualizó su sitio web para evitar que estos complementos funcionaran. [68] Los trabajadores se han quejado de que el sistema de pago de Amazon en ocasiones deja de funcionar. [68]
Mechanical Turk es comparable en algunos aspectos al servicio Google Answers, ahora descontinuado . Sin embargo, Mechanical Turk es un mercado más general que potencialmente puede ayudar a distribuir cualquier tipo de tareas laborales en todo el mundo. El Collaborative Human Interpreter (CHI) de Philipp Lenssen también sugirió utilizar inteligencia humana distribuida para ayudar a los programas de computadora a realizar tareas que las computadoras no pueden hacer bien. MTurk podría usarse como motor de ejecución para CHI. [ cita necesaria ]
En 2014, el gigante ruso de búsqueda Yandex lanzó un sistema similar llamado Toloka que es similar al Mechanical Turk. [69]
{{cite journal}}: Citar diario requiere |journal=( ayuda ){{cite book}}: Mantenimiento CS1: falta el editor de la ubicación ( enlace ){{cite journal}}: Citar diario requiere |journal=( ayuda )