stringtranslate.com

Operaciones de MLO

MLOps es el conjunto de prácticas en la intersección de Machine Learning, DevOps e Ingeniería de Datos.

MLOps u ML Ops es un paradigma que tiene como objetivo implementar y mantener modelos de aprendizaje automático en producción de manera confiable y eficiente. La palabra es un compuesto de "aprendizaje automático" y la práctica de entrega continua (CI/CD) de DevOps en el campo del software. Los modelos de aprendizaje automático se prueban y desarrollan en sistemas experimentales aislados. Cuando un algoritmo está listo para ser lanzado, MLOps se practica entre científicos de datos, DevOps e ingenieros de aprendizaje automático para realizar la transición del algoritmo a los sistemas de producción. [1] De manera similar a los enfoques de DevOps o DataOps , MLOps busca aumentar la automatización y mejorar la calidad de los modelos de producción, al mismo tiempo que se enfoca en los requisitos comerciales y regulatorios. Si bien MLOps comenzó como un conjunto de mejores prácticas, está evolucionando lentamente hacia un enfoque independiente para la gestión del ciclo de vida de ML. MLOps se aplica a todo el ciclo de vida, desde la integración con la generación de modelos ( ciclo de vida del desarrollo de software , integración continua / entrega continua ), la orquestación y la implementación, hasta la salud, el diagnóstico, la gobernanza y las métricas comerciales.

Definición

MLOps es un paradigma que incluye aspectos como las mejores prácticas, conjuntos de conceptos y una cultura de desarrollo en lo que respecta a la conceptualización, implementación, monitoreo, despliegue y escalabilidad de extremo a extremo de productos de aprendizaje automático. Sobre todo, es una práctica de ingeniería que aprovecha tres disciplinas contribuyentes: aprendizaje automático, ingeniería de software (especialmente DevOps) e ingeniería de datos. MLOps tiene como objetivo producir sistemas de aprendizaje automático al cerrar la brecha entre el desarrollo (Dev) y las operaciones (Ops). Básicamente, MLOps tiene como objetivo facilitar la creación de productos de aprendizaje automático al aprovechar estos principios: automatización de CI/CD, orquestación de flujo de trabajo, reproducibilidad; control de versiones de datos, modelos y códigos; colaboración; capacitación y evaluación continua de ML; seguimiento y registro de metadatos de ML; monitoreo continuo; y bucles de retroalimentación. [2]

Historia

Los desafíos del uso continuo del aprendizaje automático en aplicaciones se destacaron en un artículo de 2015. [3] El crecimiento previsto en el aprendizaje automático incluyó una duplicación estimada de los pilotos e implementaciones de ML de 2017 a 2018, y nuevamente de 2018 a 2020. [4] MLOps rápidamente comenzó a ganar terreno entre los expertos en IA/ML, las empresas y los periodistas de tecnología como una solución que puede abordar la complejidad y el crecimiento del aprendizaje automático en las empresas. [5]

Los informes muestran que la mayoría (hasta el 88 %) de las iniciativas de aprendizaje automático corporativas tienen dificultades para avanzar más allá de las etapas de prueba. [2] Sin embargo, las organizaciones que realmente pusieron el aprendizaje automático en producción vieron un aumento del margen de ganancias del 3 al 15 %. [6] El mercado de MLOps se estimó en $ 23,2 mil millones en 2019 y se proyecta que alcance los $ 126 mil millones para 2025 debido a la rápida adopción.

Arquitectura

Los sistemas de aprendizaje automático se pueden clasificar en ocho categorías diferentes: recopilación de datos , procesamiento de datos , ingeniería de características , etiquetado de datos , diseño de modelos, entrenamiento y optimización de modelos, implementación de puntos finales y monitoreo de puntos finales. Cada paso en el ciclo de vida del aprendizaje automático se construye en su propio sistema, pero requiere interconexión. Estos son los sistemas mínimos que las empresas necesitan para escalar el aprendizaje automático dentro de su organización.

Objetivos

Hay una serie de objetivos que las empresas quieren alcanzar a través de sistemas MLOps que implementan con éxito el aprendizaje automático en toda la empresa, entre ellos: [7]

Una práctica estándar, como MLOps, tiene en cuenta cada una de las áreas mencionadas anteriormente, lo que puede ayudar a las empresas a optimizar los flujos de trabajo y evitar problemas durante la implementación.

Una arquitectura común de un sistema MLOps incluiría plataformas de ciencia de datos donde se construyen modelos y motores analíticos donde se realizan cálculos, con la herramienta MLOps orquestando el movimiento de modelos de aprendizaje automático, datos y resultados entre los sistemas. [7]

Véase también

Referencias

  1. ^ Talagala, Nisha. "Por qué MLOps (y no solo ML) es la nueva frontera competitiva de su negocio". AITrends . Consultado el 30 de enero de 2018 .
  2. ^ ab Kreuzberger, Dominik; Kühl, Niklas; Hirschl, Sebastián (2023). "Operaciones de aprendizaje automático (MLOps): descripción general, definición y arquitectura". Acceso IEEE . 11 : 31866–31879. arXiv : 2205.02302 . Código Bib : 2023IEEEA..1131866K. doi :10.1109/ACCESS.2023.3262138. ISSN  2169-3536. S2CID  248524628.
  3. ^ Sculley, D.; Holt, Gary; Golovin, Daniel; Davydov, Eugene; Phillips, Todd; Ebner, Dietmar; Chaudhary, Vinay; Young, Michael; Crespo, Jean-Francois; Dennison, Dan (7 de diciembre de 2015). "Deuda técnica oculta en sistemas de aprendizaje automático" (PDF) . Actas del NIPS (2015) . Consultado el 14 de noviembre de 2017 .
  4. ^ Sallomi, Paul; Lee, Paul. "Predicciones de Deloitte en tecnología, medios y telecomunicaciones para 2018" (PDF) . Deloitte . Consultado el 13 de octubre de 2017 .
  5. ^ https://www.meetup.com/MLOps-Silicon-Valley/?_cookie-check=o1SkbKRfUlSuQoT3
  6. ^ Bughin, Jacques; Hazan, Eric; Ramaswamy, Sree; Chui, Michael; Allas, Tera; Dahlström, Peter; Henke, Nicolaus; Trench, Monica. "Inteligencia artificial: ¿la próxima frontera digital?". McKinsey . McKinsey Global Institute . Consultado el 1 de junio de 2017 .
  7. ^ ab Walsh, Nick. "El auge de los desarrolladores orientados a la cuantificación y la necesidad de MLOps estandarizados". Diapositivas . Nick Walsh . Consultado el 1 de enero de 2018 .
  8. ^ "Del código al aprendizaje automático listo para producción en 4 pasos". Blog de DAGsHub . 2021-02-03 . Consultado el 2021-02-19 .
  9. ^ ab Warden, Pete. "La crisis de reproducibilidad del aprendizaje automático". Blog de Pete Warden . Pete Warden . Consultado el 19 de marzo de 2018 .
  10. ^ Vaughan, Jack. "Los algoritmos de aprendizaje automático se encuentran con la gobernanza de datos". SearchDataManagement . TechTarget . Consultado el 1 de septiembre de 2017 .
  11. ^ Lorica, Ben. "Cómo entrenar e implementar el aprendizaje profundo a escala". O'Reilly . Consultado el 15 de marzo de 2018 .
  12. ^ Garda, Natalie. "IoT y aprendizaje automático: por qué la colaboración es clave". IoT Tech Expo . Encore Media Group . Consultado el 12 de octubre de 2017 .
  13. ^ Manyika, James. "Qué hay ahora y qué viene después en materia de análisis, inteligencia artificial y automatización". McKinsey . McKinsey Global Institute . Consultado el 1 de mayo de 2017 .
  14. ^ Haviv, Yaron. «Desafíos, soluciones y tendencias futuras de MLOps». Iguazio . Consultado el 19 de febrero de 2020 .