stringtranslate.com

Pista (empresa)

Runway AI, Inc. (también conocida como Runway y RunwayML ) es una empresa estadounidense con sede en la ciudad de Nueva York que se especializa en investigación y tecnologías de inteligencia artificial generativa . [1] La empresa se centra principalmente en la creación de productos y modelos para generar vídeos, imágenes y diversos contenidos multimedia. Es más conocida por desarrollar los modelos de IA generativa de vídeo y texto a vídeo comerciales Gen-1, Gen-2 [2] [3] y Gen-3 Alpha. [1]

Las herramientas y los modelos de IA de Runway se han utilizado en películas como Everything Everywhere All At Once , [4] en vídeos musicales de artistas como A$AP Rocky , [5] Kanye West , [6] Brockhampton y The Dandy Warhols , [7] y en la edición de programas de televisión como The Late Show [8] y Top Gear . [9]

Historia

La empresa fue fundada en 2018 por los chilenos Cristóbal Valenzuela , [10] Alejandro Matamala y la griega Anastasis Germanidis luego de conocerse en la Escuela de Artes Tisch de la Universidad de Nueva York ITP . [11] La compañía recaudó US$2 millones en 2018 para construir una plataforma para implementar modelos de aprendizaje automático a escala dentro de aplicaciones multimedia.

En diciembre de 2020, Runway recaudó US$8,5 millones [12] en una ronda de financiación de Serie A.

En diciembre de 2021, la empresa recaudó 35 millones de dólares en una ronda de financiación de serie B. [13]

En agosto de 2022, la empresa lanzó una versión mejorada de su modelo de difusión latente llamado Stable Diffusion junto con el Grupo CompVis de la Universidad Ludwig Maximilian de Múnich y una donación de computación de Stability AI. [14] [15]

El 21 de diciembre de 2022, Runway recaudó 50 millones de dólares [16] en una ronda de Serie C. A esto le siguió una ronda de extensión de Serie C de 141 millones de dólares en junio de 2023 con una valoración de 1500 millones de dólares [17] [18] de Google , Nvidia y Salesforce [19] para construir modelos de IA multimodales fundamentales para la generación de contenido que se utilizará en películas y producción de video. [20] [21]

En febrero de 2023, Runway lanzó Gen-1 y Gen-2, el primer modelo de generación de video a video y texto a video fundamental, comercial y disponible públicamente [22] [23] [24], accesible a través de una interfaz web sencilla.

En junio de 2023, Runway fue seleccionada como una de las 100 empresas más influyentes del mundo por la revista Time . [25]

Servicios y tecnologías

Runway se centra en la inteligencia artificial generativa para vídeo, medios y arte. La empresa se centra en el desarrollo de tecnología de modelo fundacional propia que los profesionales de la realización cinematográfica , la posproducción , la publicidad , la edición y los efectos visuales pueden utilizar. Además, Runway ofrece una aplicación para iOS dirigida a los consumidores [26]

Se puede acceder al producto Runway a través de una plataforma web y mediante una API como servicio administrado.

Difusión estable

Stable Diffusion es un modelo de texto a imagen de aprendizaje profundo de código abierto lanzado en 2022 basado en el artículo original High-Resolution Image Synthesis with Latent Diffusion Models publicado por Runway y el CompVis Group de la Universidad Ludwig Maximilian de Múnich . [27] [28] [29] Stable Diffusion se utiliza principalmente para crear imágenes condicionadas a descripciones de texto.

Generación 1

Gen-1 es un sistema de inteligencia artificial generativa de video a video que sintetiza nuevos videos aplicando la composición y el estilo de una imagen o un mensaje de texto a la estructura de un video original. El modelo se lanzó en febrero de 2023. El modelo Gen-1 fue entrenado y desarrollado por Runway con base en el artículo original Structure and Content-Guided Video Synthesis with Diffusion Models de Runway Research. [30] Gen-1 es un ejemplo de inteligencia artificial generativa para la creación de videos.

Generación 2

Gen-2 es un sistema de IA multimodal que puede generar nuevos vídeos con texto, imágenes o videoclips. El modelo es una continuación de Gen-1 e incluye una modalidad para generar vídeos condicionados a texto. Gen-2 es uno de los primeros modelos de texto a vídeo disponibles comercialmente . [31] [32] [33] [34]

Gen-3 Alfa

Gen-3 Alpha es el primero de una serie de modelos futuros entrenados por Runway en una nueva infraestructura diseñada para el entrenamiento multimodal a gran escala. Es una mejora importante en fidelidad, consistencia y movimiento con respecto a Gen-2, y un paso hacia la creación de modelos mundiales generales. [2]

Los datos de entrenamiento para Gen-3 se obtuvieron de miles de videos de YouTube y películas posiblemente pirateadas . Un ex empleado de Runway afirmó a 404 Media que un esfuerzo de toda la empresa era recopilar videos en hojas de cálculo, que luego se descargaban usando youtube-dl a través de servidores proxy para evitar que YouTube los bloqueara. En las pruebas, 404 Media descubrió que los nombres de los YouTubers generaban videos en sus respectivos estilos. [35]

Festival de Cine de IA

Runway organiza un festival anual de cine de inteligencia artificial [36] en Los Ángeles y la ciudad de Nueva York . [37] [38]

Referencias

  1. ^ ab Metz, Cade (4 de abril de 2023). "Los vídeos instantáneos podrían representar el próximo salto en la tecnología de la IA". The New York Times . ISSN  0362-4331 . Consultado el 15 de septiembre de 2023 .
  2. ^ ab "La próxima frontera de la IA generativa es el vídeo". Bloomberg.com . 20 de marzo de 2023 . Consultado el 15 de septiembre de 2023 .
  3. ^ Vincent, James (20 de marzo de 2023). "La inteligencia artificial de texto a video se acerca a medida que la startup Runway anuncia un nuevo modelo". The Verge . Consultado el 15 de septiembre de 2023 .
  4. ^ "Cómo el director y editor Evan Halleck utiliza Runway para películas, vídeos musicales y anuncios publicitarios". Runway . Consultado el 1 de marzo de 2024 .
  5. ^ "Distorsionando la realidad con Dan Streit". Runway . Consultado el 1 de marzo de 2024 .
  6. ^ Cowen, Trace William. "Kanye West comparte un video inquietante de "Vultures (Havoc Version)" antes del lanzamiento del álbum en colaboración con Ty Dolla Sign". Complex . Consultado el 1 de marzo de 2024 .
  7. ^ The Dandy Warhols - "I'd Like To Help You With Your Problem (feat. Slash)" - Video musical oficial, 14 de febrero de 2024 , consultado el 1 de marzo de 2024
  8. ^ "Cómo Runway redujo la edición de The Late Show de cinco horas a cinco minutos". Runway . Consultado el 1 de marzo de 2024 .
  9. ^ "Cómo Drew Emery usa Runway para editar contenido para Top Gear America y Cooper's Bar". Runway . Consultado el 1 de marzo de 2024 .
  10. ^ "TIME100 AI 2023: Cristóbal Valenzuela". Tiempo . 2023-09-07 . Consultado el 15 de septiembre de 2023 .
  11. ^ Black, Julia. «'No todo el mundo está intentando construir a Dios': el director ejecutivo de Runway, Cristóbal Valenzuela, intenta atenuar el pesimismo». The Information . Consultado el 18 de septiembre de 2023 .
  12. ^ "RunwayML recauda 8,5 millones de dólares para sus herramientas de creación de medios basadas en inteligencia artificial". VentureBeat . 2020-12-16 . Consultado el 2023-09-15 .
  13. ^ "Runway recauda $35 millones en Serie B | Blog de Runway". Runway . Consultado el 7 de noviembre de 2023 .
  14. ^ Cai, Kenrick. "El fundador de AI que se atribuye el éxito de Stable Diffusion tiene antecedentes de exageración". Forbes . Consultado el 15 de septiembre de 2023 .
  15. ^ "La startup original detrás de Stable Diffusion ha lanzado una IA generativa para video". MIT Technology Review . Consultado el 18 de septiembre de 2023 .
  16. ^ Cai, Kenrick. "Runway recauda 50 millones de dólares con una valoración de 500 millones de dólares mientras continúa la locura por la inteligencia artificial generativa". Forbes . Consultado el 15 de septiembre de 2023 .
  17. ^ "La startup de video con inteligencia artificial Runway recauda 141 millones de dólares de Google y Nvidia". Bloomberg.com . 2023-06-29 . Consultado el 2023-09-15 .
  18. ^ Wiggers, Kyle (29 de junio de 2023). "Runway, una startup que crea inteligencia artificial generativa para creadores de contenido, recauda 141 millones de dólares". TechCrunch . Consultado el 15 de septiembre de 2023 .
  19. ^ "Google invierte en la startup de inteligencia artificial Runway para arrebatarle el negocio de la nube a AWS". The Information . Consultado el 15 de septiembre de 2023 .
  20. ^ Black, Julia. «'No todo el mundo está intentando construir a Dios': el director ejecutivo de Runway, Cristóbal Valenzuela, intenta atenuar el pesimismo». The Information . Consultado el 15 de septiembre de 2023 .
  21. ^ "Entrevista destacada: Chris Valenzuela, director ejecutivo de Runway AI - First Move con Julia Chatterley - Podcast en CNN Audio". CNN . Consultado el 18 de septiembre de 2023 .
  22. ^ Metz, Cade (4 de abril de 2023). «Los vídeos instantáneos podrían representar el siguiente salto en la tecnología de la IA». The New York Times . ISSN  0362-4331 . Consultado el 15 de septiembre de 2023 .
  23. ^ "La próxima frontera de la IA generativa es el vídeo". Bloomberg.com . 20 de marzo de 2023 . Consultado el 15 de septiembre de 2023 .
  24. ^ Vincent, James (20 de marzo de 2023). "La inteligencia artificial de texto a video se acerca a medida que la startup Runway anuncia un nuevo modelo". The Verge . Consultado el 15 de septiembre de 2023 .
  25. ^ "Las 100 empresas más influyentes de TIME en 2023: Runway". Time . 2023-06-21 . Consultado el 2023-09-20 .
  26. ^ Vincent, James (24 de abril de 2023). "Crea videos generativos de IA a video directamente desde tu teléfono con la aplicación iOS de Runway". The Verge . Consultado el 1 de marzo de 2024 .
  27. ^ "El desarrollador de Stable Diffusion, Runway, recauda 50 millones de dólares para crear herramientas multimedia de inteligencia artificial". SiliconANGLE . 2022-12-06 . Consultado el 2023-09-18 .
  28. ^ "La IA de estabilidad está perdiendo ejecutivos, ingenieros y su ventaja". Bloomberg.com . 2023-08-08 . Consultado el 2023-09-18 .
  29. ^ "La startup original detrás de Stable Diffusion ha lanzado una IA generativa para video". MIT Technology Review . Consultado el 18 de septiembre de 2023 .
  30. ^ "Gen-1 por Runway". Runway . Consultado el 18 de septiembre de 2023 .
  31. ^ "La inteligencia artificial generativa de texto a video finalmente está aquí y es muy extraña". Gizmodo . 2023-03-22 . Consultado el 2023-09-18 .
  32. ^ Wiggers, Kyle (9 de junio de 2023). "Gen-2 de Runway muestra las limitaciones de la tecnología de conversión de texto a video actual". TechCrunch . Consultado el 18 de septiembre de 2023 .
  33. ^ Avram Piltch (8 de junio de 2023). "La potente herramienta de conversión de texto a video Gen-2 de Runway ahora está disponible para todos de forma gratuita". Tom's Hardware . Consultado el 18 de septiembre de 2023 .
  34. ^ Vincent, James (20 de marzo de 2023). "La inteligencia artificial de texto a video se acerca a medida que la startup Runway anuncia un nuevo modelo". The Verge . Consultado el 18 de septiembre de 2023 .
  35. ^ Cole, Samantha (25 de julio de 2024). "AI Video Generator Runway entrenado en miles de videos de YouTube sin permiso". 404 Media . Consultado el 25 de julio de 2024 .
  36. ^ "Festival de cine Runway AI". Runway . Consultado el 18 de noviembre de 2023 .
  37. ^ Melendez, Steven. "Un nuevo festival de cine sólo mostrará películas realizadas con inteligencia artificial".
  38. ^ Kokalitcheva, Kia. "Una gran novedad cinematográfica: un festival de cine generado por inteligencia artificial".

Enlaces externos