Hao Li ( chino :黎顥; pinyin : Lí Hào , nacido en 1980 o 1981) [1] es un científico informático , innovador y emprendedor de Alemania , que trabaja en los campos de los gráficos por computadora y la visión por computadora . Es cofundador y director ejecutivo de Pinscreen, Inc, así como profesor asociado de visión por computadora en la Universidad de Inteligencia Artificial Mohamed Bin Zayed (MBZUAI) . [2] Anteriormente fue miembro distinguido de la Universidad de California, Berkeley , [3] profesor asociado de informática [4] en la Universidad del Sur de California y exdirector del Laboratorio de Visión y Gráficos en el Instituto de Tecnologías Creativas de la USC . [5] También fue profesor visitante en Weta Digital y líder de investigación en Industrial Light & Magic / Lucasfilm .
Por su trabajo en el registro de formas no rígidas, la digitalización humana y la captura del desempeño facial en tiempo real, Li recibió el premio TR35 en 2013 de la MIT Technology Review . [6] Fue nombrado presidente de carrera temprana Andrew y Erna Viterbi en 2015, y recibió el premio de investigación de la facultad de Google y la beca de investigación de la Fundación Okawa el mismo año. Li ganó un premio de investigador joven de la Oficina de Investigación Naval en 2018 [7] y fue nombrado miembro del grupo de estudio ISAT de DARPA en 2019. [8] Es miembro del Consejo de Futuro Global sobre Realidad Virtual y Aumentada del Foro Económico Mundial . [9]
Los padres de Li son taiwaneses y vivían en Alemania en 2013. [1]
Li asistió a una escuela secundaria franco-alemana en Saarbrücken y habla cuatro idiomas (inglés, alemán, francés y chino mandarín ). Obtuvo su diploma (es decir, M.Sc. ) en ciencias de la computación en el Instituto Tecnológico de Karlsruhe (entonces Universidad de Karlsruhe (TH) ) en 2006 y su doctorado en ciencias de la computación en ETH Zurich en 2010. [10] Fue investigador visitante en ENSIMAG en 2003, la Universidad Nacional de Singapur en 2006, la Universidad de Stanford en 2008 y EPFL en 2010. También fue investigador postdoctoral en la Universidad de Columbia y la Universidad de Princeton entre 2011 y 2012. [3]
Li se unió a Industrial Light & Magic / Lucasfilm en 2012 como líder de investigación para desarrollar tecnologías de captura de rendimiento en tiempo real de próxima generación para producción virtual y efectos visuales. Más tarde se unió al departamento de informática [4] en la Universidad del Sur de California como profesor asistente en 2013 y fue ascendido a profesor asociado en 2019. En 2014, pasó un verano como profesor visitante en Weta Digital trabajando en tecnologías de seguimiento facial y digitalización del cabello para los efectos visuales de Furious 7 y El Hobbit: La batalla de los cinco ejércitos . En 2015, fundó Pinscreen, Inc., una startup de inteligencia artificial que se especializa en la creación de avatares virtuales fotorrealistas utilizando algoritmos avanzados de aprendizaje automático . [10] En 2016, fue nombrado director del Laboratorio de Visión y Gráficos en el Instituto de Tecnologías Creativas de la USC y se unió a la Universidad de California, Berkeley en 2020 como miembro distinguido. En 2022, Li fue nombrado profesor asociado de visión artificial en la Universidad de Inteligencia Artificial Mohamed Bin Zayed en Abu Dhabi para dirigir un nuevo centro de IA para la investigación del Metaverso . [11]
Ha trabajado en el procesamiento de geometría dinámica y técnicas basadas en datos para realizar digitalización humana en 3D y animación facial. Durante su doctorado, Li co-creó un sistema en tiempo real y sin marcadores para animación facial basada en rendimiento basada en sensores de profundidad que ganó el premio al mejor artículo en el Simposio ACM SIGGRAPH / Eurographics sobre Animación por Computadora en 2009. [12] El equipo luego comercializó una variante de esta tecnología como el software de animación facial Faceshift [13] (adquirido por Apple Inc. en 2015 e incorporado al iPhone X en 2017 [14] [15] ). Esta técnica en registro de forma deformable es utilizada por la compañía C-Rad AB y se implementa en hospitales para rastrear tumores en tiempo real durante la radioterapia. En 2013, trabajó en un sistema de escaneo doméstico que usa un Kinect para capturar personas en personajes de juegos o versiones en miniatura realistas. [16] Esta tecnología fue licenciada por Artec y lanzada como un software gratuito Shapify.me. En 2014, fue contratado como profesor visitante en Weta Digital para construir el proceso de captura de desempeño facial de alta fidelidad para recrear al actor fallecido Paul Walker [17] en la película Furious 7 (2015).
Su investigación reciente se centra en la combinación de técnicas de Deep Learning y Computer Graphics para facilitar la creación de avatares 3D y permitir una verdadera comunicación inmersiva cara a cara y telepresencia en Realidad Virtual . [18] En colaboración con Oculus / Facebook , en 2015 ayudó a desarrollar una pantalla montada en la cabeza con detección de rendimiento facial , [19] que permite a los usuarios transferir sus expresiones faciales a sus avatares digitales mientras están inmersos en un entorno virtual. En el mismo año, fundó la empresa Pinscreen, Inc. [20] en Los Ángeles , que introdujo una tecnología que puede generar avatares 3D realistas de una persona, incluido el cabello de una sola fotografía. [21] También trabajan en redes neuronales profundas que pueden inferir rostros fotorrealistas [22] y expresiones, [23] lo que se ha mostrado en la Reunión Anual de los Nuevos Campeones 2019 del Foro Económico Mundial en Dalian . [10]
Debido a la facilidad de generar y manipular rostros digitales, Hao ha estado creando conciencia pública sobre la amenaza de los videos manipulados como los deepfakes . [24] [25] En 2019, Hao y el experto forense de medios, Hany Farid , de la Universidad de California, Berkeley , publicaron un artículo de investigación que describe un nuevo método para detectar deepfakes mediante el análisis de la expresión facial y los patrones de movimiento de una persona específica. [10] Con el rápido progreso en inteligencia artificial y gráficos de computadora, Li ha predicho que los videos genuinos y los deepfakes se volverán indistinguibles en tan solo 6 a 12 meses, a partir de septiembre de 2019. [26] En enero de 2020, Li habló en la Reunión Anual del Foro Económico Mundial 2020 en Davos sobre deepfakes [27] y cómo podrían representar un peligro para la sociedad. Li y su equipo de Pinscreen, Inc. también demostraron una tecnología deepfake en tiempo real [28] en la reunión anual, donde los rostros de celebridades se superponen a los rostros de los participantes.
En 2020, Li y su equipo desarrollaron un sistema de teletransportación humana volumétrica que puede digitalizar un cuerpo humano completo en 3D desde una sola cámara web y transmitir el contenido en tiempo real. La tecnología utiliza el aprendizaje profundo en 3D para inferir un modelo texturizado completo de una persona utilizando una sola vista. El equipo presentó el trabajo en ECCV 2020 y demostró el sistema en vivo en el programa Real-Time Live! de ACM SIGGRAPH , donde ganaron el premio "Best in Show". [29] [30]
Por su trabajo en efectos visuales, Hao ha sido acreditado en varias películas , incluyendo Blade Runner 2049 (2017), Valerian and the City of a Thousand Planets (2017), Furious 7 (2015), El hobbit: La batalla de los cinco ejércitos (2014) y Noé (2014). También apareció como él mismo en varios documentales sobre inteligencia artificial y deepfakes , incluyendo Follow This de Buzzfeed en 2018, The Fifth Estate de CBC en 2018, e iHuman [34] en 2019. En 2022, Hao y su empresa, Pinscreen, aparecieron en un episodio de la serie documental, Amazon re:MARS Luminaries. [35]