La "conversación de la vida real" de 1 hora del Universo Xiao Zha Yuan incluso hace que los mechones de cabello sean distintos

**[Introducción] ¡El mundo de “**Ready Player One” está al alcance de tu mano! Durante el fin de semana, Xiao Zha inició una “conversación con una persona real” de una hora en el Metaverso, lo que hizo que el presentador suspirara y casi olvidara que la persona frente a él no era una persona real.

¡Levantarse!

Ayer mismo, el conocido presentador de podcasts estadounidense Lex Fridman y Xiao Zha iniciaron una charla “cara a cara” de una hora sobre el Metaverso, que conmocionó al mundo.

Mientras Lex Fridman charlaba, dijo sin rodeos: “Casi olvido que no eres una persona real frente a mí”.

Se pusieron los auriculares de Meta, a cientos de kilómetros de distancia, pero pudieron reproducir las expresiones faciales y los movimientos de Aavtar de manera muy realista.

Detrás de esto está Codec Avatars, una tecnología propuesta por Meta en 2019 para crear fácilmente avatares humanos virtuales y que solo requiere un teléfono móvil para capturar diferencias sutiles en las expresiones humanas.

Algunos internautas dijeron eso sin mencionar que estaban inmersos en la conversación, pero incluso ellos estaban tan inmersos en verla que después de 9 minutos, ¡de repente sintieron que eran personas reales teniendo una conversación!

Incluso hizo que el ex científico de Google, David Ha, cambiara su actitud escéptica hacia el “Metaverso”.

En aproximadamente 13 meses, el “verdadero amor” de Xiao Zha por el Universo Yuan parecía estar comenzando a dar sus frutos.

Desde 2021 hasta ahora, Meta Universe Laboratory ha invertido decenas de miles de millones de dólares y ha perdido dinero, pero finalmente ha permitido a la gente ver que el mundo en “Ready Player One” está un paso más cerca de nosotros.

A continuación, echemos un vistazo a los maravillosos momentos de la conversación entre Xiao Zha y el avatar virtual de Lex.

Transcripción de la entrevista

Tan pronto como apareció, comenzó la entrevista entre Fridman y Xiao Zha en el metaverso.

Aunque una persona estaba en California y la otra en Austin, Texas, a través de Codec Avatar y tecnología estéreo 3D, las dos personas parecían estar sentadas directamente frente a frente, y comenzaron una reunión y charla que puede pasar a la historia.

Fridman ajustó la posición de la fuente de luz y ambos sintieron claramente el cambio de luz.

Los otros lugares alrededor de las dos personas estaban completamente oscuros.

Al mirar el rostro claro y la expresión vívida de la otra parte, realmente sentí que todo esto sucedió en una habitación con las luces apagadas.

El sentimiento más intuitivo de Fridman es que esto es demasiado real, tan real que la gente no puede aceptarlo.

En semejante ambiente comenzó la entrevista de una hora.

La entrevista cubrió los pensamientos de Xiao Zha sobre el Metaverso y la discusión sobre qué es la “realidad”. Lo que atrajo más atención fueron las opiniones de Xiao Zha sobre las perspectivas de combinar la IA y el MetaUniverso, así como sus planes para el futuro de MetaAI. .

Tres años de simulación de cuerpo completo

En opinión de Xiao Zha, la tecnología de inteligencia artificial jugará un papel muy importante en el Metaverso en el futuro.

Definitivamente habrá una inteligencia súper artificial muy poderosa en el futuro, pero todavía habrá muchas herramientas de inteligencia artificial que permitirán a las personas completar diversas tareas de manera muy conveniente.

Puso como ejemplo el podcast de Fridman: los podcasters deben mantener la interacción con las audiencias de su comunidad tanto como sea posible. Pero el presentador no puede hacer esto las 24 horas del día sin tomar un descanso.

Si se puede construir una IA en el metaverso para ayudar a los presentadores a mantener la vitalidad de sus comunidades de fanáticos y satisfacer las diversas solicitudes planteadas por los fanáticos, permitirá a los presentadores lograr cosas que antes podrían haber sido imposibles de lograr.

Y Meta espera que dicha IA no solo aparezca en el metaverso, sino también en varias plataformas existentes para ayudar a los anclajes.

Las celebridades de Internet mantienen sus propias comunidades de fans y usuarios.

Meta lanzará esta función lo antes posible en el futuro para empoderar a más creadores de contenido.

Además, Meta AI aparecerá más en varios lugares del metaverso, se comunicará con los usuarios y les brindará ayuda.

Aparecerán diferentes personajes de IA con diferentes personalidades en el metaverso, brindando a los usuarios una experiencia muy rica y diversa.

Y ahora la IA para estos diferentes roles se encuentra en la etapa final de preparación. Meta espera hacer que estas IA sean más predecibles y seguras.

Además de hacer que los usuarios comunes tengan una mejor experiencia en el Metaverso, la IA puede proporcionar una variedad de servicios serios y profesionales a empresas o clientes en nombre de empresas en el Metaverso.

En los juegos de metaverso, la IA puede hacer que los NPC se comporten de manera más atractiva. Están desarrollando un juego de Snoopy similar al asesinato con guión. La IA funciona muy bien como presentadora del juego. Es muy divertido e interesante.

Llama 3 en camino

Fridman continuó preguntándole a Xiao Zha sobre la situación actual de Meta AI. Con respecto a Llama 2 y la futura Llama 3, Xiao Zha también lo sabía todo y seguía dando noticias.

En el último podcast con Fridman, Xiaozai discutió con él si abrir el código Llama 2, y Xiaozai estaba muy feliz de que Meta finalmente lo hiciera.

En opinión de Xiao Zha, el valor de abrir un modelo básico como Llama 2 supera con creces los riesgos.

Xiao Zha dijo que antes del código abierto, Meta pasó mucho tiempo, realizó una evaluación muy rigurosa y una simulación del equipo rojo, y finalmente lo abrió. Llama 2 se ha descargado y utilizado más de lo que esperaba Xiao Zha.

En cuanto a Llama 3, definitivamente habrá una. Pero después de abrir el código de Llama 2, la prioridad de Meta ahora es integrarlo en varios productos de consumo.

Porque Llama 2 en sí no es un producto de consumo. Es más bien una infraestructura que la gente puede utilizar para construir cosas. Por lo tanto, el enfoque ahora es continuar con los ajustes y hacer que Llama 2 y varias versiones puedan servir bien a los productos de consumo.

Esperemos que algún día cientos de millones de personas disfruten utilizando estos productos.

Sin embargo, Meta también está trabajando en el desarrollo de modelos fundamentales para el futuro. No hay mucho que revelar en este momento, pero definitivamente se lanzará después de rigurosas pruebas del equipo rojo como Llama 2.

Xiao Zha también espera que cuando Llama 3 tome forma, Meta siga siendo de código abierto. Sin embargo, Meta aún no ha ultimado este asunto, porque todavía está lejos de que Meta lance el modelo básico de próxima generación.

Sin embargo, los modelos de código abierto pueden permitir a las personas experimentar mejor lo que pueden hacer los modelos. Por ejemplo, el propio Xiao Zha es muy adicto a chatear con varios personajes virtuales de IA, lo cual es muy emocionante.

Vida futura de la humanidad

Con respecto a la vida humana en el futuro, Xiao Zha dijo que ¡el metaverso estará en todas partes!

El ejemplo más sencillo es el teléfono: en el futuro, los seres humanos experimentarán una interacción real entre ellos y el mundo virtual, como si hoy hicieramos llamadas telefónicas.

Por ejemplo, dos personas pueden experimentar su método de comunicación actual en cualquier momento y en cualquier lugar, excepto que en realidad los dos no están sentados en la misma habitación, en otros aspectos, una reunión de comunicación de este tipo no es diferente de la comunicación cara a cara.

Porque desde un punto de vista filosófico, la esencia del mundo real es la combinación de lo que podemos percibir y lo que realmente existe.

Si el mundo digital puede restaurar este aspecto cada vez mejor, el mundo digital puede volverse más rico y más poderoso.

Finalmente, Fridman le preguntó a Xiao Zha: ¿estabas sentado en la playa charlando conmigo?

Xiao Zha dijo que no, estaba sentado en la sala de conferencias.

Fridman dijo, es una lástima, estaba sentado en la playa y no llevaba pantalones, afortunadamente no viste cómo me veía realmente.

Codec Avatars: Un teléfono móvil, tu avatar está aquí

De hecho, la asombrosa tecnología que vimos en el video del blog fue desarrollada por Meta hace ya 19 años.

Esto es: avatares de códec.

Si quieres lograr una verdadera interacción en el metaverso, los avatares virtuales son los dos canales de Ren y Du que abren la puerta al metaverso.

El proyecto Codec Avatars tiene como objetivo implementar un sistema capaz de capturar y representar avatares realistas para su uso en XR.

Inicialmente, el proyecto comenzó con demostraciones de avatares de alta calidad y avanzó hasta crear avatares de cuerpo completo.

En la conferencia Connect 2021, el investigador Yaser Sheikh demostró el último logro del equipo: los avatares de códec de cuerpo completo.

Mientras tanto, los avatares de códec admiten movimientos oculares, expresiones faciales y posturas de manos y cuerpo más complejos.

Además, Meta también demostró que los avatares pueden lograr una representación realista del cabello y la piel en diferentes condiciones de iluminación y entornos.

La oportunidad de Meta de comenzar a realizar Codec Avatars se remonta a hace 9 años.

En 2014, Yaser Sheikh, director de Panoptic Studio, un laboratorio de captura 3D dependiente del Instituto de Robótica de la Universidad Carnegie Mellon, conoció al científico jefe de Oculus, Michael Abrash, y los dos tuvieron una charla muy especulativa.

Izquierda: Michael Abrash; Derecha: Yaser Sheikh

Yaser Sheikh se unió a Meta en 2015 y desde entonces lidera el equipo de investigación de Codec Avatars.

“Para crear un avatar realista, la base es la medición”, dijo Thomas Simon, científico investigador de Codec Avatars.

"Lo que hace que los avatares parezcan reales son datos precisos, lo que requiere buenas mediciones. Así que la clave para construir avatares realistas es encontrar una manera de medir los detalles físicos en las expresiones humanas, como la forma en que una persona entrecierra los ojos o arruga la nariz. . "

El equipo Codec Avatars de Pittsburgh Labs utiliza dos módulos principales para medir las expresiones humanas: codificadores y decodificadores.

Ahora, la gente sólo necesita un teléfono móvil para capturar con precisión la información de las expresiones faciales.

Restaura el verdadero cuerpo directamente en el metaverso.

Los internautas exclamaron: Uncanny Valley

Los internautas que han leído este blog quedan sorprendidos por los efectos del vídeo.

Jim Fan, científico senior de Nvidia, dijo:

Este episodio de @lexfridman pasará a la historia como el primer podcast producido por videoconferencia con un avatar.

En los próximos 3 a 5 años, cruzaremos por completo el “valle inquietante” de Avatar y la simulación.

A lo largo de mi carrera he trabajado en agentes avatar. Nuestra visión final es lograr una escena de The Matrix: avatares de humanos e inteligencia artificial de cuerpo completo y en tiempo real, compartiendo el mismo espacio virtual, interactuando con objetos de una manera realista, recibiendo una rica retroalimentación multimodal y olvidándonos de eso. El mundo es sólo una simulación.

Si bien ahora es necesario escanear los avatares con un equipo especial, Zucker insinuó que pronto será posible grabar videos de selfies con teléfonos inteligentes.

Dados los recientes avances en los modelos generativos 3D, creo que esto será posible dentro de unos meses. El seguimiento detallado de los dedos y el seguimiento de todo el cuerpo serán los próximos objetivos.

¿Cómo evolucionaste de un avatar de 3 píxeles a este? ¡Debí haberme emocionado!

El año pasado, Meta gastó 2.600 millones de dólares estadounidenses en publicidad y marketing. El efecto de este podcast es mucho mejor que el dinero. Lex, ¡pídele a Xiao Zha que te dé el dinero!

Aunque hay algunos errores menores en el seguimiento ocular, la presentación precisa de las expresiones hace que la gente olvide que en realidad se trata sólo de un avatar. ¡El futuro ya está aquí!

No es de extrañar que Musk no pudiera encontrar a Xiao Zha, ¡resultó que Xiao Zha se escondía aquí!

Finalmente, el vídeo original de la entrevista está aquí.

Referencias: