Metaverse es un mundo virtual paralelo al mundo real, y es una nueva generación de Internet. XR con verdaderas funciones tridimensionales, interactivas y envolventes es la forma de medios digitales definitiva para construir el metaverso. Cómo romper el estrecho vínculo entre los dispositivos terminales XR y el contenido XR, y realizar el acceso en línea en cualquier plataforma y cualquier terminal, Cloud XR es la única forma de abrir el canal al Metaverso. Parallel Cloud es un líder internacional en defensa del concepto Cloud XR y pionero en tecnología, comprometido a proporcionar a los socios y desarrolladores de la industria una implementación eficiente, lista para usar y de bajo código de los productos de la plataforma Cloud XR PaaS. Ha atraído a casi mil usuarios empresariales y decenas de miles de desarrolladores independientes de todo el mundo. Los productos y las soluciones se utilizan de manera madura en educación y capacitación, gemelos digitales, rehabilitación médica, transmisión virtual en vivo, humanos digitales, actividades en la nube, juegos en la nube y otros. escenarios.
Texto/Li Yan
Editar/LiveVideoStack
El contenido de hoy gira principalmente en torno a tres palabras clave: Parallel Cloud, Metaverse y Channel. "Parallel Cloud" es el nombre de nuestra empresa. "Metaverso" es el tema de nuestro sub-foro de hoy. "Channel" es un posicionamiento de Parallel Cloud en la industria del metaverso.
A continuación, combinaré estas tres palabras clave y daré una breve introducción desde cinco aspectos: nube paralela y metaverso, audio y video y metaverso, desafío y exploración, sobre nuestra empresa y presentación de casos.
-01-
Nubes Paralelas y el Metaverso
En primer lugar, nube paralela y metaverso. Las tres palabras "Nube paralela" se derivan de la frase " mundo virtual en la nube paralelo al mundo real ". Desde el comienzo del establecimiento de la empresa hasta el presente, esta frase es una intención y una visión originales a las que siempre nos hemos adherido y nunca hemos cambiado.
Hablando de mundos paralelos, en realidad creo que este concepto no es nuevo, debería ser una búsqueda de nuestros seres humanos desde la antigüedad. Ya sea que hablemos del origen de Metaverse, Avalanche o The Classic of Mountains and Seas, la mitología griega antigua, o temas actuales de cine y televisión o incluso juegos en línea, todos ellos están construyendo un mundo virtual paralelo a nuestro mundo. Entonces, ¿cuál es la diferencia? La diferencia es que la forma de medios digitales que constituye el mundo paralelo ha ido evolucionando.
Al igual que la mitología griega antigua y el Clásico de las Montañas y los Mares que acabamos de mencionar, antes de Internet y la digitalización, los jeroglíficos estaban compuestos por imágenes. Con Internet, gradualmente de texto a imágenes a audio y video. Hoy en día es un mundo de audio y video. Internet se compone de texto, imágenes, audio y video, pero no importa si se trata de texto, imágenes o audio y video, todos tienen una característica común: "El mundo paralelo que construyen , el mundo virtual es bidimensional y la información es transmisión unidireccional, no tenemos forma de interactuar con él, lo que lleva al hecho de que lo virtual es lo virtual y lo real es lo real, y lo virtual y lo reales están separados. En realidad, no es tan fácil entrar en un mundo virtual, al igual que leer una novela cuando eras joven, podemos imaginarnos a nosotros mismos como un personaje de una novela, pero requiere una imaginación posiblemente fuerte".
Metaverse es una nueva generación de Internet.Después de que salió el término Metaverse, las personas tienen diferentes opiniones y todavía está en un estado de ceguera. Los practicantes de diferentes industrias definitivamente describirán el metaverso desde sus propias perspectivas. Es como decir que aquellos que tocan las patas de un elefante se llaman pilares, y aquellos que tocan las orejas de un elefante se llaman abanicos de totora. Aplicaciones, como redes sociales las redes, la oficina, los juegos, la educación, los pagos, etc. no son lo suficientemente recientes.
¿Qué hay de nuevo? Lo que es nuevo es la forma de los medios digitales en Internet. Desde texto e imágenes hasta audio y video, Internet compuesta por XR, es decir, realidad extendida, es una nueva forma.
¿Cuáles son las novedades de este nuevo formulario? Es tridimensional e interactivo, y se pueden lograr diferentes experiencias inmersivas con la ayuda de diferentes terminales, que es exactamente igual a nuestro mundo físico. Debido a que nuestro mundo físico es tridimensional, estamos en él y podemos interactuar con él. Este tipo de dimensión equitativa entre lo virtual y lo real es una premisa importante, para que podamos lograr la llamada coexistencia de lo virtual. y real, y la simbiosis de virtual y real.
En el futuro, el límite entre el mundo virtual y el mundo físico puede volverse muy borroso, y lo virtual y lo real se mezclan, e incluso no podemos decir cuál es virtual y cuál es real. Este es el concepto de metaverso. . Aunque a nivel técnico, creemos que es una iteración de dichos medios digitales, pero ¿por qué es tan popular a nivel de aplicación? Creo que esta es una de las principales razones.
Para resumir el contenido mencionado anteriormente, la nueva generación de Internet se refiere al metaverso del que estamos hablando ahora, el metaverso está compuesto por un Internet 3D y descentralizado, un mundo virtual paralelo a nuestro mundo físico. No hablemos por ahora del tema de la descentralización, hoy nos centraremos en el 3D.
-02-
Audio Video y el Metaverso
¿De qué está hecho el audio y el video? Consta de imágenes y audio. Entonces, ¿de qué está hecho el XR que conforma el mundo paralelo?
Echemos un vistazo a esta imagen. Estas son algunas capturas de pantalla que tomé de la demostración lanzada por UE5.0 el año pasado, y dos capturas de pantalla en el valle antiguo. Esta es también una captura de pantalla muy conocida de Black Wukong en la industria del juego. . Estas cosas son en realidad lo mismo, están compuestas por una gran cantidad de caras triangulares más texturas.
Tomando el caso del valle antiguo como ejemplo, hay más de 33 millones de caras triangulares debajo de una estatua, y toda la demostración contiene cientos de miles de millones de caras triangulares. Estos elementos forman XR, y XR forma todo el mundo virtual paralelo. Por supuesto, el XR mencionado aquí es en un sentido estricto y está orientado al contenido, refiriéndose al contenido interactivo tridimensional que utiliza diferentes terminales para lograr la inmersión.
Entonces esto trae al menos tres puntos débiles:
1. Gran cantidad de datos . A juzgar por la demostración del valle antiguo, el espacio de almacenamiento de esta demostración es de 205 GB, y la cantidad de datos es grande, y esto es diferente del audio y el video con los que todos están familiarizados. El audio y el video pueden admitir la transmisión de transmisión y pueden ser visto durante la descarga, pero para el contenido de 205 GB, si se rompen varias bibliotecas dinámicas K durante la descarga, es posible que no se pueda ejecutar todo el programa;
2. Alta potencia informática necesaria para el funcionamiento . Acabamos de decir que la potencia informática requerida para ejecutar estos cientos de millones de caras triangulares es muy alta. Desde la perspectiva de permitir calcular estas caras triangulares en tiempo real, requiere una potencia de cálculo muy alta. La tarjeta 4090 recién lanzada el año pasado ha cambiado de las tradicionales dos ranuras a tres ranuras, que no se pueden acomodar en terminales comunes, solo las estaciones de trabajo de comunicación informática muy profesionales pueden adaptarse;
3. La protección de los activos de datos es muy difícil . Los activos que son más difíciles de producir son más valiosos Si los activos de datos tridimensionales complejos que vimos ahora son descargados por otros, no hay una buena manera de protegerlos, lo que es muy perjudicial para el desarrollo de toda la ecología.
Resumamos los tres puntos débiles anteriores para ver qué queremos y cuál es el estado actual.
1. Esperamos que cualquier terminal pueda usarse de inmediato para reducir el costo de uso, pero en la actualidad, los requisitos para este tipo de configuración de hardware son muy altos y el costo de uso también es alto;
2. No queremos descargar tantos datos, esperamos hacer clic en un enlace URL y usarlo de inmediato como navegar por Internet, pero ahora necesitamos descargar los datos del complemento del programa por adelantado e incluso hacer una configuración complicada;
3. Esperamos que solo tarde unos segundos en abrirse y no sea necesario descargar el contenido. Pero ahora, incluso si se convierte en un modo de arquitectura BS basado en WebGL, de hecho todavía necesita descargar datos en segundo plano y tarda mucho tiempo en abrirse;
4. Esperamos que el desarrollo de plataforma única se pueda usar en todas las plataformas, pero actualmente hay varias versiones, como Windows, Linux y MAC;
5. Esperamos que sea un mantenimiento mínimo y una actualización del contenido actualizado, pero el statu quo es que el costo de este tipo de actualización de mantenimiento de implementación descentralizada es muy alto;
6. En cuanto a la seguridad de los datos, esperamos que los datos y los usuarios estén separados y que los derechos de propiedad intelectual estén bien protegidos.Sin embargo, es difícil controlar la autorización del contenido y no se puede garantizar la protección de los derechos de propiedad intelectual.
Estos objetivos y puntos débiles deben ser los problemas que tenemos que resolver, de lo contrario, la ecología no podrá avanzar de manera benigna.
Cuando comenzamos a hacer esto, todavía había muchas disputas sobre varias rutas entre la nube y la nube. Afortunadamente, toda la industria ha reconocido este dicho, que es provocado por la nube. Infinitas posibilidades.
Cloud XR es la única forma de aplicación a gran escala de XR. Esperamos que todos puedan ingresar al metaverso, y debemos bajar el umbral.
¿Por qué Cloud XR puede resolver estos tres problemas? Lo anterior es el diagrama de flujo.Siempre me he opuesto a llamar a Cloud XR streaming para abreviar, también conocido como streaming. La transmisión se refiere a punto a punto, que es el proceso de resolución de la transmisión de red intermedia, pero este proceso es mucho más que una transmisión de red.
El terminal envía un comando interactivo a la nube. El primer paso que debe hacer la nube es distribuir la potencia informática. El siguiente paso es calcular y renderizar, y recopilar los resultados. Se muestra una renderización del video.
En este proceso, la terminal solo hace dos cosas, la primera es la carga de instrucciones, y la segunda es la decodificación y reproducción de audio y video. Siempre que tenga una terminal que pueda ver videos de alta definición en línea, puede acceder a los requisitos originales. Aplicaciones XR a las que solo se puede acceder en estaciones de trabajo gráficas de muy alto rendimiento. Al mismo tiempo, los datos no caen al suelo. El usuario puede ver pero no tocar el terminal a través de la transmisión de video. Incluso si el video en la pantalla es interceptado, no se pueden quitar datos, lo que puede resolver el problemas enumerados anteriormente Puntos de dolor.
-03-
desafío y exploración
Parallel Cloud solo hace una cosa, que es abrir el canal al Metaverso.
Un canal debe ser algo que conecte dos extremos. Un extremo es un mundo virtual tridimensional, interactivo e inmersivo paralelo al mundo físico formado por XR. Socios de todos los ámbitos de la vida están construyendo este mundo. El otro extremo es cada vez más el equipo terminal portátil, ya sea el teléfono móvil, el iPad, la computadora o el equipo VR, AR, MR más utilizado que puede volverse cada vez más popular en el futuro. No había canal antes de la formación del canal. Es necesario descargar e instalar el contenido en el dispositivo para convertirse en un estado estrechamente acoplado, y no necesita un canal.
Al igual que el audio y el video se grabaron antes en una cinta de video, se completa usando un reproductor de DVD para reproducir CD y VCD. Ahora se puede desacoplar a través de la red. Si XR quiere lograr una aplicación a gran escala, también debe lograr dicho desacoplamiento.
De hecho, Parallel Cloud se enfoca más en productos en la capa de software, no hace poder de cómputo en la parte inferior, no hace aplicaciones en la parte superior y solo hace la capa intermedia, esta es la mayor diferencia con los anteriores.
Enumero los siguientes puntos:
1. El desafío de la optimización de la transmisión de audio y video 2. El desafío de la asignación de recursos de computación en la nube
3. El desafío del acceso terminal heterogéneo 4. El desafío del desarrollo secundario y listo para usar
Fuente: Documento técnico de Huawei Wireless X Labs
Cloud XR tiene requisitos muy altos para la red, principalmente debido a los siguientes aspectos: una gran cantidad de datos, requisitos de tiempo real muy altos y requisitos de garantía de QoS muy estrictos.
En primer lugar, hablemos de la velocidad de bits súper grande. De acuerdo con el libro blanco que se incluye en el año, desde el principio hasta el estado cómodo y luego hasta el estado ideal, los requisitos típicos de ancho de banda deben alcanzar los 80 M, 260 M o incluso 1G a 1.5G. Esto es completamente diferente de nuestra actual tasa de bits de aplicaciones ITC de audio y video.
La latencia ultrabaja debe hacer que la latencia de un extremo a otro sea inferior a 70 al menos en la etapa inicial, inferior a 50 en la etapa cómoda y inferior a 30 en la etapa ideal. -Se requiere un cálculo deformado al final, que es el llamado ATW. El cálculo de ATW se controlará en 20 milisegundos, y el efecto del cálculo depende de los experimentos anteriores de extremo a extremo, por lo que definitivamente se puede lograr.
Fiabilidad ultra alta, si no es fiable, hará que la pantalla se vea borrosa y se congele.
En realidad, se puede decir que los datos enumerados anteriormente tienen poco que ver con nosotros. Estamos haciendo productos a nivel de software. Estas capas de red pertenecen a la infraestructura, y solo podemos hacer lo que podemos hacer sobre la base de la base de red existente.
De hecho, todos en esta industria están investigando en esta área. Presté especial atención a la situación de la estación de Beijing LiveVideoStackCon 2021. Los expertos de Tencent compartieron el "marco de tecnología de representación en la nube y el nuevo juego interactivo". De hecho, todos son iguales, de codificación y transmisión Estos dos ángulos para hacer alguna optimización.
Se debe decir que hacer esto en la industria es similar con pequeñas diferencias. No hablaré mucho sobre Datong. Hablemos brevemente sobre las diferencias. Las siguientes son algunas de nuestras propias exploraciones.
El enfoque principal actual se basa en la agrupación de redes y el control de la toma de decisiones en función de datos como el retraso y la tasa de pérdida de paquetes. Este tipo de control de toma de decisiones es el más utilizado actualmente, pero considera completamente las fluctuaciones en tiempo real de la red, por lo que se define como un marco de control de toma de decisiones desde una perspectiva micro. La ventaja de este marco de control es que puede tener retroalimentación en tiempo real sobre los cambios en la red. En el caso de buenas condiciones de red, el efecto es bueno, pero en condiciones de red débiles, el control de la toma de decisiones a menudo se retrasa y no hay forma de brindar una mejor experiencia de usuario.
Sobre esta base, proponemos un marco de control de roles con consideraciones tanto micro como macro. No solo considere la situación micro y macro de la red, sino también la capa de aplicación y la capa de retroalimentación del usuario. De esta manera, se puede controlar todo el personaje, haciéndolo más flexible y más científico. El objetivo final es el mismo, nuestro objetivo es brindar una mejor experiencia de usuario en las condiciones de red existentes, especialmente en condiciones de red débil como Wi-Fi.
2. El desafío de la asignación de recursos de computación en la nube
Una es la solución de agrupación de recursos informáticos acelerados por GPU. El segundo es la programación de recursos de potencia informática del centro más el perímetro.
Quienes estén familiarizados con las GPU pueden saber que la virtualización de las GPU no está lo suficientemente madura. Las soluciones de virtualización actuales usan virtualización o transferencia, es decir, cuelgan una vGPU o una GPU física en una máquina virtual. La ventaja de este enfoque es que se puede aislar estrictamente. La desventaja es que el uso de recursos y la programación no son particularmente flexible. .
Una vGPU o GPU solo puede ser utilizada por un usuario. Como se acaba de mencionar, para un determinado juego, si se conoce su potencia de cómputo, es completamente satisfactorio. Sin embargo, en el caso de una plataforma de contenido diversa, diferentes usuarios acceden a contenido diferente, y la demanda de tal poder de cómputo tiene cambios elásticos muy grandes, este modelo no es razonable.
En nuestros productos, Athena es una solución de agrupación de GPU. Todos en la industria tienen diferentes enfoques para la agrupación. Los más unificados son el aislamiento de procesos y las limitaciones de recursos, así como la intercepción y encapsulación a nivel de API. Dado que intercepta la capa API, lo que puede hacer debe ser limitado.
En la agrupación de computación de aceleración de gráficos mencionada anteriormente, solo interceptamos interfaces gráficas como Direct X Open GL. Si está haciendo HPC, puede usar Cuda más. En este caso, no hay capa de virtualización, que es similar a la diferencia entre Docker y VM.Todas las aplicaciones de capa superior se ejecutan directamente en todo el sistema operativo, y el uso compartido de múltiples usuarios se realiza a través del aislamiento entre procesos, para realizar a Programación y asignación de recursos dinámicos y detallados.
Aunque no podemos controlar la red, podemos proporcionar a los usuarios mejores condiciones y acercar a los usuarios a la potencia informática. Una vez que se construye el poder de cómputo, existe una estructura compleja sobre cómo asignar y programar cuándo se usa. Por ejemplo, se deben considerar grupos, regiones, distancias, números de concurrencia, ocupación de recursos de cada nodo, etc.. Con base en dicho algoritmo de asignación, los usuarios finalmente pueden obtener su propio mejor nodo.
No hace mucho, organizamos conjuntamente un evento nacional con Tmall. Se construyeron varios nodos en todo el país. Al mismo tiempo, estos nodos también se dividieron en diferentes grupos. Había usuarios VIP y usuarios ordinarios en los grupos. Los usuarios ordinarios no tenían nodos para esperar, y los usuarios VIP pueden acceder en cualquier momento.
3. Acceso terminal heterogéneo
Aunque el estado ideal es esperar que cada vez haya más dispositivos portátiles, es inevitable que los dispositivos planos como los teléfonos móviles sigan siendo los más utilizados, y también se transmiten desde la nube, pero es diferente. , iPads, las computadoras se dirigen a un flujo de video desde la nube por un plano y tridimensional. Para dispositivos como VR, se deben dirigir dos flujos de video desde la nube, y los ojos izquierdo y derecho siguen siendo diferentes.
Además de estos dos flujos de video, AR también debe superponerse con el mundo físico. Cómo habilitar el uso uniforme de aplicaciones y terminales heterogéneos en una plataforma requiere abrir el tiempo de ejecución subyacente para realizar su acceso.
4. Desafíos de uso inmediato y desarrollo secundario
Hay muchas empresas similares a nosotros en el mercado. Parallel Cloud es la primera y la única empresa reconocida que ha comercializado las capacidades de Could XR. No personalizamos ni exportamos capacidades.
Ingrese al sitio web oficial de Parallel Cloud, solo necesita registrarse para descargar los productos listos para usar. Sin embargo, diferentes industrias tienen diferentes necesidades. Cómo satisfacer estas diferentes necesidades requiere que proporcionemos una gran cantidad de capacidades de desarrollo secundarias flexibles, para que todos puedan combinar las necesidades de sus propias industrias con las necesidades de sus propias industrias sobre la base de estándares estandarizados. Productos Know-how, desarrollo secundario y uso por ti mismo.
5. Sobre nosotros
En resumen, Parallel Cloud es la primera empresa en China en comercializar soluciones de renderizado en la nube en tiempo real. LarkXR es ahora la solución de propósito general más utilizada en la industria. Algunas empresas líderes en diversas aplicaciones de la industria están realizando un desarrollo industrial basado en nuestros productos.
En la actualidad, hemos atraído a decenas de miles de desarrolladores y cientos de socios industriales de nivel empresarial. En la industria, gigantes como NVIDIA, AWS y Alibaba Cloud son nuestros únicos socios en este campo.
En la actualidad, Parallel Cloud ha iniciado el proceso de globalización. Cada vez hay más desarrolladores en el extranjero, y no hicimos una expansión deliberada antes. Descubrimos que cada vez más personas dependen del tráfico natural, por lo que planeamos trabajar duro para hacer negocios en el extranjero a partir de este año.
Esta imagen son los datos de autorización de usuario capturados el mes pasado. En la imagen se puede ver que entre los siete continentes del mundo, excepto la Antártida, no hay visitantes, y otros continentes tienen visitantes, es por eso que estamos trabajando arduamente para promocionar nuestros productos en el extranjero. En primer lugar, los clientes extranjeros tienen demanda y, en segundo lugar, nuestros productos son competitivos en el extranjero.
6. Exhibición de casos
El Festival de compras Tmall es ingresar todo el conjunto de cosas a través de la aplicación Taobao en teléfonos móviles. El control de tráfico es muy estricto. En la hora pico, debe ser de 20,000 a 30,000, y en el valle, puede haber solo un algunos cientos de concurrencia. Es muy flexible y flexible, siempre que busque todas las palabras clave a través de Taobao en su teléfono móvil, puede ingresar de inmediato.
Utilice este caso para compartir brevemente los productos de nube paralelos.
La función principal de Parallel Cloud es la capacidad de representación en la nube de nivel más bajo, y luego, gradualmente, hacer que algunos componentes funcionales sean adecuados para varias industrias. Más arriba, es un marco de desarrollo nativo de la nube. El marco nativo de la nube es una combinación del dispositivo y la nube. Como se mencionó anteriormente, algunos procesos comerciales deben operarse en el teléfono móvil Taobao, y las imágenes, el audio y el video involucrados, e incluso algunas representaciones táctiles, se realizan en La web. La representación de estos modelos de alta precisión se coloca principalmente en la nube, y los dos están conectados según el marco nativo de la nube.
De lo que hablé antes es de la aplicación del metaverso del nivel de entretenimiento pan-consumidor, que es una aplicación en el campo del gemelo digital de ToB. Este socio representa básicamente del 70% al 80% de la cuota de mercado de informatización de aeropuertos domésticos.
Si todos los sistemas de gemelos digitales actuales quieren usarlo y evitar convertirse en un producto que solo se muestra en una pantalla grande, deben deshacerse de las limitaciones del terminal y funcionar de verdad.
Finalmente, espero que con la ayuda de algunos productos y capacidades de Parallel Cloud, podamos ayudarlo a encontrarse en el mundo paralelo lo antes posible.
¡gracias a todos!
▲Escanee el código QR en la imagen o haga clic en " Leer el texto original " ▲
Vea más temas interesantes de LiveVideoStackCon 2023 Shanghai Station