Esta semana fue fundamental para la industria XR. La semana fue testigo de importantes eventos tecnológicos como NVIDIA GTC y GDC 2023 que presentaron una gran cantidad de nuevas soluciones y productos XR.

Además, entre los nuevos lanzamientos de hardware y software inmersivos basados ​​en el consumidor, el espacio XR industrial se está acelerando en todo el espacio empresarial.

Las principales cooperaciones se basan en las innovaciones tecnológicas de 2022 para proporcionar plataformas XR SAAS confiables, lo que brinda a los desarrolladores espacio para aprovechar las soluciones inmersivas en todo el lugar de trabajo.

NVIDIA se lanza a lo grande en GTC 2023

Esta semana en NVIDIA GPU Technology Conference (GTC) 2023, la empresa líder en tecnología anunció una gran cantidad de anuncios que consolidan a la empresa en su viaje de soluciones inmersivas.

De sus muchos anuncios, XR y más allá, NVIDIA presentó la plataforma CloudXR 4.0 para escalar implementaciones de contenido inmersivo en infraestructuras de nube. El servicio actualizado agrega flexibilidad mejorada de servidor y cliente para desarrollar aplicaciones XR.

Además, CloudXR permite a los desarrolladores de plataformas aprovechar las redes de borde de computación móvil (MEC) con tecnología 5G para la transmisión de XR. La actualización también incluye la integración de Unity, las API para la optimización del servidor y las conexiones de baja latencia.

Además, durante GTC, NVIDIA presentó actualizaciones principales a su paquete de creación de contenido 3D en tiempo real (RT3D) Omniverse.

La suite Omniverse actualizada ahora contiene consideraciones para la creación de contenido industrial Metaverse. El centro de desarrollo 3D en tiempo real (RT3D) ahora incluye herramientas para aprovechar avatares basados ​​en IA, diseño/renderizado 3D, gemelos digitales y servicios de automatización.

Las actualizaciones también integran herramientas de terceros de proveedores de soluciones como Microsoft Azure, Siemens y Unity para elevar los flujos de trabajo. Para respaldar su conjunto de creación de contenido industrial Metaverse, NVIDIA también introdujo nuevo hardware, servicios y sistemas para optimizar las operaciones de Omniverse.

Dentro de su anuncio de Omniverse, NVIDIA también presentó herramientas de creación de contenido de avatar. El nuevo Avatar Cloud Engine (ACE) de la empresa es una colección de microservicios nativos de la nube para respaldar el desarrollo y la integración de avatares en varios niveles de una empresa.

ACE aprovecha los modelos y algoritmos de IA para acelerar y aplanar la curva de creación de avatares para las operaciones comerciales orientadas al cliente, como los servicios al cliente.

Spatial presenta Unity Creator Toolkit en GDC 2023

Este lunes, la plataforma social inmersiva Spatial anunció que su Unity Creator Toolkit está entrando en sus etapas beta.

La actualización, que Spaital anunció en la Game Developers Conference (GDC) 2023 en San Francisco, brinda a los desarrolladores de plataformas un conjunto flexible para diseñar, crear y publicar contenido inmersivo independiente del hardware.

Unity Creator Toolkit de Spatial permite a los desarrolladores de contenido inmersivo diseñar juegos y contenido inmersivo para navegadores, auriculares VR y dispositivos móviles.

Spatial está trabajando con cooperaciones importantes como Adidas, Vogue, Ready Player Me, OpenSea, Polygon Studios y Samsung para generar interés en el contenido Web3 de marca.

El contenido generado por el usuario (UGC, por sus siglas en inglés) basado en Web3 proporciona una nueva vía de participación de la audiencia para las marcas a través de contenido inmersivo asequible.

La próxima semana, la versión beta de Spatial’s Unity Creator Toolkit impulsará la Metaverse Fashion Week del 28 al 31 de marzo, mostrando la capacidad de la plataforma para exhibir moda de marca, avatares interoperables y productos Web3.

RTLY, socio de Ready Player Me para la interoperabilidad de avatares

Más noticias sobre tecnología de avatares esta semana. Este jueves, la plataforma Web3 RTLY se asoció con los especialistas en avatares Ready Player Me para implementar avatares y accesorios interoperables en todo el servicio.

La asociación trae 30 avatares prediseñados de cuerpo completo y de medio cuerpo a la plataforma RTLY.

Además, los usuarios de RTLY pueden exportar su contenido Web3 interoperable a través de más de 7000 aplicaciones y juegos de socios.

Rokid presenta las gafas inteligentes Max AR para usuarios finales de consumo y empresas

Esta semana, Rokid lanzó sus anteojos inteligentes Max, brindando una mayor competencia en el mercado de hardware inmersivo, colocando el dispositivo frente a firmas como Nreal y Xiaomi.

Las gafas inteligentes Rokid Max pesan 75 gramos. El dispositivo proporciona una gran pantalla virtual de 215 pulgadas visible a una distancia de seis metros. Los operadores pueden aprovechar el dispositivo para transmitir medios, como películas y juegos, sin hardware informático adicional.

Hui Du, Jefe del Centro de Diseño de Hardware de Rokidagregado:

Estas increíbles gafas AR permiten a los viajeros aprovechar al máximo su tiempo: disfrutar de una pantalla grande para ver películas, jugar, navegar o trabajar, sin tener que cargar con computadoras, hosts y pantallas voluminosas y costosas.

Los clientes pueden preordenar los dispositivos en el sitio web de la compañía con un precio de $439.

NVIDIA anunció el jueves el lanzamiento de su plataforma CloudXR 4.0 en la GPU Technology Conference (GTC) 2023.

Las nuevas herramientas empoderarán a los desarrolladores con casos de uso personalizados de CloudXR para aplicaciones y clientes. También proporcionará escalado de realidad extendida (XR) para implementaciones en la nube y mayor flexibilidad de servidor y cliente para desarrollar aplicaciones.

Con las actualizaciones, los desarrolladores pueden aprovechar la plataforma para usarla en la nube, sobre el borde de computación móvil (MEC) 5G y redes corporativas y empresariales.

También presenta nuevas interfaces de programas de aplicaciones (API) que pueden proporcionar a los desarrolladores múltiples herramientas para conectarse e interactuar con CloudXR. Estos incluyen información analítica sobre el rendimiento de la red, la ampliación en múltiples plataformas y la optimización de transmisión para redes de alta capacidad.

CloudXR 4.0 también facilita el trabajo con la arquitectura basada en Unity a través de un cliente de muestra. Las nuevas herramientas permitirán a los desarrolladores crear interfaces a medida con un solo cliente que opera en múltiples dispositivos XR.

Algunas de las principales conclusiones de CloudXR 4.0 incluyen:

• API del servidor CloudXR, que ofrece a los desarrolladores integraciones de CloudXR directamente en las aplicaciones. Esto elimina la necesidad del tiempo de ejecución de OpenVR y OpenXR del lado del servidor. NVIDIA también está trabajando con Collabra para incorporar Monando OpenXR como la API de CloudXR. Continuará siendo compatible con la API de OpenVR en CloudXR utilizando el tiempo de ejecución de SteamVR.
• Complemento de unidad, que integra a la perfección la API de Unity XR y otras en CloudXR. Esto brinda a los desarrolladores la capacidad de crear clientes CloudXR con todas las funciones a través de Unity Engine, que se puede implementar en las plataformas de clientes XR.
• Rendimiento escalable de baja pérdida y baja latencia (L4S), que ofrece optimización avanzada de entrega de paquetes 5G ‘conmutable’. Esto reduce drásticamente el retraso de la transmisión de video en los servidores basados ​​en la nube.

La novedosa solución también reemplaza el anclaje físico y aumenta la transmisión XR de alta fidelidad para dispositivos móviles. El último conjunto de herramientas de NVIDIA también permite a los clientes atender a los clientes en todos los dispositivos.

Comentarios enNVIDIA CloudXR 4.0

Hablando en CloudXR 4.0, Matt Coppinger, director de gestión de productos, VMware dijo que su compañía lo usó para “permitir a nuestros clientes transmitir experiencias XR de alta fidelidad. Estos incluyeron la plataforma Horizon XR de VMware y dispositivos independientes que utilizan Workspace ONE XR Hub de VMware.

añadió,

“Esto brinda a nuestros clientes el poder de una estación de trabajo de gráficos junto con la movilidad de un dispositivo de realidad virtual independiente. la flexibilidad [that] la versión CloudXR 4.0 proporciona nuevas API de aplicaciones y clientes que nos permitirán mejorar la integración de CloudXR con Workspace ONE XR Hub y mejorar el rendimiento general de la solución”.

Además, NVIDIA se asoció con empresas de telecomunicaciones como Ericsson y Deutsche Telekom para implementar la solución L4S de la primera en CloudXR. Esto proporcionó la plataforma de transmisión más óptima para redes de baja latencia y gran ancho de banda, explicó la compañía.

En una oracion, Dominik Schnieders, jefe de computación perimetral, Deutsche Telekomexplicó que su empresa había visto una «gran optimización» con L4S y CloudXR, que redujeron «la latencia y la fluctuación de la red».

Agregó: “Este será un componente crítico de la transmisión de XR tanto para las empresas como para los clientes en la red pública 5G.

Las integraciones y funciones adicionales para API y redes 5G incluyen:

• Compatibilidad con controladores genéricoslo que permite a los desarrolladores de clientes de CloudXR asignar entradas para sus controladores de pantalla montada en la cabeza (HMD).
• Registro basado en devolución de llamada para una mayor flexibilidad en el manejo de mensajes de registro. Esto se aplica cuando las aplicaciones pueden determinar funciones de devolución de llamada y utilizar mensajes de registro para realizar tareas como escribir en un archivo.
• Creación de secuencias flexibles para determinar qué flujos debe lanzar para dispositivos o plataformas.

Además, CloudXR 4.0 se une al Proyecto Aurora para desarrollar una «pila completa de hardware y software» para distribuir soluciones XR en redes públicas y privadas. La innovación se convertiría en la «pieza clave» para mayor flexibilidad, facilidad de implementación y rendimiento, lo que permitiría a los departamentos de TI implementar aplicaciones XR en las redes.

Greg Jones de NVIDIA en CloudXR 4.0

XR Hoy habló con Greg Jones, Director de Desarrollo de Negocios Globales y Gestión de Productos, NVIDIAsobre su última actualización de CloudXR.

Cuando se le preguntó por qué la plataforma CloudXR de NVIDIA era fundamental para desarrollar la interoperabilidad, Jones dijo que su empresa vio una «tendencia fundamental» en las pantallas montadas en la cabeza (HMD).

Los nuevos dispositivos pasaron a «perfiles más livianos y optimizados» al tiempo que aumentaron la resolución, las tasas de actualización de cuadros y el campo de visión (FoV).

Explicó más,

“Para el procesamiento de gráficos, estos dispositivos livianos pueden tener poca potencia y recursos en relación con la memoria para las cargas de trabajo de gráficos que respaldan las experiencias que los usuarios desean. Esto es especialmente cierto en los casos de uso empresarial donde los modelos digitales tienden a ser muy grandes y probablemente sea cierto para los casos de uso del consumidor donde el fotorrealismo es un factor importante”.

Muchos casos de uso de AR y MR mejorarían las operaciones con IA, lo que requeriría más poder de cómputo que el disponible localmente en dispositivos móviles livianos, agregó.

Compatibilidad con XR Streaming para empresas y redes perimetrales 5G

Jones explicó que para suministrar memoria y poder de cómputo para aumentar las cargas de trabajo de gráficos e IA, los dispositivos necesitaban GPU para transmitir de forma remota a los dispositivos móviles.

Con respecto a las capacidades de transmisión, Jones dijo que los fabricantes de HMD inicialmente ofrecían opciones de transmisión desde PC locales, que generalmente funcionaban bien.

Sin embargo, los sistemas generalizados como la nube, las redes corporativas y las redes perimetrales 5G demostraron ser difíciles de garantizar la interoperabilidad cuando los dispositivos se acercaron «a estos servicios con arquitecturas de transmisión únicas».

Le dijo a XR Today,

«Aquí es donde las plataformas como NVIDIA CloudXR pueden ubicarse en servidores remotos, ofreciendo una API común para que los desarrolladores de aplicaciones escriban y una API común para que los HMD acepten la transmisión remota».

Dichas API, es decir, en los servidores, cambiarían rápidamente para «apoyar la escalabilidad en los próximos años».

Jones concluyó que esto ocurriría a medida que los ecosistemas XR pasaran de distribuir aplicaciones a «usuarios con sistemas de escritorio especializados a transmitir a una base de usuarios más amplia definida por personas con simplemente un dispositivo XR».

Número creciente de casos de uso para la integración de la API de Unity

XR Today también preguntó sobre los casos de uso que se espera que aprovechen la integración de la API Unity de NVIDIA para CloudXR. Jones dijo que el equipo estaba «realmente entusiasmado» con la herramienta, que proporcionaría «dos ventajas importantes» para los desarrolladores.

En primer lugar, crearía un cliente universal «para todos los dispositivos HMD que admitan OpenXR», explicó Jones. El complemento también «permitiría a los desarrolladores crear interfaces de usuario usando Unity, [which is] viendo una mayor adopción, especialmente en el campo de las aplicaciones móviles”.

Explicó más,

“Esta capacidad es la solicitud número uno que escuchamos de nuestra comunidad de desarrolladores. Vemos la creación de experiencias específicas de la aplicación donde el desarrollador usa Unity para crear experiencias y la marca de la interacción del usuario en el HMD, digamos en un lobby, antes de que el usuario inicie la experiencia inmersiva real que se ejecuta en una plataforma remota. La experiencia inmersiva que se ejecuta de forma remota se puede escribir en cualquier cosa, como un renderizador personalizado como Autodesk VRED, IC.IDO de ESI Group o motores Unreal o Unity”.

Asociaciones con Global Telecoms

XR Today luego preguntó cómo las asociaciones de NVIDIA con Deutsche Telekom, British Telecom (BT), VMware, Ericsson y otros facilitaron el desarrollo tecnológico esencial para CloudXR.

Jones dijo que tales asociaciones eran «los ingredientes esenciales para construir una plataforma escalable e interoperable para experiencias inmersivas».

Continuando, explicó,

“Asegurarse de que las optimizaciones de vanguardia como L4S estén en la arquitectura de transmisión significa que los operadores tienen la seguridad de que, cuando ofrecen una aplicación XR a través de su red 5G, esa aplicación ofrecerá una gran experiencia utilizando todo el estado de la tecnología. -optimizaciones de arte disponibles”

Agregó que NVIDIA había estado trabajando con Deutsche Telekom y Ericsson para optimizar la entrega de XR sobre 5G durante aproximadamente tres años. Las colaboraciones comenzaron primero en entornos de laboratorio, luego se trasladaron a redes privadas y luego, optimizaciones «en los grupos de estándares para que las redes públicas puedan utilizarlos».

Al concluir, dijo: “Este es el pan de cada día de Ericsson, por lo que asociarse con ellos para hacer avanzar a XR a través de este proceso para crear una plataforma interoperable, optimizada para redes de alta capacidad y baja latencia, tiene mucho sentido”.

El evento NVIDIA GTC se lleva a cabo del 20 al 23 y muestra algunos de los últimos avances tecnológicos de la firma con sede en Santa Clara.

La conferencia contó con discursos de apertura de Jensen Huang, fundador y director ejecutivo de NVIDIAjunto con numerosos casos de uso para IA generativa, NVIDIA Omniverse y gemelos digitales, entre otros.

Ayer, en su evento anual en línea GTC entre el 20 y el 23 de marzo, NVIDIA presentó nuevas herramientas para crear avatares de nivel empresarial o humanos virtuales.

NVIDIA está trabajando actualmente en varias actualizaciones de su paquete de creación de contenido 3D en tiempo real (RT3D) Omniverse. En particular, la empresa está agregando Avatar Cloud Engine (ACE), una colección de microservicios nativos de la nube para respaldar el desarrollo y la integración de avatares en varios niveles de una empresa.

El servicio incorpora modelos y algoritmos de inteligencia artificial «de última generación» que aceleran y aplanan la curva de creación de avatares para operaciones comerciales orientadas al cliente, como servicios al cliente.

¿Alguna vez te has preguntado qué se necesita para dar vida a un personaje virtual? Más información sobre la base #AI bloques de construcción para crear avatares interactivos en #GTC23. https://t.co/1NlHI97eKz pic.twitter.com/GoHtbxIorO

— IA de NVIDIA (@NVIDIAAI) 20 de marzo de 2023

Por el momento, NVIDIA está reservando su suite ACE para desarrolladores a través de un programa de acceso anticipado.

NVIDIA GTC 2023: uso de IA para permitir el desarrollo de avatares democratizados

NVIDIA Omniverse ACE proporciona a los desarrolladores de plataformas una selección de herramientas para optimizar los procesos de producción de avatares.

ACE integra herramientas y servicios impulsados ​​por IA para ayudar con la creación y entrega de avatares. Además, ACE aprovecha pilas de tecnología basadas en Unified Compute Framework de NVIDIA y la tecnología RTX para optimizar los flujos de trabajo de los desarrolladores.

La plataforma utiliza herramientas preexistentes como Tokkio para proporcionar una entrega escalable de avatares. Tokkio permite a los desarrolladores optimizar el contenido humano virtual para mejorar la experiencia de servicio al cliente.

Además, ACE se basa en los servicios de NVIDIA como Omniverse Audio2Face para simplificar la animación de personajes en 3D, Live Portrait para asegurar la animación de imágenes en 2D, Riva para el habla/traducción natural conversacional basada en IA y NeMo para aprovechar la IA generativa.

Además, las nuevas operaciones basadas en la nube de NVIDIA Omniverse significan que los desarrolladores de contenido RT3D pueden aprovechar implementaciones flexibles para sus creaciones. Usando una nube pública o privada, los desarrolladores pueden crear y distribuir su contenido ACE a través de cualquier motor RT3D para adaptarse a una variedad de casos de uso empresarial.

ACE también integra Maxine, una herramienta de NVIDIA que aprovecha la IA para crear animaciones de avatar basadas en entradas de cámara y micrófono. Maxine utiliza varios microservicios para mejorar la entrega de servicios basados ​​en avatares, incluidos el enfoque del orador, la eliminación de ruido, la eliminación de eco de la sala, la superresolución de audio, la cancelación de eco acústico, el fondo virtual y la animación de contacto visual basada en inteligencia artificial.

NVIDIA GTC 2023: ¿Quién está aprovechando ACE hoy?

Si bien ACE se encuentra en sus primeras etapas de acceso, NVIDIA está implementando el servicio para seleccionar socios para promover la tecnología entre los usuarios finales empresariales.

AT&T está buscando formas de integrar el servicio ACE en varios niveles de sus operaciones comerciales. En particular, la empresa emplea los flujos de trabajo de avatar de ACE y Tokkio AI para diseñar e implementar asistentes virtuales para sus vías de servicio al cliente. Además, AT&T está aprovechando la suite de creación de avatares de NVIDIA para mejorar las comunicaciones internas a través de su mesa de ayuda para empleados.

AT&T planea distribuir sus avatares virtuales ACE para brindar atención al cliente las 24 horas del día, los 7 días de la semana en varias regiones, teniendo en cuenta los idiomas locales. Según NVIDIA, el kit de herramientas ACE permite a AT&T reducir los gastos de capital y mejorar la experiencia de los empleados.

AT&T se está asociando con el proveedor de servicios NVIDIA Quantiphi para ofrecer sus soluciones de avatar para toda la empresa.

Siddharth Kotwal, director global de NVIDIA Practice en Quantiphiagregado:

Quantiphi y NVIDIA han estado colaborando para hacer que la experiencia del cliente sea más inmersiva al combinar el poder de los modelos de lenguaje extenso (LLM), los gráficos y los sistemas de recomendación.

Kotwal también explicó que el marco Tokkio de NVIDIA hace que sea «más fácil construir, implementar y personalizar asistentes digitales o avatares con tecnología de inteligencia artificial para nuestros clientes empresariales».

Kotwal agregó que las herramientas accesibles de NVIDIA crean un proceso continuo para integrar animación en tiempo real con reconocimiento de voz automático, agentes conversacionales y sistemas de recuperación de información.

Más sobre NVIDIA GTC 2023

NVIDIA GTC 2023 busca promover las ambiciones de IA y Metaverse industrial de la empresa en los próximos años.

Ayer, la firma anunció una serie de actualizaciones significativas a su suite Omiverse que mejoran la creación de contenido RT3D en su servicio.

Además, la actualización transforma Omniverse en una plataforma como servicio (PAAS) basada en la nube para ofrecer herramientas de desarrolladores externos internacionales para desarrollar y distribuir aplicaciones industriales de metaverso.

Además, la actualización Spring 105 de Omniverse introducirá aplicaciones conectadas que mejorarán aún más la creación de contenido industrial de Metaverse en la plataforma.