NVIDIA anunció el jueves el lanzamiento de su plataforma CloudXR 4.0 en la GPU Technology Conference (GTC) 2023.

Las nuevas herramientas empoderarán a los desarrolladores con casos de uso personalizados de CloudXR para aplicaciones y clientes. También proporcionará escalado de realidad extendida (XR) para implementaciones en la nube y mayor flexibilidad de servidor y cliente para desarrollar aplicaciones.

Con las actualizaciones, los desarrolladores pueden aprovechar la plataforma para usarla en la nube, sobre el borde de computación móvil (MEC) 5G y redes corporativas y empresariales.

También presenta nuevas interfaces de programas de aplicaciones (API) que pueden proporcionar a los desarrolladores múltiples herramientas para conectarse e interactuar con CloudXR. Estos incluyen información analítica sobre el rendimiento de la red, la ampliación en múltiples plataformas y la optimización de transmisión para redes de alta capacidad.

CloudXR 4.0 también facilita el trabajo con la arquitectura basada en Unity a través de un cliente de muestra. Las nuevas herramientas permitirán a los desarrolladores crear interfaces a medida con un solo cliente que opera en múltiples dispositivos XR.

Algunas de las principales conclusiones de CloudXR 4.0 incluyen:

• API del servidor CloudXR, que ofrece a los desarrolladores integraciones de CloudXR directamente en las aplicaciones. Esto elimina la necesidad del tiempo de ejecución de OpenVR y OpenXR del lado del servidor. NVIDIA también está trabajando con Collabra para incorporar Monando OpenXR como la API de CloudXR. Continuará siendo compatible con la API de OpenVR en CloudXR utilizando el tiempo de ejecución de SteamVR.
• Complemento de unidad, que integra a la perfección la API de Unity XR y otras en CloudXR. Esto brinda a los desarrolladores la capacidad de crear clientes CloudXR con todas las funciones a través de Unity Engine, que se puede implementar en las plataformas de clientes XR.
• Rendimiento escalable de baja pérdida y baja latencia (L4S), que ofrece optimización avanzada de entrega de paquetes 5G ‘conmutable’. Esto reduce drásticamente el retraso de la transmisión de video en los servidores basados ​​en la nube.

La novedosa solución también reemplaza el anclaje físico y aumenta la transmisión XR de alta fidelidad para dispositivos móviles. El último conjunto de herramientas de NVIDIA también permite a los clientes atender a los clientes en todos los dispositivos.

Comentarios enNVIDIA CloudXR 4.0

Hablando en CloudXR 4.0, Matt Coppinger, director de gestión de productos, VMware dijo que su compañía lo usó para “permitir a nuestros clientes transmitir experiencias XR de alta fidelidad. Estos incluyeron la plataforma Horizon XR de VMware y dispositivos independientes que utilizan Workspace ONE XR Hub de VMware.

añadió,

“Esto brinda a nuestros clientes el poder de una estación de trabajo de gráficos junto con la movilidad de un dispositivo de realidad virtual independiente. la flexibilidad [that] la versión CloudXR 4.0 proporciona nuevas API de aplicaciones y clientes que nos permitirán mejorar la integración de CloudXR con Workspace ONE XR Hub y mejorar el rendimiento general de la solución”.

Además, NVIDIA se asoció con empresas de telecomunicaciones como Ericsson y Deutsche Telekom para implementar la solución L4S de la primera en CloudXR. Esto proporcionó la plataforma de transmisión más óptima para redes de baja latencia y gran ancho de banda, explicó la compañía.

En una oracion, Dominik Schnieders, jefe de computación perimetral, Deutsche Telekomexplicó que su empresa había visto una «gran optimización» con L4S y CloudXR, que redujeron «la latencia y la fluctuación de la red».

Agregó: “Este será un componente crítico de la transmisión de XR tanto para las empresas como para los clientes en la red pública 5G.

Las integraciones y funciones adicionales para API y redes 5G incluyen:

• Compatibilidad con controladores genéricoslo que permite a los desarrolladores de clientes de CloudXR asignar entradas para sus controladores de pantalla montada en la cabeza (HMD).
• Registro basado en devolución de llamada para una mayor flexibilidad en el manejo de mensajes de registro. Esto se aplica cuando las aplicaciones pueden determinar funciones de devolución de llamada y utilizar mensajes de registro para realizar tareas como escribir en un archivo.
• Creación de secuencias flexibles para determinar qué flujos debe lanzar para dispositivos o plataformas.

Además, CloudXR 4.0 se une al Proyecto Aurora para desarrollar una «pila completa de hardware y software» para distribuir soluciones XR en redes públicas y privadas. La innovación se convertiría en la «pieza clave» para mayor flexibilidad, facilidad de implementación y rendimiento, lo que permitiría a los departamentos de TI implementar aplicaciones XR en las redes.

Greg Jones de NVIDIA en CloudXR 4.0

XR Hoy habló con Greg Jones, Director de Desarrollo de Negocios Globales y Gestión de Productos, NVIDIAsobre su última actualización de CloudXR.

Cuando se le preguntó por qué la plataforma CloudXR de NVIDIA era fundamental para desarrollar la interoperabilidad, Jones dijo que su empresa vio una «tendencia fundamental» en las pantallas montadas en la cabeza (HMD).

Los nuevos dispositivos pasaron a «perfiles más livianos y optimizados» al tiempo que aumentaron la resolución, las tasas de actualización de cuadros y el campo de visión (FoV).

Explicó más,

“Para el procesamiento de gráficos, estos dispositivos livianos pueden tener poca potencia y recursos en relación con la memoria para las cargas de trabajo de gráficos que respaldan las experiencias que los usuarios desean. Esto es especialmente cierto en los casos de uso empresarial donde los modelos digitales tienden a ser muy grandes y probablemente sea cierto para los casos de uso del consumidor donde el fotorrealismo es un factor importante”.

Muchos casos de uso de AR y MR mejorarían las operaciones con IA, lo que requeriría más poder de cómputo que el disponible localmente en dispositivos móviles livianos, agregó.

Compatibilidad con XR Streaming para empresas y redes perimetrales 5G

Jones explicó que para suministrar memoria y poder de cómputo para aumentar las cargas de trabajo de gráficos e IA, los dispositivos necesitaban GPU para transmitir de forma remota a los dispositivos móviles.

Con respecto a las capacidades de transmisión, Jones dijo que los fabricantes de HMD inicialmente ofrecían opciones de transmisión desde PC locales, que generalmente funcionaban bien.

Sin embargo, los sistemas generalizados como la nube, las redes corporativas y las redes perimetrales 5G demostraron ser difíciles de garantizar la interoperabilidad cuando los dispositivos se acercaron «a estos servicios con arquitecturas de transmisión únicas».

Le dijo a XR Today,

«Aquí es donde las plataformas como NVIDIA CloudXR pueden ubicarse en servidores remotos, ofreciendo una API común para que los desarrolladores de aplicaciones escriban y una API común para que los HMD acepten la transmisión remota».

Dichas API, es decir, en los servidores, cambiarían rápidamente para «apoyar la escalabilidad en los próximos años».

Jones concluyó que esto ocurriría a medida que los ecosistemas XR pasaran de distribuir aplicaciones a «usuarios con sistemas de escritorio especializados a transmitir a una base de usuarios más amplia definida por personas con simplemente un dispositivo XR».

Número creciente de casos de uso para la integración de la API de Unity

XR Today también preguntó sobre los casos de uso que se espera que aprovechen la integración de la API Unity de NVIDIA para CloudXR. Jones dijo que el equipo estaba «realmente entusiasmado» con la herramienta, que proporcionaría «dos ventajas importantes» para los desarrolladores.

En primer lugar, crearía un cliente universal «para todos los dispositivos HMD que admitan OpenXR», explicó Jones. El complemento también «permitiría a los desarrolladores crear interfaces de usuario usando Unity, [which is] viendo una mayor adopción, especialmente en el campo de las aplicaciones móviles”.

Explicó más,

“Esta capacidad es la solicitud número uno que escuchamos de nuestra comunidad de desarrolladores. Vemos la creación de experiencias específicas de la aplicación donde el desarrollador usa Unity para crear experiencias y la marca de la interacción del usuario en el HMD, digamos en un lobby, antes de que el usuario inicie la experiencia inmersiva real que se ejecuta en una plataforma remota. La experiencia inmersiva que se ejecuta de forma remota se puede escribir en cualquier cosa, como un renderizador personalizado como Autodesk VRED, IC.IDO de ESI Group o motores Unreal o Unity”.

Asociaciones con Global Telecoms

XR Today luego preguntó cómo las asociaciones de NVIDIA con Deutsche Telekom, British Telecom (BT), VMware, Ericsson y otros facilitaron el desarrollo tecnológico esencial para CloudXR.

Jones dijo que tales asociaciones eran «los ingredientes esenciales para construir una plataforma escalable e interoperable para experiencias inmersivas».

Continuando, explicó,

“Asegurarse de que las optimizaciones de vanguardia como L4S estén en la arquitectura de transmisión significa que los operadores tienen la seguridad de que, cuando ofrecen una aplicación XR a través de su red 5G, esa aplicación ofrecerá una gran experiencia utilizando todo el estado de la tecnología. -optimizaciones de arte disponibles”

Agregó que NVIDIA había estado trabajando con Deutsche Telekom y Ericsson para optimizar la entrega de XR sobre 5G durante aproximadamente tres años. Las colaboraciones comenzaron primero en entornos de laboratorio, luego se trasladaron a redes privadas y luego, optimizaciones «en los grupos de estándares para que las redes públicas puedan utilizarlos».

Al concluir, dijo: “Este es el pan de cada día de Ericsson, por lo que asociarse con ellos para hacer avanzar a XR a través de este proceso para crear una plataforma interoperable, optimizada para redes de alta capacidad y baja latencia, tiene mucho sentido”.

El evento NVIDIA GTC se lleva a cabo del 20 al 23 y muestra algunos de los últimos avances tecnológicos de la firma con sede en Santa Clara.

La conferencia contó con discursos de apertura de Jensen Huang, fundador y director ejecutivo de NVIDIAjunto con numerosos casos de uso para IA generativa, NVIDIA Omniverse y gemelos digitales, entre otros.

Ayer, en su evento anual en línea GTC entre el 20 y el 23 de marzo, NVIDIA presentó nuevas herramientas para crear avatares de nivel empresarial o humanos virtuales.

NVIDIA está trabajando actualmente en varias actualizaciones de su paquete de creación de contenido 3D en tiempo real (RT3D) Omniverse. En particular, la empresa está agregando Avatar Cloud Engine (ACE), una colección de microservicios nativos de la nube para respaldar el desarrollo y la integración de avatares en varios niveles de una empresa.

El servicio incorpora modelos y algoritmos de inteligencia artificial «de última generación» que aceleran y aplanan la curva de creación de avatares para operaciones comerciales orientadas al cliente, como servicios al cliente.

¿Alguna vez te has preguntado qué se necesita para dar vida a un personaje virtual? Más información sobre la base #AI bloques de construcción para crear avatares interactivos en #GTC23. https://t.co/1NlHI97eKz pic.twitter.com/GoHtbxIorO

— IA de NVIDIA (@NVIDIAAI) 20 de marzo de 2023

Por el momento, NVIDIA está reservando su suite ACE para desarrolladores a través de un programa de acceso anticipado.

NVIDIA GTC 2023: uso de IA para permitir el desarrollo de avatares democratizados

NVIDIA Omniverse ACE proporciona a los desarrolladores de plataformas una selección de herramientas para optimizar los procesos de producción de avatares.

ACE integra herramientas y servicios impulsados ​​por IA para ayudar con la creación y entrega de avatares. Además, ACE aprovecha pilas de tecnología basadas en Unified Compute Framework de NVIDIA y la tecnología RTX para optimizar los flujos de trabajo de los desarrolladores.

La plataforma utiliza herramientas preexistentes como Tokkio para proporcionar una entrega escalable de avatares. Tokkio permite a los desarrolladores optimizar el contenido humano virtual para mejorar la experiencia de servicio al cliente.

Además, ACE se basa en los servicios de NVIDIA como Omniverse Audio2Face para simplificar la animación de personajes en 3D, Live Portrait para asegurar la animación de imágenes en 2D, Riva para el habla/traducción natural conversacional basada en IA y NeMo para aprovechar la IA generativa.

Además, las nuevas operaciones basadas en la nube de NVIDIA Omniverse significan que los desarrolladores de contenido RT3D pueden aprovechar implementaciones flexibles para sus creaciones. Usando una nube pública o privada, los desarrolladores pueden crear y distribuir su contenido ACE a través de cualquier motor RT3D para adaptarse a una variedad de casos de uso empresarial.

ACE también integra Maxine, una herramienta de NVIDIA que aprovecha la IA para crear animaciones de avatar basadas en entradas de cámara y micrófono. Maxine utiliza varios microservicios para mejorar la entrega de servicios basados ​​en avatares, incluidos el enfoque del orador, la eliminación de ruido, la eliminación de eco de la sala, la superresolución de audio, la cancelación de eco acústico, el fondo virtual y la animación de contacto visual basada en inteligencia artificial.

NVIDIA GTC 2023: ¿Quién está aprovechando ACE hoy?

Si bien ACE se encuentra en sus primeras etapas de acceso, NVIDIA está implementando el servicio para seleccionar socios para promover la tecnología entre los usuarios finales empresariales.

AT&T está buscando formas de integrar el servicio ACE en varios niveles de sus operaciones comerciales. En particular, la empresa emplea los flujos de trabajo de avatar de ACE y Tokkio AI para diseñar e implementar asistentes virtuales para sus vías de servicio al cliente. Además, AT&T está aprovechando la suite de creación de avatares de NVIDIA para mejorar las comunicaciones internas a través de su mesa de ayuda para empleados.

AT&T planea distribuir sus avatares virtuales ACE para brindar atención al cliente las 24 horas del día, los 7 días de la semana en varias regiones, teniendo en cuenta los idiomas locales. Según NVIDIA, el kit de herramientas ACE permite a AT&T reducir los gastos de capital y mejorar la experiencia de los empleados.

AT&T se está asociando con el proveedor de servicios NVIDIA Quantiphi para ofrecer sus soluciones de avatar para toda la empresa.

Siddharth Kotwal, director global de NVIDIA Practice en Quantiphiagregado:

Quantiphi y NVIDIA han estado colaborando para hacer que la experiencia del cliente sea más inmersiva al combinar el poder de los modelos de lenguaje extenso (LLM), los gráficos y los sistemas de recomendación.

Kotwal también explicó que el marco Tokkio de NVIDIA hace que sea «más fácil construir, implementar y personalizar asistentes digitales o avatares con tecnología de inteligencia artificial para nuestros clientes empresariales».

Kotwal agregó que las herramientas accesibles de NVIDIA crean un proceso continuo para integrar animación en tiempo real con reconocimiento de voz automático, agentes conversacionales y sistemas de recuperación de información.

Más sobre NVIDIA GTC 2023

NVIDIA GTC 2023 busca promover las ambiciones de IA y Metaverse industrial de la empresa en los próximos años.

Ayer, la firma anunció una serie de actualizaciones significativas a su suite Omiverse que mejoran la creación de contenido RT3D en su servicio.

Además, la actualización transforma Omniverse en una plataforma como servicio (PAAS) basada en la nube para ofrecer herramientas de desarrolladores externos internacionales para desarrollar y distribuir aplicaciones industriales de metaverso.

Además, la actualización Spring 105 de Omniverse introducirá aplicaciones conectadas que mejorarán aún más la creación de contenido industrial de Metaverse en la plataforma.

XLA anunció el martes que había lanzado su marco de Internet 3D modular Metasites, con demostraciones posteriores en la Game Developers Conference (GDC) 2023.

Alexey Savchenko, director de producto de XLAhizo una demostración de la solución en el evento en San Francisco mientras la firma se dirigía al público en un discurso sobre el Metaverso y los medios sintéticos.

La plataforma incorpora tecnologías de metaverso, nube e inteligencia artificial (IA) para potenciar las creaciones de videojuegos y entretenimiento impulsadas por la comunidad.

XLA Metasites recibió recientemente alrededor de $ 100 millones de dólares en fondos iniciales para desarrollar mundos virtuales con contenido interactivo y atractivo, según un comunicado de prensa.

Comentarios enMetasites Solution

En la presentación de XLA, debutará la experiencia central de Metasites, los gráficos de alta definición, el acceso a la nube y al navegador, y la integración de OpenAI GPT-3.5. Esta última herramienta proporciona interacciones inteligentes con personajes no jugables mientras se une a espacios, asistentes virtuales y otros.

En su discurso, Savchenko le dijo a la audiencia que la idea detrás de Metasites permitía que cada ubicación se convirtiera en parte de una «red infinita de espacios explorables en 3D».

Él continuó,

“Al igual que los hipervínculos, los portales conectan estos mundos y la infraestructura central opera en una serie de protocolos y estándares abiertos, muy parecido a la web actual. Creemos firmemente que el futuro de Internet está en 3D y buscamos asociarnos con creadores y marcas de todas las esferas e industrias para construirlo juntos”.

Savchenko agregó que su compañía tenía como objetivo crear «una evolución de Internet y una nueva forma de narración» con desarrolladores y autores «dando forma a mundos que crean su agencia, presencia e historias, accesibles a través de múltiples plataformas».

El ejecutivo de XLA concluyó: “No se trata de llevar juegos a nuevas audiencias. Se trata de facilitar la comunicación, la educación, el comercio, el juego y la creación, al tiempo que se le recompensa de manera justa por sus acciones”.

¿Qué hay en oferta?

El acceso a los metasitios para creadores de contenido individuales y usuarios empresariales adoptará un modelo de distribución de ingresos, donde los usuarios tienen control total y pueden administrar su contenido.

Los usuarios también pueden analizar el texto semánticamente, crear escenas en 3D e implementar contenido o conectarse al ecosistema de XLA utilizando el Unreal Engine 5 de Epic Games.

¿Cómo se vive para siempre mientras recibe ingresos pasivos por la eternidad? Descubra los planes de Shurick Agapitov para impactar el futuro de los videojuegos, la Web3 y la distribución de ingresos en su reciente entrevista.

Obtenga información en https://t.co/q5ijMOJOEL pic.twitter.com/EWZ2cJSc3s

— XLA (@x_la_official) 8 de febrero de 2023

;

La plataforma permitirá a los usuarios acceder a activos y herramientas virtuales, como un kit de desarrollo de software (SDK), un editor de experiencias, un procesador de pagos, un sistema de gestión de inventario y artículos, y herramientas de marketing, entre otros.

También ofrecerá a los desarrolladores una plataforma interoperable para transferir activos digitales para administrar objetos de inventario en todos los entornos.

En la GDC, XLA ofrecerá una versión beta cerrada de la plataforma en el verano y abrirá un programa para empresas y creadores en el tercer trimestre (Q3). Un lanzamiento comercial completo se lanzará en el cuarto trimestre de este año.

XR Innovation ocupa un lugar central en GDC 2023

La noticia llega en medio de una serie de innovaciones frescas en la conferencia, con varias compañías clave presentando sus últimas creaciones y actualizaciones para desarrolladores.

Spatial, una de las principales plataformas de metaverso del mundo para la socialización y la colaboración, anunció el lunes que había integrado su versión beta de Unity Creator Toolkit para un acceso anticipado a los desarrolladores.

Importantes firmas como Vogue, Mcdonalds’ y otras han aprovechado la plataforma para eventos de inmersión, sesiones de capacitación y reuniones.

Su última actualización incorpora las herramientas líderes en la industria de Unity para promover la ludificación y las exhibiciones interactivas. Lo hace con la creación y publicación de contenido flexible para juegos y contenido interactivo en dispositivos de realidad virtual, navegadores y dispositivos móviles.

&

Gracias a todos por acompañarnos durante nuestro #GDC23 ¡Cumbre de desarrolladores hoy! Nos sorprendió la gran cantidad de interés en nuestra hoja de ruta 2023 y AMA 🤯

¿Hubo algún momento destacado de GDC de tu día? ¡Nos encantaría escucharlos! ✨ pic.twitter.com/WTPpAW7ey9

— Unidad para juegos @ #GDC23 (@unitygames) 22 de marzo de 2023

;

Las últimas incorporaciones a la plataforma incluyen avatares personalizados, portales de enlace mundial, interoperabilidad mejorada y secuencias de comandos visuales. Esto permite a las personas crear mundos respaldados por Unity en una serie de clics, según Spatial.

Las mejoras del kit de herramientas también proporcionarán visualizaciones actualizadas con iluminación, animaciones, sombreadores, texturas y disparadores mejorados.

La firma de metaverso con sede en Los Ángeles, Croquet Corporation, también hizo una demostración de su creación en el GDC. Su solución Croquet for Unity incorpora un marco multijugador de JavaScript para una conectividad perfecta con el kit de herramientas para desarrolladores de Unity.

También proporcionará experiencias inmersivas basadas en Unity con una plataforma de código bajo y sin código. También elimina la necesidad de implementar servidores para mejorar drásticamente la configuración de la red multijugador, aprovechando el sistema de red global Reflector de la plataforma.

La solución novedosa de XLA proporciona interacciones coordinadas y fluidas a través de espacios de metaverso con una arquitectura computacional unificada para agilizar el contenido sincronizado y los cálculos complejos.

La solución tiene como objetivo mejorar las interacciones del metaverso con operaciones de bits idénticos entre clientes, servidores y dispositivos. Las tecnologías empoderan a los desarrolladores de Unity con puntos de vista sincronizados, computación en la nube en redes 5G de computación perimetral de acceso múltiple (MEC) y otros. Esto proporciona una latencia baja inigualable, un ancho de banda bajo y costos bajos para las experiencias de metaverso.