SIGGRAPH—NVIDIA anunció importantes avances en Universal Scene Description, o OpenUSD, que expandirán la adopción del marco de intercambio de datos 3D universal hacia la robótica, el diseño industrial y la ingeniería, y agilizarán la capacidad de los desarrolladores para construir mundos virtuales altamente precisos para la evolución de la IA.
Nuevas herramientas impulsan la IA generativa para la industria
A través de nuevos marcos de desarrollo acelerados por NVIDIA basados en OpenUSD, más industrias pueden desarrollar aplicaciones para visualizar proyectos de diseño industrial y ingeniería, y para simular entornos que permiten construir la próxima ola de IA física y robots.
Las nuevas ofertas incluyen NVIDIA NIM™ microservicios para modelos de IA que pueden generar lenguaje OpenUSD para responder a consultas de usuarios, crear código Python OpenUSD, aplicar materiales a objetos 3D y entender el espacio 3D y la física, lo que ayuda a acelerar el desarrollo de gemelos digitales. Además, nuevos conectores USD para datos de robótica y formatos de simulación industrial y herramientas de desarrollo permiten a los usuarios transmitir conjuntos de datos completamente NVIDIA RTX™ renderizados por rayos a Apple Vision Pro.
IA generativa se incorpora a USD con NVIDIA NIM
Los primeros modelos de IA generativa para el desarrollo de OpenUSD, desarrollados por NVIDIA, estarán disponibles como NVIDIA NIM microservicios. Estos modelos permiten a los desarrolladores incorporar copilotos y agentes de IA generativa en flujos de trabajo de USD, ampliando las posibilidades en mundos 3D y ayudando a acelerar la adopción de USD en nuevos sectores industriales, como la manufactura, la automoción y la robótica.
Los microservicios disponibles en vista previa son:
- USD Code NIM microservicio — responde preguntas generales de OpenUSD y genera automáticamente código OpenUSD-Python basado en mensajes de texto que pueden ser introducidos en una aplicación de visualización OpenUSD, como usdview de Pixar.
- USD Search NIM microservicio — permite a los desarrolladores buscar en enormes bibliotecas de OpenUSD, 3D y datos de imagen utilizando lenguaje natural o entradas de imagen.
- USD Validate NIM microservicio — verifica la compatibilidad de archivos subidos con versiones de release de OpenUSD y genera una imagen completamente renderizada por RTX, impulsada por NVIDIA Omniverse Cloud APIs.
Los nuevos microservicios anunciados que estarán disponibles pronto son:
- USD Layout NIM microservicio — permite a los usuarios ensamblar escenas basadas en OpenUSD a partir de una serie de mensajes de texto basados en inteligencia espacial.
- USD SmartMaterial NIM microservicio — predice y aplica un material realista a un objeto de diseño asistido por computadora.
- fVDB Mesh Generation NIM microservicio — genera una malla basada en OpenUSD, renderizada por Omniverse Cloud APIs, a partir de datos de nubes de puntos.
- fVDB Physics Super-Res NIM microservicio — realiza super resolución de IA en un marco o secuencia de marcos para generar una simulación de física de alta resolución basada en OpenUSD.
- fVDB NeRF-XL NIM microservicio — genera campos de radiancia neural a gran escala en OpenUSD utilizando Omniverse Cloud APIs.
Beneficios de los microservicios para la industria
Foxconn, un líder global en manufactura, ya se beneficia de la plataforma informática de NVIDIA, utilizando microservicios NIM y Omniverse para crear un gemelo digital de una fábrica en desarrollo.
“Los gemelos digitales nos ayudarán a acelerar la próxima ola de manufactura industrial y máquinas autónomas”, dijo Zhe Shi, director digital y responsable de la plataforma de Manufactura Inteligente en Foxconn. “NVIDIA Omniverse y los nuevos microservicios NIM democratizarán la capacidad de desarrollar gemelos digitales y ayudarán a nuestros equipos a construir fábricas virtuales basadas físicamente más rápido que nunca.”
WPP, un líder mundial en servicios de marketing y comunicación, es un pionero en la adopción de microservicios USD Search y USD Code NIM, implementándolos en su pipeline de creación de contenido habilitada por IA generativa, construido sobre NVIDIA Omniverse, para clientes como The Coca-Cola Company.
“La belleza de la innovación es cómo es compatible con nuestra forma de trabajar y cómo aprovecha estándares abiertos, acelerando no solo el trabajo futuro, sino permitiéndonos seguir construyendo y extendiendo la utilidad de todas nuestras inversiones anteriores en estándares como OpenUSD”, dijo Stephan Pretorius, director de tecnología en WPP.
Conectores USD abren puertas a más industrias
Una serie de nuevos conectores USD para formatos de datos de robótica y transmisión a Apple Vision Pro abre los portales de interoperabilidad de OpenUSD y autoría avanzada a más industrias.
NVIDIA y Siemens, un líder global en automatización industrial y software, están ampliando su colaboración para facilitar más cargas de trabajo industriales con OpenUSD. Siemens integrará pipelines de OpenUSD con su portafolio de tecnologías de simulación Simcenter para respaldar la toma de decisiones basada en evidencia y la colaboración entre los principales interesados.
Esta integración permite la visualización fotorealista en tiempo real de datos de simulación complejos, proporcionando una visión más profunda sobre el rendimiento de un producto en su entorno operativo real. El trabajo se basará en los esfuerzos de Siemens para incorporar Omniverse en su portafolio de gestión del ciclo de vida del producto Teamcenter.
NVIDIA también lanzó un conector de Unified Robotics Description Format a OpenUSD, permitiendo a los roboticistas llevar sin problemas sus datos robóticos a través de aplicaciones, incluyendo diseño, simulación y aprendizaje por refuerzo.
Para avanzar en la expansión del ecosistema OpenUSD, NVIDIA anunció el kit de desarrollo de software OpenUSD Exchange, que permite a los desarrolladores construir sus propios conectores de datos OpenUSD robustos.
Nuevas herramientas y APIs para transmitir escenas OpenUSD a gran escala desde una aplicación construida en la plataforma Omniverse hacia Apple Vision Pro están ahora disponibles en acceso anticipado.
“OpenUSD está revolucionando la forma en que creamos e interactuamos con contenido 3D”, dijo Steve May, director de tecnología de Pixar y presidente de la Alianza por OpenUSD (AOUSD). “Ahora, con estos nuevos servicios y APIs para OpenUSD construidos por NVIDIA, esperamos ver un crecimiento y adopción acelerados de USD, allanando el camino para que nuevos usuarios e industrias se involucren más fácilmente con nuestro ecosistema.”
Impulso del ecosistema OpenUSD
En el último año, NVIDIA cofundó la AOUSD junto a Pixar, Adobe, Apple y Autodesk. A través de la AOUSD, NVIDIA y otros colaboradores han anunciado una nueva release de OpenUSD, avances en una especificación central de OpenUSD y nuevos miembros.
Disponibilidad
Los microservicios USD Search, USD Code y USD Validate NIM están disponibles en vista previa en el catálogo de API de NVIDIA. El conector de OpenUSD a URDF ya está disponible con NVIDIA Isaac Sim™.
Los desarrolladores pueden comenzar a integrar IA generativa en flujos de trabajo OpenUSD con nuevas herramientas de desarrollador de Omniverse y un flujo de trabajo de referencia para construir un pipeline de datos sintéticos habilitado por IA generativa con OpenUSD.