El desarrollo de vehículos autónomos (AV) es posible gracias a tres ordenadores diferenciados: sistemas NVIDIA DGX para entrenar la pila de IA en el centro de datos, NVIDIA Omniverse que funciona en sistemas NVIDIA OVX para simulación y generación de datos sintéticos, y el ordenador a bordo NVIDIA AGX para procesar datos de sensores en tiempo real para garantizar la seguridad.

Estos sistemas, diseñados específicamente, permiten ciclos de desarrollo continuos, acelerando las mejoras en rendimiento y seguridad.

Anuncio de NVIDIA en CES

En la feria comercial CES, NVIDIA anunció una nueva parte de la ecuación: NVIDIA Cosmos, una plataforma que comprende modelos de fundación generativa de mundo (WFMs), tokenizadores avanzados, límites y una línea de procesamiento de video acelerada, diseñada para avanzar en el desarrollo de sistemas de IA física como AVs y robots.

Con Cosmos añadido a la solución de tres ordenadores, los desarrolladores obtienen un ciclo de datos que puede transformar miles de millas conducidas por humanos en miles de millones de millas virtualmente conducidas, amplificando la calidad de los datos de entrenamiento.

Declaraciones de NVIDIA

“El ciclo de fabricación de datos de AV consiste en la recopilación de datos de flotas, una reconstrucción precisa en 4D y IA para generar escenas y variaciones de tráfico para el entrenamiento y la evaluación en bucle cerrado,” dijo Sanja Fidler, vicepresidenta de investigación en IA de NVIDIA. “Usando la plataforma NVIDIA Omniverse, así como Cosmos y los modelos de IA de soporte, los desarrolladores pueden generar escenarios de conducción sintéticos para amplificar los datos de entrenamiento de manera exponencial.”

“Desarrollar modelos de IA física había sido tradicionalmente intensivo en recursos y costoso para los desarrolladores, requiriendo la adquisición de conjuntos de datos del mundo real y el filtrado, curado y preparación de datos para el entrenamiento,” comentó Norm Marks, vicepresidente de automoción en NVIDIA. “Cosmos acelera este proceso con IA generativa, permitiendo un desarrollo de modelos de IA más inteligente, rápido y preciso para vehículos autónomos y robótica.”

Uso de Cosmos en la industria del transporte

Los líderes del transporte están utilizando Cosmos para construir IA física para AVs, incluyendo:

• Waabi, una empresa pionera en IA generativa para el mundo físico, utilizará Cosmos para buscar y curar datos de video para el desarrollo y simulación de software de AV.
• Wayve, que desarrolla modelos de fundación de IA para conducción autónoma, está evaluando Cosmos como una herramienta para buscar escenarios de conducción de casos extremos y esquinas que se usan para seguridad y validación.
• El proveedor de herramientas para AV Foretellix usará Cosmos, junto con las APIs NVIDIA Omniverse Sensor RTX, para evaluar y generar escenarios de prueba de alta fidelidad y datos de entrenamiento a gran escala.
• Además, el gigante de los servicios de transporte Uber se está asociando con NVIDIA para acelerar la movilidad autónoma. Los ricos conjuntos de datos de conducción de Uber, junto con las características de la plataforma Cosmos y NVIDIA DGX Cloud, ayudarán a los socios de AV a construir modelos de IA más fuertes de manera aún más eficiente.

Disponibilidad

Los WFMs de Cosmos están disponibles ahora bajo una licencia de modelo abierto. Los modelos de Cosmos estarán pronto accesibles como microservicios completamente optimizados de NVIDIA NIM.