NVIDIA AI Foundry para desarrolladores

Para ayudar a los desarrolladores a crear nuevas herramientas de IA generativa, NVIDIA estableció NVIDIA AI Foundry. Esta plataforma asiste a las empresas en la formación de modelos de IA generativa utilizando sus propios datos licenciados mediante NVIDIA Edify, una arquitectura de IA multimodal que puede utilizar simples prompts de texto para generar imágenes, videos, activos 3D, imágenes de alto rango dinámico en 360 grados y materiales basados en renderizado físico (PBR). Con AI Foundry, las empresas pueden entrenar modelos de IA personalizados para generar cualquiera de estos activos.

Los elementos principales de Edify incluyen su capacidad para generar múltiples tipos de contenido, su eficiencia superior en el entrenamiento, que le permite producir contenido de alta calidad con menos imágenes y su habilidad para afinar modelos que se adapten a estilos o aprendan sobre personajes u objetos.

Generación de activos con Edify

Edify puede ser entrenado para generar una variedad de tipos de imágenes, incluyendo imágenes, activos 3D y mapas de entorno HDRi en 360 grados. Edify Image puede generar cuatro imágenes de alta calidad 1K en aproximadamente seis segundos, duplicando el rendimiento del modelo anterior. Las imágenes también pueden ser convertidas a 4K con un escalador generativo que añade detalles adicionales.

Las imágenes son altamente controlables gracias a la adherencia avanzada a los prompts, controles de cámara para especificar longitud focal o profundidad de campo, y ControlNets para guiar la generación. Los ControlNets incluyen Sketch, que permite a los usuarios proporcionar un boceto para seguir o copiar la composición de una imagen, y Depth, que copia la composición de una imagen.

Además, se pueden editar imágenes con Edify Image. InPaint permite a los usuarios añadir o modificar contenido en una imagen. Replace, una versión estricta de InPaint, puede cambiar detalles como la ropa. Y OutPaint puede expandir una imagen para ajustarse a diferentes proporciones. Todo esto se simplifica con Segment, una función que puede enmascarar objetos con solo un prompt de texto.

Edify también puede crear mallas 3D listas para el artista. Estas mallas tienen una topología limpia basada en quads, materiales PBR de hasta 4K y mapeo UV automático para facilitar la edición de texturas. Un modo de vista previa rápida ofrece resultados en menos de 10 segundos, que pueden convertirse en una malla 3D completa.

Las mallas son perfectas para prototipar escenas, generar objetos de fondo para la decoración del set o como un inicio para la escultura en 3D.

Edify 360 HDRi genera mapas de entorno de paisajes naturales que pueden utilizarse para iluminar una escena, para reflejos e incluso como fondo. El modelo puede generar imágenes HDRi de hasta 16K a partir de prompts de texto o imágenes. Con un fondo deseado en mano, los usuarios pueden crear un HDRi personalizado en lugar de pasar horas buscando uno.

La capacidad multimodal de Edify es única, permitiendo flujos de trabajo avanzados que combinan diferentes tipos de activos. Utilizado junto con un agente, por ejemplo, Edify permite a los usuarios prototipar una escena completa en minutos con un simple prompt de texto.

Otro caso de uso es combinar Edify 3D y 360 HDRi con Image para dar a los usuarios control total sobre la generación de imágenes. Generando la escena en 3D, los artistas pueden mover objetos y encuadrar su toma deseada, utilizando luego Edify Image para convertir el prototipo en una imagen fotorrealista.

Generative AI by Getty Images

Getty Images es uno de los mayores proveedores de servicios de contenido y suministradores de imágenes visuales creativas, fotografía editorial, video y música, y es uno de los primeros destinos a los que las personas acuden para descubrir, comprar y compartir contenido visual impactante de los mejores fotógrafos y videógrafos del mundo.

Getty Images utilizó NVIDIA AI Foundry para entrenar un modelo de NVIDIA Edify Image que impulsa su servicio de IA generativa. Disponible para empresas y pequeñas empresas, el servicio permite a los usuarios generar y modificar imágenes utilizando modelos respaldados por NVIDIA Edify.

Recientemente, Getty Images e iStock actualizaron a la última versión de Edify Image, lo que permite generaciones más rápidas y una mejor adherencia a los prompts, además de exponer controles de cámara.

Ahora los usuarios también pueden utilizar las herramientas de IA generativa en contenido creativo pregrabado, permitiéndoles editar y modificar la biblioteca de imágenes de iStock para iterar rápidamente y perfeccionar el contenido. Estas mismas capacidades estarán pronto disponibles en Gettyimages.com.