NVIDIA Holoscan for Media: construyendo el futuro de la producción en vivo

NVIDIA Holoscan for Media es una plataforma definida por software que utiliza IA para medios en vivo.

Construir un sólido conjunto de software de IA para el desarrollo de aplicaciones en medios en vivo es un proceso intrincado que requiere una experiencia y recursos sustanciales. Esta complejidad técnica, junto con la necesidad de cantidades grandes de datos de alta calidad y la dificultad de escalar programas piloto al rendimiento a nivel de producción, a menudo impidió que estas iniciativas alcanzaran un despliegue completo. Además, el desarrollo tradicional de software está vinculado a hardware dedicado, lo que limita aún más la innovación y complica las actualizaciones.

Para afrontar estos retos, NVIDIA Holoscan for Media permite a los desarrolladores crear aplicaciones de IA de vanguardia para medios en vivo con facilidad a través de su integración fluida con el extenso conjunto de kits de desarrollo de software (SDKs) de IA de NVIDIA. Esto permite a los desarrolladores incorporar fácilmente capacidades avanzadas de IA en sus aplicaciones, de modo que puedan centrarse en crear aplicaciones de medios más sofisticadas e inteligentes. Las empresas de medios también pueden conectar esas aplicaciones a las tuberías de video en vivo que funcionan sobre la plataforma.

Otro reto típico en el desarrollo de aplicaciones de medios en vivo es la ineficiencia en el despliegue. Los desarrolladores a menudo se encuentran necesitando crear versiones separadas para diferentes tipos de despliegue, ya sea en las instalaciones, en la nube o en el borde. Esto aumenta los costes y puede extender los plazos de desarrollo. Además, los desarrolladores deben asignar recursos para construir servicios de infraestructura adicionales, como autenticación y protocolos de sincronización, lo que incrementa aún más la presión sobre los presupuestos.

La arquitectura nativa en la nube de Holoscan for Media permite que las aplicaciones se ejecuten desde cualquier lugar. Las aplicaciones desarrolladas para la nube, el borde o despliegues en las instalaciones pueden funcionar en diversos entornos, eliminando la necesidad de versiones separadas.

Holoscan for Media está disponible en las instalaciones, con despliegues en la nube y en el borde que llegarán pronto. La plataforma también incluye Precision Time Protocol para la sincronización de audio y video en transmisiones en vivo y Networked Media Open Specifications para una comunicación fluida entre aplicaciones, simplificando la gestión de sistemas complejos.

Mejorando el desarrollo con PCs y estaciones de trabajo RTX AI

Los PCs y estaciones de trabajo NVIDIA RTX AI complementan el potencial de Holoscan for Media al ofrecer una base robusta para desarrollar experiencias de medios inmersivas. El ecosistema CUDA disponible en estos equipos proporciona acceso a una amplia variedad de SDKs y herramientas de NVIDIA optimizados para cargas de trabajo de medios e IA. Esto permite a los desarrolladores construir aplicaciones que pueden transitar sin problemas desde estaciones de trabajo a entornos de despliegue, asegurando que sus creaciones sean tanto robustas como escalables.

NVIDIA AI Enterprise ofrece mejoras adicionales al poner a disposición un completo conjunto de software, herramientas y marcos de IA optimizados para GPUs NVIDIA, dirigidos a desarrolladores empresariales que necesitan entornos de producción seguros, estables y escalables para aplicaciones de IA. Esta plataforma de IA de nivel empresarial incluye marcos populares como TensorFlow, PyTorch y RAPIDS para facilitar los despliegues.

Mediante el uso de NVIDIA AI Enterprise, los desarrolladores pueden construir capacidades avanzadas de IA, como visión por computadora, procesamiento de lenguaje natural y sistemas de recomendación directamente en sus aplicaciones de medios. También pueden prototipar, probar y desplegar modelos de IA sofisticados dentro de sus flujos de trabajo de medios.

Editores de video y entusiastas: ¡regocíjense!

Holoscan for Media se exhibirá en la feria IBC. En el stand de Dell Technologies, los asistentes pueden presenciar demostraciones en vivo que muestran cómo realizar la transición de desarrollo de aplicaciones a despliegue en vivo.

Varios socios de NVIDIA destacarán sus últimas herramientas y tecnologías de edición de video potenciadas por RTX en el evento.

El DaVinci Resolve 19 Studio de Blackmagic Design ya está disponible, introduciendo funciones de IA que optimizan los flujos de trabajo de edición:

IntelliTrack AI permite estabilizar rápidamente las grabaciones durante el proceso de edición; se puede usar en la herramienta Fairlight de DaVinci Resolve para rastrear sujetos en pantalla y generar automáticamente panoramas de audio a medida que se mueven por espacios 2D y 3D.
UltraNR es un modo de reducción de ruido acelerado por IA en la paleta de reducción de ruido espacial de DaVinci Resolve, que ayuda a reducir drásticamente el ruido digital sin comprometer la claridad de la imagen.
RTX Video Super Resolution utiliza IA para agudizar video de baja resolución y eliminar artefactos de compresión.
RTX Video HDR emplea un algoritmo mejorado por IA para remapear video de rango dinámico estándar en vibrantes espacios de color HDR10.

IntelliTrack y UltraNR obtienen un impulso en el rendimiento al ejecutarse en PCs y estaciones de trabajo NVIDIA RTX. NVIDIA TensorRT les permite ejecutar hasta 3 veces más rápido en una laptop GeForce GTX 4090 que en un Macbook Pro M3 Max.

Todos los efectos de IA de DaVinci Resolve son acelerados en GPUs RTX por TensorRT, mejorando su rendimiento. La actualización incluye aceleración de GPU para efectos como Beauty, Edge Detect y Watercolor, duplicando su rendimiento en GPUs NVIDIA.

La actualización también presenta el modo H.265 Ultra-High-Quality (UHQ) de NVIDIA, que utiliza NVENC para mejorar la eficiencia de codificación HEVC en un 10%.

Socios Perfectos: Topaz Video AI y Adobe After Effects

Este año, Topaz Labs presentó un complemento para Adobe After Effects para Video AI, una solución líder para la escalación de video y la interpolación de cuadros. El complemento integra toda la gama de modelos de mejora y interpolación de cuadros directamente en el software estándar de gráficos en movimiento.

También permite a los usuarios acceder a herramientas de escalado por IA en sus composiciones de After Effects, proporcionando mayor flexibilidad y un composición más rápida sin la necesidad de transferir archivos grandes entre diferentes herramientas.

Una característica destacada de Topaz Video AI es su capacidad para crear impresionantes videos en cámara lenta con el modelo Apollo de Topaz, que puede convertir grabaciones en hasta 16 veces cámara lenta.

Modelo Apollo de Topaz Video AI — El modelo Apollo de Topaz Video AI en acción — ralentizando grabaciones hasta 16 veces utilizando interpolación de cuadros para un detalle impresionante.

El complemento también es eficiente en la escalación, ideal para integrar activos de baja resolución en proyectos más grandes sin comprometer la calidad. Incluye todos los modelos de mejora de Topaz, como el modelo Rhea para escalado 4x.

Diseñado para la velocidad, el complemento está acelerado en GPUs RTX por NVIDIA TensorRT, aumentando el rendimiento de IA en hasta un 70%. Una actualización futura para Video AI introducirá mejoras adicionales en el rendimiento de TensorRT y optimizaciones de eficiencia.

Con la rápida integración de la IA, el futuro de la transmisión se vislumbra más brillante e innovador que nunca.