Adobe presenta en Las Vegas el futuro de la IA generativa en Premiere Pro
En NAB 2024
Adobe ha presentado un avance tecnológico de los flujos de trabajo de IA generativa que llegarán a Premiere Pro a finales de este año, impulsados por un nuevo modelo de vídeo para Firefly. Además, un «adelanto» muestra cómo los editores profesionales podrían aprovechar los modelos de generación de vídeo de Open AI y Runway en el futuro para generar B-rolls, o cómo podrían utilizar Pika Labs con la herramienta Ampliación Generativa para añadir unos segundos al final de una toma. Herramientas que redefinirán la creación de vídeo y los flujos de trabajo de producción en este software y permitirán a los usuarios agilizar la edición de todos los vídeos.
Estos nuevos flujos de trabajo de edición serán impulsados por un nuevo modelo de vídeo que se unirá a la familia de modelos Firefly, que incluye los modelos de imagen, vector, diseño y efectos de texto.
• Ampliación generativa: Añade fotogramas fácilmente para hacer que los clips sean más largos, de modo que sea más fácil sincronizar perfectamente las ediciones y añadir transiciones suaves. Esta innovadora tecnología resuelve un problema habitual con el que se encuentran a diario los editores profesionales, permitiéndoles crear material adicional para ajustar los montajes, mantener una toma durante un tiempo extra o cubrir mejor una transición.
• Inserción y eliminación de objetos: Se trata simplemente de seleccionar y rastrear objetos, luego reemplazarlos. Eliminar elementos no deseados, cambiar el vestuario de un actor o añadir rápidamente elementos de decorado, como un cuadro o flores fotorrealistas sobre un escritorio.
• Texto a vídeo: Genera secuencias completamente nuevas directamente en Premiere Pro. Sólo hay que escribir texto en un prompt o cargar imágenes de referencia. Estos clips se pueden utilizar para idear y crear guiones gráficos, o para crear B-rolls para aumentar el metraje de acción en vivo.
El desarrollador de software argumenta en su presentación que, mientras que gran parte de la conversación inicial sobre la IA generativa se ha centrado en una competición entre empresas para producir el «mejor» modelo de IA, Adobe ve un futuro mucho más diverso. «Las décadas de experiencia de Adobe con la IA demuestran que el contenido generado por la IA es más útil cuando forma parte natural de lo que se hace cada día. Para la mayoría de los clientes de Adobe, la IA generativa es solo un punto de partida y una fuente de inspiración para explorar posibilidades creativas. El objetivo de Adobe es proporcionar herramientas estándar del sector y flujos de trabajo fluidos que permitan a los usuarios utilizar cualquier material de cualquier fuente en cualquier plataforma para crear a la velocidad de su imaginación». Tanto si se trata de Adobe Firefly como de otros modelos especializados de IA, Adobe está trabajando para que el proceso de integración sea lo más fluido posible desde las aplicaciones de Adobe.
«Adobe ha desarrollado sus propios modelos de IA con un compromiso de innovación responsable y tiene previsto aplicar lo aprendido para garantizar que la integración de modelos de terceros en sus aplicaciones sea coherente con las normas de seguridad de la empresa». Adobe, como uno de los fundadores de la Content Authenticity Initiative, se compromete a asociar credenciales de contenido -tecnología gratuita y de código abierto que sirve como etiqueta nutricional para el contenido en línea- a los contenidos producidos dentro de sus aplicaciones para que los usuarios puedan ver cómo se hizo el contenido y qué modelos de IA se utilizaron para generar el contenido creado en las plataformas de Adobe.
Los flujos de trabajo de audio basados en IA, disponibles de forma general en Premiere Pro
Además de las nuevas herramientas de vídeo generativas con IA de Adobe, los nuevos flujos de trabajo de audio en Premiere Pro estarán disponibles de forma general para los clientes en mayo, ofreciendo a los editores todo lo que necesitan para controlar con precisión y mejorar la calidad de su sonido.
• Controles de fundido interactivos: Los editores pueden crear transiciones de audio personalizadas más rápido que nunca con solo arrastrar los controles de clip para crear fundidos de audio.
• Nueva insignia de sonido esencial con etiquetado de categorías de audio: La IA etiqueta automáticamente los clips de audio como diálogo, música, efectos de sonido o ambiente, y añade un nuevo icono para que los editores accedan con un solo clic y al instante a los controles adecuados para el trabajo.
• Insignias de efectos: Las nuevas insignias visuales facilitan ver qué clips tienen efectos, añadir rápidamente otros nuevos y abrir automáticamente los parámetros de los efectos directamente desde la secuencia.
• Formas de onda rediseñadas en la línea de tiempo: Las formas de onda cambian de tamaño de forma inteligente a medida que cambia la altura de la pista en los clips, mientras que los nuevos colores vistosos facilitan la lectura de las secuencias.
Además, la herramienta de Mejorar la voz, que elimina instantáneamente el ruido no deseado y mejora los diálogos mal grabados, está disponible desde febrero.
