Adobe ha presentado un avance de las innovaciones de IA generativa en Adobe Premiere Pro que redefinirán la creación de vídeo y los flujos de trabajo de producción, ofreciendo nuevas posibilidades creativas que todo editor profesional necesita para seguir el ritmo de la producción de vídeo a alta velocidad.
Las nuevas herramientas de IA generativa que llegarán a Premiere Pro este año permitirán a los usuarios agilizar la edición de todos los vídeos, incluyendo la inserción o eliminación de objetos en una escena o la ampliación de un clip existente.
Estos nuevos flujos de trabajo de edición serán impulsados por un nuevo modelo de vídeo que se unirá a la familia de modelos Firefly, que incluye los modelos de imagen, vector, diseño y efectos de texto.
Adobe sigue desarrollando los modelos de IA de Firefly en las categorías en las que tiene una gran experiencia, como imagen, vídeo, audio y 3D, e integrará estos modelos en Creative Cloud y Adobe Express.
Adobe también ha adelantado su visión de incorporar modelos de IA generativa de terceros directamente en aplicaciones de Adobe como Premiere Pro.
Creative Cloud siempre ha contado con un amplio ecosistema de partners y plugins, y esta evolución amplía Premiere Pro como la herramienta de vídeo profesional más flexible y extensible que se adapta a cualquier flujo de trabajo.
Los clientes de Adobe quieren opciones y un sinfín de posibilidades a la hora de crear y editar contenidos de entretenimiento y audiovisuales de primera línea. Las primeras exploraciones muestran cómo los editores de vídeo profesionales podrían, en el futuro, aprovechar los modelos de generación de vídeo de OpenAI y Runway, integrados en Premiere Pro, para generar B-rolls para editar en sus proyectos.
También muestra cómo Pika Labs podría utilizarse con la herramienta Ampliación Generativa para añadir unos segundos al final de una toma.
Al ofrecer nuevas capacidades de IA generativa con Adobe Firefly y una variedad de modelos de terceros, Adobe está dando a los clientes acceso a una gama de nuevas capacidades sin tener que abandonar los flujos de trabajo que utilizan todos los días en Premiere Pro.
“Adobe está reimaginando cada paso de la creación de vídeo y el flujo de trabajo de producción para dar a los creadores un nuevo poder y flexibilidad para hacer realidad su visión”, afirma Ashley Still, Vicepresidenta Senior de Creative Product Group en Adobe. “Al llevar las innovaciones de IA generativa en el centro de los flujos de trabajo de Premiere Pro, estamos resolviendo problemas reales que los editores de vídeo experimentan cada día, a la vez que les damos más espacio para centrarse en su trabajo.”
Adobe también ha anunciado que próximamente estará disponible para todo el mundo el flujo de trabajo de audio impulsado por IA en Premiere Pro, que incluye nuevos controles de fundido, insignias de clip, formas de onda dinámicas, etiquetado de categorías basado en IA y mucho más.
El futuro de la IA generativa en Premiere Pro
Adobe ha presentado un avance tecnológico de los flujos de trabajo de IA generativa que llegarán a Premiere Pro a finales de este año, impulsados por un nuevo modelo de vídeo para Firefly. Además, un “adelanto” muestra cómo los editores profesionales podrían aprovechar los modelos de generación de vídeo de Open AI y Runway en el futuro para generar B-rolls, o cómo podrían utilizar Pika Labs con la herramienta Ampliación Generativa para añadir unos segundos al final de una toma.
- Ampliación generativa: Añade fotogramas fácilmente para hacer que los clips sean más largos, de modo que sea más fácil sincronizar perfectamente las ediciones y añadir transiciones suaves. Esta innovadora tecnología resuelve un problema habitual con el que se encuentran a diario los editores profesionales, permitiéndoles crear material adicional para ajustar los montajes, mantener una toma durante un tiempo extra o cubrir mejor una transición.
- Inserción y eliminación de objetos: Simplemente selecciona y rastrea objetos, luego reemplázalos. Elimina elementos no deseados, cambia el vestuario de un actor o añade rápidamente elementos de decorado, como un cuadro o flores fotorrealistas sobre un escritorio.
- Texto a vídeo: Genera secuencias completamente nuevas directamente en Premiere Pro. Sólo tienes que escribir texto en un prompt o cargar imágenes de referencia. Estos clips se pueden utilizar para idear y crear guiones gráficos, o para crear B-rolls para aumentar el metraje de acción en vivo.
Mientras que gran parte de la conversación inicial sobre la IA generativa se ha centrado en una competición entre empresas para producir el “mejor” modelo de IA, Adobe ve un futuro mucho más diverso. Las décadas de experiencia de Adobe con la IA demuestran que el contenido generado por la IA es más útil cuando forma parte natural de lo que se hace cada día. Para la mayoría de los clientes de Adobe, la IA generativa es sólo un punto de partida y una fuente de inspiración para explorar posibilidades creativas. El objetivo de Adobe es proporcionar herramientas estándar del sector y flujos de trabajo fluidos que permitan a los usuarios utilizar cualquier material de cualquier fuente en cualquier plataforma para crear a la velocidad de su imaginación. Tanto si se trata de Adobe Firefly como de otros modelos especializados de IA, Adobe está trabajando para que el proceso de integración sea lo más fluido posible desde las aplicaciones de Adobe.
Adobe ha desarrollado sus propios modelos de IA con un compromiso de innovación responsable y tiene previsto aplicar lo aprendido para garantizar que la integración de modelos de terceros en sus aplicaciones sea coherente con las normas de seguridad de la empresa. Adobe, como uno de los fundadores de la Content Authenticity Initiative, se compromete a asociar credenciales de contenido -tecnología gratuita y de código abierto que sirve como etiqueta nutricional para el contenido en línea- a los contenidos producidos dentro de sus aplicaciones para que los usuarios puedan ver cómo se hizo el contenido y qué modelos de IA se utilizaron para generar el contenido creado en las plataformas de Adobe.
Los flujos de trabajo de audio basados en IA, disponibles de forma general en Premiere Pro
Además de las nuevas herramientas de vídeo generativas con IA de Adobe, los nuevos flujos de trabajo de audio en Premiere Pro estarán disponibles de forma general para los clientes en mayo, ofreciendo a los editores todo lo que necesitan para controlar con precisión y mejorar la calidad de su sonido.
- Controles de fundido interactivos: Los editores pueden crear transiciones de audio personalizadas más rápido que nunca con solo arrastrar los controles de clip para crear fundidos de audio.
- Nueva insignia de sonido esencial con etiquetado de categorías de audio: La IA etiqueta automáticamente los clips de audio como diálogo, música, efectos de sonido o ambiente, y añade un nuevo icono para que los editores accedan con un solo clic y al instante a los controles adecuados para el trabajo.
- Insignias de efectos: Las nuevas insignias visuales facilitan ver qué clips tienen efectos, añadir rápidamente otros nuevos y abrir automáticamente los parámetros de los efectos directamente desde la secuencia.
- Formas de onda rediseñadas en la línea de tiempo: Las formas de onda cambian de tamaño de forma inteligente a medida que cambia la altura de la pista en los clips, mientras que los nuevos colores vistosos facilitan la lectura de las secuencias.
Además, la herramienta de Mejorar la voz, que elimina instantáneamente el ruido no deseado y mejora los diálogos mal grabados, está disponible desde febrero.
