El servicio de IA generativa de Adobe, Firefly, se convertirá en copiloto de la producción de vídeo, acelerando el proceso.
Adobe sigue los pasos de empresas como RunwayML, que están permitiendo la edición de vídeo basada en IA y, en algunos casos, experimentando con modelos de conversión de texto en vídeo.
Los planes de Adobe, presentados en la conferencia NAB (National Association of Broadcasters) de este año, consisten inicialmente en integrar la familia Firefly de plantillas generadoras de IA en los flujos de trabajo existentes.
En NAB, Adobe demostró cómo Firefly puede ayudar en la edición de vídeo, así como en audio, animación y gráficos en movimiento.
Firefly está diseñado para ser un copiloto creativo, reduciendo el tiempo de postproducción de días a minutos.
Adobe Firefly como copiloto en la producción de vídeo
La empresa está experimentando actualmente con diversas aplicaciones: por ejemplo, puede utilizar texto para cambiar la hora del día o la combinación de colores en un vídeo; generar sonidos o piezas cortas de música; crear subtítulos, logotipos o animaciones; convertir guiones directamente en storyboards con previsualizaciones iniciales; o encontrar clips B-roll apropiados a partir de secuencias de vídeo existentes.
Está previsto que las nuevas funciones de generación de IA para vídeo, audio, animación y diseño de gráficos en movimiento salgan a la venta a finales de este año. Los interesados pueden inscribirse en la beta de Firefly. También habrá una sesión comunitaria en directo en YouTube el jueves 20 de abril.
Adobe aún no va a sacar plantillas de texto a vídeo
La empresa aún no ha anunciado oficialmente una plantilla de texto a vídeo. Sin embargo, como el anuncio de Firefly se refiere a la síntesis de efectos de imagen y texto como el primer paso, es muy probable que Adobe también trabaje en una plantilla de texto a vídeo en algún momento en el futuro. RunwayML está probando actualmente un modelo generativo de este tipo para vídeo con Gen-2.
Además de las nuevas aplicaciones para Firefly, Adobe también anunció en NAB una función de edición de texto para Adobe Premiere Pro. La función de edición de texto se basa en Adobe Sensei y transcribe automáticamente los medios de origen.
Esto permite una búsqueda más rápida de las secuencias transcritas, así como la edición basada en texto: los usuarios pueden pegar frases de la transcripción en la línea de tiempo y Adobe Premiere Pro edita automáticamente el vídeo para que coincida con la transcripción.
