O serviço de IA generativo da Adobe, Firefly, se tornará um co-piloto para a produção de vídeo, acelerando o processo.
A Adobe está seguindo os passos de empresas como a RunwayML, que estão permitindo a edição de vídeo baseada em IA e, em alguns casos, experimentando modelos de texto para vídeo.
Os planos da Adobe, revelados na conferência NAB (National Association of Broadcasters) deste ano, envolvem inicialmente a integração da família Firefly de modelos geradores de IA em fluxos de trabalho existentes.
Na NAB, a Adobe demonstrou como o Firefly pode ajudar na edição de vídeo, bem como áudio, animação e motion graphics.
Firefly foi projetado para ser um co-piloto criativo, reduzindo o tempo de pós-produção de dias para minutos.
Adobe Firefly como co-piloto em produção de vídeo
A empresa está atualmente experimentando vários aplicativos: por exemplo, você pode usar texto para alterar a hora do dia ou o esquema de cores em um vídeo; gerar sons ou pequenos pedaços de música; criar legendas, logotipos ou animações; converter scripts diretamente em storyboards com visualizações iniciais; ou encontrar clipes de rolagem B apropriados a partir de imagens de vídeo existentes.
Espera-se que as novas capacidades geradoras de IA para vídeo, áudio, animação e design de gráficos em movimento sejam lançadas ainda este ano. Os interessados podem se inscrever para o beta do Firefly. Haverá também uma sessão de comunidade ao vivo no YouTube na quinta-feira, 20 de abril.
Adobe não está trazendo modelos de texto para vídeo por enquanto
Um modelo de texto para vídeo ainda não foi anunciado oficialmente pela empresa. No entanto, como o anúncio do Firefly se refere à síntese de efeitos de imagem e texto como apenas o primeiro passo, é muito provável que a Adobe também trabalhe em um modelo de texto para vídeo em algum momento no futuro. RunwayML está atualmente testando um modelo tão generativo para vídeo com Gen-2.
Além dos novos aplicativos para Firefly, a Adobe também anunciou um recurso de edição de texto para o Adobe Premiere Pro na NAB. O recurso de edição de texto é baseado no Adobe Sensei e transcreve automaticamente a mídia de origem.
Isso permite pesquisas mais rápidas de imagens transcritas, bem como edição baseada em texto: os usuários podem colar frases da transcrição na linha do tempo e o Adobe Premiere Pro edita automaticamente o vídeo para corresponder à transcrição.
