IA para estender vídeos no Premiere Pro; confira a novidade da Adobe

A Adobe acaba de anunciar uma novidade que pode animar os criadores de conteúdo em vídeo: a introdução de ferramentas de inteligência artificial no Premiere Pro, seu software de edição de vídeo líder de mercado. Esta novidade, revelada durante a conferência Adobe MAX 2024, promete transformar a maneira como os profissionais e entusiastas abordam a edição e criação de vídeos.

O cerne desta atualização é o Firefly Video Model, um modelo de IA generativa desenvolvido pela Adobe especificamente para trabalhar com vídeos.

Leia também
Photoshop da Adobe agora pode gerar imagens via prompt como o Dall-E e MidJourney
Adobe Premiere Pro ganhará recursos que usam IA

Este modelo está sendo implementado em várias novas ferramentas, incluindo algumas diretamente integradas ao Premiere Pro, permitindo aos usuários estender trechos de vídeo existentes e até mesmo gerar novos clipes a partir de imagens estáticas e prompts de texto.

Gerando vídeos com IA no Adobe Premiere

The new Generative Extend tool in Premiere Pro can fill gaps in footage that would ordinarily require a full reshoot, such as adding a few extra steps to this person walking next to a car.

Uma das ferramentas mais promissoras é o Generative Extend, que está sendo lançado em versão beta para o Premiere Pro. Esta funcionalidade permite aos editores estender o início ou o final de um clipe que seja ligeiramente curto demais, ou fazer ajustes no meio de uma cena, como corrigir movimentos de olhos ou movimentos inesperados. Embora a extensão seja limitada a dois segundos, isso pode ser crucial para corrigir pequenos problemas sem a necessidade de refilmagens.

O Generative Extend pode trabalhar com clipes em resolução de até 1080p a 24 FPS, oferecendo flexibilidade para projetos de alta qualidade. Além disso, a ferramenta também pode ser usada para estender áudio, como efeitos sonoros e som ambiente, por até dez segundos, embora não funcione com diálogos falados ou música.

Além disso, a Adobe está lançando duas outras ferramentas de geração de vídeo na web: Text-to-Video e Image-to-Video. Estas ferramentas, disponíveis como beta público limitado no aplicativo web Firefly, permitem aos usuários criar vídeos curtos a partir de descrições textuais ou imagens de referência.

Como funcionam o Text-to-Video e Image-to-Video

A screenshot showing the camera control options for Adobe’s text-to-video Firefly AI model.

O Text-to-Video funciona de maneira similar a outros geradores de vídeo baseados em IA, como o Runway e o Sora da OpenAI. Os usuários inserem uma descrição textual do vídeo desejado, e a IA gera o conteúdo. A ferramenta pode emular diversos estilos, desde filmagens “reais” até animações 3D e stop motion.

Já o Image-to-Video vai um passo além, permitindo que os usuários adicionem uma imagem de referência junto com o prompt de texto, oferecendo maior controle sobre o resultado final. Isso pode ser particularmente útil para criar b-rolls a partir de fotografias ou para visualizar refilmagens.

No entanto, é importante notar que essas ferramentas ainda têm limitações. Os vídeos gerados pelo Text-to-Video e Image-to-Video têm no máximo cinco segundos de duração, com qualidade máxima de 720p a 24 FPS. O tempo de geração para todas essas ferramentas é de cerca de 90 segundos, embora a Adobe esteja trabalhando em um “modo turbo” para reduzir esse tempo.

Adobe destaca a “segurança comercial”

The model is restricted to producing clips that are around four seconds long, like this example of an AI-generated baby dragon scrambling around in magma.

Um aspecto crucial dessas novas ferramentas é a ênfase da Adobe na segurança comercial. A empresa afirma que seus modelos de IA para vídeo são treinados apenas com conteúdo que a Adobe tinha permissão para usar, diferenciando-se de concorrentes que enfrentam processos e investigações por supostamente treinar seus modelos com vídeos raspados do YouTube ou até mesmo vídeos pessoais dos usuários.

Além disso, os vídeos criados ou editados usando o modelo de vídeo Firefly da Adobe podem ser incorporados com Credenciais de Conteúdo, ajudando a divulgar o uso de IA e os direitos de propriedade quando publicados online.

Embora ainda não esteja claro quando essas ferramentas sairão da fase beta, sua disponibilidade pública já coloca a Adobe à frente de concorrentes como OpenAI, Meta e Google, cujos geradores de vídeo ainda não estão acessíveis ao público em geral.

Fonte: The Verge

Postado por
Cearense. 37 anos. Apaixonado por tecnologia desde que usou um computador pela primeira vez, em um hoje jurássico Windows 95. Além de tech, também curto filmes, séries e jogos.
Siga em:
Compartilhe
Deixe seu comentário
Img de rastreio
Localize algo no site!