A startup de inteligência artificial Runway AI anunciou um novo modelo de geração de vídeo que vai permitir transformar texto em vídeo. Atualmente, já existem ferramentas para transformar palavras em imagens. No entanto, o novo recurso torna possível digitar uma descrição e vê-la em cenas em movimento.
O editor de vídeo da Runway, que ajudou a desenvolver o gerador de imagem Stable Diffusion, já havia lançado um editor de vídeo em fevereiro deste ano: o Gen-1, que transformava imagens de vídeos existentes. O recurso permite transformar imagens mais “grosseiras” em versões “sofisticadas”, como vemos neste exemplo.
Já o Gen-2, por sua vez, é capaz de gerar vídeos do zero. Mas, por enquanto, a ferramenta só foi vista em ação com vídeos curtos e pouco realistas. Além disso, o acesso ainda é limitado: de acordo com a Bloomberg News, os que desejam utilizar o Gen-2 terão que se inscrever em uma lista de espera via Discord. Entretanto, a porta-voz da Runway, Kelsey Rondenet, disse ao The Verge que a empresa irá fornecer “amplo acesso nas próximas semanas”.
A ideia não é totalmente nova, já que, em setembro do ano passado, o Meta anunciou a criação da IA “Make-A-Video”, com uma proposta semelhante. Além disso, na semana passada, a Microsoft também anunciou a conversão de texto em vídeo no GPT-4. Entretanto, a Runway espera que o Gen-2 tenha impacto em setores como publicidade, entretenimento, design e educação.
Veja demonstração do Gen-2 abaixo:
Generate videos with nothing but words. If you can say it, now you can see it.
Introducing, Text to Video. With Gen-2.
Learn more at https://t.co/PsJh664G0Q pic.twitter.com/6qEgcZ9QV4
— Runway (@runwayml) March 20, 2023