Kling AI: China lança app revolucionário de produção de vídeo por IA
Na última semana, poucos meses após a OpenAI deixar muita gente impressionada como o Sora, o Kling AI foi o assunto do momento. Ele é um modelo chinês de IA (Inteligência Artificial) que cria vídeos através de instruções de texto.
A empresa Kuaishou, que desenvolveu o popular aplicativo Kwai, disponibilizou o Kling apenas na China, em uma versão demo com lista de espera. Mesmo assim, o Kling AI viralizou nas redes sociais com posts que mostram uma capacidade similar ao Sora para gerar vídeos.
Aliás, o Kling usa uma tecnologia similar ao Sora, sendo também um modelo de machine learning de difusão que consegue produzir vídeos em alta definição com até dois minutos de duração. O Sora, por outro lado, só consegue gerar vídeos com até um minuto.
Na última quinta-feira (6), a Kuaishou lançou um vídeo que mostra a capacidade do Kling AI, que consegue criar vídeos com fidelidade superior ao Sora em alguns exemplos.
O modelo também conta com uma tecnologia avançada de reconstrução facial e física em 3D, gerando vídeos mais fotorrealistas. Veja:
Essa tecnologia é exclusiva da Kuaishou, a 3D VAE (Autodecodificador Variacional em 3D) consegue criar expressões e movimentos detalhados usando apenas uma imagem de corpo inteiro.
A 3D VAE é aprimorada por um mecanismo conjunto de atenção espacial e temporal em 3D que permite que o modelo do Kling AI consiga gerar cenas e movimentos completos, mas respeitando às leis da física. Confira:
A Chinese AI video generator just dropped before we got access to Sora
Can generate 2-minute videos at 30fps, 1080p quality, available on the KWAI iOS app with a Chinese phone number
A few generations from their site:
— Rowan Cheung (@rowancheung) June 6, 2024
A Kuaishou não lançou o Kling separadamente, mas incluiu como uma ferramenta na versão exclusiva do app KwaiCut na China. A empresa também não informou se vai expandir o acesso ao Kling para outros países.