Nova tecnologia faz vídeos da pessoa fazendo qualquer movimento a partir de uma foto
Com base nos modelos de difusão de imagens, ferramenta pode animar de forma bastante convincente temas humanos, animes e desenhos
A inteligência artificial (IA) gerando vídeos, imagens, sons e animações não é novidade. Mas uma nova tecnologia vem chamando a atenção pela capacidade de inserir movimento a qualquer imagem estática.
Com base nos modelos de difusão de imagens, a ferramenta "Anymate Anyone" pode animar de forma bastante convincente temas humanos, animes, desenhos animados e figuras humanoides. Para isso, o aplicativo só precisa de uma foto limpa e alguns movimentos de dança como referência.
Por se tratar de um projeto de pesquisa, o Animate Everyone ainda não está disponível ao grande público como o ChatGPT, da OpenAI, ou ao Bard, do Google. A única maneira de brincar com a ferramenta é se você for um desenvolvedor proficiente em codificação.
No entanto, você não precisa ser um gênio da codificação para entender como a tecnologia funciona e tudo o que ela pode fazer.
"Para garantir controlabilidade e continuidade, introduzimos um guia de pose eficiente para direcionar os movimentos do personagem e empregamos uma abordagem de modelagem temporal eficaz para garantir transições suaves entre quadros de vídeo", explica a ferramenta em seu site oficial.
A IA conseguiu criar imagens e vídeos do zero com base em todos os dados disponíveis na internet. Ela usa técnicas avançadas para manter os detalhes consistentes e os movimentos suaves, combinando diferentes modelos para detalhes como ReferenceNet, um guia para controle e uma sobreposição temporal para transições mais suaves.
"Nossa abordagem pode animar caracteres arbitrários, produzindo resultados superiores na animação de personagens em comparação com outros métodos de imagem para vídeo. Além disso, avaliamos nosso método em benchmarks para vídeos de moda e síntese de dança humana, alcançando resultados de última geração".
Qual o melhor celular para gravar vídeos? Veja sugestões
De forma simplifica, o que eles fazem é analisar a imagem e adaptar diversas versões modificadas da imagem a um padrão de movimento atual.
O resultado é a imagem de uma pessoa ou anime que parece dançar dentro do quadro com pouca ou nenhuma interrupção ou ruído.
