Open source models are crazy. Alibaba just dropped Wan 2.2 Animate, a new model that can animate any character based on a simple souce image. It handles facial expressions and body movements like no other model. 10 insane examples: (sound on)
WAN 2.2 Animate - Animação de Personagens IA & Substituição de Personagens de Vídeo
WAN 2.2 Animate é o revolucionário modelo de IA da Alibaba com 14 bilhões de parâmetros, especializado em animação de personagens e substituição de personagens dentro de vídeos. Desenvolvido com a avançada arquitetura Mixture-of-Experts (MoE) e lançado sob licença Apache 2.0, ele se destaca em duas capacidades centrais: animar fotos de personagens estáticos usando movimentos de referência e substituir personagens em vídeos existentes de forma completamente transparente. Com estabilidade temporal excepcional, preservação natural de expressões e adaptação consistente de iluminação, WAN 2.2 Animate entrega resultados de animação e substituição de personagens com qualidade cinematográfica.
Foto do personagem*
Fonte de clipe de movimento*
Os resultados gerados aparecerão aqui
Após enviar uma tarefa, o conteúdo gerado por IA será exibido aqui
Público
Vídeos do YouTube Wan 2.2 Animate
Assista demonstrações e tutoriais exibindo as poderosas capacidades de animação de personagens IA e transformação vídeo-para-vídeo do Wan 2.2 Animate
WAN 2.2 Animate Avaliações populares no X
Veja o que as pessoas estão dizendo sobre WAN 2.2 Animate no X (Twitter)
Wan 2.2 Animate is CRAZY and it actually excels at 3 things from my tests: 1. Lip syncing (so far the best open source I have seen, beating Runway Act2) 2. Consistent lighting & shadows with color tone replication when you swap a character 3. It keeps the replacement character Show more
Wan 2.2 Animate Lip syncing Test. Definitely way better than Runway Act2 in my opinion. Takes about 8 minutes for a HD video to be processed at 720p vertical (reels style)
You've probably seen viral character swaps from Wan 2.2 Animate. But now you can swap the character AND background using a reference video + new image. I turned myself into a YouTuber in Paris. How it works 👇
New tool to swap characters in a video: Wan 2.2 Animate Spent a few hours testing it out this weekend and have some thoughts on strengths + weaknesses. It's particularly strong at videos like this where you need to replicate lip sync and body movement. Other tips ⬇️
Wan 2.2 Animate is actually Crazy!! You can replace characters from a simple source image. No need to first frame anymore. It handles facial expressions and body movements like no other model I have ever seen. It is open source and free to use, that's the crazy part!
pretty much the end for dancing influencers lol… wan 2.2 animate can not only copy crazy camera moves, but it literally mimics body moves and.. even facial expressions accurately like honestly… can you even tell which one’s the real video?
omg... it's over... Hollywood has officially been left behind you can swap out any actor from any film in one click using Higgsfield’s Wan Replace, it even works with intense camera motion now, anyone can achieve Hollywood level motion control using AI here’s how to do it:
Just tried Wan2.2-Animate... and HOLY SMOKES, it's PERFECT! 🤯 @Alibaba_Wan
What used to take hours in After Effects now takes just ONE prompt. Nano Banana, Seedream 4, Wan 2.2, Runway Aleph et al are pioneering instruction-based editing -- collapsing complex VFX pipelines into a single, implicit step. Here's everything you need to know in 10 mins: Show more
O que é WAN 2.2 Animate
Modelo de IA de animação de personagens avançado de 14B parâmetros da Alibaba
14Bi AtivosParâmetros em 27Bi MoE
2 ModosAnimate & Replace
120 SegundosDuração Máxima
Apache 2.0Licença Comercial
WAN 2.2 Animate apresenta 14 bilhões de parâmetros ativos dentro de uma arquitetura MoE de 27 bilhões, dando vida a fotos de personagens estáticos com capacidade de modo duplo.
14Bi AtivosParâmetros em 27Bi MoE
2 ModosAnimate & Replace
120 SegundosDuração Máxima
Apache 2.0Licença Comercial
O que é WAN 2.2 Animate
Modelo de IA de animação de personagens avançado de 14B parâmetros da Alibaba
WAN 2.2 Animate apresenta 14 bilhões de parâmetros ativos dentro de uma arquitetura MoE de 27 bilhões, dando vida a fotos de personagens estáticos com capacidade de modo duplo.
Conheça os Recursos Poderosos do WAN 2.2 Animate
Veja todas as capacidades avançadas que fazem do WAN 2.2 Animate uma ferramenta excepcional para criação de animações de personagens
Arquitetura MoE 14B Parâmetros
Construído com o design avançado Mixture-of-Experts, contando com 27B parâmetros totais, sendo apenas 14B ativos por etapa, entregando qualidade de animação excepcional ao mesmo tempo que mantém desempenho de inferência eficiente e otimização de memória GPU.
Modos de Animação Duplos
Conta com dois modos de trabalho: o modo de animação, que traz vida a fotos estáticas usando movimentos de referência, e o modo de substituição, que troca personagens em vídeos de forma perfeita, preservando a iluminação original da cena e toda a dinâmica do movimento.
Replicação de Movimento Holístico
Captura e transfere com precisão movimentos corporais completos e expressões faciais de vídeos de referência, garantindo animações de personagem naturais e realistas, com atenção excepcional às nuances de gestos sutis e expressões emocionais.
Alta Estabilidade Temporal
Algoritmos avançados de consistência de quadros garantem animações suaves e sem tremulação mesmo em sequências estendidas, mantendo a aparência do personagem coerente e o fluxo de movimento estável, mesmo em cenas dinâmicas complexas com padrões de movimento desafiadores.
Preservação de Expressão Natural
O rastreamento inteligente de características faciais mantém expressões emocionais autênticas e micro-movimentos, entregando animações de personagens realistas que preservam os detalhes sutis de expressões humanas, incluindo movimentos oculares e sincronização labial.
Integração de Iluminação Adaptativa
Analisa e replica automaticamente as condições de iluminação da cena ao substituir personagens, garantindo integração visual perfeita com tom de cor, sombras e realces consistentes que combinam perfeitamente com o ambiente do vídeo original.
Código Aberto Apache 2.0
Lançado sob a licença permissiva Apache 2.0, permite uso comercial completo, além de direitos de modificação e distribuição. Você acessa pesos de modelo completos e metodologia de treinamento para implementações personalizadas e aplicações de pesquisa.
Suporte de Resolução Flexível
Gera animações em várias resoluções incluindo as opções 480p e 720p, com suporte para vídeos de até 120 segundos de duração, fornecendo qualidade de saída adaptável para os mais diversos casos de uso e requisitos de plataforma.
O WAN 2.2 Animate utiliza uma arquitetura avançada Mixture-of-Experts (MoE) com 27 bilhões de parâmetros totais, mas apenas 14 bilhões ficam ativos por cada etapa de inferência. Esse design conta com um sistema de dois especialistas: um especialista de alto ruído cuida dos estágios iniciais de desnoising, focando no layout geral da animação, enquanto um especialista de baixo ruído refina os detalhes do vídeo nos estágios posteriores. Essa abordagem entrega qualidade de animação excepcional, ao mesmo tempo que mantém o uso de memória GPU eficiente e um desempenho de inferência comparável a um modelo padrão de 14B.
O modo Animate dá vida a fotos de personagens estáticos, transferindo movimentos e expressões de um vídeo de referência para o sujeito da imagem e gerando novas gravações animadas. Já o modo Replace trabalha com um vídeo já existente, trocando o personagem original por um novo enquanto preserva com precisão as condições de iluminação da cena, tom de cor, sombras e toda a dinâmica de movimento original. Ambos os modos suportam resoluções até 720p e vídeos com até 120 segundos de duração.
O modelo aceita fotos de personagens nos formatos PNG ou JPG — o formato WEBP deve ser evitado para garantir resultados ótimos. Vídeos de referência precisam estar nos formatos MP4, MOV ou AVI, com tamanho de arquivo máximo de 500 MB. Para melhores resultados, certifique-se que a imagem de entrada e o vídeo de referência tenham composição compatível, proporções de aspecto consistentes e ângulos de câmera semelhantes. O modelo suporta resoluções de saída 480p e 720p.
O modelo implementa algoritmos avançados de consistência de quadros que garantem animações suaves e sem tremulação mesmo em sequências mais longas. Ele alcança alta estabilidade temporal ao manter a aparência do personagem coerente e o fluxo de movimento consistente durante todo o vídeo gerado, mesmo em cenas dinâmicas complexas com padrões de movimento desafiadores. Isso é particularmente importante para aplicações profissionais que exigem qualidade consistente ao longo de toda a duração do vídeo.
Sim, o WAN 2.2 Animate é lançado sob a licença Apache 2.0, uma licença open-source permissiva que permite uso comercial completo, além de direitos de modificação e distribuição. Os usuários podem acessar os pesos completos do modelo e a metodologia de treinamento para implementações personalizadas, aplicações de pesquisa e implantações de produção, sem restrições de licença ou taxas de royalty.
Embora o WAN 2.2 Animate ofereça capacidades impressionantes, ele ainda tem algumas limitações: a resolução máxima de saída é atualmente 720p (não 4K), o comprimento do vídeo é limitado a 120 segundos, e resultados ótimos exigem correspondência cuidadosa entre a composição da imagem de entrada e do vídeo de referência. O modelo funciona melhor quando as proporções de aspecto são consistentes entre as entradas, e cenários de iluminação complexos ou padrões de movimento extremos podem ocasionalmente produzir resultados menos consistentes.
Como Usar WAN 2.2 Animate
Guia passo a passo para criar animações de personagens com WAN 2.2 Animate
1
Preparar Foto do Personagem e Vídeo de Referência2
Escolher Modo de Animação e Configurar Ajustes3
Gerar e Baixar Vídeo AnimadoCarregue uma foto clara do personagem em formato PNG/JPG e vídeo de referência em MP4/MOV/AVI. Combine composição e proporção de aspecto entre entradas para resultados de animação ideais.