Open source models are crazy. Alibaba just dropped Wan 2.2 Animate, a new model that can animate any character based on a simple souce image. It handles facial expressions and body movements like no other model. 10 insane examples: (sound on)
WAN 2.2 Animate - AI 캐릭터 애니메이션 및 비디오 캐릭터 교체
WAN 2.2 Animate는 캐릭터 애니메이션 생성과 비디오 내 캐릭터 교체에 특화된 알리바바의 혁신적인 140억 매개변수 AI 모델입니다. 고도화된 Mixture-of-Experts (MoE) 아키텍처를 기반으로 구축되었으며 Apache 2.0 라이선스로 제공되는 이 모델은 두 가지 핵심 기능에서 뛰어난 성능을 보입니다: 참조 동작을 기반으로 정적 캐릭터 사진을 애니메이션화하는 것과 기존 비디오의 캐릭터를 자연스럽게 교체하는 것입니다. 뛰어난 시간적 안정성, 자연스러운 표현 보존, 일관된 조명 적응을 통해 WAN 2.2 Animate는 영화 수준의 고품질 캐릭터 애니메이션 및 교체 결과를 제공합니다.
캐릭터 사진*
모션 클립 소스*
생성된 결과가 여기에 나타납니다
작업을 제출한 후 AI가 생성한 콘텐츠가 여기에 표시됩니다
공개
Wan 2.2 Animate YouTube 동영상
Wan 2.2 Animate의 강력한 AI 캐릭터 애니메이션 및 비디오 간 변환 기능을 보여주는 데모와 튜토리얼을 시청하세요
WAN 2.2 Animate X의 인기 리뷰
X (Twitter)에서 WAN 2.2 Animate에 대해 사람들이 무엇을 말하는지 확인하세요
Wan 2.2 Animate is CRAZY and it actually excels at 3 things from my tests: 1. Lip syncing (so far the best open source I have seen, beating Runway Act2) 2. Consistent lighting & shadows with color tone replication when you swap a character 3. It keeps the replacement character Show more
Wan 2.2 Animate Lip syncing Test. Definitely way better than Runway Act2 in my opinion. Takes about 8 minutes for a HD video to be processed at 720p vertical (reels style)
You've probably seen viral character swaps from Wan 2.2 Animate. But now you can swap the character AND background using a reference video + new image. I turned myself into a YouTuber in Paris. How it works 👇
New tool to swap characters in a video: Wan 2.2 Animate Spent a few hours testing it out this weekend and have some thoughts on strengths + weaknesses. It's particularly strong at videos like this where you need to replicate lip sync and body movement. Other tips ⬇️
Wan 2.2 Animate is actually Crazy!! You can replace characters from a simple source image. No need to first frame anymore. It handles facial expressions and body movements like no other model I have ever seen. It is open source and free to use, that's the crazy part!
pretty much the end for dancing influencers lol… wan 2.2 animate can not only copy crazy camera moves, but it literally mimics body moves and.. even facial expressions accurately like honestly… can you even tell which one’s the real video?
omg... it's over... Hollywood has officially been left behind you can swap out any actor from any film in one click using Higgsfield’s Wan Replace, it even works with intense camera motion now, anyone can achieve Hollywood level motion control using AI here’s how to do it:
Just tried Wan2.2-Animate... and HOLY SMOKES, it's PERFECT! 🤯 @Alibaba_Wan
What used to take hours in After Effects now takes just ONE prompt. Nano Banana, Seedream 4, Wan 2.2, Runway Aleph et al are pioneering instruction-based editing -- collapsing complex VFX pipelines into a single, implicit step. Here's everything you need to know in 10 mins: Show more
WAN 2.2 Animate란
Alibaba의 고급 140억 매개변수 캐릭터 애니메이션 AI 모델
140억 활성270억 MoE 내 매개변수
2가지 모드Animate & Replace
120초최대 지속 시간
Apache 2.0상업 라이선스
WAN 2.2 Animate는 270억 MoE 아키텍처 내에서 140억 개의 활성 매개변수를 갖추고 있으며, 이중 모드 기능으로 정적 캐릭터 사진에 생명을 불어넣습니다.
140억 활성270억 MoE 내 매개변수
2가지 모드Animate & Replace
120초최대 지속 시간
Apache 2.0상업 라이선스
WAN 2.2 Animate란
Alibaba의 고급 140억 매개변수 캐릭터 애니메이션 AI 모델
WAN 2.2 Animate는 270억 MoE 아키텍처 내에서 140억 개의 활성 매개변수를 갖추고 있으며, 이중 모드 기능으로 정적 캐릭터 사진에 생명을 불어넣습니다.
WAN 2.2 Animate의 압도적인 핵심 기능
캐릭터 애니메이션 작업에서 WAN 2.2 Animate를 최고 수준으로 끌어올리는 차별화된 고급 기능을 직접 확인해보세요
140억 매개변수 MoE 아키텍처
전체 270억 매개변수 중 추론 단계마다 140억 매개변수만 활성화되는 고급 Mixture-of-Experts 설계를 기반으로 구축되어, GPU 메모리 최적화와 효율적인 추론 성능을 유지하면서 최상급 애니메이션 품질을 선사합니다.
이중 애니메이션 모드
정적 이미지에 참조 동작으로 생동감을 불어넣는 애니메이션 모드와, 원본 장면의 조명과 동작 역학을 그대로 유지하면서 비디오 속 캐릭터를 완벽하게 교체하는 교체 모드를 모두 지원합니다.
전체적인 동작 복제
참조 비디오의 전신 움직임과 얼굴 표정을 정확하게 포착해 재현하며, 미묘한 제스처 뉘앙스와 감정 표현까지 세심하게 구현해 자연스럽고 사실적인 캐릭터 애니메이션을 보장합니다.
높은 시간적 안정성
고도화된 프레임 일관성 알고리즘이 긴 시퀀스 전체에서 깜빡임 없는 부드러운 애니메이션을 유지하고, 복잡한 동적 장면의 까다로운 동작 패턴에서도 캐릭터 외관과 동작 흐름을 일관되게 유지합니다.
자연스러운 표정보존
지능형 얼굴 특징 추적이 진정한 감정 표현과 미세한 움직임을 그대로 유지해, 눈 움직임과 입술 동기화를 포함한 인간 표정의 섬세한 디테일까지 보존하는 생생한 캐릭터 애니메이션을 제공합니다.
적응형 조명 통합
캐릭터 교체 시 장면의 조명 조건을 자동으로 분석하고 재현하여, 원본 비디오 환경과 완벽하게 일치하는 색조, 그림자, 하이라이트를 구현해 이질감 없는 완벽한 시각적 통합을 보장합니다.
Apache 2.0 오픈 소스
완전한 상업적 사용, 수정 및 배포 권한을 허용하는 관대한 Apache 2.0 라이선스 하에 공개되었습니다. 맞춤 구현과 연구 활용에 필요한 전체 모델 가중치와 훈련 방법론에 직접 액세스하실 수 있습니다.
유연한 해상도 지원
480p와 720p 옵션을 포함한 여러 해상도로 애니메이션을 생성할 수 있고 최대 120초 길이의 비디오를 지원해, 다양한 사용 사례와 플랫폼 요구 사항에 맞춘 적응 가능한 출력 품질을 제공합니다.
WAN 2.2 Animate는 총 270억 개의 매개변수를 가진 고급 Mixture-of-Experts (MoE) 아키텍처를 기반으로 하지만 추론 단계마다 활성화되는 매개변수는 140억 개에 불과합니다. 이 설계는 2가지 전문가 시스템으로 나뉘어 작동하는데, 고잡음 전문가는 전체 레이아웃을 다루는 초기 노이즈 제거 단계를 담당하고 저잡음 전문가는 후기 단계에서 비디오 세부 묘사를 정제합니다. 이 구조 덕분에 표준 14B 모델과 비슷한 GPU 메모리 효율과 추론 성능을 유지하면서도 뛰어난 애니메이션 품질을 구현할 수 있습니다.
Animate 모드는 참조 비디오에 담긴 동작과 표정을 정적 캐릭터 사진의 피사체에 적용해 움직임을 부여하고, 완전히 새로운 애니메이션 영상을 생성합니다. Replace 모드는 기존 비디오의 조명 조건, 색조, 그림자와 원본 동작 역학을 그대로 보존하면서 기존 캐릭터만 새로운 캐릭터로 바꿔주는 기능입니다. 두 모드 모두 최대 720p 해상도와 최대 120초 길이의 비디오 출력을 지원합니다.
캐릭터 사진은 PNG 또는 JPG 형식만 허용되며, 최적의 결과를 얻으려면 WEBP 형식은 피하는 것이 좋습니다. 참조 비디오는 최대 500MB 파일 크기의 MP4, MOV 또는 AVI 형식이어야 합니다. 가장 좋은 결과물을 얻으려면 입력 이미지와 참조 비디오의 포즈, 종횡비, 카메라 각도가 서로 일치하는지 미리 확인해 주세요. 모델은 480p 및 720p 출력 해상도를 지원합니다.
이 모델은 긴 시퀀스 전체에서 부드럽고 깜박임 없는 애니메이션을 유지할 수 있도록 고도화된 프레임 일관성 알고리즘을 적용했습니다. 까다로운 동작 패턴이 포함된 복잡한 동적 장면에서도 생성된 비디오 전체에서 일관된 캐릭터 외관과 동작 흐름을 유지하기 때문에 높은 시간적 안정성을 달성할 수 있습니다. 이는 전체 비디오 길이에 걸쳐 일정한 품질이 요구되는 전문가용 애플리케이션에 특히 중요한 특징입니다.
예, WAN 2.2 Animate는 완전한 상업적 사용, 수정 및 배포 권한을 허용하는 관대한 오픈 소스 라이선스인 Apache 2.0 라이선스 하에 출시되었습니다. 사용자는 라이선스 제한이나 로열티 비용 없이 맞춤 구현, 연구 애플리케이션 및 프로덕션 배포를 위한 전체 모델 가중치와 훈련 방법론에 자유롭게 접근할 수 있습니다.
WAN 2.2 Animate는 인상적인 기능을 제공하지만 몇 가지 제한 사항이 있습니다: 최대 출력 해상도는 현재 720p(4K 아님)이고, 비디오 길이는 120초로 제한되며, 최적의 결과를 위해서는 입력 이미지와 참조 비디오 구성을 신중하게 일치시켜야 합니다. 모델은 입력 간에 종횡비가 일관될 때 가장 잘 작동하며, 복잡한 조명 시나리오나 극단적인 동작 패턴은 때때로 일관성이 떨어지는 결과를 생성할 수 있습니다.
WAN 2.2 Animate 사용 방법
WAN 2.2 Animate로 캐릭터 애니메이션을 만드는 단계별 가이드
1
캐릭터 사진 및 참조 비디오 준비2
애니메이션 모드 선택 및 설정 구성3
애니메이션 비디오 생성 및 다운로드PNG/JPG 형식의 선명한 캐릭터 사진과 MP4/MOV/AVI 형식의 참조 비디오를 업로드합니다. 최적의 애니메이션 결과를 위해 입력 간 구성과 종횡비를 일치시킵니다.