Open source models are crazy. Alibaba just dropped Wan 2.2 Animate, a new model that can animate any character based on a simple souce image. It handles facial expressions and body movements like no other model. 10 insane examples: (sound on)
WAN 2.2 Animate - AIキャラクターアニメーション＆動画キャラクター置換
WAN 2.2 AnimateはAlibabaの革命的な140億パラメータのAIモデルで、キャラクターアニメーションと動画キャラクター置換に特化しています。高度なMixture-of-Experts (MoE)アーキテクチャに基づいて構築されたこのApache 2.0ライセンスモデルは、2つの中核能力に優れています:参照動作で静止キャラクター写真をアニメーション化すること、および既存のビデオ内のキャラクターをシームレスに置き換えること。卓越した時間的安定性、自然な表情保持、一貫した照明適応により、WAN 2.2 Animateは映画品質のキャラクターアニメーションと置換結果を提供します。
キャラクター写真*
ファイルをアップロードまたは選択
モーションクリップソース*
ファイルをアップロードまたは選択
生成された結果がここに表示されます
タスクを送信した後、AI が生成したコンテンツがここに表示されます
公開
0 / 8192
Wan 2.2 Animate YouTube動画
Wan 2.2 Animateの強力なAIキャラクターアニメーションとビデオ間変換機能を紹介するデモンストレーションとチュートリアルをご覧ください
WAN 2.2 Animate X での人気レビュー
X (Twitter) で WAN 2.2 Animate について何を言っているか見てみましょう
Wan 2.2 Animate is CRAZY and it actually excels at 3 things from my tests: 1. Lip syncing (so far the best open source I have seen, beating Runway Act2) 2. Consistent lighting & shadows with color tone replication when you swap a character 3. It keeps the replacement character Show more
Wan 2.2 Animate Lip syncing Test. Definitely way better than Runway Act2 in my opinion. Takes about 8 minutes for a HD video to be processed at 720p vertical (reels style)
You've probably seen viral character swaps from Wan 2.2 Animate. But now you can swap the character AND background using a reference video + new image. I turned myself into a YouTuber in Paris. How it works 👇
New tool to swap characters in a video: Wan 2.2 Animate Spent a few hours testing it out this weekend and have some thoughts on strengths + weaknesses. It's particularly strong at videos like this where you need to replicate lip sync and body movement. Other tips ⬇️
Wan 2.2 Animate is actually Crazy!! You can replace characters from a simple source image. No need to first frame anymore. It handles facial expressions and body movements like no other model I have ever seen. It is open source and free to use, that's the crazy part!
Just tried Wan2.2-Animate... and HOLY SMOKES, it's PERFECT! 🤯 @Alibaba_Wan
What used to take hours in After Effects now takes just ONE prompt. Nano Banana, Seedream 4, Wan 2.2, Runway Aleph et al are pioneering instruction-based editing -- collapsing complex VFX pipelines into a single, implicit step. Here's everything you need to know in 10 mins: Show more
WAN 2.2 Animateとは
Alibabaによる140億パラメータの高度なキャラクターアニメーションAIモデル
140億アクティブ270億 MoE 内のパラメータ
2モードAnimate & Replace
120秒最大継続時間
Apache 2.0商用ライセンス
WAN 2.2 Animateは270億 MoE アーキテクチャ内に140億のアクティブパラメータを備え、デュアルモード機能で静的なキャラクター写真に命を吹き込みます。
140億アクティブ270億 MoE 内のパラメータ
2モードAnimate & Replace
120秒最大継続時間
Apache 2.0商用ライセンス
WAN 2.2 Animateとは
Alibabaによる140億パラメータの高度なキャラクターアニメーションAIモデル
WAN 2.2 Animateは270億 MoE アーキテクチャ内に140億のアクティブパラメータを備え、デュアルモード機能で静的なキャラクター写真に命を吹き込みます。
WAN 2.2 Animateの強力な機能
キャラクターアニメーションにおいてWAN 2.2 Animateを卓越したものにする高度な機能を発見してください
140億パラメータMoEアーキテクチャ
総パラメータ270億で1ステップあたりわずか140億のアクティブパラメータを持つ高度なMixture-of-Expertsデザインに基づいて構築され、効率的な推論性能とGPUメモリ最適化を維持しながら卓越したアニメーション品質を提供します。
デュアルアニメーションモード
参照動作で静止写真に命を吹き込むアニメーションモードと、元のシーン照明と動きの動態を保持しながらビデオ内のキャラクターをシームレスに交換する置換モードの両方をサポートします。
全体的な動き複製
参照ビデオから完全な身体の動きと顔の表情を正確に捕捉して転送し、微妙なジェスチャーのニュアンスと感情表現に対する卓越した注意を払った自然で現実的なキャラクターアニメーションを保証します。
高い時間的安定性
高度なフレーム一貫性アルゴリズムにより、拡張されたシーケンス全体で滑らかでちらつきのないアニメーションを保証し、挑戦的な動きパターンを持つ複雑な動的シーンでも一貫したキャラクター外観と動きのフローを維持します。
自然な表情保持
インテリジェントな顔の特徴追跡により、本物の感情表現とマイクロムーブメントを維持し、目の動きや唇の同期を含む人間の表情の微妙な詳細を保持する生命感のあるキャラクターアニメーションを提供します。
適応照明統合
キャラクターを置き換える際にシーン照明条件を自動的に分析して複製し、元のビデオ環境に完璧に一致する一貫した色調、影、ハイライトでシームレスな視覚統合を保証します。
Apache 2.0オープンソース
完全な商用利用、変更、配布権を可能にする寛容なApache 2.0ライセンスの下でリリースされています。カスタム実装と研究アプリケーションのための完全なモデルウェイトとトレーニング方法論へのアクセス。
柔軟な解析度サポート
480pと720pのオプションを含む複数の解析度でアニメーションを生成し、最大120秒の長さのビデオをサポートし、さまざまなユースケースとプラットフォーム要件に適応可能な出力品質を提供します。
WAN 2.2 Animateは、総計270億パラメータを持つ高度なMixture-of-Experts (MoE)アーキテクチャを採用していますが、推論ステップあたりわずか140億のパラメータのみがアクティブです。このデザインは2つのエキスパートシステムを使用しています:高ノイズエキスパートは全体的なレイアウトに焦点を当てた初期のデノイジングステージを処理し、低ノイズエキスパートは後期ステージでビデオの詳細を洗練させます。このアプローチは、効率的なGPUメモリ使用と標準的な14Bモデルと同等の推論性能を維持しながら、卓越したアニメーション品質を提供します。
Animateモードは、参照ビデオからの動きと表情を被写体に適用することで静的なキャラクター写真に命を吹き込み、新しいアニメーション映像を作成します。Replaceモードは既存のビデオを取得し、元のキャラクターを新しいキャラクターと交換しながら、シーンの照明条件、色調、影、および元の動きのダイナミクスを正確に保持します。両方のモードは最大720pの解析度と最大120秒の長さのビデオをサポートします。
モデルはPNGまたはJPG形式のキャラクター写真を受け入れます(最適な結果を得るためWEBPは避けるべきです)。参照ビデオはMP4、MOV、またはAVI形式で、ファイルサイズは最大500MBまでです。最良の結果を得るには、入力画像と参照ビデオが一致する構図、一貫したアスペクト比、および類似したカメラアングルを持っていることを確認してください。モデルは480pと720pの出力解析度をサポートします。
モデルは、拡張されたシーケンス全体で滑らかでちらつきのないアニメーションを維持する高度なフレーム一貫性アルゴリズムを実装しています。挑戦的な動きパターンを持つ複雑な動的シーンでも、生成されたビデオ全体で一貫したキャラクター外観と動きのフローを保持することで、高い時間的安定性を達成します。これは、ビデオの全期間にわたって一貫した品質を必要とするプロフェッショナルアプリケーションにとって特に重要です。
はい、WAN 2.2 AnimateはApache 2.0ライセンスの下でリリースされており、これは完全な商用利用、変更、配布権を可能にする寛容なオープンソースライセンスです。ユーザーは、カスタム実装、研究アプリケーション、製品展開のための完全なモデルウェイトとトレーニング方法論にアクセスでき、ライセンス制限やロイヤリティ料金はありません。
WAN 2.2 Animateは印象的な機能を提供しますが、いくつかの制限があります:最大出力解析度は現在720p(4Kではない)で、ビデオの長さは120秒に制限されており、最適な結果を得るには入力画像と参照ビデオの構図を慎重に一致させる必要があります。モデルは、入力間でアスペクト比が一致している場合に最も良く機能し、複雑な照明シナリオや極端な動きパターンは、時々一貫性の低い結果を生成する可能性があります。
WAN 2.2 Animateの使い方
WAN 2.2 Animateでキャラクターアニメーションを作成するステップバイステップガイド
step1