Wan-Animate: 統一キャラクターアニメーション＆シームレス置換
パフォーマー映像による高精度アニメーション生成
Wan-Animateは、パフォーマーの映像に基づいて任意のキャラクターを駆動し、表情と身体の動きを正確に再現できます。環境照明と色調をマッチングしながらキャラクター置換をサポートし、映像内でのキャラクターのシームレスな融合を実現します。
概要
Wan-Animateは、キャラクターアニメーション生成と置換のための統一フレームワークです。ユーザーはキャラクター画像と参照映像を提供するだけで、映像内の人物の表情と動きを正確に再現する高精度アニメーションを生成できます。環境照明と色調マッチングにより、生成されたキャラクターは元の映像にシームレスに統合され、自然な置換を実現します。
このフレームワークはWanモデルに基づき、改良された入力パラダイムを採用して複数のタスクを統一します：
- 骨格信号空間アライメント： 身体動作を正確に駆動
- 暗黙的顔特徴抽出： 高制御可能な表情再現
- Relighting LoRAモジュール： 環境照明適応性を強化し、キャラクター外観の一貫性を維持
実験結果は、Wan-Animateがアニメーション品質と環境統合において業界最高水準を達成していることを示しています。モデル重みとソースコードはオープンソース化されています。
手法
Wan-AnimateアーキテクチャはWan-I2Vに基づいています。入力設計は参照画像、時間フレーム情報、環境特徴を汎用的なシンボル表現に統一し、マルチタスク互換性を実現します。
- 身体動作制御： 空間的にアライメントされた骨格信号による精密制御を実現
- 表情再現： ソース画像の暗黙的顔特徴を利用して駆動
- キャラクター置換＆環境適応： 補助Relighting LoRAモジュールが照明と色調の融合を向上
この手法は高精度アニメーション生成とシームレスキャラクター置換の統一ソリューションを実現しています。