參考生影片

參考生影片的意思是「保住這個身份 / 物體 / 動作」。開源 Wan 棧裡,統一的 R2V / V2V / MV2V 是 VACE(Wan2.1);角色動畫或替換是 Wan2.2-Animate-14B。

VACEAnimate-14BR2V
本頁目錄 5
參考圖與驅動影片進入 Wan2.2-Animate 或 VACE
Animate-14B 吃角色靜幀加姿態/面部影片。VACE 是 Wan2.1 的編輯/參考分支。
官方 VACE 單任務與組合任務圖
官方 VACE 任務圖:T2V、R2V、V2V、MV2V,以及 Swap / Move / Expand / Animate Anything 等組合。

Wan2.1-VACE

VACE(Video All-in-one Creation and Editing,ICCV 2025,arXiv:2503.07598)把編輯、參考圖、mask 收成 Video Condition Unit,再經 Context Adapter 注入 Wan DiT。權重:Wan2.1-VACE-1.3B(約 81×480×832)與 Wan2.1-VACE-14B(約 81×720×1280),Apache 2.0。

  • R2V — 沒有輸入影片;概念來自文字 + 參考圖。
  • V2V — 對整段影片做畫素級重繪 / 結構 / 運動保持。
  • MV2V — 帶 mask 的區域性編輯(inpaint、替換、擴充套件)。
  • 組合:Reference / Move / Animate / Swap / Expand Anything。
官方 VACE 能力預告圖
官方 VACE teaser(Wan2.1 與 LTX 骨幹)。

Wan2.2-Animate-14B

Animate 是 2.2 時期的專項模型。動畫模式:角色圖複製驅動影片的動作與表情。替換模式:把角色嵌進驅動影片(mask + 背景 + 可選 relight LoRA)。預處理抽出 pose/face(替換還要背景/mask),再 generate.py --task animate-14B。

動畫模式(預處理之後)
python generate.py --task animate-14B --ckpt_dir ./Wan2.2-Animate-14B/ --src_root_path ./examples/wan_animate/animate/process_results/ --refert_num 1

S2V 也是一條參考路徑

Wan2.2-S2V-14B 可以加 --pose_video,讓音訊和姿態序列共同驅動同一張身份圖。這是帶語音的參考生影片,不是 VACE。

常見問題

VACE 還是 Animate?
要改已有影片(inpaint/outpaint/深度/姿態)→ VACE。要靜幀角色表演一段驅動影片 → Animate。要按音訊說話 → S2V。
Wan2.2 T2V 有參考圖槽位嗎?
T2V-A14B 沒有額外參考圖介面。用 VACE R2V 或 Animate。

一手來源

已對照 Wan-Video/Wan2.2 README 核對 · 2026-08-28

© 2026 wan2.video