Wan2.1-VACE
VACE(Video All-in-one Creation and Editing,ICCV 2025,arXiv:2503.07598)把編輯、參考圖、mask 收成 Video Condition Unit,再經 Context Adapter 注入 Wan DiT。權重:Wan2.1-VACE-1.3B(約 81×480×832)與 Wan2.1-VACE-14B(約 81×720×1280),Apache 2.0。
- R2V — 沒有輸入影片;概念來自文字 + 參考圖。
- V2V — 對整段影片做畫素級重繪 / 結構 / 運動保持。
- MV2V — 帶 mask 的區域性編輯(inpaint、替換、擴充套件)。
- 組合:Reference / Move / Animate / Swap / Expand Anything。
Wan2.2-Animate-14B
Animate 是 2.2 時期的專項模型。動畫模式:角色圖複製驅動影片的動作與表情。替換模式:把角色嵌進驅動影片(mask + 背景 + 可選 relight LoRA)。預處理抽出 pose/face(替換還要背景/mask),再 generate.py --task animate-14B。
python generate.py --task animate-14B --ckpt_dir ./Wan2.2-Animate-14B/ --src_root_path ./examples/wan_animate/animate/process_results/ --refert_num 1S2V 也是一條參考路徑
Wan2.2-S2V-14B 可以加 --pose_video,讓音訊和姿態序列共同驅動同一張身份圖。這是帶語音的參考生影片,不是 VACE。
常見問題
- VACE 還是 Animate?
- 要改已有影片(inpaint/outpaint/深度/姿態)→ VACE。要靜幀角色表演一段驅動影片 → Animate。要按音訊說話 → S2V。
- Wan2.2 T2V 有參考圖槽位嗎?
- T2V-A14B 沒有額外參考圖介面。用 VACE R2V 或 Animate。
一手來源
已對照 Wan-Video/Wan2.2 README 核對 · 2026-08-28