Referenz zu Video

Wan2.1-VACE

VACE (Video All-in-One Creation and Editing, ICCV 2025, arXiv:2503.07598) wickelt die Bearbeitung, Referenzbilder und Masken in eine Video-Konditionseinheit ein und injiziert sie dann durch einen Kontextadapter auf der Wan DiT. Gewichte: Wan2.1-VACE-1.3B (~81×480×832) und Wan2.1-VACE-14B (~81×720×1280), Apache 2.0.

• R2V kein Eingabevideo; Konzepte stammen aus Text + Referenzbildern.
• V2V Restille- / Struktur- / Bewegungsspeicherung auf Pixel-Ebene auf einem Video.
• MV2V Maskierte lokale Bearbeitung (Inpaint, Swap, Expand).
• Kompositionen: Referenz alles, Bewegung alles, Animate alles, Austausch alles, Ausweitung alles.

Wan2.2-Animate-14B

Animate ist ein Spezialist für die 2.2-Ära. Animationsmodus: Das Charakterbild kopiert Bewegung und Ausdruck aus einem Laufwerk-Video. Ersatzmodus: Das Charakter wird in das Laufwerk-Video eingefügt (Mask + Hintergrund + optionales Aufleuchten LoRA). Vorprozess-Extrakte stellen/Fass (und für Ersatz, Hintergrund/Mask) vor generate.py --task animate-14B.

python generate.py --task animate-14B --ckpt_dir ./Wan2.2-Animate-14B/ --src_root_path ./examples/wan_animate/animate/process_results/ --refert_num 1

S2V als Referenzweg

Wan2.2-S2V-14B kann --pose_video nehmen, so dass Audio und eine Posenfolge das gleiche Identitätsbild anführen. Das ist Referenz-zu-Video mit Sprache, nicht VACE.

Häufige Fragen

VACE oder Animate?

Sie benötigen ein Inpaint/Outpaint/Deepth/Pose-Editieren einer vorhandenen clip → VACE. Sie benötigen ein Stillzeichen, um ein Laufwerk Video auszuführen → Animate. Sie benötigen ein Gespräch aus Audio → S2V.

Ist R2V in Wan2.2 T2V?

Keine zusätzliche Referenzbilderstelle auf T2V-A14B. Verwenden Sie VACE R2V oder Animate.