تحويل المرجع إلى فيديو

Wan2.1-VACE

VACE (فيديو كل في واحد إنشاء وتحرير، ICCV 2025, arXiv:2503.07598) لف تحرير، صور مرجعية، وقناع في وحدة حالة الفيديو، ثم حقن لهم من خلال جهاز تعديل السياق على Wan DiT. الوزن: Wan2.1-VACE-1.3B (~81×480×832) و Wan2.1-VACE-14B (~81×720×1280) ، Apache 2.0.

• R2V لا يوجد فيديو مدخل؛ المفاهيم تأتي من النص + الصور المرجعية.
• V2V تحفظ النمط / الهيكل / الحركة على مستوى البيكسل على الفيديو.
• MV2V تحرير محلي مخفي (إدراج اللوحة، تبادل، توسيع).
• التركيبات: إشارة أي شيء، تحريك أي شيء، Animate أي شيء، تبادل أي شيء، توسيع أي شيء.

Wan2.2-Animate-14B

Animate هو متخصص في عصر 2.2. وضع الحركة: تصميم الشخصية ينسخ الحركة والتعبير من فيديو محرك. وضع الاستبدال: يتم إدخال الشخصية في فيديو المحرك (قناع + خلفية + إضاءة اخيارية LoRA). استخراجات التجهيز المسبق وضع / وجه (ولتغيير ، خلفية / قناع) قبل generate.py --task animate-14B.

python generate.py --task animate-14B --ckpt_dir ./Wan2.2-Animate-14B/ --src_root_path ./examples/wan_animate/animate/process_results/ --refert_num 1

S2V كمسار مرجعي

Wan2.2-S2V-14B يمكن أن تأخذ --pose_video لذلك الصوت وتسلسلة الموقف تشغيل نفس الصورة الهوية. وهذا هو الإشارة إلى الفيديو مع الكلام، وليس VACE.

أسئلة شائعة

VACE أو Animate؟

تحتاج إلى إصدار اللوحة / التسجيل / العمق / وضعية من clip → VACE الموجودة. تحتاج إلى شخصية ثابتة لتنفيذ فيديو محرك → Animate. تحتاج إلى التحدث من الصوت → S2V.

هل R2V في Wan2.2 T2V؟

لا يوجد فتحة إضافية في الصورة المرجعية على T2V-A14B. استخدم VACE R2V أو Animate.