阿里巴巴 Wan2.1-VACE 開源模型

革命性AI影片引擎:一個模型,包攬影片生成、編輯與再創作。

釋放創意:Wan2.1-VACE 核心功能

Wan2.1-VACE 不僅僅是影片生成,更是全能的影片創作夥伴。它以單一模型架構,賦予您前所未有的影片掌控力。

直接「生成」影片

從文字描述或單張圖片出發,憑空創造出全新的影片內容,將您的想像力轉化為動態視覺。

複雜編輯与再創作

對現有影片進行深度編輯,包括風格轉換、物件替換、背景拓展等,賦予舊素材全新生命力。

單一模型全覆蓋

無需切換不同工具,Wan2.1-VACE 以其統一的架構,高效完成從生成到編輯的所有影片處理任務。

精準掌控,隨心所欲

Wan2.1-VACE 賦予您對影片每一幀的精細控制能力,讓創意不再受限。

角色控制

動作、姿態、方向,一切盡在掌握。

視覺編排

構圖佈局、運動軌跡,自由設定。

風格定義

影片風格、整體風貌,隨心定制。

多樣化輸入,激發無限可能

支援多種輸入方式,靈活組合,滿足您多樣化的創作需求。

  • 文字 (Prompt)
  • 圖像 (圖片參考)
  • 影片 (原影片編輯)
  • 遮罩 Mask (指定修改區域)
  • 控制訊號 (深度圖、光流圖、灰階圖、佈局圖、線稿等)

組合創新:解鎖複雜應用場景

Wan2.1-VACE 的強大之處在於其功能的靈活組合,輕鬆應對複雜創作需求。

豎圖變橫屏長影片

組合「圖片參考 + 背景延展 + 時長延展」,輕鬆將一張豎屏圖片轉化為橫屏長影片,並智能填充和諧背景。

精準局部重繪

結合「參考圖像 + 局部重繪」,僅替換影片中特定物件,同時完美保留其他元素不變,實現無痕編輯。

常見問題 (FAQ)

在這裡找到關於 Wan2.1-VACE 模型的常見問題解答。

Wan2.1-VACE 是什麼?

Wan2.1-VACE 是阿里巴巴萬相實驗室 (Wan-AI) 研發的一款開源多模態影片生成與編輯基礎模型。它採用統一架構,支援文字到影片 (T2V)、圖像到影片 (I2V)、影片到影片 (V2V) 編輯、參考圖引導生成 (R2V) 和遮罩影片編輯 (MV2V) 等多種複雜任務。

「All in One, Wan for All」是什麼意思?

這是 Wan2.1-VACE 的核心設計理念。「All in One」指其單一模型架構能處理多種影片創作與編輯任務,無需切換不同工具。「Wan for All」則強調其普惠性,透過開源和支援消費級硬體,讓更廣泛的用戶能接觸和使用先進的 AI 影片技術。

Wan2.1-VACE 有哪些主要功能?

主要功能包括:

  • - 文字到影片 (T2V) 生成
  • - 圖像到影片 (I2V) 生成
  • - 首尾幀到影片 (FLF2V) 生成
  • - 參考圖引導的影片生成 (R2V)
  • - 影片到影片 (V2V) 編輯 (如風格轉換、內容調整)
  • - 基於遮罩的影片編輯 (MV2V) (如修復、物件替換、場景擴展)
  • - 中英雙語視覺文字生成 (在影片畫面中渲染文字)
  • - 任務可組合性,實現複雜編輯流程
Wan2.1-VACE 有哪些不同版本?主要區別是什麼?

主要有兩個版本:Wan2.1-VACE-1.3B 和 Wan2.1-VACE-14B。

Wan2.1-VACE-1.3B: 輕量化版本,約13億參數。主要支援480p解析度影片,對消費級GPU友好(如T2V推理約需8.19GB VRAM)。適合個人創作者和快速原型驗證。

Wan2.1-VACE-14B: 更大參數規模版本,約140億參數。支援480p和更高品質的720p解析度影片。性能更強,但對硬體要求也更高(如I2V推理約需35GB VRAM)。適合專業影片製作和高品質內容生成。

Wan2.1-VACE 是開源的嗎?在哪裡可以找到它?

是的,Wan2.1-VACE 遵循 Apache 2.0 開源許可協議。

您可以從以下主要管道獲取模型和程式碼:

在本地部署 Wan2.1-VACE 有什麼系統要求?

基本要求包括:

  • - 作業系統: Windows, macOS, 或 Linux。
  • - 記憶體 (RAM): 建議至少 16GB,複雜任務或大模型可能需要更多。
  • - GPU: 這是關鍵。顯存 (VRAM) 需求依模型版本而定,1.3B 版本 T2V 約需 8.19GB+,14B 版本需求更高。推薦使用 NVIDIA GPU。
  • - 軟體: Python (如 3.10+), CUDA, PyTorch。具體版本請參考官方文件或社群指南。

詳細設定步驟通常涉及複製程式碼庫、安裝依賴項和下載模型權重。

Wan2.1-VACE 可以應用於哪些場景?

應用前景廣泛,包括:

  • - 內容創作與行銷: 社群媒體短片、廣告、產品展示、教學材料。
  • - 藝術視覺化與娛樂: 動態視覺藝術、實驗短片、動畫概念。
  • - 遊戲開發: 過場動畫、角色動作預覽、動態背景。
  • - 影視前期製作: 影片概念原型、故事板動態化。
  • - 個人化內容訂製: 訂製祝福影片、教學片段等。