Fala para vídeo

Wan2.2-S2V-14B (26 de agosto de 2025) é o modelo de fala-vídeo cinemático aberto: uma imagem de identidade + áudio (+ prompt e postura opcionais) → lábio, rosto, corpo e câmera. Consome áudio; não inventa uma trilha sonora a partir de texto.

S2V-14BCosyVoicelip-sync
Nesta página 4
Introduções de discurso a vídeo: imagem, áudio, prompt e pose opcionais
S2V-14B entradas. A duração segue o áudio, a menos que --num_clip preveja um corte mais curto.
Oficial Wan-S2V visão geral do gasoduto
O método oficial Wan-S2V visão geral: imagem, áudio e texto no gerador cinematográfico.
Oficial Wan-S2V tubo de injecção de áudio
O canal oficial de áudio-injecção para Wan-S2V.

Oficial generate.py

Imagem + wav
python generate.py --task s2v-14B --size 1024*704 --ckpt_dir ./Wan2.2-S2V-14B/ --offload_model True --convert_model_dtype --prompt "Summer beach vacation style, a white cat wearing sunglasses sits on a surfboard." --image examples/i2v_input.JPG --audio examples/talk.wav
CosyVoice TTS
python generate.py --task s2v-14B --size 1024*704 --ckpt_dir ./Wan2.2-S2V-14B/ --offload_model True --convert_model_dtype --image examples/i2v_input.JPG --enable_tts --tts_prompt_audio examples/zero_shot_prompt.wav --tts_prompt_text "…" --tts_text "…"

- Só...GPU O plano oficial é 80 GB- Extras extras: --pose_video para canto/acção em postura; --num_clip Para uma breve prévia. requirements_s2v.txt se utilizar CosyVoiceO tamanho é um orçamento de área; o aspecto segue a imagem.

Comparativos publicados (página de projecto)

A página Wan-S2V relata FID 15.66, SSIM 0.734, PSNR 20.49, CSIM 0.677 melhor entre as linhas de base listadas de cabeças de conversa nessas métricas com Sync-C / EFID competitivo.

Oficial Wan-S2V chave de coleta de dados
Diagrama oficial de coleta de dados (OpenHumanVid, Koala36M, além de clips cinematográficos manuais).

Perguntas frequentes

É S2V áudio-vídeo nativo?
Não. Você fornece (ou CosyVoice-síntese) o áudio. O modelo anima a imagem para essa faixa. AV conjunta nativa é Wan 2.5+ APIs.
Diffusers?
S2V é listado como integrado no todo Wan2.2 (inferência, ComfyUI, Diffusers). Preferir as bandeiras oficiais README se um envolvente se atrasar.

Fontes primárias

Verificado com o README do Wan-Video/Wan2.2 · 28 de agosto de 2026

© 2026 wan2.video