Volver a la Wiki Inferencia

FP8 vs GGUF

FP8 y GGUF se reducen Wan, pero no son intercambiables. FP8 es un tipo de elemento tensor-núcleo GPU en un gráfico denso. GGUF es un formato de archivo cuantizado por bloque (Q4Q8) diseñado para cargadores que desquantizan las baldosas en vuelo.

e4m3Q4_KComfyUI
En esta página 4
FP8 en comparación GGUF contra otros Wan rutas de compresión
FP8 se mantiene en el camino matmul CUDA. GGUF es un formato de almacenamiento/tiempo de ejecución del mundo llama.cpp.

FP8 (e4m3 / e5m2)

  • Nativo en núcleos de tensor Ada/Hopper/Blackwell.
  • Por lo general, un FP8 DiT más un camino residual FP32/BF16; VAE a menudo se mantiene con mayor precisión.
  • Herramientas: DiffSynth-Studio, LightX2V, algunos ComfyUI fp8_e4m3fn safetensores.
  • Calidad: generalmente la más cercana a bf16 de las opciones baratas si la calibración es sensata.

GGUF (Q8_0, Q5_K, Q4_K, …)

  • Cuantización de bloques con matrices de importancia opcionales (quantios K).
  • Popular en ComfyUI-GGUF para WAN/Flux/Qwen para que una tarjeta 16 GB pueda cargar un 27B-total MoE.
  • La velocidad depende del núcleo de cuantificación. En un GPU fuerte, Q4 puede ser más lento que FP8 debido al uso de cuantificación + menos núcleo tensor.
  • Dos expertos todavía significan dos archivos GGUF para A14B en muchos gráficos.
¿Qué es esto?FP8GGUF P/P5
Tipico GPU4090 / 5090 / A100+1224 GB consumidor
GraficoDensa FP8 GEMMTela decantada → GEMM
Calidad más cercana a bf16Por lo general FP8Q8 cerrado; Q4 más suave
CargadorDiffSynth, nativo ComfyComfyUI-GGUF, llama.cpp estilo
MoEMantenga a ambos expertos; tal vez descargaA menudo archivos divididos + descarga secuencial

Preguntas frecuentes

¿Es usted GGUF ¿El modelo oficial cuantizado?
Es un re-paque de la comunidad. Hash y VAE deben coincidir con el padre (A14B vs 5B vs I2V).
NVFP4?
Formato de 4 bits GPU de estilo LightX2V más nuevo. Más cerca de FP8 en espíritu (GPU GEMM) que de archivos GGUF.

Fuentes primarias

Verificado con el README de Wan-Video/Wan2.2 · 28 de agosto de 2026

© 2026 wan2.video