MiniMax H3 en ComfyUI con 8 GB de VRAM: llega FreeVideo

Aggiornato in data

MiniMax H3 en ComfyUI con 8 GB de VRAM: llega FreeVideo

In qualità di Affiliato Amazon io ricevo un guadagno dagli acquisti idonei.

Domingo tranquilo en cuanto a grandes anuncios, pero no para ComfyUI. La noticia más interesante es FreeVideo, un proyecto open source que promete ejecutar MiniMax H3 con 8 GB de VRAM y 16 GB de RAM, directamente dentro de ComfyUI. Luego está OmniChar, que encierra un personaje en un archivo y lo lleva de un modelo a otro. Y a los nodos de ComfyUI llegan Eleven v4 y una pequeña renuncia para GPT Image 2.

En resumen

  • FreeVideo: un motor local para MiniMax H3 que funciona como plugin de ComfyUI y baja hasta 8 GB de VRAM; está en vista previa y cambia cada día.
  • OmniChar: nodos oficiales de ComfyUI para cargar un personaje desde un archivo .char y reutilizarlo con MiniMax H3, FLUX.2 y Krea 2.
  • ComfyUI: el nodo partner con Eleven v4 y v4 Turbo se ha fusionado en la rama de desarrollo; el nodo GPT Image 2 pierde el fondo transparente.

FreeVideo: MiniMax H3 incluso con 8 GB de VRAM

Desde que MiniMax H3 salió con pesos abiertos, el problema es siempre el mismo: es un modelo enorme, y en una tarjeta de 12 GB como nuestra RTX 3060 cada generación es una negociación con la memoria. FreeVideo nace justo para esto. El 2 de octubre se presentó en la página de VDN-H3, la versión de H3 de 8 pasos del grupo OpenVDN en la que se basa, y el 3 de octubre recibió una quincena de actualizaciones en un solo día.

Según los autores, FreeVideo ejecuta H3 con solo 8 GB de VRAM y 16 GB de RAM. No hace magia: mueve los pesos del modelo entre la tarjeta gráfica, la RAM y el disco mientras trabaja, los carga por adelantado y divide el cálculo en bloques. Elige solo la precisión (FP8 donde la tarjeta lo soporta) y el tipo de atención más adecuado. Lo que nos importa:

  • funciona dentro de ComfyUI, con un espacio de trabajo dedicado, generación en serie e historial; si quieres, pasas a la vista de nodos para añadir LoRA;
  • en Windows hay un instalador que prepara ComfyUI y descarga los modelos, o bien se instala como nodo en un ComfyUI que ya tengas;
  • acepta texto, primer y último fotograma y referencias de imágenes, vídeo y audio;
  • hay paquetes de modelos para las tarjetas de las series 30/40 y para la serie 50: así que una RTX 3060 también entra en la cuenta.

Qué opinamos. Sobre el papel es exactamente lo que pide mucha gente: H3 en local sin comprar una tarjeta nueva. Pero, siendo honestos, tenemos que decir dos cosas. La primera: los autores no publican tiempos de generación en tarjetas normales, y ejecutar un modelo tan grande moviendo los pesos de un lado a otro tiene un precio en velocidad. La segunda: el código es libre (Apache 2.0), pero los pesos siguen bajo la MiniMax H3 Community License, que excluye del territorio autorizado a la Unión Europea, además de Reino Unido, Corea del Sur y EE. UU. Para el uso en Italia, por tanto, hace falta una autorización aparte de MiniMax: es un límite de licencia, no técnico. El programa para Windows todavía es una "preview": si quieres probarlo, hazlo en una instalación de ComfyUI separada de la de trabajo.

Si te interesa entender cuánto se puede exprimir H3 con poca memoria, dos vídeos útiles: "I Tested Multiple MiniMax H3 Speed Hacks, This Is the Best One" de Smart Vision y "MiniMax H3 40-Second Video on 6GB VRAM: Can It Really Work?" de CG Pixel. No hablan de FreeVideo, pero muestran bien los compromisos en juego.

OmniChar: el personaje en un archivo, de un modelo a otro

Quien hace storyboards, animatics o relatos cortos con IA lo sabe: la cara del protagonista cambia en cada plano, y si pasas de un modelo de imagen a uno de vídeo empiezas de cero. OmniChar intenta resolver el problema con un formato abierto, el archivo .char: dentro están las imágenes de referencia, una descripción fija del personaje y a menudo una LoRA ya entrenada.

El 2 de octubre salió el paquete de nodos oficial para ComfyUI (también lo menciona ComfyUI Wiki). Cargas el archivo .char, aplicas referencias y LoRA, y usas el mismo personaje con MiniMax H3, FLUX.2 dev, FLUX.2 Klein 9B y 4B y Krea 2. Los personajes se crean con Omnichar Studio, una app gratuita y open source (GPL-3.0) que entrena las LoRA en tu tarjeta; también existe una versión online con 300 créditos gratuitos.

¿Funciona con 12 GB? Según la tabla de los autores, el entrenamiento a 512 px pide unos 8,6 GB para FLUX.2 Klein, 10,4 GB para FLUX.1 dev a 4 bits y 11,9 GB para Krea 2 a 4 bits: todos dentro del límite de una RTX 3060. Para Z-Image Turbo hacen falta unos 13,4 GB, y para MiniMax H3 el entrenamiento es posible pero lento y pide 64 GB de RAM del sistema. LTX-2.5 queda fuera: pide 48 GB.

Qué opinamos. La idea de un formato único para los personajes nos gusta mucho, porque hoy cada uno se organiza con carpetas de referencias y LoRA sueltas. Pero el proyecto es jovencísimo (el paquete de nodos tiene pocos días) y la licencia GPL hay que tenerla en cuenta si piensas integrarlo en tus propias herramientas. Para los trabajos comerciales cuenta también la licencia del modelo que uses por debajo: FLUX.2 dev y Krea 2 tienen reglas propias, que hay que revisar caso por caso.

ComfyUI: llega el nodo Eleven v4, GPT Image 2 pierde la transparencia

El nodo con las nuevas voces de ElevenLabs, presentadas el 28 de septiembre, se fusionó en la rama de desarrollo el 3 de octubre. Añade Eleven v4 y v4 Turbo a los nodos de síntesis de voz y de diálogo, y Eleven v4 pasa a ser el modelo predeterminado para los diálogos a varias voces. Las plantillas listas ya habían llegado el 2 de octubre. Es un nodo partner: se paga con créditos Comfy, no funciona en local.

Ese mismo día se eliminó la opción "transparent" del nodo de GPT Image 2: solo quedan "auto" y "opaque", porque la API de OpenAI ya no soporta el fondo transparente para este modelo. Si tenías un workflow que generaba elementos ya recortados, después de actualizar tendrás que añadir un paso de eliminación del fondo.

Qué opinamos. Los dos cambios están en la rama de desarrollo: llegarán a la versión estable con la próxima release; a 4 de octubre la última es la 0.38.2. Para los recortes, nuestro consejo sigue siendo el de siempre: mejor hacerlos en local, con nodos gratuitos, que depender de una opción de un servicio externo que puede desaparecer de un día para otro, como acaba de pasar.

Para probar ya

Si quieres probar FreeVideo sin riesgos, no lo instales en el ComfyUI que usas para trabajar. El programa para Windows puede crear una nueva instalación de ComfyUI y reutilizar las carpetas de modelos que ya tienes, así no descargas dos veces los mismos archivos. Vigila la RAM: 16 GB es el mínimo indicado, con 32 GB se respira mejor. Y antes de usar los resultados en un trabajo, lee la licencia de MiniMax H3: para quien trabaja desde Italia, hace falta una autorización aparte.

Para orientarte entre los modelos de vídeo lo tienes todo en la guía de modelos de IA para vídeo en ComfyUI, mientras que para los personajes en imágenes parte de la guía de modelos de IA para imágenes en ComfyUI. Si estás pensando en cambiar de tarjeta gráfica o en quedarte en local, lee cuánto cuesta crear imágenes y vídeos con IA; si empiezas de cero, arranca con la guía de introducción a ComfyUI.

Esto es todo por esta vez. Descarga nuestros workflows gratuitos en la sección ComfyUI y síguenos en el canal de YouTube @tutorial3d: nos vemos en la próxima actualización con las novedades de la IA.

Tutorial3d
Grafico - Videodesigner - VisualFX

Ti consigliamo anche:



#Devo averlo!

VIDEO

INSPIRATION IN YOUR INBOX

Una mail. Un tutorial. Niente rumore.

Ti scrivo un solo tutorial scelto, con file progetto e note tecniche. Senza promozioni, senza affiliate. Cancellabile in un click.

[newsletter_form]