Domenica tranquilla per i grandi annunci, ma non per ComfyUI. La notizia più interessante è FreeVideo, un progetto open source che promette di far girare MiniMax H3 con 8 GB di VRAM e 16 GB di RAM, direttamente dentro ComfyUI. Poi c'è OmniChar, che chiude un personaggio in un file e lo porta da un modello all'altro. E nei nodi di ComfyUI arrivano Eleven v4 e una piccola rinuncia per GPT Image 2.
In breve
- FreeVideo: un motore locale per MiniMax H3 che gira come plugin di ComfyUI e scende fino a 8 GB di VRAM; è in anteprima e cambia ogni giorno.
- OmniChar: nodi ComfyUI ufficiali per caricare un personaggio da un file .char e riusarlo con MiniMax H3, FLUX.2 e Krea 2.
- ComfyUI: il nodo partner con Eleven v4 e v4 Turbo è stato unito al ramo di sviluppo; il nodo GPT Image 2 perde lo sfondo trasparente.
FreeVideo: MiniMax H3 anche con 8 GB di VRAM
Da quando MiniMax H3 è uscito con i pesi aperti, il problema è sempre lo stesso: è un modello enorme, e su una scheda da 12 GB come la nostra RTX 3060 ogni generazione è una trattativa con la memoria. FreeVideo nasce proprio per questo. Il 2 ottobre è stato presentato sulla pagina di VDN-H3, la versione di H3 a 8 passi del gruppo OpenVDN su cui si basa, e il 3 ottobre ha ricevuto una quindicina di aggiornamenti in un giorno.
Secondo gli autori, FreeVideo fa girare H3 con appena 8 GB di VRAM e 16 GB di RAM. Non fa magie: sposta i pesi del modello tra scheda video, RAM e disco mentre lavora, li carica in anticipo e divide il calcolo in blocchi. Sceglie da solo la precisione (FP8 dove la scheda lo supporta) e il tipo di attenzione più adatto. Le cose che contano per noi:
- gira dentro ComfyUI, con uno spazio di lavoro dedicato, generazione in serie e cronologia; se vuoi, passi alla vista a nodi per aggiungere LoRA;
- su Windows c'è un programma di installazione che prepara ComfyUI e scarica i modelli, oppure si installa come nodo in un ComfyUI che hai già;
- accetta testo, primo e ultimo fotogramma e riferimenti di immagini, video e audio;
- ci sono pacchetti di modelli per le schede serie 30/40 e per la serie 50: quindi anche una RTX 3060 è nel conto.
Cosa ne pensiamo. Sulla carta è esattamente quello che chiedono in tanti: H3 in locale senza comprare una scheda nuova. Però onestà vuole che diciamo due cose. La prima: gli autori non pubblicano tempi di generazione su schede normali, e far girare un modello così grande spostando i pesi avanti e indietro ha un prezzo in velocità. La seconda: il codice è libero (Apache 2.0), ma i pesi restano sotto la MiniMax H3 Community License, che esclude dal territorio concesso l'Unione Europea, oltre a Regno Unito, Corea del Sud e USA. Per l'uso in Italia, quindi, serve un'autorizzazione separata da MiniMax: è un limite di licenza, non tecnico. Il programma per Windows è ancora una "preview": se vuoi provarlo, fallo su un'installazione di ComfyUI separata da quella di lavoro.
Se ti interessa capire quanto si può spremere H3 con poca memoria, due video utili: "I Tested Multiple MiniMax H3 Speed Hacks, This Is the Best One" di Smart Vision e "MiniMax H3 40-Second Video on 6GB VRAM: Can It Really Work?" di CG Pixel. Non parlano di FreeVideo, ma mostrano bene i compromessi in gioco.
OmniChar: il personaggio in un file, da un modello all'altro
Chi fa storyboard, animatic o brevi racconti con l'AI lo sa: il volto del protagonista cambia a ogni inquadratura, e se passi da un modello per immagini a uno per video ricominci da capo. OmniChar prova a risolvere il problema con un formato aperto, il file .char: dentro ci sono le immagini di riferimento, una descrizione fissa del personaggio e spesso una LoRA già addestrata.
Il 2 ottobre è uscito il pacchetto di nodi ufficiale per ComfyUI (lo segnala anche ComfyUI Wiki). Carichi il file .char, applichi riferimenti e LoRA, e usi lo stesso personaggio con MiniMax H3, FLUX.2 dev, FLUX.2 Klein 9B e 4B e Krea 2. I personaggi si creano con Omnichar Studio, un'app gratuita e open source (GPL-3.0) che addestra le LoRA sulla tua scheda; esiste anche una versione online con 300 crediti gratuiti.
Gira su 12 GB? Secondo la tabella degli autori, l'addestramento a 512 px chiede circa 8,6 GB per FLUX.2 Klein, 10,4 GB per FLUX.1 dev a 4 bit e 11,9 GB per Krea 2 a 4 bit: tutti nel limite di una RTX 3060. Per Z-Image Turbo servono circa 13,4 GB, e per MiniMax H3 l'addestramento è possibile ma lento e vuole 64 GB di RAM di sistema. LTX-2.5 è escluso: chiede 48 GB.
Cosa ne pensiamo. L'idea di un formato unico per i personaggi ci piace molto, perché oggi ognuno si organizza con cartelle di riferimenti e LoRA sparse. Il progetto però è giovanissimo (il pacchetto di nodi ha pochi giorni) e la licenza GPL va tenuta presente se pensi di integrarlo in strumenti tuoi. Per i lavori commerciali conta anche la licenza del modello che usi sotto: FLUX.2 dev e Krea 2 hanno regole proprie, da controllare caso per caso.
ComfyUI: arriva il nodo Eleven v4, GPT Image 2 perde la trasparenza
Il nodo con le nuove voci di ElevenLabs, presentate il 28 settembre, il 3 ottobre è stato unito al ramo di sviluppo. Aggiunge Eleven v4 e v4 Turbo ai nodi di sintesi vocale e di dialogo, e Eleven v4 diventa il modello predefinito per i dialoghi a più voci. I template pronti erano già arrivati il 2 ottobre. È un nodo partner: si paga con i crediti Comfy, non gira in locale.
Nello stesso giorno è stata tolta l'opzione "transparent" dal nodo di GPT Image 2: restano solo "auto" e "opaque", perché l'API di OpenAI non supporta più lo sfondo trasparente per questo modello. Se avevi un workflow che generava elementi già scontornati, dopo l'aggiornamento dovrai aggiungere un passaggio di rimozione dello sfondo.
Cosa ne pensiamo. Entrambe le modifiche sono nel ramo di sviluppo: nella versione stabile arriveranno con la prossima release, al 4 ottobre l'ultima è la 0.38.2. Per gli scontorni, il nostro consiglio resta lo stesso di sempre: meglio farli in locale, con nodi gratuiti, che dipendere da un'opzione di un servizio esterno che può sparire da un giorno all'altro, come è appena successo.
Da provare subito
Se vuoi provare FreeVideo senza rischi, non installarlo nel ComfyUI che usi per lavorare. Il programma per Windows può creare una nuova installazione di ComfyUI e riusare le cartelle dei modelli che hai già, così non scarichi due volte gli stessi file. Tieni d'occhio la RAM: 16 GB sono il minimo indicato, con 32 GB si respira meglio. E prima di usare i risultati in un lavoro, leggi la licenza di MiniMax H3: per chi lavora dall'Italia, serve un'autorizzazione separata.
Per orientarti tra i modelli video trovi tutto nella guida ai modelli AI per video in ComfyUI, mentre per i personaggi su immagini parti dalla guida ai modelli AI per immagini in ComfyUI. Se stai pensando di cambiare scheda video o di restare in locale, leggi quanto costa creare immagini e video con l'AI; se parti da zero, inizia dalla guida introduttiva a ComfyUI.
È tutto per questa volta. Scarica i nostri workflow gratuiti dalla sezione ComfyUI e seguici sul canale YouTube @tutorial3d: ci vediamo al prossimo aggiornamento con le novità dell'AI.
