La notizia più interessante per chi monta video è Vlo 0.3, un editor gratuito e open source che manda i pezzi della timeline direttamente a ComfyUI. Intanto ComfyUI ha integrato il ControlNet Union di Qwen-Image 2.1 nel codice ufficiale, e dalla community arrivano due strumenti che parlano la lingua dei motion designer: AnyAngle, per cambiare l'inquadratura partendo da Blender, e LanPaint 2.2, per ritoccare anche la trasparenza.
In breve
- Vlo 0.3: editor video locale e open source con un ponte in tempo reale verso qualsiasi workflow di ComfyUI.
- ComfyUI: il ControlNet Union di Qwen-Image 2.1 ora è supportato nel codice principale, per ora solo nel ramo di sviluppo.
- AnyAngle: una LoRA per Qwen-Image 2.1 che sposta la "camera" di un'immagine usando un render di Blender come guida.
- LanPaint 2.2: inpainting per Qwen-Image 2.1 che modifica anche il canale alfa dei PNG trasparenti.
- 360 Orbit LoRA: giri di camera a 360° con MiniMax H3, ma la licenza esclude l'UE.
- Claude Sonnet 5.5 è uscito il 28 settembre, e il 29 settembre si è tenuto il DevDay di OpenAI.
Vlo 0.3: un montaggio video che parla con ComfyUI
Il 28 settembre è uscita la versione 0.3.0 di Vlo, un editor video gratuito che gira in locale, con licenza open source AGPL 3.0. L'idea è semplice e, per chi lavora come noi, molto concreta: selezioni un tratto della timeline, Vlo invia fotogrammi e maschere a un workflow di ComfyUI e ti restituisce il risultato nel montaggio. Non ci sono funzioni AI "chiuse": puoi usare qualsiasi workflow, e il programma adatta da solo il formato dell'immagine a quello che il modello si aspetta.
La 0.3 aggiunge parecchio anche sul fronte del montaggio classico: clip composite e sottotimeline, clip di regolazione, correzione colore, transizioni come dissolvenza e scorrimento, separazione delle tracce audio (voce, musica e così via) e un nuovo motore di rendering che usa lo stesso "piano" per l'anteprima e per l'export, così quello che vedi è quello che esporti. C'è anche un SDK per le estensioni. Funziona su Windows, macOS e Linux, ma dentro un browser basato su Chromium (Chrome o Edge); per installarlo serve solo Git, il resto lo scarica l'installer. Il repository ufficiale spiega tutti i passaggi.
Cosa ne pensiamo. È la direzione giusta: oggi il nostro lavoro con l'AI video è fatto di continui export e import tra ComfyUI e il programma di montaggio, e un ponte diretto toglie proprio quell'attrito. Però è un progetto giovane (le versioni precedenti erano "pre-release" e la 0.4 è già in programma): lo vediamo come laboratorio per sperimentare, non ancora come sostituto di Premiere o DaVinci Resolve in un lavoro con consegna. Ricorda anche che, se ComfyUI e Vlo girano sullo stesso PC, la VRAM la decide il modello che lanci da ComfyUI, non l'editor.
ComfyUI: il ControlNet Union di Qwen-Image 2.1 entra nel codice ufficiale
Il 24 settembre Alibaba PAI ha pubblicato il ControlNet Union per Qwen-Image 2.1: un solo file da circa 7 GB con otto controlli (Canny, profondità , pose, bozzetto e altri) più l'inpainting. Mancava il supporto nativo in ComfyUI: il 28 settembre è stata unita la modifica di kijai che lo aggiunge, con un nuovo nodo per applicare questi ControlNet "Fun" (vale anche per Z-Image) e la possibilità di decidere in quale tratto della generazione il controllo deve agire. Lasciarlo attivo solo nei primi passi, per esempio, fissa la composizione e lascia al modello più libertà sui dettagli.
Nello stesso giro sono entrate altre modifiche: un nuovo formato di quantizzazione chiamato w6a8 (pesi a 6 bit, attivazioni a 8), un'ottimizzazione di SeedVR2, l'upscaler per video, e un'interfaccia più reattiva quando ComfyUI scansiona cartelle piene di file. Attenzione: si tratta del ramo di sviluppo, non di una versione stabile (l'ultima resta la 0.37.2 del 23 settembre). Chi usa solo le release stabili dovrà aspettare la prossima; lo stesso revisore del formato w6a8 segnala che, per ora, alcuni modelli in quel formato potrebbero non funzionare.
Perché ti interessa. Con il ControlNet puoi far rispettare a Qwen-Image 2.1 la composizione di un render di Blender o Cinema 4D, esportandone la passata di profondità o una posa. Se vuoi vederlo all'opera prima di aggiornare, il video "Qwen Image 2.1 Finally Has ControlNet: Pose, Depth and Inpainting Tested" del canale ComfyUI Workflow Blog prova pose, profondità e inpainting. Ricorda che il modello base ha la Qwen Research License: leggila prima di un uso commerciale.
AnyAngle: cambiare inquadratura con Blender e Qwen-Image 2.1
AnyAngle è una LoRA per la funzione di modifica di Qwen-Image 2.1, pubblicata il 28 settembre con licenza Apache 2.0. Risolve un problema che chi fa storyboard conosce bene: hai un'immagine che ti piace, ma ti serve la stessa scena da un altro punto di vista. Il metodo è ibrido e, per questo, controllabile: dall'immagine si ricava uno splat gaussiano o un modello 3D, lo si apre in Blender, si piazza la camera dove serve e si fa un render; poi Qwen-Image 2.1 con la LoRA "trasferisce" quel nuovo angolo sull'immagine originale, mantenendone lo stile. Le impostazioni consigliate sono forza 1.0, CFG 3.0 e almeno 20 passi.
Cosa ne pensiamo. Ci piace perché mette la camera di nuovo in mano a chi la sa muovere, invece di sperare che il prompt "vista dall'alto" funzioni. L'autore è onesto sui limiti: se il modello 3D di partenza è impreciso, gli oggetti si disallineano e i volti si deformano. La licenza della LoRA è libera, ma resta quella del modello base di Qwen.
LanPaint 2.2: inpainting per Qwen-Image 2.1, trasparenza compresa
LanPaint è un nodo per ComfyUI (licenza GPL 3.0) che fa inpainting e outpainting con qualsiasi modello, senza checkpoint dedicati: invece di "tappare" la maschera, fa "ragionare" il modello più volte a ogni passo. La versione 2.2.0, uscita il 28 settembre, aggiunge Qwen-Image 2.1, sia in generazione sia in modifica, e corregge un errore con MiniMax H3. La parte più utile per chi fa grafica: Qwen-Image 2.1 produce PNG trasparenti, e LanPaint ora lavora sotto maschera preservando la trasparenza, quindi un elemento ritoccato può cambiare anche la sua sagoma, non solo i colori.
Il prezzo è il tempo: con il valore consigliato di 5 iterazioni per passo, il campionamento è circa 5 volte più lento del normale, fino a 10 per i casi difficili. Su una scheda come la nostra RTX 3060 conviene quindi fare prove a bassa risoluzione prima del passaggio finale.
360 Orbit: il giro di camera per MiniMax H3 (ma non in Europa)
Per il video, Pablo Dawson ha pubblicato il 27 settembre la 360 Orbit LoRA per MiniMax H3 nella versione primo-e-ultimo fotogramma: da una sola foto genera un giro completo della camera attorno a un soggetto fermo, circa 3 secondi a 768×768, e usando la stessa immagine all'inizio e alla fine ottieni un loop senza stacchi. È addestrata solo su 28 clip di persone, quindi con altri soggetti è tutta da scoprire. Soprattutto, vale la licenza MiniMax H3 Community, che esclude l'Unione Europea: in Italia non possiamo consigliarla.
Dai grandi: Claude Sonnet 5.5 e il DevDay di OpenAI
Il 28 settembre Anthropic ha lanciato Claude Sonnet 5.5: secondo l'azienda è oltre il 30% più veloce di Sonnet 5, costa fino al 30% in meno per attività e migliora nella comprensione delle immagini e nella preparazione di documenti e presentazioni. Per un creativo non genera immagini, ma può aiutare con brief, copioni e preventivi. Il 29 settembre, alle 19:00 ora italiana, era in programma invece il keynote del DevDay di OpenAI, in streaming gratuito: nessun prodotto è stato confermato in anticipo, quindi non diamo credito alle voci. Gli annunci li trovi nell'aggiornamento successivo.
Da provare subito
Se hai già Qwen-Image 2.1 in ComfyUI, prova LanPaint su un PNG trasparente: installalo da ComfyUI-Manager cercando "LanPaint", riavvia ComfyUI e carica uno degli esempi del repository dedicati alla modifica di Qwen-Image 2.1 con maschera. Parti con 5 iterazioni per passo e un'immagine piccola; quando la maschera fa quello che vuoi, sali di risoluzione. Per gli spunti sulle modifiche, il video "Qwen Image 2.1 in ComfyUI: 5 Editing Tricks I Tested" di ComfyUI Workflow Blog è un buon riassunto.
Per capire dove si colloca Qwen-Image 2.1 rispetto agli altri, leggi la nostra guida ai modelli AI per immagini in ComfyUI; per il video c'è quella sui modelli AI per video in ComfyUI. Se parti da zero, inizia dalla guida introduttiva a ComfyUI, e per scegliere la scheda giusta leggi l'articolo sulle schede video per AI.
È tutto per questa volta. Scarica i nostri workflow gratuiti dalla sezione ComfyUI e seguici sul canale YouTube @tutorial3d: ci vediamo al prossimo aggiornamento con le novità dell'AI.
