Difficile dire se DeepMind lo sapesse in anticipo, fatto sta che la sua intelligenza artificiale, V2A, ha già un rivale: Gen-3 Alpha, di Runway. Una nuova intelligenza artificiale capace di generare clip video a partire da descrizioni testuali e immagini statiche. Praticamente come già fanno molti altri modelli AI, no? In realtà Gen-3 Alpha è completamente diversa, anche perché Runway sa benissimo quali modelli AI ci siano in giro.
Cos’è Gen-3 Alpha, il modello AI di Runway
Riporta Tech Crunch, Gen-3 Alpha non è il solito modello di AI che genera clip video a partire da descrizioni testuali e immagini statiche. Anzi, rispetto ai rivali Gen-3 è un miglioramento significativo in termini di velocità e qualità di generazione, soprattutto rispetto al modello precedente, Gen-2.
Oltre a offrire controlli dettagliati su struttura, stile e movimento dei video creati, Gen-3 si propone come la soluzione ideale per la generazione di “video coerenti”. Ovvero quei filmati che rispettano il corretto movimento del soggetto tra una frame e l’altro, rappresentando così una fisica molto reale. Questo è stato reso possibile grazie a un robusto addestramento su video e immagini al quale è stato sottoposto Gen-3 Alpha.
Inoltre Runway ha inoltre rivelato a Tech Crunch di aver collaborato con “organizzazioni leader nel settore dell’intrattenimento e dei media” per creare versioni personalizzate di Gen-3, permettendo la generazione di personaggi e elementi stilisticamente coerenti e comportamenti uniformi attraverso diverse scene.
A breve disponibile per gli abbonati di Runway, il modello AI servirà da base per tutti i servizi di Runway, cioè Text to Video, Image to Video e Text to Image, oltre alle modalità di controllo esistenti come Motion Brush, Advanced Camera Controls e Director Mode.
I limiti del nuovo modello AI
Nonostante le sue capacità, Gen-3 Alpha presenta alcune limitazioni, tra cui la durata massima dei filmati generati, che è di 10 secondi. Un limite accettabile, visto che Gen-3 è solo il primo di una serie di modelli di generazione video di nuova generazione.
Altro problema è però l’addestramento stesso, necessario per “imparare” i pattern e generare nuovi clip. A Tech Crunch Runway non ha rivelato l’origine dei dati di addestramento.
Per ultimo, c’è la questione del controllo, ovvero la possibilità di ottenere che un modello generi video coerenti con le intenzioni artistiche del creatore. Uno dei principali problemi ancora rimasti irrisolti per questo modello AI (ma in genere per tutti i modelli già pubblicati), non è chiaro se Runway abbia in serbo qualche soluzione.
Diverso è il fronte della sicurezza, con la società che prevede di rilasciare Gen-3 con un nuovo set di misure di sicurezza, inclusi sistemi di moderazione per bloccare i tentativi di generare video da immagini coperte da copyright e contenuti che violano i termini di servizio dell’azienda.
