Succede di registrare un video completamente blurrato, ovvero sfocato. Fino ad oggi l’unica cosa che si poteva fare era cestinarlo e fare un nuovo video daccapo. Oggi invece è diverso: grazie alla nuova applicazione AI di Adobe, VideoGigaGAN, si potranno caricare i video sfocati e migliorare la loro risoluzione al punto da renderli nitidi.
VideoGigaGAN, l’AI di Adobe che rende i video nitidi
Riporta Techxplore, un team di ingegneri di Adobe Research ha sviluppato un’applicazione AI in grado di modificare la risoluzione di un video sfocato fino a renderlo nitido: VideoGigaGAN.
Pubblicato su arXiv , al momento si tratta di un progetto sperimentale, di cui, al pari di VASA-1, il team ha pubblicato recentemente alcune dimostrazioni sulla pagina del sito web del progetto.
Ma cosa significa VideoGigaGAN? Il nome deriva dalla sua precedentemente app, GigaGAN, che generava nuove foto o migliorava quelle vecchie. Per la precisione, GAN sta per generative adversarial network (letteralmente, “rete avversaria generativa”).
Come funziona VideoGigaGAN
Come suggerisce il nome, il team ha utilizzato la tecnologia GAN per formare il sistema su come appaiono i video nitidi e chiari, e poi ha aggiunto un “modulo di propagazione guidata dal flusso” (flow-guided propagation module) per mantenere gli elementi ripresi coerenti tra i fotogrammi video.
Il team ha anche utilizzato una serie di tecniche di anti-aliasing per prevenire ciò che descrivono come “stranezze dell’AI” (AI weirdness), oltre a diverse funzionalità di spostamento ad alta frequenza per gestire i cali imprevisti della qualità video.
Il risultato è un’applicazione in grado di migliorare la risoluzione video fino a 8 volte: il tutto senza introdurre colorazioni strane, linee irregolari o altri problemi ben noti con immagini e video generati dall’intelligenza artificiale.
Sempre più AI che generano immagini
Da tempo ormai le AI sono al centro di una sempre maggiore attenzione da parte dei creator e degli sviluppatori, principalmente a causa del rilascio di LLM oggi capaci addirittura di creare immagini e video artificiali.
In questo nuovo sforzo, il team di Adobe ha creato un’applicazione in grado di caricare un campione video sfocato e, dopo l’upscaling della risoluzione, restituire lo stesso campione molto più nitido rispetto a prima.
Il team rileva che per ora la presentazione dell’AI è solo a titolo dimostrativo. Non è quindi chiaro se o quando Adobe lo rilascerà per tutti gli utenti.
Per saperne di più sulla ricerca, consigliamo la lettura del paper pubblicato su arVix.
Ulteriori informazioni: Yiran Xu et al, VideoGigaGAN: Towards Detail-rich Video Super-Resolution, arXiv (2024). DOI: 10.48550/arxiv.2404.12388
