Runway Research ha fatto un altro importante passo avanti nella missione di costruire sistemi di intelligenza artificiale multimodali che consentiranno nuove forme di creatività. Gen-2 rappresenta l’ultima innovazione di questa azienda, un sistema di intelligenza artificiale multimodale in grado di generare nuovi video con testo, immagini o clip video. Questa tecnologia ha il potenziale per rivoluzionare il modo in cui vengono creati i film e le immagini.
Gen-2 utilizza una sintesi realistica e coerente per creare nuovi video applicando la composizione e lo stile di un’immagine o di un messaggio di testo alla struttura di un video sorgente. Può anche utilizzare nient’altro che parole per creare video. Questo significa che è possibile creare un video completamente nuovo senza alcuna ripresa effettiva. Ad esempio, è possibile utilizzare un prompt di testo per creare un video che rappresenta il sole del tardo pomeriggio che fa capolino dalla finestra di un loft di New York City.
Inoltre, Gen-2 offre otto diverse modalità per generare video in base alle preferenze dell’utente. La Modalità 01 consente di sintetizzare i video in qualsiasi stile immaginabile utilizzando solo un prompt di testo. La Modalità 02 consente di generare un video utilizzando un’immagine di guida e un messaggio di testo, mentre la Modalità 03 genera video utilizzando solo un’immagine di guida. La Modalità 04 trasferisce lo stile di qualsiasi immagine o prompt in ogni fotogramma del video, mentre la Modalità 05 trasforma i mockup in rendering completamente stilizzati e animati. La Modalità 06 isola i soggetti nel video e li modifica con semplici istruzioni di testo, mentre la Modalità 07 trasforma i rendering non testurizzati in output realistici applicando un’immagine di input o un prompt. Infine, la Modalità 08 offre la possibilità di personalizzare il modello per risultati di fedeltà ancora più elevati.
Gen-2 ha dimostrato di essere superiore ai metodi esistenti per la traduzione da immagine a immagine e da video a video. Sulla base degli studi sugli utenti, i risultati della Gen-2 sono preferiti al 73,53% rispetto alla diffusione stabile 1.5 e all’88,24% rispetto a Text2Live. Ciò dimostra che Gen-2 è il nuovo standard per la generazione di video.
Runway Research è impegnata a garantire che il futuro della creatività sia accessibile, controllabile e potenziante per tutti. Gen-2 rappresenta una nuova era per il cinema e le immagini, e sta rivoluzionando il mondo della creatività attraverso l’AI generativa. Unisciti alla comunità di Runway Research su Discordia e accedi a Runway per scoprire di più su come Gen-2 può aiutare a realizzare la tua visione creativa.
Il team di Runway Research ha collaborato con numerosi esperti di IA, artisti e designer per sviluppare Gen-2 e renderlo uno strumento potente e accessibile per la creazione di video e immagini. I risultati sono stati sorprendenti, con la maggior parte degli utenti che preferisce Gen-2 rispetto ai metodi esistenti di traduzione da immagine a immagine e da video a video.
Gen-2 ha otto diverse modalità, ciascuna delle quali consente di generare video utilizzando prompt di testo, immagini o video di input. Ad esempio, la modalità 01 consente di sintetizzare un video utilizzando solo un prompt di testo, mentre la modalità 04 consente di trasferire lo stile di un’immagine o un prompt in ogni fotogramma del video.
Inoltre, Gen-2 ha un’interfaccia utente intuitiva e facile da usare, che consente di selezionare facilmente la modalità desiderata e di modificare i parametri di generazione. Ciò significa che artisti, designer e creatori possono creare video e immagini personalizzati in pochi clic.
Il futuro della creatività è promettente grazie agli sviluppi nella tecnologia di intelligenza artificiale. Con strumenti come Gen-2, gli artisti e i creatori possono ampliare il loro potenziale creativo e raggiungere nuovi livelli di espressione artistica.
Gen-2 rappresenta un passo avanti significativo nell’evoluzione della tecnologia di intelligenza artificiale per la creazione di video e immagini. Il team di Runway Research continuerà a lavorare per migliorare e sviluppare nuovi strumenti per la creatività, che saranno accessibili e potenziati per tutti.
________
“Runway ML puts AI tools in the hands of creators everywhere“
