Il software AI può immaginare un intero mondo digitale da un semplice schizzo

La creazione di un ambiente virtuale che sembri realistico richiede tempo e abilità. I dettagli devono essere realizzati a mano utilizzando un chip grafico che rende le forme 3D, l'illuminazione appropriata e le trame. L'ultimo videogioco di successo, Red Dead Redemption 2, ad esempio, ha richiesto più di otto anni a un team di circa 1000 sviluppatori per creare, lavorando occasionalmente Settimane di 100 ore. Questo tipo di carico di lavoro potrebbe non essere necessario per molto più tempo. Un nuovo potente algoritmo di intelligenza artificiale può immaginare i dettagli fotorealistici di una scena al volo.

Sviluppato dal produttore di chip Nvidia, il software non solo semplificherà la vita agli sviluppatori di software. Potrebbe anche essere utilizzato per generare automaticamente ambienti virtuali per la realtà virtuale o per insegnare il mondo ad auto e robot a guida autonoma.

Possiamo creare nuovi schizzi che non sono mai stati visti prima e renderizzarli, dice Bryan Catanzaro , vicepresidente del deep learning applicato presso Nvidia. In realtà stiamo insegnando al modello come disegnare in base a un video reale.

I ricercatori di Nvidia hanno utilizzato un approccio di apprendimento automatico standard per identificare diversi oggetti in una scena video: automobili, alberi, edifici e così via. Il team ha quindi utilizzato quella che è nota come una rete contraddittoria generativa, o GAN, per addestrare un computer a riempire immagini 3D realistiche.

Il sistema può quindi essere alimentato dal contorno di una scena, mostrando dove si trovano i diversi oggetti, e riempirà di dettagli sorprendenti e leggermente scintillanti. L'effetto è impressionante, anche se alcuni di questi oggetti a volte sembrano un po' deformati o contorti.

La computer grafica classica rende il rendering costruendo il modo in cui la luce interagisce con gli oggetti, afferma Catanzaro. Ci siamo chiesti cosa potremmo fare con l'intelligenza artificiale per cambiare il processo di rendering.

Catanzaro afferma che l'approccio potrebbe abbassare la barriera per il design del gioco. Oltre al rendering di intere scene, l'approccio potrebbe essere utilizzato per aggiungere una persona reale a un videogioco dopo aver alimentato alcuni minuti di riprese video della persona nella vita reale. Suggerisce che l'approccio potrebbe essere utilizzato anche per aiutare a rendere realistiche le impostazioni per la realtà virtuale o per fornire dati di addestramento sintetici per veicoli autonomi o robot. Non puoi realisticamente ottenere dati di allenamento reali per ogni situazione che potrebbe apparire, dice. I lavori sono stati annunciati oggi alle NeurIPS , un'importante conferenza sull'IA a Montreal.

Questo è un lavoro interessante e impressionante, afferma Michiel van de Panne, professore all'Università della British Columbia specializzato in machine learning e computer grafica. Osserva che il lavoro precedente che coinvolgeva i GAN prevedeva la sintesi di elementi più semplici come immagini individuali o movimenti dei personaggi.

Il lavoro indica un modo molto diverso di creare immagini animate, afferma van de Panne. Uno con un diverso insieme di capacità, che sono meno impegnative dal punto di vista computazionale e potrebbero essere interattive.

L'algoritmo di Nvidia è solo l'ultimo di una vertiginosa processione di progressi che coinvolgono i GAN. Inventati da un ricercatore di Google solo pochi anni fa, i GAN sono emersi come uno strumento straordinario per sintetizzare immagini e audio realistici e spesso stranamente strani. Questa tendenza promette di rivoluzionare la computer grafica e gli effetti speciali e di aiutare artisti e musicisti a immaginare o sviluppare nuove idee. Ma potrebbe anche minare la fiducia del pubblico nelle prove video e audio (vedi di nuovo Fake America great).

Catanzaro ammette che potrebbe essere abusato. Questa è una tecnologia che potrebbe essere utilizzata per molte cose, dice.

nascondere