AI programinė įranga gali sukurti visą skaitmeninį pasaulį iš paprasto eskizo





Realiai atrodančios virtualios aplinkos sukūrimas reikalauja laiko ir įgūdžių. Detalės turi būti sukurtos rankomis, naudojant grafikos lustą, perteikiantį 3D formas, tinkamą apšvietimą ir tekstūras. Pavyzdžiui, naujausias populiariausias vaizdo žaidimas „Red Dead Redemption 2“ maždaug 1000 kūrėjų komandai sukurti prireikė daugiau nei aštuonerių metų. 100 valandų savaitės. Tokio darbo krūvio gali prireikti ne ilgiau. Galingas naujas AI algoritmas gali išsvajoti fotorealistines scenos detales skrendant.

Ši programinė įranga, kurią sukūrė lustų gamintojas Nvidia, ne tik palengvins programinės įrangos kūrėjų gyvenimą. Jis taip pat gali būti naudojamas automatiškai generuoti virtualią aplinką virtualiai realybei arba mokyti savarankiškai vairuojančius automobilius ir robotus apie pasaulį.

Galime sukurti naujus eskizus, kurių anksčiau nematėme, ir juos pateikti, sako Bryanas Catanzaro , „Nvidia“ taikomojo gilaus mokymosi viceprezidentas. Mes iš tikrųjų mokome modelį, kaip piešti remiantis tikru vaizdo įrašu.



„Nvidia“ mokslininkai naudojo standartinį mašininio mokymosi metodą, norėdami identifikuoti skirtingus vaizdo įrašo objektus: automobilius, medžius, pastatus ir pan. Tada komanda naudojo tai, kas žinoma kaip generacinis priešininkų tinklas arba GAN , kad išmokytų kompiuterį užpildyti tikroviškus 3D vaizdus.

Tada sistema gali būti tiekiama scenos kontūrais, rodančiais, kur yra skirtingi objektai, ir ji užpildys stulbinančias, šiek tiek mirgančias detales. Poveikis yra įspūdingas, net jei kai kurie iš šių objektų kartais atrodo šiek tiek iškreipti ar susisukę.

Catanzaro sako, kad klasikinė kompiuterinė grafika perteikiama sukurdama šviesos sąveiką su objektais. Svarstėme, ką galėtume padaryti su dirbtiniu intelektu, kad pakeistume atvaizdavimo procesą.



Catanzaro sako, kad toks požiūris gali sumažinti žaidimo dizaino kliūtį. Šis metodas gali būti naudojamas ne tik ištisų scenų atvaizdavimui, bet ir įtraukiant realų asmenį prie vaizdo žaidimo, kai pateikiamas kelių minučių vaizdo įrašas apie asmenį realiame gyvenime. Jis siūlo, kad šis metodas taip pat galėtų būti naudojamas siekiant padėti sukurti realistiškus virtualios realybės nustatymus arba teikti sintetinius savarankiškų transporto priemonių ar robotų mokymo duomenis. Jūs negalite realiai gauti realių treniruočių duomenų kiekvienai situacijai, kuri gali pasirodyti, sako jis. Darbas buvo paskelbtas šiandien val NeurIPS , pagrindinė AI konferencija Monrealyje.

Tai įdomus ir įspūdingas darbas, sako Michiel van de Panne, Britų Kolumbijos universiteto profesorius, besispecializuojantis mašininio mokymosi ir kompiuterinės grafikos srityse. Jis pažymi, kad ankstesnis darbas, susijęs su GAN, buvo susijęs su paprastesnių elementų, tokių kaip atskiri vaizdai ar simbolių judesiai, sintezė.

Van de Panne sako, kad darbas rodo kelią į labai skirtingą animuotų vaizdų kūrimo būdą. Vienas su kitokiu galimybių rinkiniu, kuris yra mažiau reikalaujantis skaičiavimo ir gali būti interaktyvus.



„Nvidia“ algoritmas yra naujausias svaiginančioje pažangoje, apimančioje GAN. Vos prieš kelerius metus „Google“ tyrinėtojo sugalvoti GAN tapo puikiu įrankiu, leidžiančiu sintetinti tikroviškus ir dažnai klaikiai keistus vaizdus ir garsą. Ši tendencija žada pakeisti kompiuterinę grafiką ir specialiuosius efektus, padėti menininkams ir muzikantams įsivaizduoti ar plėtoti naujas idėjas. Tačiau tai taip pat gali pakenkti visuomenės pasitikėjimui vaizdo ir garso įrodymais (dar kartą žr. „Fake America Great“).

Catanzaro pripažįsta, kad juo galima piktnaudžiauti. Tai technologija, kurią galima panaudoti daugeliui dalykų, sako jis.

paslėpti