Keeawayt
- Nvidia esitteli äskettäin tekniikan, joka muuttaa 2D-kuvat 3D-kohtauksiksi muutamassa sekunnissa.
- Menetelmä käyttää tietokoneen tehoa arvioimaan valon käyttäytymistä todellisessa maailmassa.
- Metaversumi on alue, jossa 3D-kohtaukset ovat hyödyllisiä, koska niitä voidaan tarkastella mistä tahansa kameran perspektiivistä.
Nvidian uusi tekoäly (AI) -tekniikka voi pian muuttaa 2D-kuvat 3D-kohtauksiksi muutamassa sekunnissa, mikä tekee mukaansatempaavien virtuaalitilojen, kuten metaversumien, luomisesta yhtä triviaalia kuin tekstinkäsittelyä.
Nvidia esitteli äskettäin valokuvausmenetelmän nimeltä Instant NeRF, joka käyttää laskentatehoa arvioimaan valon käyttäytymistä todellisessa maailmassa. Se voi muuttaa vanhat valokuvasi videopelikohtaukseksi tai sitä voidaan käyttää robottien ja itseohjautuvien autojen kouluttamiseen ymmärtämään tosimaailman esineiden kokoa ja muotoa.
"3D-kuvantaminen tuo uuden muutoksen maailman", Oren Debbi, Nvidia-alustalla 3D-algoritmejaan käyttävän tietokonenäköyrityksen Visionary.ai:n toimitusjohtaja, kertoi Lifewirelle sähköpostihaastattelussa. "Käyttämällä 3D:tä jäljittelet todellista syvyyttä kohtaukseen ja saat kuvan näyttämään elävämmältä ja realistisemm alta. AR/VR- ja teollisuuskameroiden lisäksi, joissa 3D on hyvin yleistä, sitä käytetään nykyään lähes kaikissa älypuhelimissa ilman käyttäjä edes tietää."
Mittojen lisääminen
Ensimmäisen 75 vuotta sitten Polaroid-kameralla otetun pikakuvan tarkoituksena oli vangita 3D-maailma nopeasti 2D-kuvaksi. Tekoälytutkijat työskentelevät nyt päinvastoin: still-kuvien kokoelman muuttamiseksi digitaaliseksi 3D-kohtaukseksi sekunneissa.
Prosessi, joka tunnetaan nimellä käänteinen renderöinti, käyttää tekoälyä arvioimaan valon käyttäytymistä todellisessa maailmassa, jolloin tutkijat voivat rekonstruoida 3D-näkymän kourallisista 2D-kuvista, jotka on otettu eri kulmista. Nvidia väittää kehittäneensä lähestymistavan, joka suorittaa tämän tehtävän lähes välittömästi.
Nvidia käytti tätä lähestymistapaa uudessa tekniikassa, jota kutsutaan hermosäteilykentiksi eli NeRF:ksi. Yhtiö sanoo, että tulos, nimeltään Instant NeRF, on nopein NeRF-tekniikka tähän mennessä. Malli vaatii vain sekunteja harjoitellakseen muutamaa tusinaa still-kuvaa ja voi sitten renderöidä tuloksena olevan 3D-näkymän kymmenissä millisekunnissa.
"Jos perinteiset 3D-esitykset, kuten monikulmioverkot, muistuttavat vektorikuvia, NeRF:t ovat kuin bittikarttakuvia: ne kuvaavat tiheästi tapaa, jolla valo säteilee kohteesta tai näkymän sisällä", David Luebke, graafisen tutkimuksen johtaja Nvidia sanoi lehdistötiedotteessa: "Siinä mielessä Instant NeRF voi olla yhtä tärkeä 3D:lle kuin digitaalikamerat ja JPEG-pakkaus ovat olleet 2D-kuvauksessa - mikä lisää huomattavasti 3D-kaappauksen ja -jakamisen nopeutta, helppoutta ja ulottuvuutta.”
Tietojen kerääminen NeRF:n syöttämistä varten edellyttää, että hermoverkko kaappaa muutamia kymmeniä kuvia, jotka on otettu useista eri paikoista kohtauksen ympärillä, sekä kunkin kuvan kameran sijainnin.
NeRF kouluttaa pienen hermoverkon rekonstruoimaan kohtauksen ennustamalla mihin tahansa suuntaan säteilevän valon värin mistä tahansa pisteestä 3D-avaruudessa.
3D:n vetoomus
Metaversumi on yksi alue, jolla 3D-kohtaukset ovat hyödyllisiä, koska niitä voidaan tarkastella mistä tahansa kameran perspektiivistä, lisätyn todellisuuden (AR) Perceptus Platformin perustaja Brad Quinton kertoi Lifewirelle sähköpostihaastattelussa. Aivan kuten voimme kävellä huoneen läpi tosielämässä ja nähdä sen sisällön monista eri näkökulmista, rekonstruoidun 3D-näkymän avulla voimme virtuaalisesti liikkua tilassa ja tarkastella sitä mistä tahansa näkökulmasta.
"Tämä voi olla erityisen hyödyllistä luotaessa ympäristöjä virtuaalitodellisuuteen", Quinton sanoi.
Ohjelmat, kuten Applen Object Capture, käyttävät fotogrammetriaksi kutsuttua tekniikkaa virtuaalisten 3D-objektien luomiseen 2D-kuvien sarjasta. 3D-malleja tullaan käyttämään laajasti virtuaalitodellisuudessa ja AR-sovelluksissa, Quinton ennusti. Esimerkiksi jotkin tekoälyt, kuten Perceptus AR Platform, käyttävät 3D-malleja luodakseen käsityksen todellisesta maailmasta, mikä mahdollistaa reaaliaikaiset AR-sovellukset.
3D-kuvien käyttö jäljittelee myös kohtauksen todellista syvyyttä ja saa kuvan näyttämään elävämmältä ja realistisemm alta, Debbi sanoi. Bokeh-tehosteen (alias muotokuva- tai elokuvatila) luomiseksi tarvitaan 3D-syvyyskartoitus. Tekniikkaa käytetään melkein kaikissa älypuhelimissa.
"Tämä on jo standardi ammattivideokuvaajille, jotka kuvaavat elokuvia, ja tästä on tulossa standardi jokaiselle kuluttajalle", Debbi lisäsi.
