Ključni izsledki
- Nvidia je pred kratkim pokazala tehniko, ki 2D fotografije spremeni v 3D prizore v samo nekaj sekundah.
- Metoda uporablja moč računalnika za približek, kako se svetloba obnaša v resničnem svetu.
- Metaverse je eno od področij, kjer so 3D-prizori koristni, saj si jih je mogoče ogledati iz katere koli perspektive kamere.
Nova tehnologija umetne inteligence (AI) podjetja Nvidia bi lahko kmalu spremenila 2D-fotografije v 3D-prizore v samo nekaj sekundah, zaradi česar je ustvarjanje poglobljenih virtualnih prostorov, kot je metaverse, tako nepomembno kot obdelava besedila.
Nvidia je nedavno predstavila fotografsko metodo, imenovano Instant NeRF, ki uporablja računalniško moč za približek obnašanja svetlobe v resničnem svetu. Vaše stare fotografije lahko spremeni v prizor iz video igre ali pa ga lahko uporabite za usposabljanje robotov in samovozečih avtomobilov, da razumejo velikost in obliko predmetov iz resničnega sveta.
"3D-slikanje prinaša nov svet preobrazbe," je v intervjuju po elektronski pošti za Lifewire povedal Oren Debbi, izvršni direktor Visionary.ai, podjetja za računalniški vid, ki izvaja svoje 3D-algoritme na platformi Nvidia. "Z uporabo 3D posnemate globino resničnega sveta v prizoru in naredite sliko bolj živo in realistično. Poleg AR/VR in industrijskih kamer, kjer je 3D zelo pogost, ga zdaj vidimo uporabljati na skoraj vseh pametnih telefonih brez uporabnik sploh ve."
Dodajanje dimenzij
Prva trenutna fotografija, posneta pred 75 leti s fotoaparatom Polaroid, je bila namenjena hitremu zajemanju 3D sveta v 2D sliki. Zdaj raziskovalci AI delajo na nasprotnem: zbirko fotografij v nekaj sekundah spremenijo v digitalno 3D sceno.
Poznan kot inverzno upodabljanje, postopek uporablja AI za približek obnašanja svetlobe v resničnem svetu, kar raziskovalcem omogoča rekonstrukcijo 3D-prizora iz peščice 2D-slik, posnetih pod različnimi koti. Nvidia trdi, da je razvila pristop, ki to nalogo opravi skoraj v trenutku.
Nvidia je uporabila ta pristop z novo tehnologijo, imenovano polja živčnega sevanja ali NeRF. Družba pravi, da je rezultat, imenovan Instant NeRF, najhitrejša tehnika NeRF doslej. Model potrebuje le nekaj sekund, da se uri na nekaj ducatih fotografij in lahko nato upodobi nastalo 3D sceno v nekaj desetih milisekundah.
"Če so tradicionalne 3D-predstavitve, kot so poligonalne mreže, podobne vektorskim slikam, so NeRF-ji podobni bitnim slikam: na gosto zajemajo način, kako svetloba seva iz predmeta ali znotraj scene," David Luebke, podpredsednik za grafične raziskave pri Nvidia je dejala v sporočilu za javnost: »V tem smislu bi lahko bil Instant NeRF tako pomemben za 3D, kot so bili digitalni fotoaparati in kompresija JPEG za 2D fotografijo – močno poveča hitrost, enostavnost in doseg 3D zajemanja in deljenja.”
Zbiranje podatkov za napajanje NeRF zahteva, da nevronska mreža zajame nekaj deset slik, posnetih z več položajev po prizorišču, kot tudi položaj kamere vsakega od teh posnetkov.
NeRF uri majhno nevronsko mrežo za rekonstrukcijo prizora s predvidevanjem barve svetlobe, ki seva v katero koli smer, iz katere koli točke v 3D prostoru.
Privlačnost 3D
Metaverse je eno od področij, kjer so 3D-prizori uporabni, saj si jih je mogoče ogledati iz katere koli perspektive kamere, je v intervjuju za Lifewire po elektronski pošti povedal Brad Quinton, ustanovitelj platforme Perceptus za razširjeno resničnost (AR). Tako kot se lahko v resničnem življenju sprehodimo skozi sobo in vidimo njeno vsebino iz različnih zornih kotov, se lahko z rekonstruirano 3D sceno virtualno premikamo po prostoru in si ga ogledamo iz katere koli perspektive.
"To je lahko še posebej uporabno za ustvarjanje okolij za uporabo v virtualni resničnosti," je dejal Quinton.
Programi, kot je Applov Object Capture, uporabljajo tehniko, imenovano fotogrametrija, za ustvarjanje navideznih 3D-predmetov iz serije 2D-slik. Quinton je napovedal, da se bodo 3D-modeli v veliki meri uporabljali v aplikacijah virtualne resničnosti in AR. Nekateri AI-ji, kot je tisti v platformi Perceptus AR, na primer uporabljajo 3D-modele za ustvarjanje razumevanja resničnega sveta, kar omogoča aplikacije AR v realnem času.
Uporaba 3D slik prav tako posnema globino realnega sveta v prizoru in naredi sliko bolj živo in realistično, je dejala Debbi. Če želite ustvariti učinek Bokeh (tudi portretni način ali kinematografski način), je potrebno 3D preslikavo globine. Tehnika se uporablja na skoraj vseh pametnih telefonih.
"To je že standard za profesionalne videografe, ki snemajo filme, in to postaja standard za vsakega potrošnika," je dodala Debbi.
