Atslēgas līdzņemšanai
- Nvidia nesen demonstrēja paņēmienu, kas 2D fotoattēlus pārvērš 3D ainās dažu sekunžu laikā.
- Metode izmanto datora jaudu, lai aptuveni noteiktu, kā gaisma darbojas reālajā pasaulē.
- Metaversa ir viena no jomām, kur 3D ainas ir noderīgas, jo tās var apskatīt no jebkuras kameras perspektīvas.
Jaunā Nvidia mākslīgā intelekta (AI) tehnoloģija drīz vien dažu sekunžu laikā varētu pārvērst 2D fotoattēlus 3D ainās, padarot tādu ieskaujošu virtuālo telpu kā metaversu izveidi tikpat triviālu kā tekstapstrāde.
Nvidia nesen demonstrēja fotoattēlu metodi, ko sauc par Instant NeRF, kas izmanto skaitļošanas jaudu, lai aptuveni noteiktu, kā gaisma darbojas reālajā pasaulē. Tas var pārveidot jūsu vecos fotoattēlus par videospēļu ainu, vai arī to var izmantot, lai apmācītu robotus un pašbraucošas automašīnas, lai izprastu reālās pasaules objektu izmēru un formu.
"3D attēlveidošana ienes jaunu transformāciju pasauli," e-pasta intervijā Lifewire pastāstīja Orens Debijs, Visionary.ai, datorredzes uzņēmuma, kas izmanto savus 3D algoritmus Nvidia platformā, izpilddirektors. "Izmantojot 3D, jūs atdarinat reālu ainas dziļumu un padarāt attēlu dzīvāku un reālistiskāku. Papildus AR/VR un industriālajām kamerām, kurās 3D ir ļoti izplatīta, tagad mēs redzam, ka tā tiek izmantota gandrīz katrā viedtālrunī bez lietotājs pat zina."
Izmēru pievienošana
Pirmā tūlītējā fotoattēla, kas uzņemts pirms 75 gadiem ar Polaroid kameru, mērķis bija ātri iemūžināt 3D pasauli 2D attēlā. Tagad AI pētnieki strādā pie pretēja: nekustīgu attēlu kolekciju pārvērš digitālā 3D ainā dažu sekunžu laikā.
Pazīstams kā apgrieztā renderēšana, process izmanto AI, lai aptuveni noteiktu, kā gaisma darbojas reālajā pasaulē, ļaujot pētniekiem rekonstruēt 3D ainu no nedaudziem 2D attēliem, kas uzņemti dažādos leņķos. Nvidia apgalvo, ka ir izstrādājusi pieeju, kas šo uzdevumu izpilda gandrīz uzreiz.
Nvidia izmantoja šo pieeju ar jaunu tehnoloģiju, ko sauc par neironu starojuma laukiem jeb NeRF. Uzņēmums saka, ka rezultāts, kas nodēvēts par Instant NeRF, ir līdz šim ātrākā NeRF tehnika. Modelim ir vajadzīgas tikai sekundes, lai apmācītu dažus desmitus fotoattēlu, un pēc tam var atveidot iegūto 3D ainu desmitiem milisekundēs.
"Ja tradicionālie 3D attēlojumi, piemēram, daudzstūru tīkli, ir līdzīgi vektora attēliem, NeRF ir kā bitkartes attēli: tie blīvi tver veidu, kā gaisma izstaro no objekta vai ainas ietvaros," Deivids Lūbke, grafikas pētījumu viceprezidents. Nvidia teikts ziņu izlaidumā. “Šajā ziņā Instant NeRF varētu būt tikpat svarīga 3D kā digitālās kameras un JPEG saspiešana ir bijusi 2D fotogrāfijā, ievērojami palielinot 3D uzņemšanas un kopīgošanas ātrumu, vieglumu un sasniedzamību."
Lai apkopotu datus, lai barotu NeRF, neironu tīklam ir jāuzņem daži desmiti attēlu, kas uzņemti no vairākām vietām visā ainas vietā, kā arī katra šā uzņēmuma kameras pozīcija.
NeRF apmāca nelielu neironu tīklu, lai rekonstruētu ainu, prognozējot gaismas krāsu, kas izstaro jebkurā virzienā, no jebkura punkta 3D telpā.
3D apelācija
Metaversa ir viena no jomām, kur 3D ainas ir noderīgas, jo tās var aplūkot no jebkuras kameras perspektīvas, e-pasta intervijā Lifewire pastāstīja Breds Kvintons, Perceptus platformas paplašinātajai realitātei (AR) dibinātājs. Tāpat kā mēs varam staigāt pa istabu reālajā dzīvē un redzēt tās saturu no dažādiem leņķiem, izmantojot rekonstruētu 3D ainu, mēs varam praktiski pārvietoties pa telpu un apskatīt to no jebkuras perspektīvas.
"Tas var būt īpaši noderīgi, lai izveidotu vidi izmantošanai virtuālajā realitātē," sacīja Kvintons.
Programmas, piemēram, Apple Object Capture, izmanto tehniku, ko sauc par fotogrammetriju, lai izveidotu virtuālus 3D objektus no 2D attēlu sērijas. Kvintons prognozēja, ka 3D modeļi tiks plaši izmantoti virtuālajā realitātē un AR lietojumprogrammās. Piemēram, daži AI, piemēram, platformā Perceptus AR, izmanto 3D modeļus, lai radītu izpratni par reālo pasauli, kas ļauj izmantot reāllaika AR lietojumprogrammas.
3D attēlu izmantošana arī atdarina reālās pasaules dziļumu ainā un padara attēlu dzīvāku un reālistiskāku, sacīja Debija. Lai izveidotu Bokeh efektu (aka portreta režīmu vai kino režīmu), ir nepieciešama 3D dziļuma kartēšana. Šo paņēmienu izmanto gandrīz katrā viedtālrunī.
"Šis jau ir standarts profesionāliem videogrāfiem, kuri filmē filmas, un tas kļūst par standartu ikvienam patērētājam," piebilda Debija.
