Även om forskare framgångsrikt har använt neurala nätverk för att återge föreställda 15D-scener till bilder, är dessa maskininlärningstekniker inte tillräckligt snabba för att göra dem lämpliga för många verkliga tillämpningar. Den nya metoden, som demonstrerats av forskare vid Massachusetts Institute of Technology och andra organisationer, kan återge tredimensionella scener från bilder cirka 000 XNUMX gånger snabbare än vissa andra modeller. Om detta informerar organisationens webbplats.
Specialister klargjorde att inom många områden av livet, till exempel precisionskirurgi eller jordbruk, behövs tredimensionell visualisering av föremål. Som regel tar neurala nätverk emot en tvådimensionell bild och skapar ett 3D-objekt baserat på den. MIT-forskare sa att deras nya metod gör det möjligt att påskynda denna process med cirka 15 tusen gånger jämfört med befintliga modeller.
Författarna till utvecklingen skapade ett ljusfältsnätverk (LFN), på grundval av vilket artificiell intelligens lärde sig att reproducera tredimensionella objekt efter en enda observation och med en bildhastighet i realtid. Denna metod representerar en scen som ett 360° ljusfält och en funktion som beskriver alla ljusstrålar i tredimensionellt utrymme som passerar genom varje punkt och i alla riktningar. Ljusfältet kodas in i ett neuralt nätverk, vilket påskyndar renderingen av 3D-scenen.
Specialister testade modellen på flera scener. De fann att med LFN kunde det neurala nätverket generera 500D-objekt med över 1,6 bilder per sekund, ungefär tre storleksordningar snabbare än andra metoder. Forskarna klargjorde också att det nya nätverket av ljusfältet mer rationellt använder resurser som kräver cirka XNUMX MB minne.
"Neural rendering har möjliggjort fotorealistisk rendering och bildredigering baserat på endast en gles uppsättning indatabilder. Tyvärr är alla befintliga metoder mycket dyra ur beräkningssynpunkt, vilket förhindrar att de används i applikationer som kräver realtidsbehandling, såsom videokonferenser. Detta projekt tar ett stort steg mot en ny generation av beräkningseffektiva och matematiskt eleganta neurala renderingsalgoritmer. Jag förväntar mig att den kommer att hitta bred tillämpning inom datorgrafik, datorseende och andra områden, säger docent Gordon Wetzstein, forskningsdeltagare. Enligt honom kommer den nya tekniken att finna tillämpning inom datorgrafik och andra områden.
I slutet av november blev det förresten känt om programmet Ricult, som hjälper bönder att öka sin skörd. Tjänsten analyserar väderförändringar för att hjälpa bönder i Thailand och Pakistan att välja den bästa tiden att plantera grödor.
Läs också: