Forskare från Adobe och Australian National University har utvecklat en algoritm som omvandlar tvådimensionella bilder till tredimensionella modeller på bara 5 sekunder. Detta genombrott lovar att revolutionera innehållsskapandet inom design och underhållning, men akta dig för eventuella problem med suddiga strukturer och upphovsrättsintrång.
Den nya algoritmen, kallad Large Reconstruction Model (LRM), har blivit ett betydande framsteg i det snabba skapandet av tredimensionella modeller baserade på en enda bild. Algoritmen, tränad på en stor datamängd med cirka en miljon 3D-objekt tillgängliga i databaserna Objaverse och MVImgNet, visade exceptionell generaliseringsförmåga när man arbetade med en mängd olika bilder för att skapa XNUMXD-innehåll.
Till skillnad från tidigare modeller som tränats på begränsade datamängder med fokus på en kategori av bilder, använder LRM en transformativ arkitektur som har blivit grunden för många utvecklingar inom djupinlärning, med 500 miljoner parametrar. Detta gör att AI-modellen kan arbeta effektivt med en mängd olika bildtyper, inklusive verkliga foton och visuella collage skapade av andra AI-tjänster som DALL-E och Stable Diffusion.
Yitzong Hong, huvudförfattare till studien, betonade att LRM är ett betydande genombrott inom området XNUMXD-rekonstruktion. Algoritmen kan återge detaljerad geometri och komplexa texturer, till exempel träets struktur, samtidigt som kvaliteten och noggrannheten bibehålls.
Tillämpningen av LRM kan bli verkligt massiv, från design och underhållning till spelindustrin. För designers och 3D-konstnärer innebär detta att man påskyndar processen att skapa modeller, vilket är särskilt viktigt när man utvecklar videospel och animationer. Dessutom lovar möjligheten att använda LRM av vanliga användare att göra 3D-modellering till privilegiet för inte bara proffs. Nu kommer det att vara möjligt att skapa detaljerade modeller även från bilder tagna på en smartphone.
LRM har dock sina begränsningar, såsom suddighet av texturer i dolda delar av bilden. Det är också värt att överväga upphovsrättsfrågor, särskilt i samband med användning av bilder skapade av andra AI-tjänster. För att demonstrera kapaciteten hos LRM skapade Adobe-forskare sida med videodemonstrationer och interaktiva 3D-modeller. Detta belyser AIs växande roll i dagens värld och dess potentiella inverkan på de kreativa industriernas framtid.
Läs också: