Disneyforskare har skapat ett nytt neuralt nätverk som kan förändra den visuella åldern för skådespelare på tv eller i filmer. Tekniken kommer att göra det möjligt för TV- eller filmproducenter att få skådespelare att se äldre eller yngre ut i en automatiserad process som kommer att vara mindre kostsam och tidskrävande än tidigare metoder.
Traditionellt, när specialeffektproffs i en video- eller filmproduktion behöver få en skådespelare att se äldre eller yngre ut (en metod Disney kallar "föryngring"), brukar de använda antingen 3D-skanning och 3D-modellering eller 2D bild-för-bild-digital ansiktsbehandling retuscherande skådespelare med hjälp av Photoshop-liknande verktyg. Denna process kan ta veckor eller mer beroende på jobbets längd.
Däremot automatiserar Disneys nya AI-teknik, kallad Face Re-aging Network (FRAN), processen. Disney kallar det "den första praktiska, helautomatiska och produktionsklara metoden för att rekonstruera ansikten från videobilder."
För att skapa FRAN genererade Disney-forskare slumpmässigt tusentals exempel på syntetiskt åldrade ansikten mellan 18 och 85 år med hjälp av StyleGAN2. Beväpnad med dessa träningsdata utforskade FRAN de allmänna principerna för hur en persons utseende förändras med åldern. Nu när utbildningen är klar kan hon tillämpa dessa åldrandeprinciper på en verklig aktör i rörelse, ruta för ruta.
"Vårt nätverk tränas under handledning på ett stort antal par ansiktsbilder som visar samma syntetiska och fotorealistiska person, märkt med motsvarande källa och målålder", skriver forskarna i motsvarande vetenskapliga artikel. – Genom att generera träningsdata syntetiskt förbigick de den "till synes omöjliga uppgiften" att samla in bilder som visar "olika identiteter, åldrar och etniciteter från olika perspektiv."
Resultatet är vad Disney kallar en "produktionsklar" lösning - vilket betyder att den skapar en produkt som är tillräckligt bra för att användas i en verklig film eller TV-serie. Detta är kanske den första artificiell intelligens (AI)-lösning i sitt slag som dynamiskt kan förändra en skådespelares ålder i en video, trots olika ansiktsuttryck, ljusförhållanden och synpunkter. Forskarna utvecklade också ett användarvänligt gränssnitt för FRAN som gör att artister enkelt kan använda verktyget i en produktionsmiljö.
Med tanke på Disneys historia av att använda datorstödda skådespelare i Star Wars-filmerna och TV-programmen, inklusive de som har föryngrats med CGI, skulle vi inte bli förvånade över att se FRAN-liknande teknik användas flitigt i framtida Disney-filmer, även om inga planer har gjort det. meddelats.
Du kan hjälpa Ukraina att kämpa mot de ryska inkräktarna, det bästa sättet att göra detta är att donera pengar till Ukrainas väpnade styrkor genom Rädda liv eller via den officiella sidan NBU.
Också intressant: