MetaVRain AI-aangedreven 3D rendering chip is 1000x krachtiger dan huidige Nvidia GPU's
Een Zuid-Koreaans team van onderzoekers onder leiding van professor Yoo Hoi-Jun van het Korea Advanced Institute of Science & Technology heeft onlangs de ontwikkeling afgerond van een AI-chip die 2D-beelden kan omzetten in volledig bewerkbare 3D-modellen met een zeer laag stroomverbruik en een exponentieel hogere verwerkingssnelheid dan bestaande oplossingen van Nvidia bestaande oplossingen van Nvidia. DigiTimes meldt dat de nieuwe neurale renderprocessor bekend staat als de MetaVRain en gemakkelijk kan worden geïntegreerd in een draagbaar apparaat ter grootte van een smartphone. Het doel is in wezen het vereenvoudigen van de processen om voorwerpen en personen uit de echte wereld om te zetten in 3D-avatars voor de Metaverse.
Als gevolg van deze vereenvoudiging kunnen de kosten voor de productie van 3D-renders aanzienlijk worden verlaagd, omdat de geautomatiseerde AI-training de omslachtige handmatige 3D-bewerking via gespecialiseerde programma's zoals Blender overbodig maakt. Ook de VRAM-vereisten kunnen tot 180 keer worden verminderd. Het vastleggen en renderen wordt zo net zo eenvoudig als een paar foto's maken en ze uploaden naar een slimme toepassing. Nadat het 2D-materiaal is omgezet in een gemakkelijk bewerkbaar 3D-model, kan de slimme toepassing texturen toepassen die vooraf zijn getraind op basis van bepaalde kunststijlen zoals die van Picasso of Van Gogh.
Om de aanvankelijke inefficiënties met de AI-ondersteunde renderprocessen te verhelpen, implementeerde het team van onderzoekers een algoritme dat de menselijke visuele cognitie nabootst. Net als mensen die eerst de contouren van een object waarnemen en dan de hele vorm samenstellen, bakent de MetaVRain-chip eerst vormen af via voxels met een lage resolutie en past dan eerder gerenderde structuren toe om de rekensnelheid te verhogen.
De beeldopname gebeurt via een zeer geavanceerde CMOS-sensor en het renderproces verloopt minstens 911 keer sneller dan bij de huidige GPU's voor consumenten. Een demovideo laat zien dat MetaVRain een model kan renderen met 32,8 fps, terwijl een RTX 2080 GPU slechts minder dan 3% van een frame in één seconde rendert. De superieure snelheden verminderen verder de energiebehoefte voor een enkel gerenderd frame met 26.400 keer (133 mW) in vergelijking met consumenten GPU's. Deze specificaties maken real-time rendering mogelijk voor VR/AR toepassingen met behulp van slechts een smartphone.
Terwijl AI ontwikkelingen nu alles met betrekking tot de Metaverse overschaduwen, geloven professor Yoo Hoi-Jun en zijn team dat AI-gebaseerde chips zoals de MetaVRain uiteindelijk de komst van de Metaverse kunnen versnellen.
Bron(nen)
