Nvidia’s nieuwste AI-rendering is indrukwekkend: een tool die snel “enkele tientallen” 2D-snapshots omzet in een 3D-gerenderde scène. In de onderstaande video zie je de methode in actie, met een model verkleed als Andy Warhol en met een ouderwetse polaroidcamera in de hand. (Overdenk de relatie van Warhol niet: hij is slechts een klein deel van het PR-landschap.)
De tool heet Instant NeRF, verwijzend naar “neurale stralingsvelden– Een technologie die in 2020 is ontwikkeld door onderzoekers van UC Berkeley, Google Research en UCSD. Als je een uitgebreide uitleg wilt over neuroradiatievelden, lees er dan een hier, maar in een notendop, de methode wijst de kleur en intensiteit van het licht toe aan verschillende 2D-opnames en genereert vervolgens gegevens om deze beelden van verschillende observatiepunten te correleren en een uiteindelijke 3D-scène te presenteren. Naast foto’s heeft het systeem gegevens nodig over de positie van de camera.
Onderzoekers hebben dit type 2D-model verbeterd in 3D Sinds een paar jaar-Het toevoegen van meer details aan de eindpresentaties en het verhogen van de snelheid van de presentatie. Nvidia zegt dat zijn NeRF instant-model een van de snelst ontwikkelde tot nu toe is en de rendertijd verkort van een paar minuten tot een proces dat “bijna onmiddellijk” eindigt.
Naarmate de technologie sneller en gemakkelijker te implementeren wordt, kan deze voor allerlei taken worden gebruikt, zegt Nvidia in een blogpost. Functieomschrijving.
“Instant NeRF kan worden gebruikt om avatars of scènes van virtuele werelden te creëren, om deelnemers aan videoconferenties en hun 3D-omgevingen vast te leggen, of om scènes te reconstrueren voor digitale 3D-kaarten”, schrijft Isha Salian van Nvidia. “Deze technologie kan worden gebruikt om robots en zelfrijdende auto’s te trainen om de grootte en vorm van objecten in de echte wereld te begrijpen door er 2D-afbeeldingen of videobeelden van te maken. Het kan ook worden gebruikt in architectuur en entertainment om snel digitale representaties te maken van echte omgevingen die makers kunnen aanpassen en waarop ze kunnen voortbouwen.” (De metaverse lijkt te roepen.)
Helaas heeft Nvidia geen details over zijn methode gedeeld, dus we weten niet precies hoeveel 2D-afbeeldingen nodig zijn of hoe lang het duurt om de uiteindelijke 3D-scène weer te geven (wat ook zal afhangen van de kracht van de computer die de weergave). De technologie lijkt echter snel te evolueren en zou de komende jaren echt impact kunnen gaan maken.
“Proud coffee guru. Web pioneer. Internet expert. Social media specialist.”