Google’s nieuwe NeRF AI heeft geleerd om in het donker beter te zien dan welke camera dan ook


Computationele fotografie is tegenwoordig een groot ding. Niet alleen op het gebied van smartphones, maar ook met software voor de desktop die gebruik maakt van foto’s die met een “echte camera” zijn genomen. Een specifiek gebied waar dit nuttig is, is ruisonderdrukking. Het is automatisch ingebouwd in veel smartphone camera apps en het is beschikbaar voor de desktop in toepassingen zoals Noise Ninja en Topaz DeNoise AI, om nog maar te zwijgen van denoising functies ingebouwd in apps zoals Lightroom.

Google’s nieuwe Neural Radiance Fields (NeRF) AI, getiteld RawNeRF (AKA NeRF in the Dark)blaast ze echter allemaal weg, met beelden die niet alleen zo goed zijn dat ze er bijna onberispelijk uitzien, maar het kan vervolgens ook volledig kunstmatige 3D-scènes genereren waarin je achteraf kunt bewegen, en ook de belichting, gamma & tone mapping en zelfs de scherpstelling aanpassen – inclusief bokeh-ballen!

Gepresenteerd door Two Minute Papers, is de nieuwe Google AI die in de video wordt getoond waarschijnlijk het beste ruisonderdrukkingshulpmiddel dat ik tot nu toe heb gezien, voor welk systeem dan ook, zelfs als we alle andere dingen die het kan, zoals 3D-reconstructie en het creëren van bokeh waar een f/1.2-objectief jaloers op zou zijn, buiten beschouwing laten.

Nu smartphones met de maand krachtiger worden, hoeven we misschien niet lang meer te wachten om dit niveau van denoising-technologie te zien verschijnen op de camera’s in onze zakken. En als je het op de desktop wilt proberen, dan kan dat nu al. Alle code is beschikbaar om te downloaden van GitHub en zelf te proberen en er is meer informatie over het proces hier.

De mogelijkheden van deze technologie, zelfs met het niveau waar het nu al op zit, zijn behoorlijk mindblowing. Het biedt veel mogelijkheden voor alles van smartphone camera’s tot TV shows en Hollywood films. Hopelijk wordt dit (of iets dat erop lijkt) binnen een jaar of twee toegepast in veel van de bewerkingsprogramma’s die we dagelijks gebruiken!