在GoogleResearch为其MultiNeRF添加新的AI降噪工具后,摄影师可能很快就能有效地“在黑暗中看到”(在新标签中打开)项目。RawNeRF程序可以读取图像,使用人工智能为在较暗条件和低光环境下拍摄的照片添加更高级别的细节(以及更少难看的伪影)。根据该项目背后的团队的说法,它比任何其他降噪工具都更有效。
研究人员解释说:“当对许多嘈杂的原始输入进行优化时,NeRF产生的场景表示非常准确,以至于其渲染的新颖视图优于在相同宽基线输入图像上运行的专用单图像和多图像深度原始降噪器。”(在新标签中打开)在康奈尔大学的一篇论文中。
NeRF是一个视图合成器-一种能够扫描数千张照片的工具(在新标签中打开)重建准确的3D渲染。
据项目研究人员之一本·米尔登霍尔(BenMildenhall)称,NeRF最适用于光线充足的照片和低噪音水平。换句话说,它是为白天拍摄而设计的。
低光和夜间拍摄被证明是有问题的,在阴影中隐藏细节或在后期提高亮度时变得更加嘈杂。Mildenhall和团队发现的问题是去噪工具可以在一定程度上降低噪声,但会以图像质量为代价。
随着RawNeRF的出现,人工智能将在不去除细节的情况下消除噪音-有效地让摄影爱好者“在黑暗中看到”。
在视频演示中(在新标签中打开),NeRFintheDark——最初于2022年5月出版,当时基本上没有引起注意——米尔登霍尔拿着一部只在烛光下点亮的手机。谷歌研究员解释说,RawNeRF“能够结合从许多不同的相机视点拍摄的图像,共同去噪和重建场景”。
重建的图像在线性HDR色彩空间中渲染,让用户可以进一步操纵角度、曝光、色调映射和焦点。在他的视频中,Mildenhall指出,这些变化中的每一个是如何“创造出一种可以将注意力吸引到场景的不同区域的大气效果”的。
虽然仍处于研究阶段,还不是Google官方支持的产品(还),但RawNeRF提供了一个关于人工智能如何帮助创意人员更好地反映他们周围世界的诱人一瞥。