Google 新AI 工具「NeRF-W」合成超精细 3D 照片,制作模拟场景再也不需建模
藉由手机多镜头协作,或是演算法的运用,3D 照片的制作并不是什麽新奇的事情,但大家都知道用手机快速合成的 3D 照片不管主体的精准度、动态的真实感都还属於业余中的业余,顶多就是个自娱娱人性质罢了。Google 研究人员近日开发的新 AI 技术「NeRF in the Wild」(NeRF-W)则与你想的不一样,这才叫真正的身历其境啊!
Google 新AI 工具「NeRF-W」合成超精细 3D 照片,制作模拟场景再也不需建模
如果想要制作出乾净、漂亮的 3D 照片,又或是到景点去观光想要拍摄没有杂物干扰的地标、建筑物是一件非常困难的事情,特别是一些知名的景区,往来车辆、人口众多,更是天方夜谭。Google 研究团队所开发的新 AI 工具 NeRF-W 采用基於 Python 程式语言的神经辐射场技术(NeRF),以神经网路将网路上收集来的数张静态照片加以叠合,只保留下照片中的主要标的影像,移除照片中多余的人、车与非固定遮蔽物,即便这些叠合的照片中光源不一,演算法也会自动平衡光线,重建出极具真实感的 3D 影像。
该工具的运作方式笔者也将其步骤拆解开来让大家了解一下:
- 将网路上的多张静态影像叠合。
大家可以对照一下上面右边合成後的图片,可以看出这张没有干扰的空景图是由下面这些图片经过神经网路与演算法的运作叠合而成。
- 藉由演算法清除目标主体前的人、物等非固定式遮蔽物,保留下壮观的建筑本体。
- 以不影响 3D 外观的方式修补叠合後的影像,除保持光源一致性外,也让整体的光线过渡与外观线条更平滑顺畅且保有合理的真实性。
- 透过 NeRF-W 可以将景物与特效结合,创作出效果截然不同的 3D 场景,还能输出 1080P 与 QHD 画质的影像。
这支 AI 工具的好处不只是用来娱乐观赏,如果你本身的职业或兴趣需要制作模拟场景,或是制作拟真的 3A 级大作游戏,都可以省去 3D 建模所需的时间,快速又轻松地利用 AI 帮你完成这等烧脑的精细活。
【查看完整 NeRF-W 论文,点这里】
◎资料来源:NeRF-W