英伟达通过AI技术将2D照片合成为3D场景

文章来源：超能网发布时间：2022-03-31

分享到

日前，英伟达演示了最新的AI技术，一位穿着像Andy Warhol的艺术家手持旧款宝丽来相机，通过数十张2D照片快速转换成3D渲染场景。

日前，英伟达演示了最新的AI技术，一位穿着像Andy Warhol的艺术家手持旧款宝丽来相机，通过数十张2D照片快速转换成3D渲染场景。英伟达表示，75年前宝丽来拍摄第一张即时照片的时候，以快速的2D图像捕捉3D世界是开创性的，而今天AI正做着相反的事情，即几秒内将一组静止图片转换成3D数字场景。

英伟达表示，通过一种名为Instant NeRF的工具，也就是“神经辐射场”技术，结合Tensor Cores进行AI加速，可以加快模型训练和场景渲染的速度，相比竞争对手的实现方法提高了1000倍。“神经辐射场”是由加州大学伯克利分校、加州大学圣地亚哥分校以及谷歌研究院在2020年开发的一项技术，通过映射不同2D镜头的颜色和光线强度生成数据，并结合摄像机位置的数据，然后将这些来自不同位置的图像连接起来，渲染出一个完整的3D场景。

据英伟达介绍，传统方法创建3D场景可能需要数小时甚至更长时间，具体取决于可视化的复杂性和分辨率。AI技术的引入大大加快了这个过程，基于英伟达开发的“多分辨率哈希网格编码”技术运行在NVIDIA GPU上，让新的Instant NeRF模型成为迄今为止最快的同类模型之一。

英伟达希望Instant NeRF未来可以为虚拟世界创建场景、以3D方式捕捉视频会议参与者及其环境、为3D数字地图重建场景，并用于训练机器人和汽车自动驾驶技术等领域。