英伟达:将通过AI技术将2D照片合成为3D场景
来源:超能网
2022-03-31 12:30:13
近日,英伟达演示了最新的AI技术,一位穿着像Andy Warhol的艺术家手持旧款宝丽来相机,通过数十张2D照片快速转换成3D渲染场景。英伟达表示,75年前宝丽来拍摄第一张即时照片的时候,以快速的2D图像捕捉3D世界是开创性的,而今天AI正做着相反的事情,即几秒内将一组静止图片转换成3D数字场景。
英伟达表示,通过一种名为Instant NeRF的工具,也就是“神经辐射场”技术,结合Tensor Cores进行AI加速,可以加快模型训练和场景渲染的速度,相比竞争对手的实现方法提高了1000倍。“神经辐射场”是由加州大学伯克利分校、加州大学圣地亚哥分校以及谷歌研究院在2020年开发的一项技术,通过映射不同2D镜头的颜色和光线强度生成数据,并结合摄像机位置的数据,然后将这些来自不同位置的图像连接起来,渲染出一个完整的3D场景。
据英伟达介绍,传统方法创建3D场景可能需要数小时甚至更长时间,具体取决于可视化的复杂性和分辨率。AI技术的引入大大加快了这个过程,基于英伟达开发的“多分辨率哈希网格编码”技术运行在NVIDIA GPU上,让新的Instant NeRF模型成为迄今为止最快的同类模型之一。
英伟达希望Instant NeRF未来可以为虚拟世界创建场景、以3D方式捕捉视频会议参与者及其环境、为3D数字地图重建场景,并用于训练机器人和汽车自动驾驶技术等领域。(文章来源:超能网)