标题摘要内容
英伟达展示Instant NeRF:数秒内通过AI技术将2D照片合成为3D场景
来源:超能网 | 作者:教育中心 | 发布时间: 2023-01-27 | 1776 次浏览 | 分享到:

近日,英伟达演示了最新的AI技术,在展示的视频中,一位穿着像Andy Warhol手持旧款宝丽来相机,通过数十张2D照片快速转换成3D渲染场景。英伟达表示,75年前宝丽来拍摄第一张即时照片的时候,以快速的2D图像捕捉3D世界是开创性的,而今天AI正做着相反的事情,即几秒内将一组静止图片转换成3D数字场景。



在这段演示里,英伟达不但展现了自己AI技术的效果,而且致敬了20世纪波普艺术的领袖人物,以及纪念了宝丽来的“即时照片”技术诞生75周年,可谓是一箭三雕,非常有心思。



英伟达表示,通过一种名为Instant NeRF的工具,也就是“神经辐射场”技术,结合Tensor Cores进行AI加速,可以加快模型训练和场景渲染的速度,相比竞争对手的实现方法提高了1000倍。“神经辐射场”是由加州大学伯克利分校、加州大学圣地亚哥分校以及谷歌研究院在2020年开发的一项技术,通过映射不同2D镜头的颜色和光线强度生成数据,并结合摄像机位置的数据,然后将这些来自不同位置的图像连接起来,渲染出一个完整的3D场景。



据英伟达介绍,传统方法创建3D场景可能需要数小时甚至更长时间,具体取决于可视化的复杂性和分辨率。AI技术的引入大大加快了这个过程,基于英伟达开发的“多分辨率哈希网格编码”技术运行在NVIDIA GPU上,让新的Instant NeRF模型成为迄今为止最快的同类模型之一。英伟达希望Instant NeRF未来可以为虚拟世界创建场景、以3D方式捕捉视频会议参与者及其环境、为3D数字地图重建场景,并用于训练机器人和汽车自动驾驶技术等领域。