(资料图片仅供参考)
英伟达公司推出了一种名为Neuralangelo的新人工智能模型,可以从2D视频中创建物体的3D复制品,无论是经典的雕塑还是普通的卡车和建筑。Neuralangelo的工作方式是在二维视频中选择几个从不同角度显示物体的帧,因此它可以清楚地了解其深度、大小和形状。然后,它创建一个物体的粗略的三维表示,再进行优化,以模仿真实事物的细节。
据该公司称,新模型采用了其旧模型Instant NeRF的技术,能够准确捕捉用户想要在3D中重现的任何事物的更精细的细节。这些包括其纹理、图案和颜色变化。英伟达称,Neuralangelo捕捉棘手纹理的能力,如屋顶瓦片的粗糙度和大理石的光滑度,"大大超过了以前的方法"。显然,它甚至足以从智能手机拍摄的视频中创建可用的虚拟物体,这可以为创作者提供一种简单的方法来为他们的项目生成3D再现。这也是一个快速的解决方案:英伟达研究院告诉我们,该工具可以在两小时内创建3D场景。
关于Neuralangelo的论文的共同作者Ming-Yu Liu说,它将 "最终使开发者能够将详细的物体--无论是小型雕像还是大型建筑--导入视频游戏或工业数字双胞胎的虚拟环境"。在下面的视频中展示了这项技术的作用,英伟达表示,它可以从无人机镜头中创建大规模的远景,使开发者更容易在他们的游戏中再现真实的地点。它还有很多其他潜在的应用,包括机器人技术、虚拟现实体验、建筑,当然还有艺术。
该公司的研究部门将在6月18日至22日在温哥华举行的计算机视觉和模式识别会议上展示Neuralangelo。