英伟达用照片造出逼真 3D 乐器,论文入选计算机视觉顶会

本篇文章给各位网友带来的资讯是：英伟达用照片造出逼真 3D 乐器，论文入选计算机视觉顶会 详情请欣赏下文

6 月 21 日报道，今日，英伟达研究院（NVIDIA Research）的新研究在全球计算机视觉三大顶级会议之一 CVPR 2022（计算机视觉与模式识别会议）上亮相。

▲ NVIDIA 团队从 2D 监督中联合学习拓扑、材质、照明，重建三角网格，无需修改即可在标准游戏引擎中使用

实验表明，该研究提取的模型可用于场景编辑、材料分解和高质量视图插值，所有这些模型都在基于三角形的渲染器（光栅器和路径跟踪器）中以交互速率运行。

结语：将助力简化创意团队的工作流程

在论文最后，本篇论文作者提到，这项研究的主要限制是简化了阴影模型，没有考虑全局照明或阴影。这一选择是有意加速优化，但受制于材质提取和重照明。

随着可微分路径追踪的研究取得新进展，研究人员期待在未来的工作中去除这一限制。其他限制还包括静态照明假设、没有优化摄像机位姿、训练期间高计算资源和内存消耗等。

当然，每当涉及场景重建方法，大众普遍会关心深度伪造问题。对此，研究人员称尚未察觉或预见到其方法的负面用途。

总的来说，NVIDIA 这项能帮助创作者快速将 2D 照片变成 3D 物体、兼容现代 3D 引擎和建模工具的新研究，将有助于进一步简化建筑师、设计师、概念艺术家和游戏开发者等创意团队的工作流程，为他们腾出更多发挥创意的时间。