一名网友近日在社交论坛 Reddit 分享了其团队关于实时照片拟真神经渲染的研究。研究中介绍了一种不需要网格仅使用原始点云作为代理几何体从新视点渲染复杂场景的新渲染方法。用户可以使用普通摄像机扫描对象，利用如 Agisoft Metashape 等广泛可用的软件生成点云，再将点云和视频提供给算法。该算法的核心要素是为云中的每个点学习的 8 维描述符，而不是常见的 3 维 RGB 颜色。渲染神经网络解释此描述符并输出 RGB 图像。研究人员还在大型 Scannet 数据集上训练网络，以提高它在新场景中的泛化能力。