密度引导神经渲染器

不用几何先验

从场景中学习密度空间来指导点云渲染，在大型驾驶场景上实现逼真且实时的视图合成。

Zhuopeng, Li · Wu, Chenming · Zhang, Liangjun · 朱建科

IEEE Transactions on Automation Science and Engineering 2024

技术优势

无需几何先验

密度空间通过体积渲染自动提供几何信息，省去了外部法线或深度估计步骤。

实时渲染

点基渲染器配合密度引导的融合模块，使渲染速度满足实时应用需求。

合成质量高

在自动驾驶数据集上验证，合成驾驶场景图像逼真，避免了现有方法常见的模糊问题。

应用场景

• 自动驾驶仿真：为自动驾驶算法训练生成逼真的传感器仿真视图，替代昂贵且危险的真实路测。
• 实时三维重建：实现大规模场景的实时三维重建与视图合成，用于实时监控与交互式应用。
• 神经渲染：提供一种无需几何先验的神经渲染范式，简化渲染流程并提高效率。
• 机器人视觉仿真：为机器人视觉系统生成多样化训练数据，提升在复杂环境中的感知能力。