文本位置感知重光照框架

自然语言控制光照

用自然语言指定光照方向，无需图形参数，自动生成多视角一致的重光照3D场景。

Jiangnan, Ye · Zhuang, Jiedong · Jianhong, Bai · 75862439 · Wuhao, Tan · 许佳奕 · Syed Abu Bakar, Syed Abdul Rahman · 胡浩基

Pattern Recognition 2026

参数信息

位置感知度

0.87

技术优势

免图形参数

用户只通过自然语言描述光照方向，无需手动设置光源位置、角度或强度，大大降低了3D场景重光照的专业门槛。

多视角一致

MV-ICLight通过跨视角自注意力和基于极线的特征传播，无需训练即可保证不同视角下的光照效果一致，避免重光照结果在多视角间出现跳变。

位置准确

PAM将用户意图解释为明确的亮度先验，结合几何与语义估计把3D光源放置在场景内容相对的位置上，使得重光照符合用户描述的空间关系，位置感知度LDC指标达到0.87。

应用场景

• 数字孪生：只用文字就能调整数字孪生场景的光照，快速模拟不同时段或环境，无需手动调参。
• AR/VR内容生成：让AR/VR内容创作无需专业光照知识，任何人都能通过自然语言设定光照。
• 3D资产重光照：直接替换传统图形学调光流程，用文本驱动3D资产的多视角一致重光照。
• 场景渲染：为场景渲染管线提供文本控制的光照先验，无需训练即可生成重光照图像。