STATE稀疏视图合成网络

结构与纹理解耦

通过混合特征场预测不可见区域结构,同时保留可见区域细节纹理,实现真实感新视图合成。

Xinyi, Jing · Feng, Qiao · Lai, Yukun · Zhang, Jinsong · Yuanqiang, Yu · 李坤

Computational Visual Media 2023

技术优势

能预测遮挡区域结构

通过混合特征场对不可见区域生成合理结构,同时保持可见区域结构不变。

保留精细纹理

纹理编码为变形特征图,在视角变化下保持细节清晰。

多视角自适应融合

分层融合机制利用时空注意力聚合多视角特征,通过置信度图自适应选择重要信息。

支持结构与纹理编辑

隐式解耦的结构与纹理表示便于独立编辑,拓展应用范围。

应用场景