多视角姿态校准扩散模型

生成即绑定的3D角色

该模型将单幅图像中任意姿态的角色规范化为标准姿势并生成多视角一致视图,解决了姿态歧义和自遮挡问题,使重建的3D角色可直接用于绑定和动画。

Hao-Yang, Peng · Jia-Peng, Zhang · 国孟昊 · Cao, Yanpei · 胡事民

ACM Transactions on Graphics 2024

技术优势

姿态校准

将输入图像中的任意姿态转换为规范姿态,同时保留关键属性,从而为后续重建提供一致的多视角输入。

多视角一致性

图像条件多视角扩散模型生成多视角一致的图像,无需额外优化即可直接用于重建。

免优化重建

基于 transformer 的稀疏视角重建模型以单次前馈方式生成 3D 模型,无需耗时的逐例优化。

高质量纹理

纹理反向投影策略从多视角图像生成高质量纹理贴图,使模型外观逼真。

应用场景