混合形状变形人脸重建

单视图精细重建

将形状变形正交分解为正面位置偏移和深度偏移，分别用显式网格变形和隐式稠密预测表示，使单视图人脸重建保留几何细节。

Yufan, Wang · Le, Huang · Qunfei, Zhao · Xia, Zeyang · Ning, Zhao

IEEE Transactions on Circuits and Systems for Video Technology 2024

参数信息

重建误差

1.8 mm

重建误差

3.5 mm

重建误差

2.1 mm

技术优势

细节更全

正交分解成显式网格变形和隐式稠密预测，分别处理正面偏移和深度偏移，覆盖3DMM低维空间缺失的几何细节。

正畸场景更准

构建正畸专用数据集并设计考虑感兴趣区域相对位置的新指标，在正畸数据上误差降至1.8 mm。

跨数据集表现好

在FaceScape和MICC Florence公开数据集上也取得优异重建性能，验证泛化能力。

应用场景

• 正畸面部重建：正畸医生用单张照片重建面部3D模型，评估牙齿移动对面部形态的影响。
• 3D人脸建模：从单视图生成带几何细节的3D人脸模型，无需多视角或深度传感器。
• 视觉几何重建：显式网格变形结合隐式稠密预测，恢复单目图像中缺失的深度几何细节。
• 面部形态分析：提供高精度面部模型，用于测量正畸治疗前后局部形态变化。