参考引导人脸组件编辑网络

几何级部件替换

无需人工标注或蒙版，利用修复模型从参考图直接迁移人脸部件形状风格，实现多样可控的几何编辑。

Deng, Qiyao · 曹捷 · Liu, Yunfan · Li, Qi · Sun, Zhenan

Pattern Recognition 2024

技术优势

无需蒙版

通过修复模型自动定位并替换目标部件，省去精确蒙版或草图的绘制。

形状可换

引导生成图像学习参考部件的形状风格，实现几何变化而非仅属性调整。

更像本尊

引入域验证判别器，使生成的部件真实感贴近源人脸，保持整体协调。

应用场景

• 具身智能交互：让虚拟形象或机器人面孔实时变换五官风格，增强交互真实感。
• 人机交互：用户通过参考图直观指定想要的五官形状，无需专业绘画。
• 视频通信编码：在视频通话中替换发送方五官，压缩传输所需的身份信息。
• 机器人视觉：帮助机器人理解不同人脸部件形状，提升识别与交互能力。
• 数字人驱动：快速驱动数字人更换五官，适应不同角色或虚拟场景需求。