反射消除与内容修复联合
专门针对眼镜反射问题,结合反射消除与内容修复分支,能够在去除反射的同时推理并修复被遮挡的眼睛细节,避免视觉伪影。
Wentao, Zou · 卢笑 · Zhilv, Yi · Ling, Zhang · Fu, Gang · Ping, Li · 肖春霞
IEEE Transactions on Circuits and Systems for Video Technology 2024
内容修复分支专门针对强反射区域进行内容推理,能够恢复被严重遮挡的眼睛纹理。
结果融合模块根据每个像素的反射强度自适应地融合消除结果和修复结果,从而避免视觉伪影。
引入眼睛对称性损失,利用人眼自然的对称性约束生成结果,减少不自然的视觉伪影。
构建了首个真实世界眼镜反射数据集ReyeR,为训练和评估提供了真实数据基础。