采用自监督学习直接从语音推断出更逼真的唇部运动轨迹,无需预定义动作,跨语言泛化。
Hu, Yuhang · Jiong, Lin · Wyder, Philippe Martin · Yifeng, Cao · Steven, Tian · Yunzhe, Wang · Cameron, Mehlman · Chen, Boyuan · Lipson, Hod · ORecord 科技单元
Science Robotics 2026
10自由度软硅胶唇能再现细腻的人类嘴部运动,克服了传统刚性唇的局限性。
利用自监督学习直接从语音推断唇部轨迹,省去手动定义规则和动作的繁琐。
模型在未训练过的10种语言上也能有效唇音同步,扩展了机器人的交互范围。