穿墙词级唇读系统

隔墙识别20词

利用相干SISO雷达穿透24厘米砖墙，在2米外以88.51%准确率识别词组，无需光照且不受口罩、玻璃等障碍物影响。

Dongsheng, Zhu · 韩崇 · 郭剑 · 孙力娟

IEEE Internet of Things Journal 2024

参数信息

词级识别准确率

88.51 %

识别词汇量

20

数据集样本数

9583

技术优势

隔砖墙也能读唇

采用低频相干SISO雷达穿透24厘米砖墙，克服了高频雷达穿透性不足的瓶颈。

小动作也测得准

利用I/Q三维曲线表征唇动的幅度、频率和旋转特征，提升对微小运动的敏感性。

数据少也不怕

提出的数据增强方法和IQResNet提升了模型在小样本数据集上的泛化能力。

应用场景

• 人机交互：在照明受限或被遮挡环境下，实现无需接触的语音指令输入。
• 非接触式传感：非接触式采集唇动信号，避免穿戴和接触带来的不适与卫生问题。
• 辅助沟通：为语音障碍者提供一种隔墙或遮挡条件下的沟通方式。
• 工业监测：在嘈杂或有毒害的工业环境中，可靠地识别唇语指令控制设备。