多模态意图融合系统

93.62%识别率

面向表达受限用户，融合触觉、语音、肌电手势、视觉手势和触觉反馈的多模态交互系统，可适应不同场景。

Qin, Chaolong · 宋爱国 · Zhao, Yu

Intelligent Service Robotics 2023

参数信息

意图识别率

93.62 %

技术优势

识别率高

融合算法在实验中达到93.62%的意图识别率，有效融合多模态信号。

表达自由

用户可自由选择一种或多种模态表达意图，适应个人能力差异。

适应变化

算法考虑了短期和长期变化，系统在不同场景下保持稳定。

应用场景

• 服务机器人交互：集成到服务机器人，准确识别用户意图，提升交互效率。
• 老年护理机器人：辅助老年人独立生活，通过多模态交互弥补表达受限问题。
• 多模态人机交互：提供多模态融合算法，处理多种输入模态，增强系统鲁棒性。
• 智能家居健康：在智能家居健康场景中，让用户自由选择模态控制设备，提供护理辅助。