VR-Fi手势识别模型

位置识别一体

面向VR场景的轻量级手势感知模型，同时实现空间定位与手势分类，无需额外视觉设备，降低计算与隐私开销。

Hongbo, Wang · 李欣 · Li, Jiachun · 朱浩瑾 · Luo, Jun

IEEE Transactions on Mobile Computing 2025

参数信息

定位准确率

94.47 %

手势识别准确率

92.13 %

联合准确率

89.47 %

技术优势

单 Wi-Fi 即可联合定位识别

通过 VR 头盔内嵌 Wi-Fi 同时实现手势定位与识别，无需额外视觉传感器，降低计算和隐私开销。

联合任务准确率 89.47%

在同时完成手势定位与识别的任务上达到 89.47% 的准确率，证明多任务学习的有效性。

带宽扩展提升定位分辨率

采用频率跳变带宽扩展技术，在有限 Wi-Fi 带宽下提高空间分辨率，实现跨区域定位。

识别准确率 92.13%

手势识别准确率达到 92.13%，超过部分视觉方案，显示出 Wi-Fi 感知的竞争力。

应用场景

• VR手势交互：直接内置于 VR 头盔，用 Wi-Fi 信号识别手势，摆脱手柄和摄像头的束缚。
• 具身智能交互：为具身智能体提供无需视觉的连续手势指令，适用于隐私敏感场景。
• 无线感知：展示了 Wi-Fi CSI 在手势定位与识别联合任务上的潜力，推动无线感知应用落地。
• 机器人遥操作：可通过手势远程操控机器人，无需专用控制器，降低遥操作门槛。