肌骨机器人强化学习控制器

部分可观测下突破控制瓶颈

该控制器利用记忆与注意力推断缺失状态,并融合肌肉协同先验加速学习,使肌骨机器人在仅13维状态且无速度与末端信息时仍能完成到达任务。

Wang, Xiaona · Chen, Jiahao · 乔红

Robotic Intelligence and Automation 2024

参数信息

状态维度(部分观测)
13
状态维度(完整)
21

技术优势

部分观测下也能完成任务

通过记忆与注意力网络从历史观测中推断充分的内在状态,弥补缺失的速度和末端信息,使机器人仍能完成到达任务。

学习更快更准

在21维完整状态和13维部分状态下,学习效率和准确率均显著高于传统TD3算法。

有先验知识加持

将神经科学中的肌肉协同假设嵌入网络结构和奖励塑造,提升了算法对结构变化后的肌骨机器人的适应能力。

应用场景