跨模态流传输架构

低时延高可靠多模态

利用模态内冗余和模态间相关性，同时满足多模态业务的差异化传输需求。

Dan, Wu · 周亮

IEEE Wireless Communications 2023

技术优势

降低流流量

自适应流调度策略利用模态内冗余和模态间相关性，大幅减少需要传输的数据量。

增强可靠性

调度策略显著降低信道不确定性和触觉信号随机到达对时延抖动和可靠性的影响。

抵消时延

通过预测模型提前发送预测的触觉信号，抵消双向触觉传输中的时延。

最大化鲁棒性

音频和视频流采用分层复用结构，结合功率域NOMA和LMDC-FEC，充分利用有限资源提升传输鲁棒性。

应用场景

• 沉浸式通信系统：同时满足多模态业务的低时延、高可靠和高吞吐需求，提升沉浸式体验。
• 触觉互联网：通过预测和提前发送触觉信号抵消时延，保障触觉互联网的双向对称传输。
• 多模态交互应用：利用模态间相关性优化资源分配，支持多模态交互应用的多样化传输需求。
• 资源受限无线网络：通过降低流流量和高效资源复用，在资源受限无线网络中实现高性能传输。
• 低时延高可靠通信：调度和资源分配方案减少时延抖动并提高可靠性，满足低时延高可靠通信需求。