多模态联邦学习框架

基于同态加密,支持多模态数据,无需第三方协作者即可完成安全协作训练。

公茂果 · Zhang, Yuanqiao · 高源 · Qin, A. K. · 武越 · 王善峰 · Yihong, Zhang

IEEE Transactions on Information Forensics and Security 2023

技术优势

支持多模态数据

通过两步多模态Transformer捕获跨域语义特征,解决传统联邦学习忽视多模态数据分布差异的问题。

无需第三方协作者

设计了完整的训练与传输协议,加密过程无需第三方参与,降低协作复杂度和泄露风险。

应用场景