一种数据异构和通信带宽受限环境下的高效联邦学习方法
申请号:CN202410810655
申请日期:2024-06-21
公开号:CN118674069A
公开日期:2024-09-20
类型:发明专利
摘要
本申请提出了一种数据异构和通信带宽受限环境下的高效联邦学习方法。在每轮通信中,各客户端对更新的模型参数进行混合压缩,并将其进行编码后发送至服务器。服务器接收并解码参数,通过判断当前通信轮次是否为跳过周期,决定对参数进行随机洗牌或聚合,以更新全局模型。随后,将更新后的全局模型发送回客户端继续训练,直至达到预设通信轮数。此方法通过创新的压缩技术,显著减少了通信开销,解决了数据异构性较大时的收敛问题。最后,通过实验验证了发明方法的有效性。
技术关键词
联邦学习方法
Huffman编码
通信带宽
客户端
异构
服务器
模型参数更新方法
受限
压缩器
数据
洗牌
周期
随机梯度下降
解码参数
定义
机制
有效性
阶段