Fed-CVLC:变长编码压缩联邦学习通信
💡
原文中文,约200字,阅读约需1分钟。
📝
内容提要
本文介绍了一种基于稀疏通信框架的时间相关稀疏化(TCS)方案,通过寻找联邦学习中连续迭代中使用的稀疏表示之间的相关性,以减少编码和传输的开销,提高测试准确性。
🎯
关键要点
- 介绍了一种基于稀疏通信框架的时间相关稀疏化(TCS)方案。
- 通过寻找联邦学习中连续迭代中稀疏表示之间的相关性,减少编码和传输的开销。
- 提高测试准确性。
- 在CIFAR-10数据集上演示了量化加时间相关稀疏化方法的效果。
- 实现了100倍稀疏化的集中式训练准确性。
- 减少了高达2000倍的通信负载。
➡️