FedFusion:多星多模态深度融合驱动的联邦学习
原文中文,约400字,阅读约需1分钟。发表于: 。FedFusion 是一种基于流形的多模态融合框架,通过联合估计每个客户端的浅层特征的显著流形结构,并通过级联和加法方法将特征矩阵压缩为低秩子空间,作为后续分类器的特征输入,从而解决多卫星、多模态数据的联合融合问题。该框架在三个多模态数据集上的性能表现超过现有方法,达到 94.35% 的分类平均准确率,同时将通信成本压缩了 4 倍,并在基于 Jetson TX2...
FedFusion是一种基于流形的多模态融合框架,通过联合估计每个客户端的浅层特征的显著流形结构,并通过级联和加法方法将特征矩阵压缩为低秩子空间,解决多卫星、多模态数据的联合融合问题。该框架在三个多模态数据集上的性能表现超过现有方法,达到94.35%的分类平均准确率,同时将通信成本压缩了4倍,并在基于Jetson TX2工业模块的轨道边缘计算架构上进行了广泛的真实卫星图像的数值评估,结果显示FedFusion将训练时间缩短了48.4分钟(15.18%),同时优化了准确性。