小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
智谱GLM 5.2量化算法革命:滑铁卢实习生三个月干翻英伟达

滑铁卢大学的实习生Joshua Hill在三个月内开发出一种新型量化算法,显著提升了大模型的压缩效率和性能,超越了英伟达的ModelOpt。该算法通过全局优化模型层的依赖关系,缩短搜索时间,提高压缩率,解决了量化中的信息损失问题。这一突破将降低AI服务成本,提高用户体验,推动行业进步。

智谱GLM 5.2量化算法革命:滑铁卢实习生三个月干翻英伟达

极道
极道 · 2026-07-13T23:37:00Z

本研究提出了一种新颖的自适应后训练量化算法StableQuant,显著优化了语音基础模型的量化性能。该算法将模型尺寸缩小至四分之一,并在8位量化下保持字错误率低于0.3%,同时提升推理速度。

StableQuant: Layer-wise Adaptive Post-Training Quantization for Speech Foundation Models

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2025-04-21T00:00:00Z

本研究探讨了在联邦学习中提高梯度通信效率的量化算法,如FTTQ、T-FedAvg和DAdaQuant。通过随机梯度量化和压缩技术,显著降低通信成本并提升学习效率,同时确保模型的准确性。研究分析了通信成本与模型性能之间的权衡,并提出了加速收敛速度的有效解决方案。

约束速率的量化用于通信高效的联邦学ä¹

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-09-10T00:00:00Z

本文研究了无线联邦学习中的物理层量化和传输方法,提出了多种量化算法以提高通信效率和降低能耗。实验结果表明,自适应量化策略能够在保持模型准确性的同时显著减少通信比特数,并加速收敛速度。此外,研究探讨了量化误差对收敛时间的影响,并提出了优化能耗和性能的联合设计方法。

FedAQ: 基于上下行自适应量化的通信高效联邦边缘学习

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-06-26T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码