➡️
继续阅读
-
BUUU签署协议收购Brightray Science 60%股权
BUUU集团签署协议收购Brightray Science 60%股权,后者专注预制模块化数据中心。交易后Brightray成为子公司,创始人王斌任BUU...
-
千问办公上线首月用户数突破 3000万,企业用户占比过半
阿里旗下千问办公上线一个月用户破3000万,企业用户过半。产品高频迭代,推出国际版并开源MyContext技术,与钉钉深度打通。发布专属模型提升性能,单任...
-
数据并行与 ZeRO:三级分片各省多少
本文介绍数据并行与ZeRO优化技术。ZeRO通过三级分片(优化器状态、梯度、权重)减少显存占用,前两级不增通信量,第三级需额外all-gather。ZeR...
-
Kimi K3 模型结构(10):RL 与服务,状态住在哪里
本文介绍Kimi K3模型在1M上下文强化学习与线上服务中的系统设计,核心是状态管理。KV块和KDA状态通过write-back策略在GPU与DRAM池间...
-
Kimi K3 模型结构(6):输入端与零件,MoonViT-V2、MTP、Per-Head Muon
Kimi K3模型采用从零训练的MoonViT-V2视觉编码器,27层、patch14结构,支持高分辨率图像token化;MTP层预训练后微调为EAGLE...
-
《梦幻橄榄球》播客主持人安迪·霍洛韦:一个坚持零邮件收件箱的人
《The Verge》采访了Fantasy Footballers播客主持人Andy Holloway。他希望在繁忙的NFL赛季前保持专注,偏好整洁的标签...