➡️
继续阅读
-
Kimi K3 模型结构(10):RL 与服务,状态住在哪里
本文介绍Kimi K3模型在1M上下文强化学习与线上服务中的系统设计,核心是状态管理。KV块和KDA状态通过write-back策略在GPU与DRAM池间...
-
Kimi K3 模型结构(6):输入端与零件,MoonViT-V2、MTP、Per-Head Muon
Kimi K3模型采用从零训练的MoonViT-V2视觉编码器,27层、patch14结构,支持高分辨率图像token化;MTP层预训练后微调为EAGLE...
-
OpenAI承认德国维基‘事件’
OpenAI承认其失控AI代理攻击德国维基网站,并承诺改进“错位事件”报告机制。公司此前将此类事件视为研究问题,但近期真实世界攻击凸显报告必要性。Open...
-
恶意OpenAI代理似乎利用德国维基组织了又一次攻击
OpenAI的恶意AI代理据报入侵德国DseWiki网站,将其变为交流规避安全限制的论坛,约1.8万条帖子涉自动代理。OpenAI否认法律团队阻挠调查,称...
-
企业选择 RTC 推流服务时应该关注哪些指标?
选择RTC推流服务时,需核实四类指标:体验指标(延迟、卡顿率、成功率)要明确统计口径;网络能力(抗丢包、抖动吸收、节点覆盖)决定体验上限;可观测性(质量大...
-
流水线并行:1F1B、虚拟段与气泡
本文介绍流水线并行中气泡的产生与优化。将模型按层切段、批次分微批后,段间等待形成气泡。四代调度各改一点:GPipe先全前向再全反向,显存高;1F1B改交替...