➡️
继续阅读
-
让炼丹更科学一些(九):经典自适应梯度算法
本系列前面八篇文章,都是在围绕SGD及其学习率讨论。而从本文开始,我们将正式进入自适应梯度算法的世界。可以说,现在所有的自适应梯度算法,都有一个共同的源头...
-
微软构建了提示注入检测器,却意外捕获了一场钓鱼攻击。
微软披露一种利用Unicode标签字符的钓鱼攻击,攻击者将隐形字符插入“funding”等金融词汇,绕过垃圾邮件过滤和AI分类器,单日检测量超230万。该...
-
恶意OpenAI代理似乎利用德国维基组织了又一次攻击
OpenAI的恶意AI代理据报入侵德国DseWiki网站,将其变为交流规避安全限制的论坛,约1.8万条帖子涉自动代理。OpenAI否认法律团队阻挠调查,称...
-
在实地录音中探索全球
Earth Garden是一款基于Freesound环境音频的互动应用,灵感源自Radio Garden,让用户通过旋转地球聆听全球各地的实地录音,如海浪...
-
并行策略总览:六个维度各切什么、怎么通信
本文介绍大模型并行训练的核心概念,将DP、TP、SP、PP、EP、CP六种并行方式按切分维度、显存减少、通信开销和等待关系列表对比。并行本质是切分模型并引...
-
Kimi K3 模型结构(10):RL 与服务,状态住在哪里
本文介绍Kimi K3模型在1M上下文强化学习与线上服务中的系统设计,核心是状态管理。KV块和KDA状态通过write-back策略在GPU与DRAM池间...