➡️
继续阅读
-
机器人不能停下来等模型：星尘发布 SmoothRL，让在线强化学习跟上大模型的异步推理
星尘智能发布SmoothRL框架，解决真实机器人异步执行中的在线强化学习问题。该框架仅对实际执行的动作进行学习，并保持训练与部署节奏一致。在投掷、戴笔帽、...
-
开学季 | 超级闹钟、算教学周、统计作业：三条快捷指令让学校生活轻松一点
本文介绍开学季用快捷指令解决日常琐事：设置需移动才能关闭的闹钟防赖床；计算开学第几周；自动收集作业邮件附件、统计人数、找出未交名单并提醒。强调自动化减少重...
-
smolts：面向教学语言的教学型IDE
作者开发了名为smolts的教学IDE，用于SMoL教学语言，灵感来自Stacker项目。该IDE支持S表达式编程，可逐步执行并可视化显示continua...
-
DeepSeek-V4 模型结构（6）：优化器与稳定性，Muon
DeepSeek-V4采用Muon优化器，通过谱范数最速下降实现逐矩阵正交化，用Newton-Schulz迭代逼近SVD，混合系数提升小奇异值并精确稳定大...
-
Kimi K3 模型结构（8）：训练并行，一步训练里谁在等谁
本文介绍Kimi K3模型预训练的并行系统设计，聚焦MoE层expert并行。核心是MoonEP方案：每个rank预留E/R个冗余expert槽位，确保任...
-
DeepSeek-V4 模型结构（5）：宽度维度，DeepSeekMoE 的四个改动
本文介绍DeepSeek-V4模型结构中MoE层的四处改动：路由打分从sigmoid改为sqrt(softplus)以消除饱和；前三层用固定hash ro...
