➡️
继续阅读
-
新学期,新气象:正版软件 & 付费栏目限时优惠
少数派于9月4日至10日推出开学季优惠,涵盖小窗译、MarginNote、白描、HapiGo等正版软件及付费栏目折扣,会员可叠加优惠券,部分年度会员可免费...
-
怎么DLSS 5突然变成热门民间活动了?
一项前沿技术如何彻底调动起了群众的积极性。前几天的德国科隆游戏展期间,我去NVIDIA的展台用顶配PC,体验了DLSS 5在内的多项NVIDIA最新游戏图...
-
任天堂下周将连续举办两场Direct活动
任天堂宣布下周将举办两场Direct活动:9月8日播出《塞尔达传说》40周年纪念特别节目,时长约30分钟;9月9日举行常规直面会,时长约45分钟,聚焦Sw...
-
并行策略总览:六个维度各切什么、怎么通信
本文介绍大模型并行训练的核心概念,将DP、TP、SP、PP、EP、CP六种并行方式按切分维度、显存减少、通信开销和等待关系列表对比。并行本质是切分模型并引...
-
Kimi K3 模型结构(10):RL 与服务,状态住在哪里
本文介绍Kimi K3模型在1M上下文强化学习与线上服务中的系统设计,核心是状态管理。KV块和KDA状态通过write-back策略在GPU与DRAM池间...
-
Kimi K3 模型结构(9):显存,把 2.8T 塞进 GPU
本文详解Kimi K3模型训练中的显存优化策略,通过账本形式分析权重、激活等内存占用,并介绍六项关键技术:均衡PP rank激活、统一激活管理器、MoE反...