➡️
继续阅读
-
GPT-6 Astra带火循环Transformer:参数不增反降的AI架构新方向
2026年,OpenAI的GPT-6 Astra采用“循环深度”技术,在Transformer中引入深度循环,不增加参数却加深计算,引发AI安全争议。该技...
-
专访康宁 CCO 李汉超:175 年以来,康宁始终是一家创新材料公司
康宁公司庆祝成立175周年,专注于显示玻璃、光纤和半导体封装等材料创新。在中国深耕46年,与京东方等企业合作,推动显示产业发展。面对AI时代,康宁布局玻璃...
-
英伟达买下Hugging Face的真正算盘
英伟达以129.3亿美元收购开源AI平台Hugging Face,交易金额暗藏表情符和品牌色梗。此举旨在掌控开源生态,被视为下一代CUDA,以巩固其统治地...
-
Kimi K3 模型结构(10):RL 与服务,状态住在哪里
本文介绍Kimi K3模型在1M上下文强化学习与线上服务中的系统设计,核心是状态管理。KV块和KDA状态通过write-back策略在GPU与DRAM池间...
-
Kimi K3 模型结构(9):显存,把 2.8T 塞进 GPU
本文详解Kimi K3模型训练中的显存优化策略,通过账本形式分析权重、激活等内存占用,并介绍六项关键技术:均衡PP rank激活、统一激活管理器、MoE反...
-
DeepSeek-V4 模型结构(7):结构决定系统
DeepSeek-V4模型采用混合压缩注意力(mHC),将KV缓存分为状态缓存和分页缓存,分别管理滑窗KV与压缩条目。上下文并行通过点对点通信和all-g...