➡️
继续阅读
-
Kimi K3 模型结构(10):RL 与服务,状态住在哪里
本文介绍Kimi K3模型在1M上下文强化学习与线上服务中的系统设计,核心是状态管理。KV块和KDA状态通过write-back策略在GPU与DRAM池间...
-
又当了一回网络工程师,找到满速断网问题
搬家后宽带频繁断网,尤其在高速下载或看高清视频时。排查发现路由器、运营商均无问题,最终确定是墙内埋设的网线故障。将设备移至弱电箱后问题解决,网速提升一倍。...
-
DeepSeek-V4 模型结构(4):深度维度,mHC
该文详解DeepSeek-V4的mHC残差结构:将单条残差流拓宽为4条,通过读、写、混三算子连接子层。为保稳定,混合矩阵被约束为双随机矩阵(非负、行和列和...
-
Kimi K3 模型结构(4):深度维度,Attention Residuals
本文解析Kimi K3模型中的Attention Residuals(注意力残差)结构。该机制将残差连接视为深度方向上的RNN,通过可学习伪query对e...
-
关于班主任不是主科老师的问题
初中开学家长会上,班主任由历史老师担任,引发家长疑虑。作者分析可能原因:学生数量高峰致师资不足,副科老师获机会;主科老师因班主任工作繁重不愿担任;副科老师...
-
CPU + GPU:为何AI平台工程是一个异构基础设施问题
AI基础设施不应只关注GPU,而应视为CPU、内存、存储和网络协同工作的整体系统。平台团队需匹配各阶段资源需求,而非孤立优化GPU。通过Kubernete...