➡️
继续阅读
-
关于班主任不是主科老师的问题
初中开学家长会上，班主任由历史老师担任，引发家长疑虑。作者分析可能原因：学生数量高峰致师资不足，副科老师获机会；主科老师因班主任工作繁重不愿担任；副科老师...
-
CPU + GPU：为何AI平台工程是一个异构基础设施问题
AI基础设施不应只关注GPU，而应视为CPU、内存、存储和网络协同工作的整体系统。平台团队需匹配各阶段资源需求，而非孤立优化GPU。通过Kubernete...
-
我们如何在一个月内关闭了1500个GitHub问题
Next.js团队利用AI代理“closability”在一个月内关闭了1462个GitHub问题，将积压从2244降至995。代理在沙盒中研究问题、复现...
-
DeepSeek-V4 模型结构（3）：序列维度（下），HCA、混合排布与零件
本文详解DeepSeek-V4模型结构：HCA将128个token压缩为一条目，无需稀疏选择；CSA与HCA交错排布，确保全局信息不丢失；滑窗分支弥补压缩...
-
DeepSeek-V4 模型结构（2）：序列维度（中），Lightning Indexer 与稀疏选择
本文介绍DeepSeek-V4模型中的压缩稀疏注意力（CSA）机制。KV缓存每4个token压缩为一条，1M上下文仍有26万条目，故用lightning ...
-
DeepSeek-V4 模型结构（1）：序列维度（上），从 MLA 到压缩 KV
本文介绍DeepSeek-V4的注意力机制，从MHA到CSA/HCA的演进，重点分析压缩KV缓存的方法。V4将每4或128个token压缩为一条512维K...
