➡️
继续阅读
-
蒂姆·费里斯秀文字记录:克服逆境的故事,以及如何将失败转化为胜利——蒂姆·麦格罗、特里·克鲁斯、达克斯·谢泼德等(第881期)
该播客节目汇集多位嘉宾(如蒂姆·麦格罗、特里·克鲁斯等)分享失败经历,讲述如何将挫折转化为成长契机,强调主动掌控人生、从错误中学习,并视障碍为机遇而非阻碍。
-
DeepSeek-V4 模型结构(2):序列维度(中),Lightning Indexer 与稀疏选择
本文介绍DeepSeek-V4模型中的压缩稀疏注意力(CSA)机制。KV缓存每4个token压缩为一条,1M上下文仍有26万条目,故用lightning ...
-
DeepSeek-V4 模型结构(1):序列维度(上),从 MLA 到压缩 KV
本文介绍DeepSeek-V4的注意力机制,从MHA到CSA/HCA的演进,重点分析压缩KV缓存的方法。V4将每4或128个token压缩为一条512维K...
-
DeepSeek-V4 模型结构(0):一张图看懂 DeepSeek-V4
本文介绍DeepSeek-V4模型架构:Pro版总参数1.6T、61层,Flash版284B、43层,均采用4条残差流、交错CSA/HCA压缩注意力与Mo...
-
CD销量激增,实体媒体持续复兴
美国唱片业协会报告显示,2026年上半年CD销量达1750万张,同比增长45.7%,销售额增长58.6%至1.711亿美元,扭转了此前下滑趋势。黑胶唱片销...
-
Kimi K3 模型结构(7):结构决定系统
本文总结Kimi K3模型结构对训练与推理系统的影响。KDA采用三种执行形态(FlashKDA、设备内上下文并行、状态回滚)处理固定大小状态;上下文并行通...