➡️
继续阅读
-
DeepSeek-V4.1 模型结构(3):序列维度(下),Hierarchical Sparse Indexer 与 FP4 KV cache
DeepSeek-V4.1 采用分层稀疏索引器降低解码开销:第20层先全量打分,选出最多16384个候选位置,后续Reindex层仅在候选池内打分,使计算...
-
DeepSeek-V4.1 模型结构(2):序列维度(中),CSA2 的三种模式
DeepSeek-V4.1 的 CSA2 通过跨层共享压缩全局 KV,将 KV cache 从每 token 5.41 条降至 2.5 条。每层全局注意力...
-
DeepSeek-V4.1 模型结构(1):序列维度(上),CED
DeepSeek-V4.1 借鉴 YOCO,提出 CED 结构:decoder 的全局 KV 由 encoder 末态投影得到;prompt 中多数 to...
-
EP228:SSH 工作原理
SSH 工作流程:客户端与服务器建立 TCP 连接,交换版本并协商加密算法,各自独立计算会话密钥,密钥不在网络上传输。服务器发送公钥和签名,客户端通过 k...
-
Splice CEO卡库尔·斯里瓦斯塔瓦认为AI邮件正在扼杀对话
Splice CEO卡库尔·斯里瓦斯塔瓦在访谈中表示,AI代写邮件和文档会破坏真实对话,让人无法判断文字背后是否有人,这种交流更糟。她主张AI音乐工具应保...
-
Rust 版 Pi 工作基本完成了,记录下
作者用 Rust 重写 Pi Agent,动机是学习 Rust、理解 Agent 内部机制、打造可复用库并减少运行开销。项目包含 CLI、TUI 和 SD...