➡️
继续阅读
-
2026 08 08 HackerNews
2026-08-08 Hacker News Top Stories # AMD 收购 Taalas,通过将模型蚀刻在硅片上实现推理性能大幅提升...
-
【Transformer 与注意力机制】58|后 Transformer 时代:架构会消失还是会进化
Transformer 将进化为混合架构,结合注意力机制、长程状态和外部记忆等模块,以更高效地处理信息并支持多模态输入。硬件发展将影响架构设计,评估方式将...
-
【Transformer 与注意力机制】56|状态空间模型:Mamba、S4 的线性复杂度路径
Transformer 用 KV Cache 保存全部历史,SSM 用固定状态压缩历史。本文讲清 S4 为何长程却难训、Mamba 的 selective...
-
【Transformer 与注意力机制】57|RWKV / RetNet / 线性注意力:各种降低复杂度的探索
线性注意力把 softmax attention 改写成可累积的矩阵状态,RWKV 让训练走 Transformer 的路、推理走 RNN 的路,RetN...
-
刷新行业纪录:Oklo核反应堆一年就达到临界状态
核反应堆一年就点火?这速度简直在嘲讽全世界的拖延症。 Oklo公司在德州荒地扔了颗核能炸弹,不是爆炸,是临界状态。从破土到核链式反应自持,掐表算不到一年。...
-
马斯克Terafab芯片厂比金字塔大十倍:造全球最大建筑来解决芯片荒
导语:比金字塔还大的芯片工厂,专治各种不服。但最魔幻的不是它有多大,而是造芯的关键命门,攥在地球另一头一家公司手里。 Terafab,一座建筑面积将碾压全...