➡️
继续阅读
-
让 Apple Watch 记录的每一趟游泳数据更有意义:即刻游
即刻游是一款配合Apple Watch使用的游泳训练应用,核心功能包括详细记录游泳数据(如SWOLF、分段数据、心率区间)、自定义训练计划、AI分析提供专...
-
一分钟读论文:《数据喂饱了,算法还饿着》
清华大学团队研究发现,在线蒸馏中仅用一条训练query即可覆盖全量数据71.5%的学生状态,恢复大部分收益。瓶颈不在数据供给,而在算法吸收效率。多教师设定...
-
数据并行与 ZeRO:三级分片各省多少
本文介绍数据并行与ZeRO优化技术。ZeRO通过三级分片(优化器状态、梯度、权重)减少显存占用,前两级不增通信量,第三级需额外all-gather。ZeR...
-
大语言模型的基石:Transformer 入坑笔记(四) - 线性注意力(Linear Attention) 的基础
本文探讨Transformer注意力机制的计算复杂度问题,指出标准注意力在长上下文下时间和空间开销呈平方增长。文章概述了高效注意力、FlashAttent...
-
QFO 修复首次启动问题:小工具最该重视的其实是安装链路
QFO v1.0.2修复了Windows首次启动时Python依赖源不可用的问题,通过加入多个镜像源自动回退机制,确保安装链路顺畅。文章强调本地开源工具的...
-
角加速度计算器
本文介绍一款在线角加速度计算器,用户可输入初始与最终角速度、时间间隔等参数,计算角加速度、平均角速度、角位移、扭矩及动能变化,并支持单位切换、图形生成和预...