小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
沉浸式翻译 immersive translate
Dify.AI
一分钟读论文:《测试时扩展:瓶颈在筛选,不在采样》

该论文首次在开放生成任务上对比五种测试时扩展方法,发现瓶颈不在生成候选(探索有效),而在选择最终答案(利用失效)。奖励模型相关性低,BoN近乎随机,Fusion仅回收约40%增益。树搜索多样性坍缩,自我修正多无效。结论:候选池非瓶颈,选择才是,Fusion是目前唯一一致有效方法。

一分钟读论文:《测试时扩展:瓶颈在筛选,不在采样》

Micropaper Micropaper · 2026-08-21T00:00:00Z
Qwen 3.8 27B叫板Opus:拉长思考时间补参数不足

阿里通义实验室开源Qwen 3.8 27B模型,以270亿参数在DeepSWE编程测试中超越万亿参数的Opus 4.6 Max,引发热议。其成功依赖“测试时扩展”技术,通过拉长思考时间弥补参数不足,但推理极慢,且存在刷榜争议。本地部署可行,但速度与质量需权衡,参数规模不再是唯一标准。

Qwen 3.8 27B叫板Opus:拉长思考时间补参数不足

极道 极道 · 2026-08-14T21:45:00Z

近期LLM研究要点:模型参数约存储3.6比特数据,存在意外记忆与泛化之分。测试时扩展计算可胜过14倍大模型,方法有best-of-N采样和修订回答。强化学习通过提高温度、解耦裁剪、动态采样及DAPO提升探索。推理模型在简单题上可能过度思考,表现反不如普通模型。Gemini 2.5强调数据质量、可验证奖励与模型奖励结合,并改进学习率以稳定训练。

我最近阅读的关于LLM应用的论文

informal informal · 2025-06-21T16:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码