小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
天下苦「调参」久矣!MIT师生推出全新RandOpt算法

MIT师生提出RandOpt算法,通过随机扰动参数简化预训练模型的调参过程,能够找到“专家”,效果与传统方法相当。研究表明,模型越大,随机改动的效果越明显,且无需复杂训练。此方法节省时间和算力,但依赖优质的预训练数据。

天下苦「调参」久矣!MIT师生推出全新RandOpt算法

量子位
量子位 · 2026-03-16T07:12:20Z

本文介绍了一种新的高维统计推断方法perturb-max,通过随机扰动和优化注入随机性到最大后验预测器中,产生无偏样本。同时,在低维扰动情况下提高采样效率。还证明了perturb-max值的期望和最大扰动值之和是模型熵的上界,并通过测量结果使得采样平均值与期望值的偏差以样本数量的指数衰减,有效近似期望。

基于有理多项式混沌扩展的贝叶斯优化的线性结构动力学模型的最大后验估计

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-08-07T00:00:00Z

通过观察高维度输入数据的实践系统,发现对抗性攻击对大多数模型具有威胁性,随机扰动易受影响。需要更严格的对抗性训练来检测对抗性示例。

对抗性攻击如何干扰表面稳定准确的分类器

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2023-09-07T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码