小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

本研究探讨了扩散概率模型在生成任务中的分布不匹配问题,并提出通过分布鲁棒优化(DRO)来解决。结果显示,对抗训练(AT)显著提高了模型的鲁棒性和生成性能。

Improved Diffusion-based Generative Model with Enhanced Adversarial Robustness

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2025-02-24T00:00:00Z

本研究提出了DRPruning方法,利用分布鲁棒优化技术应对大型语言模型在规模和计算成本上的挑战。实验结果显示,该方法在单语和多语言环境中表现优越,具有广泛的应用潜力。

DRPruning: Efficient Large Language Model Pruning through Distributionally Robust Optimization

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-11-21T00:00:00Z

本文提出了一种基于神经生成模型的分布鲁棒优化方法,旨在增强模型在不确定分布下的表现。通过KL约束的松弛优化和大规模生成模型的梯度优化,解决了实现和优化的挑战。实验结果表明,该方法在鲁棒性上优于现有基线模型。

一种深度生成学习方法用于两阶段自适应鲁棒优化

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-09-05T00:00:00Z

本文探讨了高维凸函数的随机零阶查询优化,提出了两种算法,并证明其收敛性优于经典方法。此外,研究还涉及分布鲁棒优化中的新算法,展示了在非凸损失下的有效性和收敛速度。

零阶随机镜面下降算法用于 minimax 过量风险优化

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-08-22T00:00:00Z

本文提出了一种基于图神经网络的节点分类不确定性感知学习框架,通过分布鲁棒优化提升节点嵌入学习的鲁棒性。研究表明,该框架在噪声条件下的预测性能优于现有方法。同时介绍了DEGNN、Feature Propagation和GREET等新模型和方法,在图机器学习中表现出显著的性能提升。

通过多跳特征质量评估实现抗噪无监督图表示学习

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-07-29T00:00:00Z

本文探讨了基于Wasserstein度量的分布鲁棒优化方法,应用于投资组合优化和不确定性量化。研究提出了数据驱动的决策方法,解决有限样本和参数不确定性问题,展示了良好的计算效果和实用性,并强调了在不确定性下的优化策略构建。

基于数据驱动的多阶段分布鲁棒线性优化与嵌套距离

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-07-23T00:00:00Z

本研究提出了多种改进的直接偏好优化(DPO)方法,以增强对噪声数据的鲁棒性和生成文本的质量。结合分布鲁棒优化(DRO)及新方法如Dr. DPO、Mallows-DPO、fDPO等,研究表明这些方法在强化学习与人类反馈的对齐中表现优越,尤其在处理有限偏好对时,显著提升了模型的性能和稳定性。

$β$-DPO:动态 $β$ 的直接偏好优化

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-07-11T00:00:00Z

本文提出了一种基于神经生成模型的分布鲁棒优化(DRO)方法,通过建模不确定集合中的分布,提升模型在不确定环境中的表现。研究开发了FlowDRO框架,利用Wasserstein距离解决DRO问题,增强模型的泛化能力。实验结果表明,该方法在多个领域的应用中优于现有正则化方法。

可微分分布鲁棒优化层

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-06-24T00:00:00Z

本文探讨了基于Wasserstein度量的分布鲁棒优化方法,应用于投资组合优化和不确定性量化。研究提出了多种模型和技术,包括最小均方误差估计和条件风险价值估计,旨在提高有限样本和参数不确定情况下的决策效果。实证结果表明,这些方法在策略评估和随机优化中优于传统方法。

上下文优化在协变量漂移下的鲁棒方法:通过相交的 Wasserstein 球

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-06-04T00:00:00Z

本文探讨了分布鲁棒优化(DRO)在机器学习中的应用,提出多种算法以提升模型的鲁棒性和泛化能力。研究显示,这些算法在处理不平衡数据和超大数据集时表现优异,有效克服了传统风险最小化方法的局限性,实验结果验证了其有效性。

通过凹面最大化寻找最优鲁棒数据混合

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-06-03T00:00:00Z

本文探讨了一种基于随机算法的分布鲁棒优化(DRO)方法,适用于非凸和凸损失函数,结合条件风险价值(CVaR)算法,解决分布变化和离群点问题,提升机器学习性能。实验结果表明,该方法在大规模应用中效率显著高于传统方法。

大规模非凸随机约束分布鲁棒优化

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-04-01T00:00:00Z

介绍了一种培训机器学习模型的方法,以保持在输入扰动下的公平性,并使用分布鲁棒优化方法进行训练。该方法在两个容易受到性别和种族偏见影响的机器学习任务上表现良好。

快速与公平:机器学习中公平性的高效二阶鲁棒优化

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-01-04T00:00:00Z

该文介绍了FlowDRO框架,用于基于流的分布鲁棒优化问题。该框架利用Wasserstein不确定性集,提高算法计算效率和泛化能力。

基于流量的分布鲁棒优化

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2023-10-30T00:00:00Z

该研究揭示了对比学习(CL)对采样偏差具有内在的容忍度,并通过分布鲁棒优化(DRO)的视角填补了现有理论无法解释这一现象的研究空白。研究发现,CL 实质上是在负采样分布上进行 DRO,从而在各种潜在分布中实现鲁棒性。研究还提出了一种新的基于 φ- 散度的广义互信息估计方法,并引入了一种新颖的调整的 InfoNCE 损失(ADNCE)来减轻 CL 的潜在缺点。实验证实了该方法的有效性。

通过分布式鲁棒优化理解对比学习

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2023-10-17T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 模力方舟 Gitee AI 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码