小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
个性化群体相对策略优化用于异质偏好对齐

本文介绍了一种新的个性化对齐框架——个性化群体相对策略优化(P-GRPO),旨在解决大型语言模型在满足多样化个体偏好时的不足。P-GRPO通过针对特定偏好组的奖励历史进行优势估计,保持了学习不同偏好的对比信号。研究表明,P-GRPO在多项任务中表现出更快的收敛速度和更高的奖励,能够更好地对齐异质偏好信号。

个性化群体相对策略优化用于异质偏好对齐

Apple Machine Learning Research
Apple Machine Learning Research · 2026-04-02T00:00:00Z

本研究提出了Persona-judge范式,解决个性化对齐语言模型的计算成本和适应性问题。该方法在未见偏好的情况下实现无训练的个性化对齐,实验表明其是一种可扩展且高效的解决方案,推动了定制对齐的发展。

Persona-judge: Personalized Alignment of Large Language Models via Token-level Self-judgment

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2025-04-17T00:00:00Z

蚂蚁与人大团队推出AlignXpert个性化对齐大模型,能精准识别用户偏好,并开源130万用户画像数据集。该模型通过上下文对齐和偏好桥接对齐两种方法,提升用户偏好预测准确率17.06%。研究强调个性化对齐的重要性,旨在解决大模型对少数群体声音的忽视问题。

首个个性化对齐大模型问世!可精准识别用户内在动机和偏好,还有百万用户画像开源数据集 | 蚂蚁&人大

量子位
量子位 · 2025-04-07T09:21:55Z

本研究评估了大型语言模型在个性化对齐方面的能力,特别是在处理用户提供的安全关键上下文时。分析表明,即使是最优秀的模型在理解用户需求时也存在系统性不一致,强调了需要更细致的对齐方法以促进安全的人工智能助手发展。

CURATe: Benchmarking Personalised Alignment of Conversational AI Assistants

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-10-28T00:00:00Z

本文探讨了大型语言模型(LLM)个性化对齐的挑战与风险,提出了三层政策框架以确保符合人类偏好。研究表明,通过个性化参数调整和用户特定嵌入模型,LLM在用户偏好对齐方面表现优异,显著提升了个性化推荐效果。新方法如OPPU和HYDRA在多项测试中超越现有技术,推动了用户中心语言模型的发展。

个人化大型语言模型:根据个体偏好定制LLM

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-09-30T00:00:00Z

本文探讨了大型语言模型(LLMs)个性化对齐的挑战与风险,提出了三层次政策框架以确保符合人类偏好。研究介绍了OpenAssistant的发布及其优于ChatGPT的表现,强调了人类反馈在模型训练中的重要性,并提出了Contrastive Unlikelihood Training (CUT)框架以改进模型输出。研究还发现模型偏好可被操控,影响评分结果,强调了对齐的重要性。

WildFeedback:将大型语言模型与实时用户交互和反馈对齐

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-08-28T00:00:00Z

本文探讨了大型语言模型(LLMs)的安全性和对齐性,提出通过合成数据训练模型以减少偏见和隐私问题。研究引入了Guide-Align方法,显著提高了模型的安全性和质量,并讨论了个性化对齐的挑战,提出了三层政策框架,评估了多语言环境下的安全对齐性,强调了开发相应策略的必要性。

ABC 对齐:用于安全与准确性的大型语言模型对齐

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-08-01T00:00:00Z

本研究提出了一种新框架,通过奖励建模和高质量演示训练语言模型,避免依赖已对齐的LLMs。ALMoST模型在与InstructGPT的比较中表现优异,并通过细粒度监督提升了LLM性能。研究探讨了个性化对齐的挑战,提出线性对齐算法以提高效率,强调人类反馈在模型对齐中的重要性。

朝向与文本反馈对齐的语言模型

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-07-24T00:00:00Z

本文探讨了大型语言模型的个性化对齐及其安全性与隐私问题,提出了三层次政策框架以平衡用户体验与安全控制。研究分析了模型的脆弱性、潜在攻击及防御措施,并开发了中文 LLM 安全评估基准,评估了15个模型的安全表现。强调了人类偏好对模型输出的影响及隐私问题的重要性,呼吁更多关注用户隐私的研究。

个性化语言模型中的安全性 - 效用权衡探索

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-06-17T00:00:00Z

本文评估了医学大型语言模型(LLMs)的安全性和对齐性,提出微调作为缓解策略,并强调个性化对齐的重要性。研究提出了三层政策框架以确保符合人类价值观,通过测试多个LLMs发现,更符合人类意图的模型可信度更高。此外,引入了“负责任的语言模型开发”框架,以确保输出的公平性、安全性和稳健性,强调在机器学习流程中考虑这些因素的重要性。

确保安全和高质量的输出:面向语言模型的指南库方法

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-03-18T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 模力方舟 Gitee AI 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码