小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
沉浸式翻译 immersive translate
LLM作为评委:如何判断你的LLM是否健康

大语言模型评估需多层体系:黄金数据集用于可重复测试,自动指标快速检查客观属性,LLM评委按标准评估相关性、完整性与事实依据,人工审核校准评委并处理高风险案例,生产监控发现遗漏问题。目标是确保应用在关键场景中持续准确、安全、可靠、快速且成本可控。

LLM作为评委:如何判断你的LLM是否健康

ByteByteGo Newsletter ByteByteGo Newsletter · 2026-09-14T15:31:02Z
GLM-5.3创意写作全球第二!AI评委vs真人谁靠谱

GLM-5.3在AI评委的创意写作测试中获全球第二,但人类投票榜未进前十,引发争议。测试由7个LLM评委按16维度打分,GLM-5.3因学会制造冲突而提升,但文笔被指退步。文章质疑AI评AI的可靠性,并指出其编程和安全能力提升显著,但“好故事”标准因AI介入而模糊。

GLM-5.3创意写作全球第二!AI评委vs真人谁靠谱

极道 极道 · 2026-08-22T07:57:00Z
获奖小说竟是AI写的 评委为何看不出来

英联邦文学奖多篇获奖作品被确认是AI生成,评委未能识别,暴露出文学界对AI的认知不足。检测工具Pangram的高准确率揭示了AI写作的普遍性。主办方拒绝筛查AI作品,认为信任仍有效,但这种信任已不再适用。文学界需面对现实,接受AI投稿或进行筛查,以保护新作家的机会。

获奖小说竟是AI写的 评委为何看不出来

极道 极道 · 2026-05-31T00:41:00Z

谷歌第17届Doodle比赛主题为“我的超能力是……”,邀请美国K-12学生提交作品。五位入围者各获1万美元奖学金,作品将在谷歌主页展示。投票时间为4月16日至29日,获胜者将获得额外4.5万美元奖学金。评委包括NBA明星Giannis Antetokounmpo和2025年全国年度教师Ashlie Crosson。

投票开始:帮助选择下一个谷歌Doodle比赛的获胜者

The Keyword The Keyword · 2026-04-16T16:30:00Z

瑞士研究表明,小语言模型(SLM)作为代码评委的效果优于大模型,成本仅为其几十分之一。最佳评委为Qwen2.5 Coder 3B,性能显著提升。

一分钟读论文:《小语言模型作为评委提升代码生成》

Micropaper Micropaper · 2026-02-26T10:00:00Z

OpenAI声称其新模型在国际数学奥林匹克(IMO)中获得金牌,但遭到官方和学界的强烈反对,认为其做法不当。91位评委未参与评分,成绩缺乏官方认证,引发学术道德争议。IMO希望AI公司在闭幕式后公布结果,但OpenAI急于宣布。最终,中国队全员获得金牌,重返世界第一。

IMO怒斥OpenAI自封夺金,“91位评委均未参与评分”

量子位 量子位 · 2025-07-21T05:13:01Z
CTA与戛纳Marché Du Film合作推出全新电影制作与发行奖项类别

消费者技术协会与戛纳电影节合作,为CES 2026设立电影制作与发行奖,旨在表彰电影行业的创新技术与工具,评委来自Cannes Next社区。参赛作品涵盖音视频设备、制作软件、流媒体服务及生成式人工智能等。

CTA与戛纳Marché Du Film合作推出全新电影制作与发行奖项类别

全球TMT-美通国际 全球TMT-美通国际 · 2025-05-16T02:50:51Z

清华、复旦和港科大联合发布RM-BENCH基准,旨在评估奖励模型的认知敏锐度,解决“形式大于内容”的问题。该基准关注模型对细微内容差异的敏感性和风格偏差的鲁棒性,涵盖聊天、代码、数学和安全等领域。研究表明,现有奖励模型在这些领域表现不佳,亟需改进。

首个奖励模型评分基准!清华复旦港科大联合攻克AI评委“偏科”

量子位 量子位 · 2025-05-13T08:19:10Z
赢得黑客马拉松项目的关键是什么?评委的视角

我最近担任了KendoReact和DEV社区赞助的黑客马拉松评委,这让我对技术竞赛有了新的认识。我分享了参与者和评委的实用建议,以帮助大家更好地准备和理解比赛。

赢得黑客马拉松项目的关键是什么?评委的视角

DEV Community DEV Community · 2025-04-08T06:35:56Z

微软开发者挑战赛决赛将于4月23日在北京举行,届时将有顶尖团队和行业专家评审,观众可投票选出获奖团队,并有精美礼品赠送。

微软开发者挑战赛决赛流程 & 评委阵容重磅揭晓!

dotNET跨平台 dotNET跨平台 · 2025-04-03T00:03:07Z
如何快速生成优秀的游戏创意

快速生成优秀游戏创意的方法是从不同角度思考,挑战传统思维能提高评分。例如,在“组装”主题中,我提出了看不见的化学元素组合的游戏,成功吸引了评委的注意。

如何快速生成优秀的游戏创意

DEV Community DEV Community · 2025-02-26T05:33:16Z
恭喜新年写作挑战获奖者!

新年写作挑战获奖者已公布,评委对参赛者的表现印象深刻,共收到近250份高质量投稿,每个主题选出两位获胜者,获奖者将获得6个月DEV++会员资格及其他奖励。感谢所有参与者!

恭喜新年写作挑战获奖者!

DEV Community DEV Community · 2025-02-13T15:37:14Z
Weekly #24:职规大赛历险记

本周参加了湖南省职业生涯规划大赛,比赛缺乏激励,评委提问尖锐。制作PPT过程艰难,演讲需脱稿,最终表现尚可。同时,辅导员的日常工作让我感受到他们的压力与责任。

Weekly #24:职规大赛历险记

SkyWT SkyWT · 2025-01-13T15:45:00Z
Weekly #24:职规大赛历险记

参加湖南省职业生涯规划大赛,比赛缺乏激励,评委提问尖锐。制作PPT困难,演讲需脱稿,表现尚可。辅导员的日常工作让我感受到他们的压力与责任。

Weekly #24:职规大赛历险记

SkyWT SkyWT · 2025-01-13T11:45:00Z
爱范儿明日产品榜单 2024 评委阵容官宣,他们眼中的明日产品是什么

Tomorrow’s Product Award 是爱范儿设立的年度榜单,旨在发掘具有标杆意义的「明日产品」,涵盖消费电子、智能出行和人工智能领域。评选标准包括创新、改变和普惠,评委认为明日产品应提升沟通效率、拓展认知边界,并解决用户痛点,符合未来需求。完整榜单将于2024年12月公布。

爱范儿明日产品榜单 2024 评委阵容官宣,他们眼中的明日产品是什么

爱范儿 爱范儿 · 2024-12-20T07:36:27Z

评委工作变得轻松,尝试不戴护膝且未出意外。与大学老师、Apple员工和投资人共同评审项目,尽管观点不同,但认可的项目一致。活动中有许多饭局,我喜欢安静待在角落,偶尔与老朋友聊天放松。明天将翘班,最后一天不参加。

20241116

61's life 61's life · 2024-11-17T03:11:44Z

最近状态不佳,晚睡和刷手机影响心情,尤其是小红书。看到抄袭的独立开发者帖子,感慨不赚钱的原因。调研音乐产品发现小众需求,期待与B Team合作。明天将担任移动应用创新赛评委,未来一周将忙于各地活动。

20241114

61's life 61's life · 2024-11-14T14:08:41Z

该研究评估了GPT-4在教育反馈中的应用,结果显示57.4%的用户认为其反馈有帮助,尤其在编程教育中表现突出。GPT-4能够有效识别代码错误并提供结构化反馈,但仍需改进以避免误导信息。此外,研究探讨了其在课堂对话分析和教育材料生成中的潜力,显示出与人工评估高度一致性。

开源语言模型的反馈能力评估:利用 GPT-4 作为评委帮助学生的能力

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-05-08T00:00:00Z

WitAwards 2022线下颁奖盛典将于11月16日在「CIS2022网络安全创新大会」上海主会场隆重举行。

「WitAwards中国网安行业2022年度评选」专家评委名单正式揭晓

FreeBuf网络安全行业门户 FreeBuf网络安全行业门户 · 2022-11-07T06:04:13Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码