TheAgentCompany: Benchmarking Large Language Model Agents on Significant Real-World Tasks
原文英文,约100词,阅读约需1分钟。
📝
内容提要
本研究探讨了AI代理在工作相关任务中的性能评估,提出了可扩展的基准TheAgentCompany。结果显示,简单任务的自主完成率为24%,而长时任务仍超出当前系统能力。
🎯
关键要点
-
本研究探讨了AI代理在工作相关任务中的性能评估。
-
提出了可扩展的基准TheAgentCompany,用于评估AI代理在模拟工作环境中执行任务的能力。
-
简单任务的自主完成率为24%。
-
长时任务的完成率仍超出当前系统的能力范围。
🏷️