COPAL-ID:印尼语本土文化与细微差别的推理

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

COPAL-ID是一个公开可用的印度尼西亚语常识推理数据集,结合了印度尼西亚的当地文化细微差别,提供了更自然的印度尼西亚文化领域内的日常因果推理描绘。研究发现,目前最好的开源多语言模型在COPAL-ID上表现不佳,与文化无关的XCOPA-ID相比,准确率显著降低,这说明这些语言模型在理解印度尼西亚本土细微差别方面仍然落后于人类。

🏷️

标签

➡️

继续阅读