女性美丽,男性领导:机器翻译和语言建模中的性别刻板印象
原文中文,约300字,阅读约需1分钟。发表于: 。我们提供了 GEST - 一份用于衡量掩码语言模型和英文到其他语言机器翻译系统中的性别刻板推理的新数据集。GEST 包含了与 9 种斯拉夫语言和英语相容的 16 个关于男性和女性的性别刻板印象的样本 (例如,女性美丽,男性领导)。该刻板印象的定义由性别专家提供的建议。我们使用 GEST 评估了 11 个掩码语言模型和 4 个机器翻译系统。我们发现在几乎所有评估模型和语言中都存在显著和一致数量的刻板推理。
GEST是一个新的数据集,用于评估掩码语言模型和机器翻译系统中的性别刻板推理。该数据集包含16个关于男性和女性的性别刻板印象的样本,适用于9种斯拉夫语言和英语。通过使用GEST评估了11个掩码语言模型和4个机器翻译系统,发现几乎所有评估模型和语言中都存在显著和一致数量的刻板推理。