Ai2 发布 FairStress 基准,测出 LLM 决策中被隐藏的群体不对称
FairStress: A deeper evaluation of fairness in LLM decision-making
AI 导读Ai2 发布 FairStress 基准,通过 300 个两候选决策场景和对抗性前缀扩展出的 1300 多万测试用例,测量大语言模型决策中的隐藏群体不对称。测试发现模型在身份显式时出现反刻板过度纠正,向少数群体编码候选者的切换比向多数群体多 8.8 至 42.4 个百分点,模型解释措辞也随群体不同而变化。
另有 1 家信源报道
- Ai2 发布 FairStress 基准,测出 LLM 决策中的反刻板印象过度纠正Hugging Face 社区博客 · 27 天前
来源:Ai2 / Allen Institute for AI · allenai.org
事件后续1
查看事件全部- Ai2 发布 FairStress 基准,测出 LLM 决策中被隐藏的群体不对称Ai2 / Allen Institute for AI · 27 天前