Ai2 / Allen Institute for AI·· 13 天前AI 评分61
Ai2 发布 FairStress 基准:测量 LLM 决策中被隐藏的公平性不对称
FairStress: A deeper evaluation of fairness in LLM decision-making
AI 导读
Ai2 发布 FairStress 基准,通过 300 个两候选决策场景和对抗前缀,测量 LLM 在面对说服性论据时改变决策的难易是否因候选人所属人口群体而不同,全部组合超过 1300 万测试用例,并已开放下载、集成进 Olmo-eval。
来源:Ai2 / Allen Institute for AI · allenai.org