跳到正文
Hugging Face Blog·· 3 小时前精选AI 评分58

Ai2 发布 FairStress:评测 LLM 决策公平性的新基准

FairStress: A deeper evaluation of fairness in LLM decision-making

AI 导读

Ai2 发布 FairStress 基准,用于衡量 LLM 在招聘、贷款、医疗、教育、住房等场景中的人口统计公平性,不只比较最终选择,还测试模型在对抗性前缀劝说下改变决策的难易程度。

推荐理由

FairStress 把公平性评测从最终选择扩展到对抗性前缀下的决策稳定性,并给出跨模型、跨训练阶段的实测差异。

来源:Hugging Face Blog · huggingface.co