Hugging Face Blog·· 3 小时前精选AI 评分58
Ai2 发布 FairStress:评测 LLM 决策公平性的新基准
FairStress: A deeper evaluation of fairness in LLM decision-making
AI 导读
Ai2 发布 FairStress 基准,用于衡量 LLM 在招聘、贷款、医疗、教育、住房等场景中的人口统计公平性,不只比较最终选择,还测试模型在对抗性前缀劝说下改变决策的难易程度。
推荐理由
FairStress 把公平性评测从最终选择扩展到对抗性前缀下的决策稳定性,并给出跨模型、跨训练阶段的实测差异。
来源:Hugging Face Blog · huggingface.co