Hugging Face Blog·· 10 天前精选推荐指数71
Ai2 发布 FairStress 基准,评测大模型决策中的群体公平性
FairStress: A deeper evaluation of fairness in LLM decision-making
AI 导读
Ai2 发布 FairStress,一个衡量大模型在涉及人的决策中人口群体公平性的基准,覆盖 29 个领域、300 个双候选人场景,并已集成进 Olmo-eval。
推荐理由
FairStress 把公平性评测从最终选择扩展到对抗前缀下的决策稳定性,并给出跨模型与训练数据的实测差异。
来源:Hugging Face Blog · hf-mirror.com