跳到正文
Hugging Face Blog·· 10 天前精选推荐指数71

Ai2 发布 FairStress 基准,评测大模型决策中的群体公平性

FairStress: A deeper evaluation of fairness in LLM decision-making

AI 导读

Ai2 发布 FairStress,一个衡量大模型在涉及人的决策中人口群体公平性的基准,覆盖 29 个领域、300 个双候选人场景,并已集成进 Olmo-eval。

推荐理由

FairStress 把公平性评测从最终选择扩展到对抗前缀下的决策稳定性,并给出跨模型与训练数据的实测差异。

来源:Hugging Face Blog · hf-mirror.com