跳到正文
Hugging Face Blog·· 2026-02-04精选AI 评分69

Hugging Face 推出 Community Evals 社区评测功能

Community Evals: Because we're done trusting black-box leaderboards over the community

AI 导读

Hugging Face 推出去中心化评测功能 Community Evals,允许基准数据集仓库直接展示排行榜并由社区公开提交评测成绩。评测规范基于 Inspect AI 格式,模型仓库可通过 YAML 文件存储自身得分,任何用户均可通过 PR 提交模型评测结果并关联论文或复现日志。

推荐理由

该功能将评测数据与模型及数据集仓库直接打通,为开源社区提供了一种去中心化且可追溯的评测协作方式。

来源:Hugging Face Blog · huggingface.co