Hugging Face Blog·· 2025-10-07精选AI 评分71
BigCode 发布 BigCodeArena:通过真实代码执行评测代码生成模型
BigCodeArena: Judging code generations end to end with code executions
AI 导读
Hugging Face 旗下 BigCode 项目推出 BigCodeArena,这是一个通过在真实沙箱中端到端执行代码来评测代码生成模型的平台。该平台支持 Python、JavaScript、Rust 等 10 种编程语言以及 React、Streamlit 等 8 个运行环境,允许用户直接与生成的网页交互或调试多轮代码。
推荐理由
该平台将代码评测从静态文本检查推进到动态沙箱执行,展现了真实运行反馈对提升人类和模型偏好判断准确度的直接影响。
来源:Hugging Face Blog · huggingface.co