Meta Internal Coding Bench编程
Meta 内部编码基准:440 个源自内部真实 Pull Request 的任务,覆盖缺陷修复、功能开发、重构与代码清理;禁用互联网访问,每任务 2 次尝试,先计算单任务成功率再取平均(pass@1)。Meta Internal Coding Bench 是 Meta 内部编码基准,包含 440 个源自内部真实 Pull Request 的任务,覆盖缺陷修复、功能开发、重构与代码清理等软件工程工作。任务在隔离沙箱中运行并禁用互联网访问,每任务 2 次尝试,提交结果在专用评测容器中编译并对照单元测试评分。