正在加载页面内容
NL2Repo
temperature=1.0, top_p=1.0, max_new_tokens=48k, 400K 上下文, 反作弊检测NL2Repo（Natural Language to Repository）评估 AI 根据自然语言描述生成完整代码仓库的能力。模型需构建包含多文件、依赖管理、配置文件等的完整项目结构，是衡量 AI 从零搭建完整软件项目能力的创新基准。
编程官方网站
| # | 模型 | 得分 (%) | 厂商 | 来源 | |
|---|---|---|---|---|---|
| 1 | 69.7 | Anthropic | Hy3 Hugging Face README | ||
| 2 | 58.2 | Anthropic | Seed2.1 官方评测报告 | ||
| 3 | 52.9 | OpenAI | MiniMax M3 技术报告 | ||
| 4 | 49.8 | Anthropic | GLM-5.1 技术报告 | ||
| 5 | 48.9 | 智谱AI | Hy3 Hugging Face README | ||
| 6 | 47.2 | 阿里巴巴 | Hy3 Hugging Face README | ||
| 7 | 47 | 字节跳动 | Hy3 Hugging Face README | ||
| 8 | 45.6 | 腾讯 | Hy3 Hugging Face README | ||
| 9 | 43.7 | 字节跳动 | Seed2.1 官方评测报告 | ||
| 10 | 43.2 | Anthropic | Qwen3.6-27B 技术报告 |
