LiveCodeBench 代码生成 · 2024-08-01 至 2025-05-01

报告身份与条件

资料日期 2026-10-19 · 报告发布日期 —。运行日期与测试条件见各条记录。

• 代码生成成绩按题目发布日期窗口分别比较，总体与简单／中等／困难分项均采用逐题Pass@1的算术均值，显示一位小数。
• 逐题Pass@1已为0–100百分数，不再次乘100；各项题数分别列出，缺少该难度题目时保留空值。
• 题目覆盖LeetCode、AtCoder和Codeforces；日期窗口及题目数量不代表模型实际运行日或独立生成样本次数。
• 预估训练截止日是评测项目的声明，不是型号发布日期；截止日达到或晚于窗口起点的配置保留成绩、独立标识，不参与排名图表。
• 同名模型的推理档位和调用模板分别保留；生成采样、运行日期与测试设置以对应报告说明为准。
• 本报告比较指定题目窗口内的代码生成能力，适用于该范围的模型选型；不同时间窗口和评测设置分别比较。
• 官网默认题目窗口为 2024-08-01 至 2025-05-01（含边界），同组 454 题。