项目测评

ARC-AGI-1 · 抽象推理

ARC Prize · 289 条配置有公开分数,按独立指标查看结果和测试条件。

报告身份与条件

资料日期 2026-10-28 · 报告发布日期 —。运行日期与测试条件见各条记录。

榜单资料更新于

  • 运行配置独立保存;不同推理档位分别列出。
  • 逐次测试日未列明;资料更新日期与报告所列型号发布日期分别保留,不替代实际测试日期。
  • 费用按报告公布的运行范围与美元口径比较,不能等同于模型API单价。
  • ARC-AGI-1 · 半私有评测集;不同基准版本分别比较。
  • 半私有评测范围的任务得分,以百分比表示;不与其他版本或测试范围混排。
  • 报告直接列示的单任务费用,USD/任务;不补造总费用或任务数,不表示每成功任务成本或当前API报价。
  • 人类参考单独展示,不参与模型/系统榜单或费用排名。
访问报告原文 ↗

同一报告内分别比较指标,方向与口径见图表说明。
完整数值和运行条件见明细。

任务得分

半私有评测范围的任务得分,以百分比表示;不与其他版本或测试范围混排。 图示 8 / 289 条有值记录;运行配置与日期见明细。

查看图表数据 ·8项
名称%
Claude Fable 5 (Max)98.5
Claude Fable 5 (XHigh)98.5
Claude Opus 5.5 (High)98.5
Gemini 3.8 Flash (High)98.5
Gemini 4 Argon (High)98.5
Gemini 4 Argon (Medium)98.5
GPT-6 Astra (High)98.5
GPT-6 Astra (XHigh)98.5

每任务费用

报告直接列示的单任务费用,USD/任务;不补造总费用或任务数,不表示每成功任务成本或当前API报价。 图示 8 / 289 条有值记录;运行配置与日期见明细。

查看图表数据 ·8项
名称USD / 任务
GPT-5 Nano (Minimal)0.002
GPT-4.1-Nano0.002
GPT-6 Luna (None)0.002
DeepSeek V4 Flash 0731 (None)0.002
Qwen3-235b-a22b Instruct (25/07)0.003
GPT-6 Luna (Low)0.003
GPT-5 Nano (Low)0.003
Nemotron 3.5 Super VL (None)0.004

人类参考

人类基线单独列示,不参与模型与系统排名。

Stem Grad

任务得分
98%
每任务费用
10 USD / 任务

Human Panel

任务得分
98%
每任务费用
17 USD / 任务

完整结果与对象版本

289 / 289 条配置有本范围的公开分数;列表展示有分数的配置,缺项保留“未提供”。同名型号的不同运行配置分别列出。

GPT-6 Astra (Medium)

报告所列型号

报告所列机构:OpenAI

openai-gpt-6-astra · CoT

报告所列发布时间:

任务得分
97.5%
每任务费用
0.239834 USD / 任务

GPT-6 Astra (High)

报告所列型号

报告所列机构:OpenAI

openai-gpt-6-astra · CoT

报告所列发布时间:

任务得分
98.5%
每任务费用
0.283703 USD / 任务

Grok 4.7 (High)

报告所列型号

报告所列机构:xAI

xai-grok-4-7 · CoT

报告所列发布时间:

任务得分
90.16666666666666%
每任务费用
0.642326 USD / 任务

GLM-5.3-Flash (Max)

报告所列型号

报告所列机构:Z.ai

zai-glm-5-3-flash · CoT

报告所列发布时间:

任务得分
91%
每任务费用
0.04307 USD / 任务

Claude Haiku 4.5

报告所列型号

报告所列机构:Anthropic

claude-haiku-4-5-20251001 · Base LLM

报告所列发布时间:

任务得分
14.33%
每任务费用
0.0263 USD / 任务

Claude Sonnet 4 (Thinking 1K)

报告所列型号

报告所列机构:Anthropic

claude-sonnet-4-20250514-thinking · CoT

报告所列发布时间:

任务得分
28%
每任务费用
0.0937 USD / 任务

Grok 3

报告所列型号

报告所列机构:xAI

Base LLM

报告所列发布时间:

任务得分
5.5%
每任务费用
0.0931 USD / 任务

GPT-5.4 Nano (High)

报告所列型号

报告所列机构:OpenAI

gpt-5-4-nano-reasoning · CoT

报告所列发布时间:

任务得分
38.17%
每任务费用
0.07 USD / 任务

Claude 3.7 (16K)

报告所列型号

报告所列机构:Anthropic

Claude_3_7_thinking · CoT

报告所列发布时间:

任务得分
28.6%
每任务费用
0.33 USD / 任务

o4-mini (Low)

报告所列型号

报告所列机构:OpenAI

o4-mini · CoT

报告所列发布时间:

任务得分
21.33%
每任务费用
0.0406 USD / 任务

Claude Opus 5.5 (Low)

报告所列型号

报告所列机构:Anthropic

anthropic-claude-opus-5-5 · CoT

报告所列发布时间:

任务得分
88.5%
每任务费用
0.12008 USD / 任务

GPT-5.4 (Low)

报告所列型号

报告所列机构:OpenAI

gpt-5-4 · CoT

报告所列发布时间:

任务得分
68.17%
每任务费用
0.15 USD / 任务

Gemini 3.5 Flash-Lite (Low)

报告所列型号

报告所列机构:Google

gemini-3-5-flash-lite · CoT

报告所列发布时间:

任务得分
17%
每任务费用
0.011112 USD / 任务

Opus 4.5 (Thinking, 32K)

报告所列型号

报告所列机构:Anthropic

opus-4-5-thinking · CoT

报告所列发布时间:

任务得分
75.83%
每任务费用
0.95 USD / 任务

o3-mini (Low)

报告所列型号

报告所列机构:OpenAI

o3-mini · CoT

报告所列发布时间:

任务得分
14.5%
每任务费用
0.0519 USD / 任务

Claude 3.7 (8K)

报告所列型号

报告所列机构:Anthropic

Claude_3_7_thinking · CoT

报告所列发布时间:

任务得分
21.2%
每任务费用
0.21 USD / 任务

GPT-5.4 Pro (XHigh)

报告所列型号

报告所列机构:OpenAI

gpt-5-4-pro · CoT

报告所列发布时间:

任务得分
94.5%
每任务费用
7.21 USD / 任务

GPT-6 Sol (Max)

报告所列型号

报告所列机构:OpenAI

openai-gpt-6-sol · CoT

报告所列发布时间:

任务得分
95.5%
每任务费用
0.140805 USD / 任务

GPT-5.6 Luna 2026-07-30 (High)

报告所列型号

报告所列机构:OpenAI

openai-gpt-5-6-luna-2026-07-30 · CoT

报告所列发布时间:

任务得分
78%
每任务费用
0.027887 USD / 任务

GPT-5.5 (High)

报告所列型号

报告所列机构:OpenAI

gpt-5-5-2026-04-22-thinking · CoT

报告所列发布时间:

任务得分
94.5%
每任务费用
0.56 USD / 任务