ARC Prize· @arcprize · X·· 7 天前AI 评分54
AI 导读
ARC Prize 公布了 Reflection AI 的 Beam 1.0 在 ARC-AGI (Verified) 上的评测成绩,其中 ARC-AGI-2 达到 23.5% 且成本为 $0.61/task,ARC-AGI-1 达到 74.0% 且成本为 $0.31/task。其最高分数出现在 xhigh 推理档位,而 high 档位在 ARC-AGI-2 上取得了 20.0% 的接近成绩,成本降低约 43%。
正文 · 原文
Beam 1.0 from @reflection_ai on ARC-AGI (Verified):
- ARC-AGI-2: 23.5%, $0.61/task
- ARC-AGI-1: 74.0%, $0.31/task
Beam’s best scores came at xhigh reasoning, but high was close on ARC-AGI-2: 20.0% versus 23.5%, at about 43% lower cost.
来源:ARC Prize · x.com