ARC Prize· @arcprize · X·· 2 小时前AI 评分31
AI 导读
绘制 ARC-AGI 模型评分图表显示,所有三个 benchmark 之间存在强烈的关联关系。 例如,幂律曲线 v2 = v1^4.53 解释了大约 98% 的 ARC-AGI-2 评分变异。在 ARC-AGI-1 上得分相同的模型,在 ARC-AGI-2 上的差距仍可能超过 20 个百分点。
正文 · 原文
Plotting ARC-AGI model scores reveals a strong relationship across all three benchmarks.
For example, the power curve v2 = v1^4.53 explains about 98% of the variation in ARC-AGI-2 scores. Models tied on ARC-AGI-1 can still differ by over 20 percentage points on ARC-AGI-2.
来源:ARC Prize · x.com