跳到正文
热点事件持续更新

ARC-AGI-3基准测试:模型自主构建和改进harness能力有限

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

在最新的ARC-AGI-3基准测试中,研究揭示模型在自主构建harness和可靠适应之间存在显著差距。尽管自治搭 harness相对容易,但经过两轮修订后,对held-out RHAE均值的提升仅为+2.80。这一发现与早先报道的模型在自主构建和改进harness方面的能力有所不同。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月24日
  1. Agent Control Flash News
    ARC-AGI-3 基准测试:Amazon Jens Lehmann 等研究揭示自主构建 harness 与可靠适应之间的差距

    自治搭 harness 容易,两轮修订对 held-out RHAE 均值仅 +2.80。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。