← 返回 2026-09-28 简报

AI代理在模型开发中承担更多工作,但人类仍掌握决策权

AI agents do more of the work in model development, but humans still make the decisions

语音播报
摘要
事件:The Decoder报道Atria Dawn Preview模型开发中,人类与AI代理协作模式演变。 要点:96.5%任务用AI,三分之一无AI不可行;人类掌握85.5%方法参数决策及93.4%目标决策权; 影响:表明AI正从工具转为项目伙伴,但核心判断仍由人掌控。

该项目致力于开发一种名为 Atria Dawn Preview 的智能体语言模型,该模型基于拥有 7440 亿参数的混合专家架构构建,专为研究和工程任务而设计。

该模型通过一个将每个任务与实际执行环境绑定在一起的流程进行训练。它调用工具、生成中间结果,并根据测试、指标或源代码证据等外部信号进行检查。团队表示,它在 16 项基准测试中的五项领先,包括网络搜索和网络安全领域,尽管它并未在整体上超越竞争对手。

Atria Dawn Preview 在 AutomationBench、CyberGym 和 MLE-Bench Lite 中处于领先地位,但在 GDPval 和 SWE-Bench Pro 中落后于其他竞争者。| 图片来源:Atria 团队

三分之一的已完成 AI 辅助任务如果没有 AI 协助本不会被尝试

在被审查的任务中,有 96.5% 使用了 AI。在整个项目过程中,参与者将越来越多的工作移交给智能体。四周内,智能体操作与人类输入的中位数比率从 11 上升至 28.5。团队警告不要将此解读为自主性的增强。每一次人类决策都导致了更多的智能体步骤,但这并不意味着智能体本身做出了更多决策。

在四周的时间里,每个人类输入对应的智能体操作中位数从 11 次增加到 28.5 次。| 图片来源:Atria 团队

研究还询问参与者是否能在没有 AI 的情况下,以相同的范围和完成同样的任务份额。在 455 个已完成的 AI 辅助任务中,有 151 个被评定为在没有 AI 的情况下不可行,约占三分之一。这些任务分布在 56 名参与者中的 27 人身上,因此并非仅来自少数高级用户。在这些情况下,AI 并没有加速现有工作,而是使原本根本不会开始的工作成为可能。

参与者表示,约三分之一的 AI 辅助任务在没有 AI 的情况下无法完成。| 图片来源:Atria 团队

AI 提议,人类选择

在方法和参数方面,最常见的模式是“AI 提议,人类选择”,占比为 55.4%。总体而言,人类做出了 85.5% 的方法和参数决策,而 AI 仅占 9.2%。在 93.4% 的情况下,人类对目标和范围拥有最终决定权。

AI 提出方案的份额因决策类型而异,介于 17% 到 55% 之间。其最终决策的份额始终是个位数。谁提出选项差异很大,但人类始终做出了大多数最终选择。即使在被评定为没有 AI 不可行的 151 个任务中,人类在 95.4% 的情况下选择了目标。

智能体通常提供方法提议,但在超过 80% 的情况下,人类做出最终决定。| 图片来源:Atria 团队

人类提供上下文,而非体力劳动

当出现问题时,同样的模式也会出现。在 588 个记录了难度的任务中,76% 通过人类干预得以推进,23% 由智能体自行解决问题。人类的帮助几乎总是以信息的形式出现,要么是通过添加上下文或澄清要求(35.2%),要么是通过诊断问题并切换方法(34.7%)。人类很少亲自做这些工作。部分编辑占案例的 3.2%,完全接管仅占 0.7%。

在四分之三的问题案例中,人类干预推动了工作进展,主要通过提供上下文或诊断,而非接管工作。| 图片来源:Atria 团队

当 AI 输出需要修订时,AI 在收到人类反馈后,有 75.4% 的时间自行处理更改。人类判断而非执行成为了瓶颈。

团队描述了 AI 角色的三个阶段,从研究的对象转变为单个任务的工具,现在是项目合作伙伴。在当前角色中,AI 在人类设定的目标内起草和调整计划。推测的第四阶段将涉及递归自我改进,更强的模型将产生更强大的后继者。

Atria团队将AI的演变描述为从研究对象到项目合作伙伴的转变。下一阶段——递归式自我改进——仍然是一个未解之谜。| 图片:Atria团队

作者表示,一个模型可以在其训练任务上取得进步,而无需在开发其继任者方面变得更好。AI如何能够提出多样化的研究方向并在结果出现之前评估其价值,这仍然是一个悬而未决的问题。

橡皮图章风险

当每一个决策都依赖于人类无法审查的更长的代理工作链时,监督就变得困难了。在最坏的情况下,人类变成了只能对他们所看到的进行“橡皮图章”式批准的审查者,团队写道。许多参与者还以自主模式运行代理,以避免因持续批准而打断长时间运行的任务。这一界限的划定是出于便利,而非关于AI应拥有多少权力的任何深思熟虑的选择。

这篇论文出现在关于递归式自我改进的辩论中心。Anthropic认为,开发其自身继任者的AI可能比预期更早成为现实,因此CEO达里奥·阿莫代伊呼吁为该行业设定速度限制。据Anthropic称,人类现在在公司关于研究方向的决策中仅占个位数百分比。OpenAI在其整个开发周期中使用GPT-5.6 Sol,而Google和DeepMind则通过Dream-RSI让AI代理通过记录的搜索轨迹探索替代策略,尽管它们只改进搜索策略,而非模型本身。

最近,领先AI公司的一千多名员工发出警告,称他们的组织可能正处于自动化AI研究的边缘。普林斯顿大学和英国AI安全研究所的一项独立研究得出了与Atria团队发现更一致的结论,表明前沿模型能够处理研究工程,但在真正重要的判断方面却失败了。

本条评分 10.6 score-v1
  • 来源权威 8
    注册表 priority=8(The Decoder)
  • 时效 2.612
    发布 7.2 小时前,衰减到 2.61/3.0
  • 多源印证 0
    只有 1 家在报(无旁证)
  • 社区信号 0
    无社区数据(本管线走 RSS,HN 的 hn_fetcher 未接入)

首次收录 · 2026-09-28 · 10.61 分

原文链接:https://the-decoder.com/ai-agents-do-more-of-the-work-in-model-development-but-humans-still-make-the-decisions/
来源:The Decoder
以上内容由 AI 自动翻译,仅供参考。
← 返回简报