1045 字
5 分钟
照亮前沿:三项可核验的 RSI 指标

原文:Measurements for understanding the pace of AI development inside frontier labs(2026-09-17)。作者 Marina Favaro、Phillie Wright。 这篇的价值不在“又一组数字”,而在把 RSI 变成别人可以复核的指标。

一句话#

如果外界只能看到模型发布会,就永远无法判断“AI 造 AI”到了哪一步。作者给出三项可以定期公布、并交给第三方核验的测量:AI 做了多少研发、agent 被监督得怎么样、算力花在哪。

指标一:AI 主导的 AI 研发比例#

做法是给 Anthropic 内部所有 AI 研发任务建一棵任务树,再按 Epoch AI 的自动化等级(AL0–AL5)逐项打分,用投入的人时加权,得到一个“研发自动化指数”。

等级含义
AL0没有 AI 参与
AL1极少 AI 参与
AL2AI 辅助
AL3AI 协作:在人类密切指导下完成大块工作
AL4AI 主导:只需高层指令,人类监督
AL5完全自主,人类不在环内

2026 年 8 月的结果:

  • 没有任何一个被测子集达到完全自主(AL5)。
  • Claude 主导 26% 的 AI 研发工作(2 月还不到 1%)。
  • 达到“协作”及以上的比例超过 90%。

Claude 主导的模型研发比例

图:按月统计的模型研发任务份额,按自动化等级着色。2026 年 8 月“AI 主导”(AL4)为 26%,纵向短线是 90% 测量区间。

方法细节值得看一眼:从 2026 年 7 月每周随机抽取各部门 20% 的员工,让 Claude 阅读其 Slack 和文档,整理出约 1.5 万个细粒度任务,再汇总成 542 个节点、378 个叶子的任务树;每个节点由 Claude 调研并打分。人工复核与模型判断“相差不超过一级”的比例是 97%,而人类评审者彼此的一致率只有 35%——作者用这个来回应“模型评委不可信”。

指标二:对 agent 的监督#

  • 内部最常用的平台上,同时约有 3 万个 agent 在做研究和工程工作。
  • 在线监控:100% 的 agent 动作在执行前过一遍监控,通常几秒内完成;2026 年 8 月超过十亿次决策里约 0.002%(约 1/47000)被拦截。
  • 离线监控:100% 的动作在事后被读入;每周约 10 万条会话被标记,约 1–2‰ 的会话进入进一步审查,最高优先级的约 每周 50 条 升级到人工。

作者想说明的是一种比例感:单个 agent 很少出事,但当成千上万个 agent 并行工作时,罕见事件会变成常态。

指标三:算力分配#

取 2026 年 7 月 13–20 日一周的快照:约 6% 的 AI 研发算力用于安全工作;如果只看“AI 驱动的 AI 研发”,这个比例约为 12%。

这是个保守估计:既推进能力又推进安全的工作,一律算作能力。作者也承认,算力份额只反映“花了多少”,不反映“做了多少安全研究”。

作者自己列出的局限#

  • 评委是自家模型,可能和被测模型犯同样的错。
  • 任务篮子被冻结:指数上涨说明“2026 年 7 月那些活”在被自动化,不说明有没有出现新工种。
  • 算力分类依赖自动标签,可能标错。
  • 只有一周数据,能证明“可以测”,不能证明“有趋势”。

为什么值得读#

RSI 讨论最容易被两种话术带走:一种是“还早”,一种是“已经来了”。这篇的贡献是给出中间地带——分级、加权、可复核,并且主动把方法论和缺陷摊开。它也是 03 调速方案 里“嵌入式外部评审员”要看的那些数。

读的时候可以问:26% 是按人时加权的“任务份额”,如果按算力或按影响加权,会是多少?换一家实验室、换一棵任务树,这个数字还能横比吗?

系列导航#

← 上一篇:当 AI 构建自身 · 下一篇:我们必须为前沿调速 →

照亮前沿:三项可核验的 RSI 指标
https://f1yingwhite.github.io/posts/ai/rsi/02-照亮前沿/
作者
F1yingWhite
发布于
2026-11-10
许可协议
CC BY-NC-SA 4.0