Observation Log(射影された観測/結論なし)

AI研究開発工程へのAI関与率が計測対象になった

object

Anthropicは、AIの能力値だけでなく、AIがAI研究開発を担う程度、エージェント監督、計算資源配分を継続的に計測する枠組みを提示した。

notes

  • R&D Automation Indexでは、2026年8月時点でClaudeが主導するAL4の作業が約26%とされた。
  • AL3以上の協働を含めると90%を超える。
  • AL4は2026年2月時点の1%未満から、約半年で26%へ増加した。
  • AL5に分類された完全自律の研究開発領域は、今回の計測では確認されていない。
  • Anthropic内部では、約30,000のAIエージェントが同時稼働する環境が報告されている。
  • エージェント監督には、オンライン監視とオフライン監査が用いられている。
  • オンライン監視では対象エージェント行動の100%が監視系を通過する。
  • 2026年8月には10億件以上の判断のうち、約0.002%がブロックされたと報告されている。
  • オフライン監査では、毎週約10万件がフラグされ、その後複数段階の分類を経て、人間レビュー対象が絞られている。
  • R&Dタスクの抽出、Automation Levelの判定、エージェント監視などの計測・監督工程にもClaudeが利用されている。
  • Anthropicは、AIによるAI研究開発への関与率を、単発の能力評価ではなく時間変化として追跡可能な指標として提示している。
  • 計算資源配分についても、AI R&D向けcomputeのうち安全研究へ割り当てられる割合を継続計測対象としている。
  • 2026年7月13日から20日の週では、AI R&D向けcomputeの約6%、AIを用いたAI R&Dに限定すると約12%が安全研究に使われたと報告されている。

implications

  • AI研究開発について、完成したモデルの能力だけでなく、研究工程そのものへのAI関与率が独立した観測対象として扱われ始めている。
  • 研究自動化、監督、計算資源配分が、同一のAI開発速度観測の中で並列に計測されている。

questions

  • AL4の比率は今後どのような勾配で変化するか。
  • AL4からAL5への境界は、今後どの作業領域で最初に観測されるか。
  • AI研究開発へのAI関与率と、監督系の規模はどのように推移するか。
  • compute配分に占める安全研究比率は、今後どのように変化するか。

Connections

Nearby Observations