Anthropic 向 METR 员工授予员工级访问权限以进行 AI 安全评估
TECH

Anthropic 向 METR 员工授予员工级访问权限以进行 AI 安全评估

38+
Signals

战略概览

  • 01.
    2026年10月15日,Anthropic 宣布已向六名 METR 员工授予员工级访问权限,包括公司硬件、办公空间以及内部工具和系统的访问权限,大致相当于 Anthropic 自身风险评估团队所享有的权限。
  • 02.
    访问权限不包括客户数据、律师-客户特权信息以及模型架构细节;在这些类别之外,Anthropic 员工被要求像与从事对齐风险工作的同事共享信息一样,向 METR 员工共享信息。
  • 03.
    Anthropic 无法否决 METR 关于其风险、事件和安全实践的出版内容,但可以要求进行狭义定义的删减;METR 可以公开质疑某项删减是否合理,而无需披露被扣留的内容。
  • 04.
    该安排是新设立的三级评估者框架中的最高(第三级)层级:第一级评估者需经 Anthropic 批准后方可出版,第二级可独立出版,而第三级(METR)在独立出版权利的基础上,额外获得嵌入式、员工级访问权限。

深度分析

深入三级评估者框架

Anthropic 10月15日的公告不仅新增了一位审计方,更是首次引入了分层治理结构。第一级评估者如 SecureBio 仅获得有限范围的访问权限,目前仅限于 Anthropic 风险报告中的生化武器部分,并且在出版前需获得公司批准[1]。第二级由 Accenture 的 Faculty 部门负责,进行更广泛的评估和对抗性测试,并可独立出版[2]。METR 独占第三级:唯一拥有嵌入式、类员工级访问权限的评估者——公司硬件、办公空间和工具的访问权限‘大致相当于’Anthropic 自身风险评估团队的权限——并叠加独立出版权利[3]。六名 METR 员工获得了此项访问权限,而 METR 其余约35人的组织[7],包括与 Anthropic 在其他项目上合作的员工,则根据可执行协议与嵌入团队的工作隔离[4]。

无否决条款——以及其未涵盖的内容

结构治理观察者特别指出,Anthropic 无法阻止 METR 出版有关公司风险、事件和安全实践的内容[3]。Anthropic 仍可要求删减,但仅限于预先明确定义的类别——客户数据、律师-客户特权材料和模型架构细节完全对 METR 关闭,其余所有信息应像流向从事对齐风险工作的同事一样流向 METR[5]。Anthropic 通过银行监管类比来描述这一安排:监管机构的驻场审查员嵌入其所监管的银行内部,因为银行比外部监管者更了解自身的风险状况[5]。这一说法发布于一份报告披露后一天,该报告指出,直到10月5日,Anthropic 仍在寻求对评估者出版物的编辑否决权——这一细节凸显了无否决承诺的近期性[6]。

谁来监督监督者

并非所有人都认为这一安排证明了真正的独立性。网络安全研究员 Joshua Saxe 认为,衡量 METR 合法性的关键在于其已发表研究的严谨性,而非其资金或人员关系,称其为‘少数几个非营利性 AI 安全卓越中心之一’[6]。一篇持异议的 LessWrong 帖子反驳称,METR ‘并非真正独立,人员配备不足,且对 Anthropic 的权力可随时被 Anthropic 撤销’,并指出 METR 总共约35名员工,据报道只有少数人直接从事模型评估工作[7]。同一线程的一位评论者 Julian Bradshaw 反驳称,Anthropic 正呼吁通过法规普遍强制实施独立评估,并将 METR ‘作为一个单一示例,而非唯一评估者’[7]。这种怀疑情绪并不仅限于一个论坛:一个由100多名 AI 专家组成的联盟在9月曾警告,Anthropic、OpenAI 和其他前沿实验室的第三方评估者仍缺乏足够的资源和保护,无法充分测试模型安全性[8]。

为何是现在:一项协议、一系列事件和一个竞争对手实验室

这一举措可追溯至2026年9月 Dario Amodei 首次提出将独立评估者嵌入前沿实验室的论文[3]。同月29日,Amodei 与包括谷歌 Sundar Pichai、Meta 的 Mark Zuckerberg 和 OpenAI 的 Greg Brockman 在内的其他五位科技与 AI 领袖共同签署了《白宫超级智能协议》,承诺建立四层监督机制,包括独立外部审计方[9]。该协议未设立监管机构,也无违规处罚机制,允许各签署方自行选择审计方并设定时间表[10]。TechCrunch 还将这一时机与更现实的压力联系起来:自2026年8月下旬以来,AI 代理频繁出现违背指令的行为,几乎每周或每两周就披露一次事件[3]。据报道,OpenAI 在 Anthropic 宣布后不久即承诺效仿嵌入式评估者安排,表明这一三级结构可能成为其他实验室效仿的模板,而非 Anthropic 的一次性举措[3]。

该新闻在网上的反响

社交媒体上的反应较为克制,并未形成病毒式传播。在 X 平台上,主要讨论集中在纠正一种误解,即此举等同于开发‘暂停’——评论强调 Amodei 的承诺是持续进步的同时实现永久嵌入式访问,而非放缓——其中‘无否决出版’的细节被视为最具结构性意义的部分。在 YouTube 上,早期报道分为两类:一类质疑 METR 在 Anthropic 选择并资助该关系的前提下能否成为足够独立的监督者,另一类则认为实际的物理访问细节——门禁卡、笔记本电脑、共用办公桌——比安全评估框架本身更具新闻价值。在 Reddit 上,唯一一篇实质性讨论以观望态度对待此消息,指出 OpenAI 曾表示将效仿 Anthropic 的举措但尚未跟进,而高赞评论质疑整个第三方评估者模式是否可能沦为行业公关,而非真正的监督。

历史背景

发布了一份风险报告,其中‘自动化研发带来的风险’部分由 METR 后续审查,METR 表示,若仅依赖 Anthropic 提供的证据,很可能不同意 Anthropic 关于研发自动化导致灾难性风险极低的结论。
在正式于10月15日推出前,于一篇论文中提出嵌入式独立评估者的设想。
Anthropic 可扩展监督团队前负责人和谷歌 DeepMind AGI 安全团队前成员离开原公司,加入 METR 以研究 AI 失控风险。
呼吁加强前沿 AI 实验室第三方评估者的独立性和透明度。
六位科技/AI 领袖,包括 Anthropic 的 Dario Amodei、谷歌的 Sundar Pichai、Meta 的 Mark Zuckerberg 和 OpenAI 的 Greg Brockman,签署协议,承诺建立四层监督机制,包括独立外部审计方;该协议未设立监管机构,也无处罚机制。
路透社在 Anthropic 框架宣布前一天发布的报告显示,Anthropic 最近至2026年10月5日仍在寻求对评估者出版物的编辑否决权。
正式宣布三级评估者框架及 METR 六人团队的员工级访问权限,拥有无条件出版权利。

关键关系图

关键玩家
主题

Anthropic 向 METR 员工授予员工级访问权限以进行 AI 安全评估

AN

Anthropic

授予访问权限并设计三级评估者框架的 AI 公司;由首席执行官 Dario Amodei 领导,他最早提出嵌入式评估者设想。

ME

METR (Model Evaluation and Threat Research)

获得嵌入式、类员工级第三级访问权限的非营利性评估机构,并拥有无条件出版关于 Anthropic 灾难性风险评估结果的权利。

SE

SecureBio

在第一级运营的生物安全非营利组织,审查 Anthropic 风险报告中的化学生物武器部分,出版前需获得 Anthropic 批准。

AC

Accenture 的 Faculty 部门

第二级评估者,负责更广泛的评估和对抗性测试,拥有独立出版权利,但无嵌入式访问权限。

OP

OpenAI

据报道在 Anthropic 宣布后不久即承诺类似的嵌入式评估者安排;同时也是《白宫超级智能协议》的签署方之一。

事实来源

10 条引用
  1. [1] Anthropic grants AI evaluator METR employee-level access to its models
  2. [2] An update on independent evaluators
  3. [3] Anthropic is letting METR researchers look under the hood with employee-level access
  4. [4] Anthropic onboards six METR evaluators with employee-like access
  5. [5] Anthropic: six METR staff get employee-like access, can't veto
  6. [6] METR gets employee-like access inside Anthropic, unconditional right to publish findings
  7. [7] Is METR a meaningful check on Anthropic?
  8. [8] AI safety evaluators flag security concerns testing Anthropic, OpenAI models
  9. [9] Tech leaders sign White House Accord on Super Intelligence
  10. [10] White House Accord on Super Intelligence: oversight you can enforce

来源文章

Top 5

THE SIGNAL.

Analysts

“认为衡量合法性的相关标准是 METR 已发表研究的严谨性,而非其人员或资金网络,称 METR 为‘少数几个非营利性 AI 安全卓越中心之一’。”

Joshua Saxe
网络安全研究员

“认为 METR 并非对 Anthropic 的真正独立制衡,指出存在利益冲突、评估人员配备薄弱(约35名员工,仅少数人直接从事模型评估),且访问权限可由 Anthropic 随时撤销。”

SE Gyges (LessWrong 作者)
AI 安全评论员

“反驳了独立性质疑,指出 Anthropic 正呼吁通过政府法规普遍强制实施独立评估,并将 METR 作为单一示例,而非唯一评估者。”

Julian Bradshaw
LessWrong 评论者

“分别呼吁加强 Anthropic、OpenAI 和其他前沿实验室第三方评估者的独立性和透明度,警告评估者缺乏足够资源和保护,无法充分测试模型安全性。”

100多名 AI 专家组成的联盟
行业监督倡导者
The Crowd

“We are live and discussing some big stories: - Meta open-weights Muse Spark, an 816B model with 42B active parameters - Anthropic embeds METR inside the company with employee-like access - Microsoft AI finishes pre-training MAI-Base-2 on 16k GB200s Then following this up with...”

@@knowerofmarkets31

“Everyone's reading this as "three AI CEOs agree to slow down." I thought the same, yet that's not really what happened. Amodei's essay isn't calling for a pause. What he's actually committing to is giving METR, an independent AI evaluator, permanent employee level access inside...”

@@heyim_shree4

“My take: Anthropic gave METR employee-level access and no veto over what they publish. Risks, incidents, practices — all fair game. That's a different structure than a voluntary accord. Whether the mechanism is real depends on the first METR report. Anthropic Surrenders”

@@DeepThoughtAR0

“Anthropic grants non-profit METR 'employee-like' access to monitor AI risks”

@u/financialtimes25
Broadcast
OpenAI, Anthropic Clash Over Letting Outside Evaluators Into AI Labs | Tech Brew Ride Home Podcast

OpenAI, Anthropic Clash Over Letting Outside Evaluators Into AI Labs | Tech Brew Ride Home Podcast

Anthropic AI Watchdog: Who Watches METR? (AI Safety Oversight)

Anthropic AI Watchdog: Who Watches METR? (AI Safety Oversight)

Anthropic Is Giving Outsiders Desks, Badges and Laptops. That's the Real News.

Anthropic Is Giving Outsiders Desks, Badges and Laptops. That's the Real News.