Anthropic 宣布,专门测试前沿 AI 模型的非营利机构 METR 的六名研究员将获得与员工相当的访问权限。他们会拿到公司配发的笔记本电脑、办公位置和内部工具,权限与 Anthropic 自己的风险评估团队接近。公司鼓励员工像对待一起做对齐研究的同事那样,与他们分享信息。
关键条款
METR 会自行发布对该公司风险、事故和做法的评估,Anthropic 不再有权拦下这些报告。唯一的例外范围很窄:公司可以要求在几个事先约定的类别中做遮盖,包括客户数据、受律师保密特权保护的材料,以及模型架构细节。如果 METR 认为某处遮盖没有道理,可以公开说明。
三层评估体系
Anthropic 正在搭建三个层级的评估方。像生物安全机构 SecureBio 这样的专项审查方,发布前需要公司同意。中间层获得更多信息,可以直接发布。最高层拥有员工级权限,目前只有 METR 一家。
公司把这种安排比作银行业,大型银行里常驻着监管机构的检查员。这也兑现了 Dario Amodei 九月那篇文章中的提议。OpenAI 已承诺采取同样做法,六家大型企业还与白宫签署了独立审查协议。