Anthropic向METR开放员工级权限,外部AI监督落地首步
Anthropic宣布向外部评估机构METR开放类似员工级别的系统访问权限,用于评估其模型风险。METR团队已入驻Anthropic办公场所,可访问硬件设备与内部系统。此举是CEO达里奥·阿莫迪9月提出的头部实验室派驻外部审计人员方案的首个落实动作,OpenAI尚未公布相关计划。
Anthropic正在把外部监督从承诺推向执行层面。该公司日前宣布,向外部评估人员开放“类似员工级别的访问权限”,允许其对公司模型展开风险评估。这一安排被定位为兑现安全承诺、回应外界对AI技术可能失控担忧的具体举措。
获得上述权限的是非营利机构METR。该机构此前曾与OpenAI、Anthropic、谷歌及Meta等头部实验室合作,如今已有团队进驻这家Claude研发企业的办公场所,并可直接访问其硬件设备与内部系统。对第三方评估机构而言,这种接近内部人员的权限范围并不常见。
这一动作有其政策背景。随着更强能力的AI系统可能对经济、网络安全乃至全人类构成风险,扩大第三方评估人员的权责范围,已成为各大实验室提出的主要实质性举措之一。9月,Anthropic首席执行官达里奥·阿莫迪促成了一次少见的立场统一:其两大劲敌山姆·奥尔特曼与埃隆·马斯克均支持在头部AI实验室派驻外部审计人员的方案。上周四发布的公告,正是落实该承诺的第一步。
不过,各家的推进节奏并不一致。奥尔特曼虽称阿莫迪的提议很不错,但OpenAI尚未公布引入评估人员的相关计划。Anthropic在声明中表示,随着模型能力不断增强,需要更强的安全防护与更严苛的风险评估,公司希望自身决策接受公众监督,但无法公开所有与安全研究相关的信息。与此同时,针对这套评估机制,批评者认为相关安排可能产生利益冲突。