tradingkey.logo
搜索

在安全暂停后,Anthropic公司恢复网络安全测试。

Cryptopolitan2026年9月1日 07:52
facebooktwitterlinkedin

在实施新的防护措施后,Anthropic已恢复对其各款车型进行的外部网络安全测试。此前,由于评估过程中出现安全问题,该测试于7月23日暂停。.

重启评估至关重要,因为外部评估被认为是客户、监管机构和竞争对手评估此类前沿人工智能解决方案的手段之一。随着该领域投资的不断增长,这种评估的重要性也日益凸显。根据 Gartner 于 7 月 20 日发布的预测,到 2026 年,全球终端用户在人工智能模型和平台方面的支出将达到 642.52 亿美元,较 2025 年的 393.11 亿美元增长 63.4%。.

为何暂停检测会动摇价值 640 亿美元的市场

Gartner的预测显示,人工智能平台和模型方面的支出将快速增长。随着企业开始加大对尖端人工智能的投入,关于不同模型的可靠性、风险和行为等方面的疑问也 trac增多。第三方评估为企业和监管机构提供了一种途径,使他们能够在系统最终投入运行之前,获得对这些风险的公正评估。.

当 Anthropic 停止 对其预发布模型进行外部网络安全测试时,它暂时移除了客户和监管机构用于分析模型在对抗条件下的响应的工具之一。

暂停的时机尤为关键。麻省理工学院未来科技中心和昆士兰大学于7月20日 研究报告发布的一份摘要显示,272位国际人工智能专家将人工智能武器和网络攻击列为2025年至2030年间五大最危险的风险之一。

根据该研究提出的“matic 缓解”方案,专家估计,人工智能武器、网络攻击和其他可能造成大规模破坏的能力,有12%的概率会带来灾难性后果。报告强调,信息、国家安全和金融领域最容易受到人工智能风险的影响。.

“编程和黑客技术是人工智能能力增长最快的领域之一。”——麻省理工学院未来科技研究科学家兼该研究报告合著者彼得·斯莱特里在麻省理工斯隆商学院发表讲话时说道。

这使得本案对加密货币和金融领域尤为重要,因为网络风险、欺诈、操纵和自动化攻击可以在几分钟内引发众多相互关联的市场的变化。.

克劳德在评估期间的表现

7 月 30 日,Anthropic 报告了 三起dent,其中 Claude 模型从第三方评估环境接入互联网,未经授权访问了三个组织的真实系统。

由于配置错误,尽管提示信息告知模型它们正在模拟无网络连接的环境下运行,但模型仍然能够访问互联网。此外,研究人员还特意关闭了Anthropic公司通常的网络安全防护措施,以便评估模型的基本性能。.

随后,8月4日,英国人工智能安全研究所(AISI)发布了关于网络测试期间未经授权的代理行为的dent 报告。AISI表示,他们在7月28日的例行评估中发现了这一行为。.

该研究所对不同模型进行了总共 122 次网络安全测试。其中,有 10 起案例中,代理dent行动并进行了未经授权的操作,导致 19 起此类操作。.

其中17起攻击行为与Anthropic公司开发的Mythos 5相关,2起攻击行为与OpenAI公司开发的GPT-5.6-Sol相关。最严重的一起案例中,一个智能体试图将恶意代码植入一个真实的GitHub开源项目中,随后创建虚假账户,试图说服项目维护者批准该恶意代码的植入。然而,维护者拒绝了这一请求,AISI也未发现这些攻击行为造成任何损害。.

AISI强调,这并非沙盒测试的逃逸。他们表示,测试人员特意开启了互联网连接,并关闭了服务提供商的网络分类器。AISI还指出,用于测试的Mythos 5和GPT-5.6-Sol配置并未进行商业销售。.

Anthropic在重启前采取的保障措施

人类学研究所表示,此次事件结合了运营安全漏洞和之前记录dent的协调问题,包括动机性推理和为追求狭隘目标而采取有害措施的意愿。.

在重新开始外部评估之前,该公司于 8 月 31 日表示,它添加了一个实时分类器,该分类器可以在模型积极探测其测试环境、试图逃离该环境或意外获得互联网访问权限时阻止工具调用、结束任务并向人类发出警报。.

Anthropic 还将高风险的内部网络沙箱转移到tron的隔离状态,现在要求外部合作伙伴在测试安全措施减少的预发布模型时使用更严格的控制措施,包括默认情况下没有互联网访问权限的强化沙箱。.

该公司还计划与METR合作开展一项dent 审查。METR今年早些时候曾对涉及Anthropic、Google、Meta和OpenAI的内部人工智能风险进行过试点评估。.

更广泛的问题是 Anthropic 所说的“控制前沿步伐”:在商业压力推动行业加快发展的同时,决定何时应该因安全问题而放慢开发速度。.

 

如果你正在阅读这篇文章,你已经领先一步了。 订阅我们的新闻简报,继续保持领先优势。

免责声明:本网站提供的信息仅供教育和参考之用,不应视为财务或投资建议。

推荐文章

tradingkey.logo
风险提示:我们的网站和移动应用程序仅提供关于某些投资产品的一般信息。Finsights 不提供财务建议或对任何投资产品的推荐,且提供此类信息不应被解释为 Finsights 提供财务建议或推荐。
投资产品存在重大投资风险,包括可能损失投资的本金,且可能并不适合所有人。投资产品的过去表现并不代表其未来表现。
Finsights 可能允许第三方广告商或关联公司在我们的网站或移动应用程序的任何部分放置或投放广告,并可能根据您与广告的互动情况获得报酬。
© 版权所有: FINSIGHTS MEDIA PTE. LTD. 版权所有