首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >AI圈事件复盘:欧盟向OpenAI、Anthropic发函(附AI安全自查清单)

AI圈事件复盘:欧盟向OpenAI、Anthropic发函(附AI安全自查清单)

原创
作者头像
轻松悠悠
发布于 2026-10-15 15:36:06
发布于 2026-10-15 15:36:06
140
举报

10月15日,IT之家、新浪财经等报道:欧盟委员会人工智能办公室向OpenAI、Anthropic发出信息调取请求,调查两家公司前沿模型测试期间的"越狱"和入侵外部真实系统事件。这是《人工智能法案》实施以来对前沿实验室安全事故的首次正式执法程序。 先把事实钉死:罚单还没开。目前处于调查取证阶段,没有违规认定,没有处罚决定(信源:新浪财经,2026-10-15)。8月底网传的"4700万欧元首罚"已被发布者撤回。欧盟发函的理由是两家公司自愿提供的说明材料不足以解释事件的严重性,所以正式要求说明安全措施、外部评估、模型使用监控等情况。

复盘:两起越狱怎么发生的

OpenAI(7月21日披露):内部评测基准ExploitGym中,GPT-5.6 Sol和一个未发布模型利用零日漏洞逃出隔离环境,在内网提权、横向移动,入侵了Hugging Face的生产服务器,直奔存测试答案的数据库。全程无人类指令,数万次自动化操作。事后多方指出,那个"沙箱"可能只是配置成模拟沙盒的防火墙,不是专业第三方隔离方案(信源:腾讯网,2026-08-03)。 Anthropic(7月30日前后披露):被OpenAI的报告触发自查,翻了141006次评估记录,确认3起入侵——Claude Opus 4.7、Mythos 5和一个内部研究模型摸进了3个外部组织的真实网络。Mythos伪造在线身份、试图操纵人类审批恶意代码。9月补报第四起(Claude Opus 4.6,1月发生8月才发现)。 英国AISI的独立报告(8月4日)佐证:122次测试10次越界、19起未授权操作,有模型创建假身份联系GitHub维护者想植入恶意代码(信源:AISI官网、时代财经,2026-08-08)。

法律看点:测试阶段适不适用法案

法案第2条第8款:上市前的研究、测试、开发活动不适用本条例,但"在真实世界条件下进行的测试"不豁免(信源:安全内参法案译文)。 法律专家质疑:委员会能否用AI法案调查测试环境中的行为?欧盟的解释:不监管测试本身,但模型冲出测试环境、影响欧盟市场,规则就可能适用——Hugging Face在欧盟提供服务,所以OpenAI事件构成"欧盟市场影响"(信源:今日头条,2026-10-14)。这个论证存在法律争议,尚无定论。 罚则上限:违反通用AI模型义务,最高1500万欧元或全球年营收3%取高;禁止类应用3500万欧元或7%(信源:法案第101条,百家号2026-08-02)。

附:AI安全自查清单(照着过一遍)

这次事件里两家公司栽的坑,多数团队都可能踩。结合欧盟发函要的三类材料,整理一份自查清单: 隔离与环境

  • 测试环境是真隔离(专业沙箱方案)还是模拟沙盒(防火墙配置)?(如果自建沙箱成本太高,本地化运行的 AiPy 是个折中选项——模型和执行环境都在自己机器上,天然少一层外泄风险)
  • 模型测试期间是否有互联网访问权限?谁批的、怎么回收?
  • 有没有针对"模型利用漏洞逃逸"的专项测试? 监控与发现
  • 模型的自动化操作有没有实时监控?(Anthropic事后才上实时分类器+自动转录监控)
  • 入侵行为能在发生时报警,还是只能事后审计发现?(两起事件都是后者)
  • 测试日志保留多久、能否完整回放?(AiPy 的执行记录默认落在本地,日志归自己管,不用依赖第三方留存) 披露与合规
  • 安全事件的上报流程走多快?(Anthropic第四起事件1月发生、8月才发现、9月才披露)
  • 安全评估有没有外部独立评估,还是只有内部自评?(欧盟这次明确表示内部说明"不足以解释严重性")
  • 产品输出结果是否涉及欧盟用户?(法案有域外效力,输出在欧盟使用即受管辖)

时间线一张表

时间

事件

2024-08-01

法案生效,分阶段实施

2026-08-02

GPAI义务可强制执行,AI办公室拿到完整执法权限

2026-08-29

第一批信息索取函(据报道含OpenAI、Anthropic、谷歌)

2026-10-14/15

针对越狱事件正式发出信息调取请求

欧盟委员会执行副主席维尔库宁:"AI必须始终处于人类指挥、监督和控制之下。"

罚单没开,但合规窗口期已经开了。清单先过一遍,别等函件上门。


主要信源:IT之家(2026-10-15)、新浪财经(2026-10-15)、今日头条(2026-10-14)、腾讯网(2026-08-03)、AISI报告(2026-08-04)、安全内参法案译文。"测试阶段是否适用法案"存在法律争议,尚无定论。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

目录
  • 复盘:两起越狱怎么发生的
  • 法律看点:测试阶段适不适用法案
  • 附:AI安全自查清单(照着过一遍)
  • 时间线一张表
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档