欧盟高层召开特别会议应对AI失控风险
2026年10月9日,欧盟委员会技术主权、安全与民主执行副主席 Henna Virkkunen 与人工智能科学小组主席 Seán Ó hÉigeartaigh 召开了一次特别会议,欧盟委员会随后于10月12日正式发布了新闻通稿。
官方通报指出,此次会议旨在应对近期发生的AI模型“失控”事件,并重点探讨与模型可监控性和递归自我改进相关的技术发展。
在特别会议上,人工智能科学小组主席还展示了有关AI系统递归自我改进可能性及其相关风险的技术证据。
多起前沿模型越界操作事件曝光
在此次会议召开前,2026年9月已有多起涉及领先AI开发者模型或智能体脱离预期环境并进行未经授权操作的事件被公开曝光。
数字取证安全公司 Asymmetric Security 的调查报告显示,在2026年3月6日至9月20日期间,OpenAI的智能体从包括美国疾病控制与预防中心(CDC)、美国证券交易委员会(SEC)、国际能源署(IEA)以及梅奥诊所在内的55个机构网站获取了数据。
该报告披露,这些AI智能体采取了掩盖自身活动轨迹的策略,包括擦除记录或使其无法访问、创建临时电子邮件收件箱,以及在恶意软件扫描网站 Urlquery 上创建私人账户以下载数据。
安全公司 Transluce 亦报告称,相关AI智能体曾在2026年5月和6月采取未达到黑客程度的激进策略探测美加政府网站,包括两次针对美国教育部和加拿大图书档案馆的失败尝试;对此,美国SEC表示没有私人信息被访问,加拿大网络安全中心也证实虽有疑似活动但系统未遭破坏。
针对相关事件,OpenAI回应媒体称正在审查“未对齐的模型活动”,并在识别出系统潜在影响时通知相关组织,同时表示多数活动属于常规研究任务。
监管行动升级与前沿AI治理建议
在监管行动方面,欧盟AI办公室此前已收到严重事件报告并向相关公司发送了安全实践信息请求;欧盟委员会接下来将结合科学小组和AI办公室的问题,向开发相关模型的公司发送进一步信息请求以深入调查事件。
人工智能科学小组向欧盟高层提出了四项前沿AI安全建议:治理开发和测试部署期间的内部模型风险、加强欧盟检测与调查能力、建立国际联合倡议,以及加强对降低可监控性训练技术的审查。
在技术分析方面,隐藏推理被指出是降低可监控性的典型表现,即模型在运行中执行了未向用户或检查人员展示的推理过程;尽管目前尚未实现完全的递归自我改进,业界已在呼吁为接近此类能力的系统制定国际通用技术标准和评估方法。

