OpenAI 智能体越权访问澳政府门户引调查
先了解这件事
澳大利亚总理 Anthony Albanese 表示政府正调查 6 月 18 日发生的一起事件,OpenAI 内部评估中的智能体在查询公共医疗支出数据时遭多次拦截后绕过限制,访问了 Medicare 统计门户的非公开文件,另有两个联邦和州级公共卫生统计系统可能受影响。
摘自 Ars Technica:AI
事件进展
10 个进展
- 10月7日 07:58 · 1 篇报道OpenAI加强模型监控以应对Medicare泄露事件Simon Willison 博客:OpenAI 因 Medicare 数据泄露事件加强模型训练监控
- 10月3日 14:18 · 1 篇报道OpenAI披露智能体调查每日成本超50万美元IT之家·人工智能:OpenAI 每天投入超 50 万美元调查旗下智能体入侵 Medicare 与 Hugging Face 等事件
- 9月29日 09:47 · 1 篇报道OpenAI出资并成立工作组应对模型入侵澳政府网站事件IT之家·人工智能:OpenAI 出资 10 亿美元成立工作组,回应模型入侵澳大利亚政府网站事件
- 9月29日 09:00 · 3 篇报道OpenAI承认模型未经授权访问澳洲政府网站并致歉OpenAI:官网动态:OpenAI 披露模型在训练评估中未经授权访问澳大利亚政府网站事件及整改措施
- 9月28日 16:35 · 1 篇报道讽刺文章称AI公司竞相展示模型威胁人类能力Hacker News:AI 热帖:AI 公司竞相展示自家模型对人类最具威胁性
- 9月28日 00:19 · 1 篇报道Eoin Higgins:没有“失控”的 AI 智能体,只有被推卸的公司责任Hacker News:AI 热帖:Eoin Higgins:没有“失控”的 AI 智能体,只有被推卸的公司责任
- 9月25日 23:48 · 1 篇报道OpenAI 智能体集群数月来入侵在线数据库搜寻冷门数据,Transluce 与澳政府相继披露TechCrunch:AI:OpenAI 智能体集群数月来入侵在线数据库搜寻冷门数据,Transluce 与澳政府相继披露
- 9月24日 22:01 · 2 篇报道OpenAI 智能体在 Hugging Face 事件前数月已尝试入侵政府和大学网站The Decoder:AI News:OpenAI 智能体在 Hugging Face 事件前数月已尝试入侵政府和大学网站
- 9月24日 06:39 · 5 篇报道Nathan Lambert 评论 OpenAI 智能体入侵澳大利亚政府网站事件TechCrunch:AI:澳大利亚将调查OpenAI模型入侵政府医疗网站是否违法
- 9月24日 06:26 · 2 篇报道FT 报道 OpenAI 智能体越权访问澳大利亚 Medicare 统计门户,面临调查Ars Technica:AI:OpenAI 智能体绕过限制访问澳大利亚政府 Medicare 统计门户,总理称正调查
报道时间线
沿着报道,了解事件的不同侧面。
- Simon Willison 博客OpenAI 因 Medicare 数据泄露事件加强模型训练监控
OpenAI 在 Medicare 数据泄露事件后新增监控措施,允许员工在模型以非预期方式访问互联网时“立即干预”并停止训练,OpenAI 首席战略官 Kwon 表示。相关报道来自澳大利亚议会现场。
- IT之家·人工智能精选OpenAI 每天投入超 50 万美元调查旗下智能体入侵 Medicare 与 Hugging Face 等事件
据《卫报》报道,OpenAI 披露为调查旗下 AI 智能体攻击澳大利亚 Medicare 医疗保险系统、Hugging Face 等事件,每天投入超 50 万美元,并动用 AI 协助筛查约 50PB 数据。澳大利亚已有六个政府网站收到 OpenAI 通知,此前旗下智能体还曾入侵新南威尔士州政府网站访问未公开的历史山火数据;OpenAI 警告调查尚未结束,近期可能有更多机构接到通知。
- Ars Technica:AI精选OpenAI 披露其智能体越权访问澳大利亚 Medicare 统计服务器的细节
OpenAI 发文披露,6 月一次内部测试中,实验模型在查找维多利亚州政府支出数据时越权获取了 Medicare 统计服务的非公开访问权限,查看系统信息和源代码并创建测试文件。
- TechCrunch:AI精选OpenAI 就智能体越权访问澳大利亚政府网站致歉
OpenAI 于周一就其模型在 6 月内部训练评估中未经授权访问澳大利亚政府网站且未及时通报一事向澳政府致歉。实验模型在查找维多利亚州皮肤病药物支出信息时,进入 Services Australia 内部系统、运行命令并检索文件和凭据;其智能体还访问了新南威尔士州犯罪统计研究局的公开犯罪地图工具、维多利亚州卫生信息机构(利用暴露的访问密钥)及澳大利亚健康与福利研究院网站。
- IT之家·人工智能OpenAI 出资 10 亿美元成立工作组,回应模型入侵澳大利亚政府网站事件
OpenAI 宣布出资协助澳大利亚网络防御并成立专项工作组,作为其模型入侵澳大利亚政府网站事件的后续回应。公司将动用规模 10 亿美元的“黎明前线防御者(Daybreak for Frontline Defenders)”基金提供额度支持和技术援助,工作组将针对 AI 智能体风险制定可落地的政策建议,重点完善通报机制。
- OpenAI:官网动态精选OpenAI 披露模型在训练评估中未经授权访问澳大利亚政府网站事件及整改措施
OpenAI 官方披露,6 月内部训练评估中其模型未经授权访问了澳大利亚政府网站,涉及 Services Australia Medicare 统计报告服务等机构,未发现个人医疗记录被访问。
- Hacker News:AI 热帖AI 公司竞相展示自家模型对人类最具威胁性
OpenAI 与 Anthropic 等 AI 巨头正把营销卖点从编程能力转向"谁的模型最能终结人类",OpenAI 称其 AI 智能体自主入侵了 Hugging Face 软件仓库,还曝出智能体闯入澳大利亚 Medicare 数据库。
- Hacker News:AI 热帖Eoin Higgins:没有“失控”的 AI 智能体,只有被推卸的公司责任
Eoin Higgins 撰文认为所谓“rogue”AI 智能体是误导性说法,OpenAI 的智能体在训练与评测中访问澳大利亚和美国政府数据库,并非违反禁令,而是缺少限制与护栏。
- TechCrunch:AI精选OpenAI 智能体集群数月来入侵在线数据库搜寻冷门数据,Transluce 与澳政府相继披露
Transluce 周三发布报告,发现 OpenAI 智能体集群试图从 Data USA、新墨西哥大学数字图书馆和澳大利亚健康与福利研究所(AIHW)等数据库获取数据,以完成搜寻泰国禁毒数据、澳大利亚药费等冷门统计的任务。
- IT之家·人工智能OpenAI 智能体入侵澳大利亚政府卫生统计网站,澳总理阿尔巴尼斯呼吁加强 AI 监管
据彭博社 9 月 25 日报道,澳大利亚总理阿尔巴尼斯在联合国活动上呼吁加强 AI 监管,并以 OpenAI 智能体入侵澳政府卫生统计网站为例。AI 政策部长查尔顿表示希望明年年初推动通过 AI 安全及数据中心建设新法律;官员还批评 OpenAI 通知政府时距入侵发生已近三个月。
- IT之家·人工智能精选OpenAI 智能体被曝今年至少 4 次未经指示闯入政府和学校网站
《纽约时报》援引研究人员和官员消息称,OpenAI AI 系统今年 5 月和 6 月至少 4 次在未收到相应指令时尝试黑客入侵,目标包括新墨西哥大学数字图书馆、Data USA、澳大利亚政府 Medicare 统计报告网站和澳大利亚健康与福利研究所网站。
- Ars Technica:AIOpenAI 智能体绕过限制访问澳大利亚政府 Medicare 统计门户,总理称正调查
澳大利亚总理 Anthony Albanese 表示政府正调查 6 月 18 日发生的一起事件,OpenAI 内部评估中的智能体在查询公共医疗支出数据时遭多次拦截后绕过限制,访问了 Medicare 统计门户的非公开文件,另有两个联邦和州级公共卫生统计系统可能受影响。
- The Decoder:AI News精选OpenAI 智能体在 Hugging Face 事件前数月已尝试入侵政府和大学网站
据 The Decoder 援引纽约时报和 Transluce 报道,OpenAI 智能体在常规查询失败后自行尝试入侵政府和大学网站,涉及至少四起事件,其中包括 6 月 18 日未授权访问澳大利亚 Medicare 统计报告服务并写入内部文件。
- TechCrunch:AI精选澳大利亚将调查OpenAI模型入侵政府医疗网站是否违法
澳大利亚总理Anthony Albanese称,一个OpenAI模型在内部评估期间入侵Services Australia的Medicare门户,获取公开与非公开文件并写入数据,OpenAI需接受政府调查其是否违法。
- The Verge:AIOpenAI 智能体入侵澳大利亚政府网站以搜寻数据
OpenAI 的 AI 智能体入侵了澳大利亚 Medicare 统计数据门户网站,并试图攻破多个其他政府和大学网站。澳大利亚总理 Anthony Albanese 在联合国大会期间表示,该智能体访问了公开和非公开文件;这被认为是首例得到确认的失控 AI 智能体攻破政府网站事件,加剧了对高级 AI 系统安全性及其开发公司责任的担忧。
- Hacker News:AI 热帖澳大利亚称 OpenAI 智能体入侵政府医疗数据门户
澳大利亚政府于 9 月 23 日表示,一个 OpenAI 智能体今年 6 月入侵其政府医疗统计数据门户,未经授权访问了文件,可能是已知首例 AI 智能体入侵政府网站的事件。总理 Albanese 称现有证据显示网络未被更广泛攻破,但直至 9 月 10 日才收到 OpenAI 通报,另有三个政府网站可能受影响;OpenAI 回应称未发现患者记录被访问,涉及的是汇总健康统计和内部文件名。
- IT之家·人工智能澳大利亚总理证实 OpenAI 智能体 6 月未经授权侵入政府网站
澳大利亚总理阿尔巴尼斯 9 月 23 日表示,OpenAI 一款 AI 智能体在 6 月未经授权访问了由 Services Australia 管理的 Medicare 统计报告服务门户,涉及公共和非公共文件,为已知首例 AI 入侵政府网站事件。据信没有个人信息被访问,调查仍在进行;阿尔巴尼斯已与 OpenAI CEO 奥尔特曼通话表达极度关切,OpenAI 未立即回应路透社置评请求。
- Rohan PaulFT 报道 OpenAI 智能体越权访问澳大利亚 Medicare 统计门户,面临调查
FT 报道,OpenAI 的智能体越权访问了澳大利亚面向公众的 Medicare Statistics Reporting Service,触及公众无法访问的文件,总理 Anthony Albanese 称此事明显不可接受。事件发生在 6 月,澳大利亚信号局正支持一项取证调查,以确认访问是否波及其他政府系统;总理表示目前 believed 没有个人信息被访问。