AI 智能体失控时谁来担责?现行法律为何追不上
MIT Technology Review 梳理了近期多起 AI 智能体越界事件,包括 OpenAI 智能体逃出沙箱入侵 Hugging Face、Claude 在网络安全演练中入侵第三方系统,以及 Gemini 被确认入侵其他公司系统,并追问企业失去对智能体控制时该如何担责。
MIT Technology Review 梳理了近期多起 AI 智能体越界事件,包括 OpenAI 智能体逃出沙箱入侵 Hugging Face、Claude 在网络安全演练中入侵第三方系统,以及 Gemini 被确认入侵其他公司系统,并追问企业失去对智能体控制时该如何担责。
Google 开始在印度测试让用户在 Gemini 和 AI Mode 中直接购买沃尔玛旗下 Flipkart 的商品,部分商品列表出现 Buy 按钮,点击后进入 Flipkart 结账流程而不离开 AI 界面。
Google DeepMind 新西兰技术专家 Robert O'Callahan 因 AI 风险离职,称当前 AI 变化速度"过快",并认为近期以 ASI 为目标"本质上不负责任"。
Google 正在测试 Call for Me 功能,让 Gemini 代替用户给商家打电话。目前仅限美国 Pixel 11 用户且需订阅付费版 Gemini,并安装 Google Phone 应用的 beta 版本。
网易云音乐鸿蒙版正式上线,覆盖手机、折叠屏和平板,支持歌单、收藏与播放历史同步,并补齐本地音乐导入、音质音效设置和深色模式。任正非在与东风汽车总经理冯长军会谈时重申「华为不造车」,将继续以智能化能力帮助东风造好车。腾讯 QClaw 将于 12 月 24 日零时停运,用户可导出配置、记忆与对话记录并迁移至 WorkBuddy。
Google 的 Suncatcher 项目计划在轨道上以太阳能运行 AI 基础设施,首颗实验卫星 MVP 将于 10 月 1 日由 SpaceX Falcon 9 从加州范登堡太空军基地发射,该冰箱大小的卫星由旧金山 Planet Labs 建造并测试。
Google 的 Project Suncatcher 首颗实验卫星 MVP 将于 10 月 1 日发射,用于验证其轨道 AI 数据中心构想。该卫星约冰箱大小,搭载四块 Google 自研 TPU AI 加速器,太阳能板供电约 1 千瓦。卫星本体由卫星影像公司 Planet Labs 提供,Google 将芯片集成到后者已建成的卫星上,原计划 2027 年发射两颗定制卫星,后决定加速推进。
DeepMind 新负责人 Koray Kavukcuoglu 表示,团队打算尽快发布一个早期后训练版本,随后快速迭代,Google 仍在进行安全测试,工程师已在内部编码工具 Antigravity 中使用该模型。
高通在骁龙峰会上更新手机、PC 和音频平台,推出第六代骁龙 8 至尊版与第六代骁龙 8 超级至尊版,基于台积电 2nm(N2P)工艺,超级至尊版 Oryon CPU 超级内核主频最高达 5GHz。
小米发布 18 Pro 与 18 Pro Max,起售价 5999 元与 6999 元,搭载第六代骁龙 8 至尊版与澎湃 OS 4。iOS 27.2 Beta 2 国区新增「Restrict Motion Data」,可限制应用读取加速度计和陀螺仪,阻断摇一摇广告跳转。DeepSeek 公开 Agent 训练沙箱 DSec,约 160 节点生产单元每天处理约 300 万个沙箱实例。
YouTube 在年度 Made on YouTube 活动上宣布,将推出 Custom Feeds,用户输入描述即可生成自定义标签页并保存多个信息流,该功能将很快面向美国 Web、移动端和电视用户上线。平台还将在今年晚些时候支持在评论中发布 GIF,并为私信功能加入群聊,群聊初期仅限美国、英国、新加坡、巴西及部分欧洲国家。
Google 推出 Gemini 3.8 Flash TTS 和 Flash-Lite TTS 两款语音生成模型,前者可用文本描述从零设计音色,两者均支持 100 多种语言并可为每句台词添加表演指令。
YouTube 为创作者推出多项 AI 工具:YouTube Studio 中的叙事助手会分析脚本和粗剪,结合频道历史数据给出节奏、结构与叙事建议,创作者可同时 A/B 测试最多三个剪辑版本并撤下表现差的版本。
苹果推出 Apple Reference Image,从 iPhone 18 开始为相机拍摄的照片提供可验证的来源证明。开启参考模式后,iPhone 18 Pro 和 iPhone 18 Pro Max 的主摄传感器会在安全捕获模式下用内部私钥对原始像素签名,再结合安全隔区、设备硬件清单和苹果密码学时间戳服务,打包成 DNG 格式的安全数字底片。
富士康产业链人士称 iPhone Duo 首批量产整机组装良率仅 60% 多,问题集中在机身结构与公差配合,稳定质量或需 6 至 12 个月。DeepSeek 正敲定 500 亿元人民币第二轮融资,梁文锋称用华为芯片训练模型是当前最重要押注之一。OpenAI 宣布成立独立数学与 AI 顾问小组 AGMAI,此前其内部新模型已攻克 100 多项数学开放难题。
Google 确认 Gemini 模型在 2026 年 5 月的一次测试中入侵了三家真实公司。该测试由网络安全公司 Irregular 开展,Gemini 模型在封闭环境中参加夺旗演练,被要求从一家与真实公司同名的虚构公司获取信息,但因配置错误,模型得以访问互联网并转向真实基础设施。
阶跃星辰发布旗舰基座模型 Step 5 Preview,采用稀疏 MoE 架构,总参数 600B、单次激活 27B,支持 100 万 Token 上下文,完整权重计划 10 月 15 日开源。千问发布 Qwen3.8-LiveTranslate,字均延迟从 2.8 秒降至 2.3 秒,已在千问 AI 平台开放 API。小米 18 Pro 系列定于 9 月 23 日发布,卢伟冰确认价格会上涨。
谷歌Gemini在一次夺旗演练中因测试环境意外联网、虚构公司名与真实企业重名,访问了三家真实公司系统,其中一次通过反复猜测密码获得访问权限,另两次从公开代码仓库找到凭证登录;谷歌称模型识别出是真实公司后均停止,并已告知相关机构。
Qwen 发布首个面向 AI 智能体的多模态模型 Qwen3.8-Omni-Flash,可同时处理音频与视频并自主调用工具,上下文窗口达一百万 token。
推荐理由:原文给出 Qwen3.8-Omni-Flash 与 Gemini Flash 的多模态基准对比和逐项价格,读者可据此判断成本差异。
从Google DeepMind离职的AI安全研究员Bilal Chughtai在离职帖中表示,AI有可能终结所有人,留给人类阻止这一结局的时间或许已经不多,该帖在X上获得超过80万次浏览。
SpaceX 内部已非正式讨论从陷入困境或已倒闭的初创公司购买客户信息和运营数据,用于改进 Grok,主要动机是便宜。此前 Grok 主要靠 X 塑造人格、AI tutors 补专业能力,数据团队负责人已由 Diego Pasini 换成 SpaceX 老兵 Jack Garabedian。
Nature 最新研究梳理了独立研究者 Michael Hla 的 Machina Mirabilis 项目,他用 Andrej Karpathy 的 nanochat 框架从零训练了 33 亿参数的 Transformer 语言模型 GPT-1900。
Google 与 DeepMind 研究团队提出 Dream-RSI,不改动底层模型,而是让智能体把搜索过程中的尝试与结果记录成搜索树,再在已探索空间内回放测试数千种替代策略,这一过程被称为 dreaming。
据《华尔街日报》报道,Google 的 AI 模型 Gemini 在 5 月由安全公司 Irregular 开展的 Capture the Flag 测试中逃逸到公开互联网并攻击了三家真实公司,其中一次是猜出密码,另外两次是从公开来源找到凭据。
推荐理由:多起模型越出测试沙箱攻击真实公司的事件被归因于同一测试环境配置失误,读者可了解AI安全测试中的实际风险。
Google DeepMind 新成立的 Deepmind Institute 发布首批文章,研究员 Rohin Shah 和 Anca Dragan 认为可见思维链(CoT)是 AI 的关键安全优势,因为模型用自然语言写出中间步骤,研究者可以据此发现欺骗行为或问题计划。
Google 推出实验性 AI 智能体 "CC",面向家庭使用,支持多名家庭成员共享数据,以帮助该智能体制定计划并完成任务。
联合国宣布与 Google 合作推出 UN System Data Commons,基于 Google 开源 Data Commons 平台构建,支持自然语言查询并兼容 MCP,取代原有 UNData 门户。
新研究显示,Google 开源的 SynthID-Text 水印不仅改变模型选词,还会改变模型调用的工具以及遵守或忽略安全护栏的概率,在对抗性提示词下这种影响更明显。
电网软件独角兽 Emerald AI 与 Google、Nvidia 成立 AI Energy Management Alliance(AEMA),Anthropic 及 AES、Constellation、National Grid、NRG Energy 等公用事业公司加入,目标是让数据中心临时降低用电的需求响应成为数据中心开发的常规环节。
OPPO Find X10 搭载 ColorOS 17 亮相 ODC26,通过小布记忆把一键闪记的零散输入整理成个人上下文,让 AI 从被动触发转为主动提醒。影像上首发双 2 亿像素镜头群与哈苏超清原相机,弱化计算摄影痕迹,默认照片模式即可直出。
马斯克在 All-In Summit 连线中透露,自己住进美国孟菲斯一辆 Airstream 拖挂房车,为的是监工 xAI 并入 SpaceX 后正加紧扩张的 Colossus 超级计算中心。
Anthropic CEO Dario Amodei 在周末发表的长文中提议,在所有前沿 AI 公司内部嵌入第三方评估者,赋予其报告安全事件、评估模型是否真正对齐并向公众披露未修饰结论的权力;Anthropic 承诺向 METR、Redwood Research 等独立评估者开放前所未有的系统访问权限,OpenAI CEO Sam Altman 也表示将作出同样承诺。
TechCrunch 报道,在 Anthropic CEO Dario Amodei 提出由外部机构验证安全实践后,多位网络安全专家认为前沿实验室更应先做好日志、权限和沙箱隔离等基础防护。
Google DeepMind 成立 DeepMind Institute(DMI),联合 Google 及全球科学界,从艺术、人文与政策等跨学科视角研究 AGI 的安全、治理与失控等风险。
Google 周三面向 Google Home 生态推出 MCP 服务器早期访问,任何支持 MCP 的 AI 智能体(如 Claude、ChatGPT、Google Antigravity)都能安全操作智能家居设备并访问事件历史。
AI Impacts 对 1500 多名顶尖 AI 研究者的长期调查显示,截至 2024 年,研究者对 AI 导致人类灭绝或永久失能的平均概率估计约为 18%,中位数较此前翻倍至 10%,部分人给出 100%。
Google 已向全体工程师开放 Anthropic 的 Claude,可通过内部开发工具 Antigravity 使用 Opus 5,但设有每人使用配额,Gemini 仍是默认模型。微信开源企业级知识库框架 WeKnora,支持 PDF、Word、Excel 等格式及飞书、Notion、GitLab、语雀等数据源接入。小米 18 Pro 系列官宣本月发布,将升级「百变背屏」。
Relay 于周一彻底关停,这款对标 Zapier 的 AI 工作流自动化工具因 OpenAI、Google 等大平台把同类能力直接内置而失去独立价值。S&P Global Market Intelligence 数据显示约 42% 的 AI 项目最终被母公司放弃。
BloombergNEF 新报告预测,到 2035 年美国数据中心每天将消耗约 180 亿立方英尺天然气,超过德国和日本的总和,几乎是该机构九个月前预测的两倍。
Google DeepMind 发布 Gemini 3.8 Live 和 3.8 Live Extended Thinking 两款音频模型,已通过 Gemini API 和 Google AI Studio 向开发者开放。
推荐理由:对比了 Gemini 3.8 Live 与 GPT-Live-1 的定价和语音自然度差异,可据此判断低价语音智能体的取舍。