文章摘要
AI 编码助手会自信地推荐根本不存在的软件包——攻击者抢注这些「幻觉包名」、植入恶意载荷,等开发者照着 AI 的建议执行安装命令时中招。这类攻击有了正式名称:Slopsquatting(幻觉抢注),2026 年 7 月由特拉维夫大学、Technion 与 Intuit 的研究者以 HalluSquatting 之名系统披露,并可被武器化为僵尸网络的投递通道。本文讲清楚长期有效的三件事:包幻觉攻击的完整机制与量化规模、为什么 agentic 时代会成倍放大这一风险、以及覆盖 CI/CD 与 agentic 运行时的双层防御体系。攻击载荷会迭代,但「幻觉即可被抢占的攻击面」这一结构性判断和防御框架是长期有效的。
前置阅读收获
📖 读完本文你将获得:
- 理解 包幻觉攻击(Slopsquatting) 的完整攻击链:从 LLM 幻觉到恶意包被执行
- 看清 PHR(Package Hallucination Rate) 这一量化指标及其研究揭示的真实规模
- 理解为什么 agentic 编码时代 会把「人类安装恶意包」的风险升级为「Agent 自动执行恶意命令」
- 掌握覆盖 CI/CD 流水线与 agentic 运行时 的双层防御体系
适用人群: 使用 AI 编码助手的开发者、DevSecOps 工程师、负责软件供应链安全的团队负责人。
💡 一句话理解
本文与 ai-security-040(Agentjacking:通过错误追踪系统注入劫持编码代理)互补——那篇讲「外部内容注入劫持 Agent」,本文讲「AI 自己幻觉出的包名被攻击者抢占」,两者是 AI 编码供应链的两个不同攻击面。
⚠️ 常见踩坑
本文引用的具体研究数据(PHR 百分比、幻觉重复率)来自已发表的学术研究;具体恶意包名与载荷会随攻防演进变化,正文聚焦可迁移的机制与防御框架。
1一个反直觉的攻击面:幻觉本身就是漏洞
传统供应链攻击利用的是「信任真实存在的包」——比如抢注一个与流行包只差一个字母的名字(typosquatting)。包幻觉攻击颠覆了这个前提:它利用的是 AI 推荐了根本不存在的包。
1.1 什么是包幻觉
大语言模型在生成代码时,会自信地写出一些看起来完全合理、但在包注册表(npm、PyPI、Maven 等)里 根本不存在 的包名。这不是偶发错误,而是 LLM 的固有倾向——模型基于「什么包名看起来合理」来生成,而不是基于「什么包真实存在」来检索。研究者把这种倾向量化为 PHR(Package Hallucination Rate,包幻觉率):AI 推荐的包中,有多少比例是不存在的。
1.2 从幻觉到攻击:Slopsquatting
攻击者的逻辑简单而致命:既然 AI 会反复幻觉出同一批不存在的包名,那我就抢先把这些名字注册成真实包,植入恶意代码,然后等。 当某个开发者让 AI 助手写代码、AI 自信地推荐了这个幻觉包、开发者照单全收执行了安装命令——恶意包就落地了。这种攻击被命名为 Slopsquatting(slop 指 AI 生成的低质内容,squatting 指抢注),2026 年 7 月特拉维夫大学、Technion 与 Intuit 的研究者以 HalluSquatting 之名做了系统披露。
1.3 为什么它特别危险
包幻觉攻击继承了供应链攻击的全部危害(在导入时执行任意代码:窃取环境变量、盗取凭据、建立反向 shell、植入持久化后门),却 绕过了传统供应链防御的心理前提。开发者审查依赖时,默认「AI 推荐的包是真实且常用的」,警惕性远低于面对一个陌生包名。对 AI 的信任,被转化成了对恶意包的信任。
💡 一句话理解
一句话记住这个攻击:传统抢注利用「你打错字」,幻觉抢注利用「AI 替你打错字,而你对 AI 毫无戒心」。攻击面从人的手误,转移到了模型的固有缺陷。
2攻击机制:HalluSquatting 全链拆解
把 HalluSquatting 拆解为可操作的攻击链,能看清每一环攻击者做了什么、防御者该在哪一环拦截。
2.1 第一环:探测高频幻觉包名
攻击者首先 大规模测试 AI 编码助手:用常见的开发任务提示(「写一个处理 JWT 的模块」「帮我做数据可视化」)反复询问多个模型,记录它们推荐的、但在注册表中不存在的包名。凡是多个模型、多次生成中反复出现的幻觉包名,就是高价值抢注目标——因为反复出现意味着未来会有大量开发者被推荐到同一个名字。
2.2 第二环:抢注与植入载荷
攻击者在 npm/PyPI 等注册表上注册这些幻觉包名,包的外观做得尽量可信——它甚至可能真的实现了所描述的功能,同时在 「import」 或安装钩子中执行恶意载荷。这一步与传统恶意包无异:窃取环境变量与凭据、建立反向 shell、植入持久化。
2.3 第三环:等待 AI 推荐与开发者执行
攻击者无需主动投递,只需等待。当某个开发者向 AI 助手提出相关任务,AI 自信地推荐了这个已被抢注的幻觉包,开发者执行 「npm install」 或 「pip install」——恶意代码在开发者完全信任的状态下运行。2026 年的研究进一步指出,这类技术可被用于 把 AI 编码助手变成僵尸网络的投递通道:大量被幻觉引导的安装,构成一张被感染的开发者机器网络。
2.4 跨生态系统的隐形放大
一个尤其隐蔽的变种:研究发现 约 8.7% 被 AI 幻觉出的 Python 包名,恰好是真实存在的 JavaScript 包(反之亦然)。模型「正确地联想到了一个真实的东西,只是生态系统搞错了」。这意味着攻击者可以 专门去其他生态系统抢注这些跨生态幻觉名——一个 Python 开发者被推荐安装某个包,它其实是攻击者在 npm 上抢注的同名恶意包。这类跨生态混淆极难被人工审查发现。
💡 一句话理解
这条链上有三个天然拦截点:第一环(让模型少幻觉——难)、第二环(注册表层面识别抢注——注册表运营方的责任)、第三环(安装前校验包是否真实可信——开发者/CI 可做)。开发者最能掌控的是第三环,这也是本文防御体系的重点。
3规模量化:PHR 指标与研究数据
包幻觉不是小概率边缘现象,而是有量化规模的主流问题。理解这些数据,才能判断防御投入的优先级。
3.1 PHR:把幻觉变成可测量的指标
Package Hallucination Rate(PHR) 定义为「AI 推荐的不存在包数 / 推荐总包数」。它已经成为评估代码生成 LLM 供应链风险的事实标准指标,评估方法是系统性地从 AI 输出中提取包引用,再到权威注册表(PyPI、npm、Go 等)逐一核验。
3.2 大规模研究的发现
一项覆盖 57.6 万样本、16 个 LLM 的综合研究(《We Have a Package for You!》)给出了几个关键数字:
- 整体 PHR 约 19.7%——即平均每五个被推荐的包里,就有一个是不存在的
- 43% 的幻觉包名会跨生成重复出现——这正是 Slopsquatting 可行的根本原因:重复意味着可预测,可预测意味着可被批量抢注
- 开源模型幻觉率约 21.7%,而 GPT-4 Turbo 低于 5%——能力更强的模型幻觉更少,但没有任何模型降到零
3.3 这些数字意味着什么
把三个数字串起来看:近五分之一的推荐是幻觉,其中近半数会重复出现,且会被攻击者批量抢注。对一个每天让 AI 生成大量依赖建议的团队,这意味着持续暴露在风险中。而「重复率 43%」这个指标尤其值得警惕——它直接量化了「攻击者抢注一个名字后,能命中多少未来受害者」的期望值。
4agentic 时代:风险为什么被成倍放大
如果说包幻觉攻击在「人类复制粘贴 AI 代码」的阶段已经危险,那么进入 agentic 编码时代,它会被成倍放大。这是 2026 年最值得警惕的趋势。
4.1 从「人类安装」到「Agent 自动执行」
在传统工作流里,AI 推荐幻觉包后,中间还隔着一个人——人会犹豫、会搜索、可能发现包不存在。但在 agentic 工作流里,编码 Agent 会自己读文件、执行命令、安装包、改仓库,整个链条无需人工确认。一个被幻觉引导的 「npm install 恶意包」 命令,可能由 Agent 在几秒钟内自动执行完毕。人类审查这道最后的缓冲被移除了。
4.2 真实案例:无人种植的幻觉包在 Agent 间传播
安全研究者 Charlie Eriksen(Aikido)在 2026 年 1 月观察到一个更诡异的现象:一个名为 「react-codeshift」 的 npm 包在真实的 AI 基础设施中传播,有多个真实 Agent 试图执行它——而这个包没有任何人刻意种植。它是「幻觉混淆」的自然产物(由两个真实包 「jscodeshift」 等的名字融合而来),被 Eriksen 抢注以研究。这说明:即便没有攻击者,幻觉包名也会在 Agent 生态中自然流动;攻击者的介入只是时间问题。
4.3 结构性根源:安全层管聊天,管不了执行
研究者在 2026 年 7 月的一周内连续披露多个相关攻击(工作流越狱、HalluSquatting、GuardFall),它们共同指向一个结构性结论:治理 AI 编码 Agent「在聊天里说什么」的安全层,并不能治理它「往你文件里写什么、在终端里执行什么」。对话层面的安全护栏与 agentic 运行时的真实操作之间存在断层——安全姿态必须跟随 Agent 的行动,而不只是跟随它的提示词。
5与经典供应链攻击的对比
把包幻觉攻击放进供应链攻击的谱系里对比,能更准确地定位它的防御位置。
| 攻击类型 | 利用的弱点 | 恶意包名特征 | 防御抓手 |
|---|---|---|---|
| Typosquatting(误植抢注) | 人类拼写错误 | 与流行包差一两个字母 | 安装前核对包名拼写 |
| Dependency Confusion(依赖混淆) | 私有/公共注册表优先级 | 与内部私有包同名 | 锁定注册表来源、命名空间 |
| 账号劫持投毒 | 流行包维护者账号被盗 | 真实流行包的恶意新版本 | 锁版本、lockfile、2FA |
| Slopsquatting(幻觉抢注) | AI 幻觉出不存在的包 | AI 反复推荐但本不存在的名字 | 安装前校验包真实存在且可信 |
5.1 关键区别
Slopsquatting 与前三者的根本区别在于 攻击面的来源:前三者利用的是「人或系统的既有信任」(信任流行包、信任内部包、信任维护者),而 Slopsquatting 利用的是 AI 凭空创造的、本不存在的「需求」。攻击者不是在「蹭」已有的信任,而是在「收割」AI 制造的虚假需求。
5.2 防御的共性与特性
共性上,lockfile、版本锁定、SBOM(软件物料清单)、最小权限等传统供应链防御依然有效且必要。特性上,Slopsquatting 要求新增一道 「包真实性校验」 关口:在安装任何 AI 推荐的包之前,确认它(1)在注册表中真实存在、(2)有足够的下载量/维护历史/可信发布者、(3)不是最近才被抢注的空壳。这道关口是经典供应链防御里没有的,因为经典场景不需要怀疑「这个包是否本来就不该存在」。
💡 一句话理解
一个实用的快速判据:如果一个 AI 推荐的包「你从未听说过、下载量极低、发布时间很新、发布者账号很新」,它极可能是幻觉包被抢注的产物。把这四个信号做成 CI 里的自动检查,能挡住大部分 Slopsquatting。
6防御体系:CI/CD 与 agentic 运行时双层设防
针对包幻觉攻击,防御必须覆盖两个层面:传统的 CI/CD 流水线,以及新兴的 agentic 运行时。两者缺一不可。
6.1 第一层:CI/CD 流水线防御
这是拦截「人类采纳 AI 建议后进入代码库」的关口:
- lockfile 强制 + 版本锁定:所有依赖锁定到确切版本,禁止安装时动态解析最新版本,杜绝临时抢注包趁虚而入
- 包真实性与信誉校验:在 「install」 前自动核验每个包在注册表中真实存在、下载量与维护历史达标、发布者可信;对新近注册、低下载量的包告警或阻断
- 私有注册表代理 + allow-list:所有依赖通过组织控制的注册表代理拉取,只允许白名单内的包进入,外部抢注包根本无法被解析到
- SBOM 与依赖审计:生成并持续审计软件物料清单,对新增依赖做来源审查;用 「npm audit」/「pip-audit」/OSV 等工具扫描已知恶意包
- 隔离的构建环境:构建在无网络或受限网络的环境中进行,即便恶意包被安装,其反向 shell/数据外发也被网络策略阻断
6.2 第二层:agentic 运行时防御
这是拦截「Agent 自动执行」的关口,也是 agentic 时代新增的必要防线:
- 安装命令的显式门禁:编码 Agent 执行 「install」 类命令前要求人工确认,或至少记录并延迟执行,保留人类缓冲
- 运行时命令拦截:在 Agent 的 shell 执行层拦截高危命令(安装、网络外发、凭据读取),对未知包的安装做实时信誉查询
- 能力最小化:默认不给编码 Agent 「自由安装任意依赖 + 自由网络访问」的组合能力;需要的依赖由人预先在受控环境备好
- 安全姿态跟随行动:把对话层的安全策略延伸到运行时——Agent 能执行什么命令、能装什么包、能访问什么网络,都要有独立于提示词的硬性策略
💡 一句话理解
双层防御的分工:CI/CD 层拦截「已经进入代码库/构建流程」的恶意依赖,是最后一道闸门;agentic 运行时层拦截「Agent 正要自动执行」的危险命令,把人类缓冲重新加回来。对授予了自动执行权限的编码 Agent,运行时层尤其关键——那是传统 CI/CD 防御覆盖不到的空白。
7常见误区与面试延展
围绕包幻觉攻击,有几个高频误区。
误区一:「我只用知名模型,幻觉率低,不用担心。」 不够。即便 GPT-4 Turbo 的 PHR 也接近 5% 而非零,且「幻觉重复率」才是攻击可行性的关键——只要某个幻觉包名反复出现,它就会被抢注,与你用哪个模型无关。更何况很多团队在用幻觉率更高的开源模型。「幻觉率低」降低概率,但不消除风险,校验关口不能省。
误区二:「lockfile 锁了版本就安全了。」 不完全。lockfile 防的是「已锁定依赖被替换」,但当你 新增一个 AI 推荐的依赖 时,lockfile 里还没有它——第一次 「install」 仍可能装进被抢注的恶意包。lockfile 必须与「新增依赖的真实性校验」配合,而非互相替代。
误区三:「这是注册表运营方(npm/PyPI)该管的事。」 注册表方确实在加强恶意包检测,但他们难以区分「抢注幻觉包的恶意行为」和「正常注册一个新包」——因为幻觉包在被抢注前本就不存在,没有「被仿冒的正主」可供比对。防御责任必然落在使用者一侧。
误区四:「agentic 编码很方便,给它完全权限效率最高。」 这正是风险所在。给编码 Agent「自由安装 + 自由网络」的完全权限,等于把供应链攻击的最后一道人类缓冲也拆掉了。便利与安全需要权衡:高风险操作(安装、网络、凭据)应当设门禁,而非默认放行。
面试延展: 如果被问「AI 编码助手带来了哪些新的供应链风险,如何防御」,可按「机制 → 规模 → 放大 → 防御」展开:先讲 Slopsquatting 机制(AI 幻觉包名被抢注,利用对 AI 的信任);再引 PHR 数据(约 19.7% 幻觉、43% 重复)说明规模;然后点出 agentic 时代「从人安装到 Agent 自动执行」的放大效应和「安全层管聊天管不了执行」的结构性根源;最后给出 CI/CD + agentic 运行时双层防御,并强调「包真实性校验」是经典供应链防御里缺失的新关口。这个回答既展示对前沿攻击的了解,又体现体系化防御思维。
💡 一句话理解
面试中把「对 AI 的信任被转化为对恶意包的信任」作为一句话锚点,再用「传统抢注利用人手误、幻觉抢注利用 AI 替你手误」做对比,能让抽象的攻击面变得直观易懂。避免只谈「要校验依赖」这种泛泛之谈——要点出「校验包是否本来就不该存在」这个 Slopsquatting 独有的新维度。
8长期视角:为什么幻觉攻击面会长期存在
本文把重心放在「不会过时的机制与框架」,因为包幻觉攻击的根源是 LLM 的固有属性,而非某个可被修复的实现缺陷。
第一,幻觉是生成式模型的固有倾向,不会消失。 LLM 基于「什么看起来合理」生成,而非基于「什么真实存在」检索。在生成式架构被彻底改造、或「生成时实时检索注册表核验」成为标配之前,包幻觉会持续存在。PHR 可以下降,但难以归零。
第二,攻击面随 AI 编码普及而扩大。 2026 年越来越多的代码由 AI 辅助甚至主导生成,意味着每天产生的「幻觉包推荐」总量在激增。攻击者抢注一个高频幻觉包名能命中的受害者数量,只会越来越大。这是一个随生态扩张而恶化的攻击面。
第三,agentic 化移除了最后的人类缓冲。 从「AI 建议、人执行」到「Agent 自主执行」的演进,是效率的胜利,也是安全的挑战。它要求防御从「保护人不犯错」转向「约束 Agent 的行动权限」——这是一套全新的、仍在发展中的防御范式。
把视野拉长:软件供应链攻击的每一步演进——从源码投毒、到依赖混淆、再到如今的幻觉抢注——本质上都是攻击者在寻找「开发者信任链条上最薄弱、最不设防的一环」。AI 时代,这一环变成了「对 AI 输出的无条件信任」。守住这一环的方法始终如一:不要把信任给任何未经独立验证的输入,无论它来自人、来自系统,还是来自一个自信满满的 AI。 这条原则,六个月后、六年后依然成立。
9幻觉类型细分与检测伪代码(原 ai-security-047 专题)
本节整合原 ai-security-047 的专题内容,提供幻觉类型的细分分类和可落地的检测逻辑。
幻觉包名的五种类型
| 幻觉类型 | 示例 | 风险等级 | 攻击者利用难度 |
|---|---|---|---|
| 完全虚构 | 推荐从未存在的包名 | 高 | 低(直接抢注) |
| 名称变体 | 推荐真实包的错误拼写 | 中 | 中(需猜测变体) |
| 跨语言混淆 | Python 场景推荐 npm 包名 | 中 | 中(需跨平台注册) |
| 版本幻觉 | 推荐真实包的不存在版本 | 低 | 高(需控制发布) |
| 组合幻觉 | 推荐多个虚构包的组合方案 | 高 | 低(批量抢注) |
检测伪代码
见下方 code 数组。
五层企业防御体系
| 层级 | 核心措施 |
|---|---|
| 第一层:AI 输出治理 | 包名验证中间件 + 注册表存在性检查 + 推荐日志审计 |
| 第二层:供应链安全 | Lockfile 锁定 + 私有注册表代理 + 依赖变更审查 |
| 第三层:运行时防护 | 容器化构建 + 系统调用限制 + 出站流量监控 |
| 第四层:检测与响应 | EDR 监控 + SIEM 告警 + 安全审计 |
| 第五层:安全意识 | 幻觉识别培训 + 安装前验证文化 + 代码审查关注依赖 |
检测工具速查
| 工具 | 功能 | 适用场景 |
|---|---|---|
| Socket.dev | 实时包行为分析 | npm/PyPI 依赖审计 |
| pip-audit | PyPI 已知漏洞检测 | Python 项目 |
| npm audit | npm 已知漏洞检测 | Node.js 项目 |
| OSV-Scanner | 跨生态系统漏洞扫描 | 多语言项目 |
| Trivy | 容器镜像漏洞扫描 | CI/CD 管道 |
92026-08-07 更新:ChainDrop 蠕虫——npm 供应链攻击的新范式
本节为 2026-08-07 增量更新。 2026 年 8 月 4 日,npm 生态遭遇迄今最大规模自传播供应链蠕虫 ChainDrop,标志着供应链攻击从「被动投毒等待安装」升级为「主动跨组织自传播」。
9.1 ChainDrop 攻击全链
攻击起源:ChainDrop 始于 Jared Wray 名下三个 GitHub 仓库(jaredwray/keyv、jaredwray/cacheable、jaredwray/ecto),攻击者通过窃取的 npm 发布 token 在 preinstall 生命周期钩子中植入恶意代码。在不到 4 小时内,蠕虫感染了 444 个包、2,212 个版本,波及 14+ 组织,受影响包周下载量合计超过 4.5 亿次(keyv@6.0.0 1.5 亿/周、flat-cache@6.1.24 1.499 亿/周、file-entry-cache@11.1.6 1.476 亿/周)。
传播机制:
- 凭据窃取:preinstall 钩子执行后,收集本地环境变量中的 npm token、CI/CD 凭据和云服务密钥;
- 横向扩散:使用窃取的 npm 发布 token 将自身注入其他包,形成自传播链;
- AI Agent 定向投毒:蠕虫专门修改
.claude/settings.json和.vscode/tasks.json配置文件,控制 AI 编码 Agent 的指令加载、工具信任和权限范围; - 以太坊死信 C2:使用以太坊区块链作为命令与控制(C2)通道,通过死信地址传递指令,难以被传统网络监控发现;
- 24 小时自清除:蠕虫内置 24 小时自毁机制,自动删除痕迹,增加事后取证难度。
User-Agent 伪装:StepSecurity 分析显示,蠕虫在 CI/CD 环境中使用 Bun/1.3.13 user-agent 伪装,表明攻击者专门针对使用 Bun 运行时的 CI 环境做了适配。
9.2 与本文核心框架的关联
ChainDrop 是本文第 4 节「agentic 时代风险放大」的最严重实际案例:
| 本文预判 | ChainDrop 验证 |
|---|---|
| Agent 自动执行移除人类缓冲 | 蠕虫专门投毒 .claude/settings.json 和 .vscode/tasks.json |
| 安全层管聊天管不了执行 | preinstall 钩子在安装时执行,绕过所有对话层安全护栏 |
| 幻觉包名会在 Agent 生态中自然流动 | 窃取的 npm token 使蠕虫主动跨组织传播 |
新增防御要求:ChainDrop 暴露了传统供应链防御的三个盲区:(1) preinstall/postinstall 生命周期钩子的执行监控缺失;(2) AI Agent 配置文件(.claude/、.vscode/)未被纳入安全审计范围;(3) 区块链 C2 通道绕过传统网络监控。本文第 6 节的「agentic 运行时防御」需扩展为:
- 生命周期钩子监控:CI/CD 中拦截 preinstall/postinstall 的网络外发和文件修改行为;
- Agent 配置文件保护:将 .claude/、.vscode/ 等 Agent 配置目录纳入不可变基础设施管理;
- 区块链 C2 检测:在网络出口策略中识别加密货币 RPC 端点的异常流量。
9.3 定量证据与来源
| 指标 | 数值 | 来源 |
|---|---|---|
| 感染包数 | 444 | StepSecurity(stepsecurity.io,2026-08-05) |
| 恶意版本数 | 2,212 | StepSecurity |
| 受影响组织 | 14+ | SecurityWeek(securityweek.com,2026-08-05) |
| 周下载量影响 | 4.5 亿+ | StepSecurity |
| 传播速度 | <4 小时首轮 | TechRadar(techradar.com,2026-08-05) |
| 自清除时间 | 24 小时 | StepSecurity |
来源:StepSecurity(2026-08-05)· SecurityWeek(2026-08-05)· TechRadar(2026-08-05)· CSO Online(2026-08-04)· TechTimes(2026-08-05)
102026-08-07 更新:三大安全事件重塑 AI 安全格局
本节为 2026-08-07 增量更新。 过去 72 小时内,三大安全事件从不同维度重塑了 AI 安全格局:OWASP LLM Top 10 2026 发布、Black Hat 2026 AI Agent 安全主流化、Veracode AI 代码安全报告 56% 通过率。
9.1 OWASP LLM Top 10 2026:从「模型不可骗」到「爆炸半径控制」
2026 年 8 月 6 日,OWASP 发布 LLM Top 10 2026 版本,核心思想发生结构性转变:不再追求让模型不可骗,而是控制系统爆炸半径(Blast-radius Control)。 这一范式转移承认了一个现实:LLM 幻觉和提示注入无法完全消除,但可以通过架构设计限制其影响范围。
新范式的技术机制:
- 分层隔离:将 LLM 置于沙箱环境,限制其可访问的资源(文件系统、网络、API);
- 最小权限:LLM 只能执行预定义的操作集合,无法动态扩展权限;
- 审计追踪:所有 LLM 输出在执行前必须经过人工或自动化审核;
- 回滚机制:一旦检测到异常行为,可以立即回滚到安全状态。
与本文的关联: 本文第 7 节讨论的双层防御(CI/CD 层 + agentic 运行时层)正是爆炸半径控制的具体实现。CI/CD 层拦截已进入代码库的恶意依赖,是最后一道闸门;agentic 运行时层拦截 Agent 正要执行的危险命令,把人类缓冲重新加回来。
对工程团队的启示: 不要试图让模型「完美」,而是假设模型会犯错,然后设计系统让错误的影响最小化。这是 2026 年 AI 安全的核心思想。
9.2 Black Hat 2026:AI Agent 安全从理论走向主流威胁
2026 年 8 月 3-6 日的 Black Hat USA 大会上,AI Agent 安全从理论研究走向主流威胁。 多个议题聚焦 AI Agent 的真实攻击面:
- 自主漏洞发现系统:某研究团队展示了能在 2 个月内分析 3915 个项目、确认 14090 个缺陷的自主漏洞系统,标志着 AI 攻击能力的指数级提升;
- 浏览器 Prompt Injection:Brave 研究员展示了 AI 浏览器中的 Prompt Injection 攻击「无完美修复」,说明攻击面已经从 LLM 扩展到整个 Agent 生态;
- GPU 内存攻击:Rowhammer 攻击被扩展到 NVIDIA GDDR6 GPU 内存,揭示了硬件层的新攻击面。
对本文的修正: 本文初版聚焦 AI 编码助手的供应链安全(Slopsquatting/HalluSquatting)。Black Hat 2026 的议题说明,AI 安全的攻击面已经扩展到整个 Agent 生态——不仅是代码生成,还包括浏览器、工具调用、硬件交互。防御策略需要从「单点防护」升级为「全栈防御」。
9.3 Veracode AI 代码安全报告:56% 通过率的停滞
Veracode 2026 年 AI 代码安全报告显示:100+ AI 模型的代码生成安全通过率停滞在 56%。 这意味着近一半的 AI 生成代码存在安全漏洞,与 2025 年的数据相比几乎没有改善。
定量证据:
- 测试了 100+ 个主流 AI 模型(包括 GPT-5、Claude 4、Gemini Ultra 等);
- 使用标准化的安全测试集(覆盖 OWASP Top 10、CWE Top 25);
- 平均安全通过率:56%(2025 年为 54%,仅提升 2 个百分点);
- 最严重的漏洞类型:SQL 注入(32%)、XSS(28%)、路径遍历(24%)。
对本文的启示: 56% 的通过率说明,AI 代码生成的安全问题不是「模型不够好」,而是「训练数据和优化目标没有包含安全约束」。在模型层面的安全改进停滞不前时,本文讨论的「安装前验证 + 最小权限」成为唯一可行的防御策略。
对工程团队的行动建议:
- 不要信任 AI 生成的代码:即使代码能运行,也必须经过安全扫描和人工审核;
- 在 CI/CD 中集成安全工具:使用 Socket.dev、npm audit、Trivy 等工具自动检测漏洞;
- 限制 AI 的执行权限:AI Agent 只能访问必要的资源,不能动态扩展权限;
- 建立安全基线:定义哪些操作需要人工审核,哪些可以自动执行。
来源:Help Net Security(2026-08-06)· Forkast News(2026-08-03)· Tech Insider(2026-08-06)
🎯 相关面试题
巩固本篇知识点,备战 AI 岗位面试。
- 中级场景高频查看详解 →
AI 编码助手的包幻觉攻击(Slopsquatting)原理是什么?如何在 CI/CD 与 agentic 运行时中防御?
考察候选人对包幻觉攻击(Slopsquatting/HalluSquatting)这一新型供应链攻击面的理解:LLM 幻觉出的包名被攻击者抢注植毒,PHR 约 19.7%、43% 可重复;以及为什么 agentic 时代会放大风险,如何构建 CI/CD + 运行时双层防御。
- 高级系统设计高频查看详解 →
如何系统性地防御 HalluSquatting(幻觉抢注)攻击?
HalluSquatting 利用 LLM 推荐不存在的包名进行供应链攻击(PHR 约 19.7%、43% 可重复)。防御需要五层体系:AI 输出治理、供应链安全、运行时防护、检测响应、安全意识。
- 高级系统设计高频查看详解 →
从 ChainDrop 蠕虫看 npm 供应链攻击的防御体系设计:当攻击从被动投毒升级为主动自传播,你的防御策略需要哪些结构性调整?
考察候选人是否理解 ChainDrop 蠕虫(2026-08-04,444 包/2,212 版本/4.5 亿周下载量)标志的供应链攻击范式转变——从被动投毒等待安装到主动跨组织自传播,能否设计覆盖生命周期钩子监控、Agent 配置文件保护、区块链 C2 检测三个新盲区的防御体系。
- 高级场景高频查看详解 →
如何防御 AI Agent 供应链攻击?从 OpenAI/Hugging Face 与 Claude 共享泄露事件出发
考察候选人对 AI Agent 供应链攻击面的理解:模型分发渠道投毒、工具/MCP 来源不可信、对话数据信任边界泄露,以及从信任链管理角度的系统性防御。
