推广 热搜: 采购方式  滤芯  带式称重给煤机  甲带  气动隔膜泵  减速机型号  无级变速机  链式给煤机  履带  减速机 

【推荐】清华大学:智能体安全研究报告2026|附下载

   日期:2026-06-09 11:29:36     来源:网络整理    作者:本站编辑    评论:0    
【推荐】清华大学:智能体安全研究报告2026|附下载

锋行链盟推荐阅读

来源:清华大学清新研究团队

以下是内容详情


报告系统性地阐述了智能体(Agent)时代下的新型安全挑战、核心风险与整体治理框架。报告的核心观点是:随着AI从“对话”走向“行动”,安全的主战场已从“模型层”转向“运行时层”,构建一个可授权、可约束、可追责的“安全控制平面”是企业规模化部署智能体的先决条件。

一、 核心问题意识:为何是“智能体安全”?

报告开篇明义,点出了讨论智能体安全的历史背景和紧迫性:

  1. 能力普及与风险升维:Agent开发框架和API的成熟,使其从实验工具进入企业生产环境(如客服、研发、财务),其“规划、调用工具、保持状态并影响外部系统”的能力,使得风险从“内容风险”升级为“行动风险”。一次错误的输出,可能直接导致邮件误发、数据被改或生产事故。

  2. 官方与产业共识形成:包括美国CISA/NSA在内的国家级网络安全机构已发布专项指南(如“Careful Adoption”),NIST也明确将“能改变外部状态的Agent系统”列为独立安全议题。OpenAI等厂商则将沙箱执行、审批流等安全能力内置为基础设施。这标志着智能体安全已从厂商最佳实践上升为国家级和产业级的核心安全议题。

  3. 企业认知误区:报告警告,将智能体简单视为“更强的聊天机器人”是危险的认知误区。智能体是一个有权限的运行时系统,其安全治理必须像管理“数字员工”一样,涵盖身份、权限、审批和审计,而不能仅依赖提示词工程。

二、 核心分析框架:“七层控制”模型

报告提出了一个极具工程指导意义的智能体系统安全模型,可概括为“七层控制”:

  1. 身份层:为智能体建立独立、可追溯的身份链(用户->Agent->服务账号),避免长期持有高权限人类凭证。

  2. 权限层:实施最小权限原则,按具体任务授予短期、可撤销的权限,并对高风险操作设置审批门。

  3. 工具层:将工具视为核心攻击面,需明确定义其用途、输入输出规范(Schema)、风险等级,并在调用前后进行策略检查。

  4. 上下文层:区分指令、用户意图和普通数据,对来自网页、邮件等不可信来源的数据进行标记和隔离,防止“上下文投毒”。

  5. 记忆层:长期记忆可能成为持久化攻击的载体,需对记忆的写入实施规则、可见性控制和版本回滚。

  6. 沙箱层:对代码、命令和文件操作必须在受控的隔离环境中执行,严格限制网络、文件系统和宿主机访问权限。

  7. 审计层:建立完整的“行动账本”(Action Ledger),记录每一次工具调用的全链路信息(谁、何时、做了什么、结果如何),这是实现可追溯、可追责的基石。

  8. 人工层(贯穿性控制):在高风险、不可逆操作(如资金、法律、生产变更)中设置强制人工审批节点,审批界面需提供充分的风险解释和差异对比。

这七层共同构成了对智能体“运行时”的立体防护,其核心思想是将安全规则从提示词的“软约束”升级为系统层的“硬控制”。

三、 全面风险地图:从目标劫持到供应链污染

报告系统性地梳理了十一类主要风险,其中几个尤为关键:

  • 目标劫持与提示词注入:攻击者通过污染网页、PDF等上下文,让智能体执行恶意目标。报告特别强调了“间接提示注入”的隐蔽性与危害性。

  • 工具滥用:智能体将错误的语言输出转化为危险的真实动作(如删除数据、发送邮件)。

  • 身份与权限滥用:过宽的权限会将一个小漏洞(如提示词注入)放大为一场大事故。

  • 记忆与上下文污染:一次成功的攻击可能通过污染记忆而影响后续大量任务。

  • 意外代码执行:与代码、命令执行相关的工具风险最高,是沙箱防护的重点。

  • Agentic供应链污染:风险扩展至第三方工具、MCP服务器、插件描述等运行时依赖。

  • 多Agent级联失败:多Agent协作中,一个Agent的错误输出会成为另一个Agent的输入,导致风险传递与放大。

四、 工程化落地:安全控制架构与运营体系

报告不止于理论,更给出了清晰的工程化路径:

  1. 控制平面架构:

    • 注册与清单:建立Agent注册表和工具注册中心,实现资产的可见性。

    • 策略引擎:在工具调用前,统一执行基于身份、任务、数据的策略检查。

    • 数据安全:通过上下文防火墙隔离指令与数据,并集成数据防泄露(DLP)与数据最小化原则。

    • 熔断与回滚:设立异常行为熔断机制,并对关键操作支持回滚。

  2. 评测、监控与持续运营:

    • 红队评测:建立针对注入、越权、数据泄露、记忆污染、沙箱逃逸的专项对抗性测试集。

    • 运行监控:将Agent日志接入现有安全信息与事件管理(SIEM)系统,监控异常模式。

    • 事故响应:制定专门的Agent事故响应预案,包含检测、遏制、根除、恢复和复盘环节。

    • 指标看板:将安全指标(如注入抵抗率、越权率)与业务指标一同纳入监控。

五、 治理、组织与合规

报告强调,智能体安全不仅是技术问题,更是治理和组织问题:

  • 明确权责:每个Agent必须有明确的业务负责人(Owner)和安全上线门槛。

  • 风险分级:根据数据敏感度和动作不可逆性,对Agent进行风险分级,匹配不同等级的控制强度。

  • 安全开发生命周期:将安全要求嵌入Agent的需求、设计、开发、测试、部署、运维全流程。

  • 第三方管理:在采购第三方Agent服务时,需审查其安全控制能力,并将要求纳入合同。

六、 结论与路线图:安全是规模化的发动机

报告的最终判断非常明确:安全不是抑制Agent创新的“刹车”,而是保障其能够规模化、可信地进入生产环境的“发动机”。

报告建议企业采取分阶段落地路线:

  • 短期(90天):从建立清单、实施最小权限、开启核心日志等基础工作开始,实现“可见、可控、可停”。

  • 中期(180天):构建统一的策略引擎、沙箱环境和审批流,并对中风险Agent进行渗透测试。

  • 长期(1年):形成企业级的Agent安全控制平面,将安全运营指标纳入常态化管理。

总结而言,这份报告是一份兼具前瞻性、系统性和实操性的高级别指南。它清晰地指出,面对能行动的AI,传统的、以模型内容安全为中心的防护思路已不足够,企业必须从系统工程和治理体系的角度,构建一个覆盖身份、权限、执行、审计的“运行时安全控制平面”,才能驾驭智能体带来的生产力革命,而非被其伴随的新风险所反噬。

篇幅有限仅展示部分内容
公众号:锋行链盟后台回复【6009】下载报告
回复【9999】下载政策汇编与解读|30W份
扫码加入【链盟智库】下载10W份研报
锋 行 链 盟
会员咨询【姓名+公司】
地址:上海  深圳  西安  香港 

【锋行链盟】

锋行链盟一站式企业全周期赋能平台

已累计服务付费会员超 5000+,构建起高粘性、高价值的企业服务生态。依托由研究院、上市公司高管、创始人、投资人、券商投行、高校及政府机构组成的高端会员生态,为企业提供资源共享、专业人才对接、项目合作及港股 / 纳斯达克上市等全链条服务。

资源共享

汇聚企业、投资机构、政府部门、科研院所等核心资源,实现信息、渠道与机会互通。

项目合作与产业协同

提供产业链上下游匹配、技术合作、政企合作、园区落地、项目路演等合作机会。

专业化上市服务

由资深投行背景团队提供全流程上市辅导,助力企业登陆资本市场:

上市前期筹备

企业上市资质诊断、合规性梳理、财务规范指导、股权架构设计;

上市路径规划

结合企业实际情况,纳斯达克、香港联交所等多板块上市路径分析与选择建议;

中介机构对接

精准对接头部券商、知名律所、会计师事务所、保荐机构,降低沟通成本;

资本运作支持

涵盖上市融资、并购重组、再融资等全流程财务顾问服务,保障上市进程顺畅。

 
打赏
 
更多>同类资讯
0 条相关评论

推荐图文
推荐资讯
点击排行
网站首页  |  关于我们  |  联系方式  |  使用协议  |  版权隐私  |  网站地图  |  排名推广  |  广告服务  |  积分换礼  |  网站留言  |  RSS订阅  |  违规举报  |  皖ICP备20008329号-18
Powered By DESTOON