precize/Agentic-AI-Top10-Vulnerability
GitHub: precize/Agentic-AI-Top10-Vulnerability
人工智能代理安全风险分析指南
Stars: 187 | Forks: 44
# 人工智能代理的前十大威胁及缓解措施
## 概述
本项目记录了与人工智能代理相关的十大安全风险,代表了针对自主人工智能系统特有的漏洞的全面分析。该文档为每个风险提供了详细的描述、示例和缓解策略,帮助组织有效地保护其人工智能代理部署。
## 目的
随着人工智能代理因通用人工智能模型而日益普及,理解和缓解其安全风险变得至关重要。本指南旨在:
- 识别和解释人工智能代理系统中最关键的安全风险
- 提供针对每个识别出的风险的实用缓解策略
- 帮助组织实施安全的人工智能代理架构
- 推广人工智能代理安全方面的最佳实践
## 项目结构
文档组织为十大主要安全风险,每个风险涵盖一个特定的风险类别:
1. AAI001:代理授权和控制劫持
2. AAI011:代理不可追踪性
3. AAI002:代理与关键系统交互
4. AAI014:代理对齐伪造漏洞
5. AAI003:代理目标和指令操纵
6. AAI005:代理影响链和爆炸半径
7. AAI006:代理记忆和上下文操纵
8. AAI007:代理编排和多代理利用
9. AAI009:代理供应链和依赖攻击
10. AAI012:代理检查循环漏洞
### 未来
1. AAI014:代理时间操纵基于时间的攻击
2. AAI015:代理反转和提取漏洞
3. AAI016:代理隐蔽通道利用
### 已弃用
1. AAI004:代理幻觉利用(与LLM Top 10部分重叠,因此保留在LLM Top 10中)
2. AAI010:代理知识库投毒(将与AAI006 - 记忆和上下文操纵合并)
3. AAI008:代理资源和服务耗尽(将与AAI005 - 影响链和爆炸半径合并)
### 路线图
- **版本 1.0 **(2025年2月)
- **版本 1.5 **(2025年5月)
## 贡献者
### 编辑者
### 作者
## 许可证
## 联系
如有问题、建议或关注事项,请在此存储库中打开一个问题或联系项目维护者。
## 致谢
特别感谢所有投入时间和专业知识使本项目成为可能的贡献者,以及支持他们参与这一重要安全倡议的组织。
*本文件将由AI & Cloud Governance Council社区维护,代表改善人工智能代理系统安全的协作努力。*
标签:日志审计, 逆向工具