Appearance
Agent 评测基准
在知识图谱中的位置:模块四 · 04_工程实践 · 第 4 节 难度:⭐⭐ | 前置知识:Agent 基础
1. 主流评测基准
AgentHarm (ICLR 2025)
AgentHarm 是衡量 LLM Agent 有害性的基准,发表于 ICLR 2025。来源: AgentHarm (ICLR 2025)
OpenAgentSafety (ICLR 2026)
OpenAgentSafety 是全面评估真实世界 AI Agent 安全的框架,发表于 ICLR 2026,由 Carnegie Mellon 等机构提出。来源: OpenAgentSafety (ICLR 2026)
AgentThreatBench
UK Government BEIS 的 AgentThreatBench,基于 OWASP Top 10 for Agentic Applications 实现。来源: AgentThreatBench (GitHub)
AgentBench
通用 Agent 评测基准,测试多轮任务完成度。来源: AgentBench
2. OWASP Agentic AI Top 10(已验证来源)
OWASP 发布了针对 Agentic Applications 的 Top 10 安全风险标准。来源: OWASP GenAI
十大风险:
- 工具滥用(Tool Abuse)
- 提示注入(Prompt Injection)
- 越狱攻击(Jailbreak)
- 数据泄露(Data Exfiltration)
- 幻觉执行(Hallucinated Actions)
- 权限逃逸(Privilege Escalation)
- 无限循环/资源耗尽
- 供应链攻击
- 审计缺失
- 伦理与偏见
来源: OWASP Agentic AI 报告 (v1.1, Dec 2025)