Inspect AI
Inspect AI 是面向生成式 AI、模型、RAG 或 Agent 风险控制的 AI 安全工具。
分类：开放 AI 安全与能力评测框架
公司 / 团队：UK AI Security Institute
详细介绍
该工具的主要能力包括开源模型评测框架、任务与评分器、Agent 和工具调用评测、MCP、沙箱、日志、200+ 评测生态和多供应商模型支持。
AI 安全工具的真实效果取决于模型、语言、攻击方法、上下文长度、输入模态、系统提示、RAG 数据、工具权限、部署位置、阈值、规则、版本和业务容错。详情页应把防护位置、风险类型、模态、动作、API、延迟、部署方式、数据处理、日志、评测结果和产品状态拆成动态字段维护。
适合场景
- 模型评测
- Agent 与工具测试
- 沙箱任务
- 安全研究
- 可复现实验
使用注意
- Inspect 提供评测基础设施，具体安全结论取决于任务和评分器
- 沙箱镜像、数据集与模型版本应锁定
- 危险能力评测需要严格访问和发布控制
- 上线前应建立正常样本、边界样本、已知攻击、未知变体、跨语言、多模态和故障场景测试集，并完成权限审查、红队、安全评审、日志、回滚和应急预案。