Agent Skills
返回列表
🤖

AI安全

AI Agent 更新于 2026.08.29

将以下提示词粘贴到你的 AI 对话框中:

请根据 https://skillhub.cn/install/skillhub.md,安装 @user_3c6cb52e/breeze-ai-security。

技能介绍

它解决什么问题

传统应用安全扫描(OWASP Top 10、依赖漏洞扫描)覆盖不到 LLM 特有的攻击面:提示注入可以覆盖系统指令,越狱模板能让模型绕过安全对齐,模型反演可能从输出中重建训练数据,数据投毒会在训练集里埋后门,而带工具的 Agent 还可能被诱导执行危险操作。这些风险发生在模型输入侧、训练侧和工具调用链上,常规渗透测试和基础设施行为监控都看不清楚。

技能如何工作

核心工具是 ai_threat_scanner.py,采用静态签名匹配,不需要连接线上模型,在输入进入模型前完成评估。测试输入为 JSON 数组,支持纯字符串或带 prompt 键的对象。工具按风险等级返回退出码:0 低风险、1 中高风险、2 严重风险或越权测试。

检测覆盖五类问题:

  • 提示注入:内置 direct_role_override、indirect_injection、jailbreak_persona、system_prompt_extraction 等签名,注入得分(0–1)反映命中比例,超过 0.5 说明注入面过宽
  • 越狱评估:按角色伪装、假设情境、开发者模式、编码混淆、多轮试探五类方法论测试
  • 模型反演:按白盒/灰盒/黑盒访问等级评分(0.9/0.6/0.3),给出差分隐私、关闭 logit 输出等缓解项
  • 数据投毒:按微调范围(fine-tuning 0.85、RLHF 0.70、RAG 0.60 等)评估风险面
  • Agent 工具滥用:检测直接工具注入、间接劫持、审批门绕过,并给出人工审批、最小工具权限、审计日志等护栏方案

所有发现映射到 MITRE ATLAS 技术(如 AML.T0051 提示注入、AML.T0020 投毒训练数据),配套三阶段工作流:20 分钟快速扫描、完整评估(静态分析→风险评分→护栏设计)、CI/CD 安全门禁。

适用边界

  • 它不是通用应用渗透测试,也不做基础设施行为异常检测
  • 静态签名匹配存在漏报空间,建议用种子提示集和自定义领域提示持续扩充覆盖
  • 灰盒/白盒测试需要书面授权;RAG 场景下外部检索内容必须按不可信输入处理

使用场景

  • LLM 功能上线前,用种子提示集跑一次快速安全扫描,确认无严重注入风险
  • 微调自有模型时,评估训练数据投毒风险并按访问等级给模型反演打分
  • RAG 智能体接入外部文档后,检测检索内容中的间接注入与工具滥用签名
  • 在 CI/CD 流水线接入提示注入扫描,作为 LLM 功能的部署门禁

适合人员

  • LLM 应用工程师:需要在模型上线前验证提示注入与越狱防御是否生效
  • AI 平台安全负责人:需要按 MITRE ATLAS 框架梳理模型侧威胁并制定护栏策略
  • Agent 开发者:给智能体接入工具后,想确认工具调用链不会被注入劫持
  • 模型训练工程师:微调数据来源复杂,想评估投毒与模型反演风险