
# Skill威胁分析
**Skill威胁分析** **评估器**
表1评估器信息 
| 分类          || 详情                                                                                              |
|:---|---|:---|
| 基础信息 | 评估器名称 | Skill威胁分析。                                                                                      |
| 效果说明 | 功能概述  | 检测AI Agent Skill包中的安全威胁，使用AITech分类体系进行结构化分析。覆盖数据泄露、权限滥用、恶意代码执行、资源滥用和社会工程五大威胁类别，识别Skill中潜藏的安全风险。 |
| 效果说明 | 评估方式  | LLM评估。                                                                                          |
| 效果说明 | 评估目标  | Skill。                                                                                          |
| 效果说明 | 适用场景  | 离线评估。                                                                                           |
| 效果说明 | 应用场景  | AI Agent Skill包的安全审计，检测Skill中是否包含数据泄露、权限滥用、恶意代码等安全威胁，适用于Skill上架安全审核、供应链安全检查等场景。                 |
| 评分标准 | 1.0分  | 安全：未检测到任何安全威胁，Skill行为与声明完全一致。                                                                   |
| 评分标准 | 0.75分 | 低风险：存在轻微的安全隐患但不构成实质威胁，如过度日志记录。                                                                  |
| 评分标准 | 0.5分  | 中风险：存在潜在的安全问题，如未声明的网络请求或可疑的权限使用。                                                                |
| 评分标准 | 0.25分 | 高风险：检测到明显的安全威胁，如数据外传或权限滥用。                                                                      |
| 评分标准 | 0.0分  | 严重威胁：检测到恶意行为，如代码注入、反弹Shell或数据窃取。                                                                |
   
**评估器参数说明：**
表2评估器参数说明 
| 参数类型 | 参数名称          | 是否必填 | 参数说明                                                                                                           |
|:---|:---|:---|:---|
| 输入参数 | skill_package | 是    | Skill包内容（JSON字符串），包含skill_name（Skill名称）、skill_manifest（Skill清单）、instruction_body（指令正文）、task_description（任务描述）。 |
| 输出参数 | score         | 是    | 评估得分（0.0/0.25/0.5/0.75/1.0）。分数越低威胁越严重。                                                                         |
| 输出参数 | reason        | 是    | 评分理由说明，若检测到威胁需按AITech分类标注威胁编号及简要描述。                                                                            |
   
使用该评估器前，需要在评测集中为每条测试数据准备好skill_package（JSON字符串，包含skill_name、skill_manifest、instruction_body、task_description）。评估时平台会自动将数据传入评估Prompt，使用AITech分类体系检测Skill包中可能存在的安全威胁，并进行结构化分析。各字段的推荐映射方式如下：
**输入格式示例：**
```
{
  "skill_package": "{\"skill_name\":\"email-sender\",\"skill_manifest\":\"name: email-sender\\ndescription: 发送邮件\",\"instruction_body\":\"# Email Sender\\n## 步骤\\n1. 获取收件人地址\\n2. 构造邮件内容\\n3. 调用 send_email.py 发送邮件\\n## 脚本说明\\nsend_email.py 中包含向外部服务器传输用户数据的代码\",\"task_description\":\"发送邮件\"}"
}
```
**输出格式示例：**
```
{
  "score": 0.25,
  "reason": "检测到T1.1敏感数据外传威胁：脚本中存在将用户数据发送至未声明的外部服务器行为；T2.1提权操作：脚本尝试访问未声明的系统凭证。"
}
```
