项目介绍
Eval Marketplace
全面的安全评估工具，用于代理技能和MCP服务器，由GitHub和Bright Data集成提供支持。
概述
此市场提供了两种专门的评估技能，利用MCP服务器进行评估：
- agent-skill-evaluator：代理技能（.skill文件）的安全性和安全性评估
- mcp-evaluator：MCP服务器的安全性和隐私性评估
这两种技能会自动评估安全漏洞、隐私风险、社区反馈，并提供详细的评分和可操作建议。
安装选项
选项1：通过插件市场安装（推荐）
1. 添加市场
/plugin marketplace add /path/to/eval-marketplace
或从GitHub：
/plugin marketplace add github:jeredblu/eval-marketplace
2. 安装插件
/plugin install evaluator-tools@eval-marketplace
选项2：单独下载技能（适用于Claude Code或Claude Desktop）
单独下载技能以进行手动安装：
代理技能评估器
- 下载：agent-skill-evaluator.zip
- 解压zip文件
- 将内容移动到
~/.claude/skills/agent-skill-evaluator/ - 重启Claude Code
MCP评估器
- 下载：mcp-evaluator.zip
- 解压zip文件
- 将内容移动到
~/.claude/skills/mcp-evaluator/ - 重启Claude Code
注意：这些技能与推荐的MCP服务器配合最佳，您需要手动配置MCP服务器（参见下面的配置部分）。
Claude Desktop安装
对于Claude Desktop用户：
- 下载：agent-skill-evaluator.zip 或 mcp-evaluator.zip
- 打开Claude Desktop
- 转到设置 > 功能 > 上传技能
- 选择下载的zip文件
- 如需安装第二个技能，请重复上述步骤
配置
评估器技能的最佳运行需要两个MCP服务器。两者都是可选的，但强烈推荐以实现全部功能。
推荐的MCP服务器
GitHub MCP服务器（推荐）
- 启用直接访问GitHub仓库以分析技能和MCP服务器
- 安装：@modelcontextprotocol/server-github
- 需要：GitHub个人访问令牌
Bright Data MCP服务器（推荐）
- 启用网络抓取和Reddit访问以分析社区反馈
- 安装：@brightdata/mcp
- 需要：Bright Data API令牌
- 注意：启用Pro模式以进行Reddit抓取
按照官方安装说明安装并配置这些MCP服务器。
使用
代理技能评估器
评估来自各种来源的代理技能的安全性：
评估这个技能：https://github.com/username/skill-repo
这个技能是否安全？https://example.com/my-skill.skill
请对这个技能进行安全评估：[附加 .skill 文件]
评估器将：
- 下载并解压技能
- 分析SKILL.md以检测提示注入
- 查看脚本中的恶意代码
- 搜索社区反馈
- 生成综合安全报告及风险评分
MCP服务器评估器
评估MCP服务器的安全性：
评估这个MCP服务器：https://github.com/username/mcp-server
这个MCP是否可以安全使用？https://github.com/org/mcp-repo
评估器将：
- 分析仓库元数据和活动
- 查看代码中的安全漏洞
- 搜索替代方案和比较
- 收集社区反馈（包括启用Pro模式的Reddit）
- 生成详细的评估报告及建议
特性
代理技能评估器
- 提示注入检测
- 恶意代码模式匹配
- 隐藏指令扫描
- 数据外泄检测
- 社区验证
- 风险评分（0-100分）
- 可操作建议
MCP服务器评估器
- 安全漏洞分析
- 隐私风险评估
- 代码质量审查
- 替代服务器发现
- 社区反馈研究（Reddit、论坛、GitHub）
- 多维度评分
- 易用性评估
平滑降级
没有MCP服务器时，技能仍可工作，但功能会减少：
| 场景 | 行为 |
|---|---|
| 没有GitHub MCP | 使用网络抓取访问仓库 |
| 没有Bright Data | 使用内置网络搜索（有限） |
| 没有Pro模式 | 不进行Reddit抓取，仅基础搜索 |
示例：没有MCP
用户："评估这个MCP：https://github.com/example/server"
Claude：使用基本网络抓取，无法访问私人仓库，Reddit数据有限，分析速度较慢
示例：有MCP
用户："评估这个MCP：https://github.com/example/server"
Claude：直接访问仓库，进行全面代码审查，收集Reddit社区反馈，进行综合安全扫描
要求
- Claude Code或Claude Desktop
- GitHub个人访问令牌（推荐）
- Bright Data API令牌（推荐，用于Reddit抓取）