SkillEvaluator 分三层:第一层检查技能是否安全、格式规范、与各家智能体兼容,会调用 SkillSpector 和 Gitleaks 扫描;第二层用向量检测技能内部和技能之间的重复内容;第三层在沙箱里让智能体分别带和不带技能完成任务,比较结果。第一层可以完全不用模型和 API Key,自带示例得到 86.2 分;也能用 NVIDIA Build 的免费额度跑模型评分。它是 NVIDIA 认证技能流程的一部分,附 arXiv 论文。
为什么重要 技能越装越多,却很少有人验证它到底有没有帮上忙;它把静态检查、重复检测和沙箱里的对照实验做成一条命令,还能接进 CI。
星数 1703(+122 / 24h)
理由
- 24 小时新增 122 星,总星 1703(只代表关注度);Apache-2.0 许可
- README 写清了每层需要的条件(扫描器、模型、Docker 沙箱),跑不了的层会标成未完成
用法
- pip install skillevaluator 后运行 skillevaluator validate ./my-skill --tiers 1 做无 Key 检查;在 GitHub 仓库里运行 skillevaluator ci init 自动开一个接入 CI 的 PR
风险
- 第三层需要模型服务、受支持的智能体和 Docker 沙箱;模型评分会把技能文档发给所选的模型服务