DSH Plugins
返回列表
🧩

dsh-plugin-veriscope

admin-security 更新于 2026.10.18

在终端中运行以下命令:

dsh plugin install 4444wjt/dsh-plugin-veriscope

将以下提示词粘贴到 DeepSeek Harness 对话框中:

在 DeepSeek Harness 中执行 dsh plugin install 4444wjt/dsh-plugin-veriscope 安装本插件,源码仓库为 https://github.com/4444wjt/dsh-plugin-veriscope。

插件介绍

团队在把 AI 回答质量评测结果对外发布前,往往还需要一道可复验的「能不能发」的门槛:阈值变了、归档换了、环境升级了,昨天的通过今天未必还成立。VeriScope 门禁重放插件只做这件事——消费你已经评测过的结果,给出通过、失败或待复核的结论,并留下绑定输入、策略、判定器与环境的回执,条件一变旧结论会自动失效。

插件提供两条通道:一是重放 VeriScope 归档,走原有 Python 门禁;二是内置 B2 路径,仅用 Node 对任意已有逐条评分做阈值判定,无需安装 VeriScope、Python 或 pandas。它不评分、不调用模型,待复核不会悄悄变成通过,已确认的失败也不会被后续异常掩盖。你可以在 DSH 里用完整工具链(批量、导出、会话绑定与完成登记),也可以在 Claude Code、Codex 或 CI 里通过 MCP 与 CLI 做检查与状态查询。

适合需要把 Ragas 等评测产出纳入发布流程的 RAG/对话质量负责人、希望在升级或改策略后能解释「为什么昨天通过、今天待复核」的维护者,以及想在任务完成前强制「当前有效 PASS 回执」的团队。均值达标时仍可看到最差一条;需要逐条拦截时可用 GatePolicyV2 的 row_threshold。分享摘要与完整回执分开,便于求助而不泄露本地路径与敏感细节。

使用场景

  • Ragas 导出评分后,用策略阈值判定能否对外发布
  • 升级插件或改策略后,检查历史门禁回执是否仍然有效
  • 在任务完成前要求绑定当前有效的 PASS 回执

适合人员

  • 负责 RAG 或对话回答质量与发布流程的工程师
  • 需要复验 VeriScope 归档或本地评分 JSON 的维护者
  • 在 DSH、MCP 或 CI 中做门禁检查的团队