dsh-relaycheck
在终端中运行以下命令:
dsh plugin install YanYunCY/dsh-relaycheck
将以下提示词粘贴到 DeepSeek Harness 对话框中:
在 DeepSeek Harness 中执行 dsh plugin install YanYunCY/dsh-relaycheck 安装本插件,源码见 https://github.com/YanYunCY/dsh-relaycheck。
插件介绍
当你通过第三方中转调用大模型 API 时,很难从日常对话里判断对方是否真的在跑宣称的模型、计费是否 honest、上下文有没有被悄悄截断,或是否在请求里塞了你看不见的提示词。dsh-relaycheck 把这件事交给 Agent:在 DeepSeek Harness 里增加 relay_check 工具,对你在配置里登记的中转目标跑 relaycheck,并给出可读结论。
检测分四组并与参考指纹对比:identity 用统计方法排查模型调包;protocol 核对宣称 API 的协议字段是否对得上;billing 对比上报用量与真实 token,并留意隐藏注入;context 用 needle 测试是否截断上下文窗口。最终裁决为 consistent、inconsistent 或 inconclusive——这是统计检验,不是法律意义上的铁证。
目标地址和密钥变量名写在 profile 配置里,Agent 只能点名已配置的目标,密钥只从环境变量读取,结果与报错里不会出现密钥,降低提示词把 key 指到别处的风险。若当前会话 provider 与某目标一致,还可无参检测「我正在用的这条中转」。
适合自建或采购 API 中转、想定期抽检服务质量与安全性的开发者与运维。默认一次检测会发起大量短请求并耗时数分钟,因此插件默认开启运行前确认;可按需调整探针组、采样数与超时。
使用场景
- 接入新的 LLM 中转商前,想确认对方是否真的提供宣称的模型
- 怀疑计费虚报或上下文被截断,需要一次可重复的抽检
- 在 Harness 会话里一键检测当前正在使用的中转是否一致
适合人员
- 使用或自建 LLM API 中转的开发者
- 负责模型网关与供应商抽检的运维
- 需要在 Agent 工作流里做中转审计的用户