dsh-profile-lab
在终端中运行以下命令:
dsh plugin install young-tim/dsh-profile-lab
将以下提示词粘贴到 DeepSeek Harness 对话框中:
请在 DeepSeek Harness 中运行安装命令,使用源码地址 https://github.com/young-tim/dsh-profile-lab 来安装 dsh-profile-lab 插件。
插件介绍
DeepSeek Harness 本地实验与发布门禁工具专为解决模型 Profile 与 Patch 组合验证的痛点而生。它允许用户在隔离的工作区中安全地重复运行多个测试组合,通过计算质量、Token 消耗、费用、时延及稳定性等关键指标,为模型迭代提供客观依据。
该插件具备强大的闭环实验能力,支持从自然语言指令生成测试用例,并通过 Web 界面的“Profile 组合对比”页签直观展示方案概览、基线差异及 Pareto 前沿。它能自动生成包含机器、评审和离线浏览格式的可审计报告,帮助团队精准把控发布风险。
它非常适合需要确保模型稳定性与合规性的 AI 工程师及模型开发者。通过内置的 `profile-lab-author-cases` 技能,用户可以借助 AI 辅助规划评测用例矩阵,配合严格的凭证安全快照机制,让本地实验既高效又安全,是 DeepSeek Harness 生态中不可或缺的质量保障利器。
使用场景
- 在发布前验证模型稳定性与性能
- 比较不同 Profile 组合的输出差异
- 分析 Token 消耗与运行成本趋势
适合人员
- 负责模型评估与发布门禁的 AI 工程师
- 致力于优化模型性能与稳定性的模型开发者
- 需要自动化测试与成本控制的 QA 团队