windtunnel 技能
BotonJ/dsh-windtunnel · 技能
DSH 插件风洞 — 给 DeepSeek Harness 插件作者的契约回归测试舱:剧本适配器驱动真实管线,零 API key、零网络、确定性、可进 CI。
★ 2GitHub 星标
0分支
2026-08-25最近更新
JavaScript开发语言
MIT许可证
主要功能
- 边界声明(重要)风洞是契约回归网,不是效用测试床——它证明"当工具以参数 X 被调用时管线正确产出事件流",不证明"真模型会主动、正确地调用工具"(那是真模型双盲实测的领域)。
- 崩溃隔离被测插件崩了,子进程死,风洞活着收尸出报告
- 负向用例加 expectFail: true——该用例预期"违约被捕获"。
- 效用缺口测不出工具 description 的可引发性(v2 方向:便宜模型 × N 次采样的触发率统计)
- 剧本直接产出类型化 tool-call 块,绕过了"模型输出→调用解析"层。
安装命令
dsh plugin --profile web add github:BotonJ/dsh-windtunnel