dsh-eval-harness

BiBoyang

DSH 插件评测框架：YAML 用例驱动真实 headless agent，断言工具调用/参数/返回与 token 用量，baseline 门禁做 CI 回归。

Evaluation harness for DSH plugins: YAML cases drive real headless agent runs, assert on tool calls, args, results and token usage, with a baseline gate for CI regression.

安装命令

dsh plugin --profile web add github:BiBoyang/dsh-eval-harness

该命令来自上游目录，本站的自动审核尚未覆盖它——执行前请自行核对仓库。

安装后运行 dsh --profile web --dump-config 并重启对应 profile。插件会以你的本机权限运行第三方代码，安装前请检查源码。

信号

GitHub Stars5
30 天下载—
分发方式Git
收录时间2026-08-14

相关链接

GitHub 仓库 ↗在目录中查看

同类插件

mirage#dsh把文件系统与 bash 提供者换成 mirage 虚拟工作区：文件工具与 shell 命令作用于挂载的资源（RAM、S3、Redis、Slack、Gmail、Notion、Postgres）而非宿主磁盘，支持按挂载点设置读/写/执行模式、按命令选择沙箱（进程内 monty、pyodide、quickjs；远程 docker、e2b、daytona），并可在虚拟终端中安装 CLI（git、gh、slack、linear、ntn、gws，或自行注册的程序树）作为命令头词。oh-dsh社区发行版：TUI、桌面端与 Web UI 统一体验，分层安装、一步到位。dsh-undo-savepointDSH 撤销/回退系统：配置变更自动存档，一键撤销/恢复/回退到任意版本，支持 WebUI 与离线 CLI/GUI 工具（DSH 启动失败也能救）。forkprobe同一任务并行试跑多个技能，对比结果选出最优。dsh-multica-runtime让 dsh 运行时跑在 Multica 上。dsh-mcp-panel官方 MCP 客户端（dsh-mcp-client）的只读运行时管理面板：/mcp 命令与设置页 MCP 页签展示连接状态、已注册工具、错误与重连计数，脱敏展示并提供启停 patch 建议。