Back to home

Harzva

dsh-research-lab

DSH-native multi-runtime baseline, ablation, and reproducible evaluation control plane

Stars
0
Language
TypeScript
Created
Aug 17, 2026
Updated
Aug 17, 2026

Introduction

DSH Research Lab

dsh-research-lab 是独立的 DeepSeek Harness 研究插件:在 DSH Web 内管理多推理 Runtime、固定 Baseline、生成消融矩阵,并冻结可复现的实验 Manifest。

开发者检索关键词:dshdsh-plugindeepseek-harnessdsh-research-labreasoning-runtimeagent-evaluationablation-study

M0 边界:当前是 Manifest-first 控制面。它不会调用模型、不会产生 API 费用,也不宣称 Plan-and-Execute、Tree of Thoughts 或 Reflexion 已经可运行。

已实现

  • 独立 DSH 插件包 @harness-flow/dsh-research-lab
  • DSH 原生入口:Settings → Plugins → Research Lab
  • Runtime Catalog:ReAct Default、Plan Guided、Code Orchestration,以及明确标记为设计态的 Plan-and-Execute、ToT、Reflexion。
  • 固定 DSH、Profile、Preset、模型、数据、预算、指标与种子的 Baseline 协议。
  • Runtime × repetitions 消融矩阵,最多 64 个 planned runs。
  • 规范化 JSON + SHA-256 的确定性 Manifest。
  • DSH Home 私有、原子、幂等存储;API 不返回绝对路径或凭据。
  • Windows/Linux CI、TypeScript 构建和单元测试。

本地开发

要求 Node.js 22+、pnpm 11,以及当前已验证的 DSH 0.1.0-rc.6

pnpm install
pnpm check
pnpm run pack:plugin

把生成的 .tgz 安装到 DSH Web Profile:

dsh plugin --profile web add .\artifacts\harness-flow-dsh-research-lab-0.1.0-m0.tgz --save-exact --ignore-scripts
dsh --profile web

文档

本项目是社区项目,不代表 DeepSeek 官方背书。