DSH BUNDLE · dsh-score-bundle · v1.2.0

Score

Score 是对会话打分的插件。它负责“导入 + 打分”:在 DSH 会话页展示六维评分圆盘、维度详情、覆盖度、重算按钮和语义评审入口。默认确定性评分不调用 LLM;只有用户主动使用才会请求大模型。

DSH
^0.2.1-rc.2
Node.js
>=24
Score Bundle
dsh-score-bundle@1.2.0
Context-Insight
0.2.41

主要组成

实际使用中,您只需要一键安装 @fuxi-ailabs/dsh-score-bundle@1.2.0,即可获得完整的会话评分能力。

组成版本作用
Score Bundle安装入口1.2.0一次安装完整的评分能力,自带 provider-auth、env-health、Host 和 UX。
dsh-scoreHost 插件1.2.0注册 /score,负责导入、读卡、重算、语义评审和覆盖度对账。
dsh-score-uxWeb UX 插件1.2.0渲染六维评分圆盘、维度详情、重算按钮和语义评审入口。
dsh-provider-auth共享认证1.1.0解析显式配置、环境变量或 DSH credentials,供语义评审借用模型连接。
dsh-env-health共享运行时1.2.0管理 Context-Insight CLI 的探测、安装和并发安装锁;与 Observe 同时安装时复用同一实例。
Context-Insight评分运行时0.2.41提供六维评分卡、覆盖度、证据与服务端评分页面。

新版评分体验

01 · RADIAL

六维评分圆盘

六个扇区对应完成度、行为可信、完成质量、完成效率、冗余度和自主性;中心显示总分。

02 · DETAIL

维度详情

点击扇区打开详情面板,查看权重、子项、证据、基线、计算口径和未覆盖项。

03 · RECALC

确定性重算

点击圆形箭头重新运行确定性评分,不调用大模型,不消耗评审 token。

04 · SEMANTIC

语义评审

点击圆盘中心下方的语义评审图标;悬浮会立即显示“语义评审”,执行前先探测 Provider。

适合哪些场景

  • 任务质量复盘:快速判断一次会话在六个维度上的强项与主要失分点。
  • Prompt / Skill 前后对比:保持同一评分口径,对比修改前后的总分、覆盖度和维度变化。
  • 问题定位:展开低分维度,查看具体子项、证据、轮次和计算口径。
  • 语义复核:对确定性评分无法判断的质量问题,按需启动 LLM 语义评审。

使用前后对比

没有 Score

  • 会话结束后只能凭经验判断完成质量,缺少统一的六维判断口径。
  • 需要人工翻阅 Turn、工具调用和长文本输出,才能寻找质量问题的证据。
  • Prompt 或 Skill 调整后,难以用同一套指标比较前后变化。

使用 Score 后

  • 同一会话点击“打分”即可获得总分、覆盖度和六维结果。示例会话为 5.7 分、覆盖 59%。
  • 展开 D4 完成效率(示例 8.2 分)可直接查看 token、LLM 时长、工具时长、并行度、轮次和压缩次数等证据。
  • 需要复核时先执行零 LLM 的确定性重算,只有主动使用语义评审才调用模型。

边界与成本

默认评分和重算使用确定性规则,不调用 LLM。语义评审和 /score --semantic 会调用配置的 Provider,并可能产生模型费用。

Score 不提供 Turn、Trace、Subagent 等观测页面;需要观测时请安装 Observe Bundle。两个 Bundle 同时安装不会重复下载 Insight,也不会重复挂载 env-health。