DSH EVAL / DEEP RESEARCH
FROZEN RUN RESULTS / PUBLIC EXPORT

第一层自动过程监控

C0 原生基线与 7 个插件的实际运行结果。40 条记录、4 个独立题面、5 个测评项;数据脱敏不改变原始分数和排名。

过程记录40
工具调用1,545
搜索调用390
来源 URL5,367
保护触发9

40 条记录 · 过程指标

异常计数是日志文本规则的命中次数,可能重复或误命中,不应解读为独立故障数。R10 的 Token/耗时为 null,表示派生项未独立运行。

40 / 40 条
插件 / 查看详情测评项状态延时Token工具搜索重复查询可打开 / 检查 URL错误命中重试命中整题尝试保护触发
R1SFPASS1.5 min1,894222018 / 20发现 3234文本命中21未触发
R3SFFAIL3.2 min7,243301300 / 0发现 876文本命中21SEARCH_BUDGET_EXCEEDED
R6LFPARTIAL17.4 min57,58810520013 / 20发现 614313文本命中441未触发
R7LFPARTIAL6.4 min66,51410717016 / 20发现 258153文本命中141RESEARCH_TOOL_BUDGET_EXCEEDED
R10PRODUCT · 派生PASS0000 / 0发现 00文本命中0未触发
R1SFPASS1.9 min2,040183017 / 20发现 3122文本命中21未触发
R3SFPASS0.7 min6,94172010 / 20发现 296文本命中21未触发
R6LFPARTIAL6.1 min45,0944215015 / 20发现 18126文本命中101未触发
R7LFPARTIAL9 min100,7254019017 / 20发现 2537文本命中111未触发
R10PRODUCT · 派生PASS0000 / 0发现 00文本命中0未触发
R1SFFAIL2.8 min14,44244300 / 0发现 516文本命中21RESEARCH_TOOL_BUDGET_EXCEEDED
R3SFPASS1.5 min6,80417405 / 20发现 449文本命中21未触发
R6LFPARTIAL5 min97,5074421011 / 20发现 2029文本命中121未触发
R7LFPARTIAL5.4 min118,69611825014 / 20发现 370141文本命中221SEARCH_BUDGET_EXCEEDED
R10PRODUCT · 派生PASS0000 / 0发现 00文本命中0未触发
R1SFPASS2.7 min9,080274018 / 20发现 3830文本命中21未触发
R3SFFAIL90.6 min6,72910800 / 0发现 4111文本命中21NO_PROGRESS_TIMEOUT
R6LFPARTIAL5.3 min72,8055620012 / 20发现 17322文本命中131未触发
R7LFPARTIAL18.6 min89,3736920015 / 20发现 264147文本命中211未触发
R10PRODUCT · 派生PASS0000 / 0发现 00文本命中0未触发
R1SFPASS2.5 min9,278245018 / 20发现 5110文本命中21未触发
R3SFPASS2.2 min6,97118508 / 20发现 5034文本命中81未触发
R6LFPARTIAL5.8 min85,0654520012 / 20发现 247102文本命中101未触发
R7LFPARTIAL14 min87,4939216013 / 20发现 318204文本命中151未触发
R10PRODUCT · 派生PASS0000 / 0发现 00文本命中0未触发
R1SFPASS4.3 min4,116413017 / 20发现 4228文本命中51未触发
R3SFPASS2.5 min7,131234010 / 20发现 3767文本命中41未触发
R6LFPARTIAL5.2 min27,2385620015 / 20发现 227163文本命中281未触发
R7LFPASS10.3 min99,7176120019 / 20发现 16585文本命中321未触发
R10PRODUCT · 派生PASS0000 / 0发现 00文本命中0未触发
R1SFFAIL3.4 min3,12723100 / 0发现 2536文本命中21NO_PROGRESS_TIMEOUT
R3SFFAIL9.4 min7,525491300 / 0发现 22676文本命中21SEARCH_BUDGET_EXCEEDED
R6LFPARTIAL6.7 min61,1738016012 / 20发现 20748文本命中131未触发
R7LFPARTIAL9.4 min96,71610217012 / 20发现 36031文本命中411RESEARCH_TOOL_BUDGET_EXCEEDED
R10PRODUCT · 派生PASS0000 / 0发现 00文本命中0未触发
R1SFPASS1.5 min3,861193018 / 20发现 4114文本命中21未触发
R3SFFAIL7.8 min8,382541300 / 0发现 18870文本命中81SEARCH_BUDGET_EXCEEDED
R6LFPARTIAL10.9 min91,2185920011 / 20发现 25579文本命中241未触发
R7LFPARTIAL7 min96,5824318014 / 20发现 2609文本命中101未触发
R10PRODUCT · 派生PASS0000 / 0发现 00文本命中0未触发

单条公开过程账

选择上方的插件记录或题目单元格,查看全部公开字段。

尚未选择记录。

评分与数据安全边界

题型与评估口径

SF / R1、R3:短事实检索,使用确定性规则与私有金标;金标不公开。

LF / R6、R7:长报告研究,结合交付物检查、来源检查及 Judge。

PRODUCT / R10:从 R6 派生产品诊断,不追加一轮独立研究。

V12 组合补跑后的 R3 与已验证旧记录。每条记录包含复用标记与匿名来源指纹。

公开字段与删减说明

  • 仅发布 V12 最终选择的 40 条记录:C0 加 7 个插件,每个条件 5 个测评项;不包含全部历史失败批次。
  • R1/R3 为短事实,R6/R7 为长报告,R10 由 R6 派生,不是第五次独立模型执行;缺失资源值保留 null,不改成零。
  • 移除题面、gold、回答正文、工具参数及返回正文、异常消息、Judge 理由、证据摘录、文件内容与路径、完整 URL 和查询词。
  • 来源及产物仅保留匿名编号和数值/布尔元数据;原始 run ID 用不含内容信息的来源指纹代替。
  • 错误、超时、重试、Fallback、人工介入计数为原评测器文本规则命中次数,不等同于独立故障或真人操作次数。
  • Token 和耗时沿用原始账本及既有汇总口径,不代表包含全部已丢弃尝试和 Judge 的供应商账单总量。
  • 本发布是既有数据的脱敏导出;未重跑评测、未调用模型、未修改分数或排名。