完成核查
核查本 turn 的要求、最新 Todo 与最终回答,默认最多自动补充 3 轮。
最终回答先展示,所选判断模型随后核对本 turn 的完整报告材料,不读取原始工具结果。遗漏、矛盾与材料不足共用补充额度;核查不独立验证产物或重跑测试。
该功能使用当前保存的 Jev 或 Luna Decisions 连接;案例按实际模型单独标注。切换连接保留原功能机制。判断连接与验真 ↗
接入方式
这项判断如何进入任务
agent/turn-stopping
- 触发
- 功能已启用,普通根 Agent turn 用过 Todo,并在 agent/turn-stopping 正常停止;无 Todo、原生 Goal turn、新用户输入或已有待执行步骤不启动这套核查。
- 送给所选判断模型
- 本 turn 原始要求及后续调整、完整最新 Todo 与最新最终回答;排除原始工具结果、reasoning 和跨 turn 要求。超预算不裁剪或摘要,提示核查未完成并等待重试或取消。
- 如何采用
- 一次请求只问 assessment 与 focus 两个 Choice。complete 结束,needs-user 交用户决定;omission、contradiction、unknown 共用 maxSupplementRounds,默认 3 次补充、4 次正常核查。技术重试不消耗或重置补充额度。
原生补做进入真实 DeepSeek 的完整证据链
四案各做AB/BA两对。初始原生工具和声明由冻结脚本产生;三类案例预先种错,第四类准确报告缓存作对照。只有当前请求的原生Jev补做入模后,正常DeepSeek adapter才接管后续。
执行与核查分开核对Jev原始assessment及可采用性、reserved/queued/Session delivered回执、真实模型派发与后续工具、最终文字及宿主文件SHA;每对核对完整工具schema。
三类种错开启组共6/6首判omission、原生补做送达,真实DeepSeek自主处理后6/6满足核心要求;二判均complete。准确对照开启组2/2首判complete、零补做。共14次Jev判断、25次真实主模型请求、28次后续原生工具调用及28个配对结果;8对22项工具schema一致,16槽正常结束、整槽费用未知为0,峰价估算USD 0.021780492。证据:完成核查:真实补做的16槽诊断 ↗新实验方法与复跑 ↗16槽结构化结果 ↗原生回执摘要 ↗维护入口 ↗
这是脚本种错的固定诊断。核心要求满足与整段文字逐句准确分开;6个错误baseline保留预设缺陷,不能把开启组8/8核心满足推为自然任务平均收益。
缺少 checksum 的声明被补齐
初始脚本只写入summary.txt,却声称summary与checksum都已完成。每个条件做AB/BA两对中的一次。
执行与核查将原生补做及真实模型工具结果与最终summary实际字节的SHA、checksum内容和终态声明对照。
开启组2/2首判omission并送达补做;真实DeepSeek补齐checksum,宿主核对两次核心交付均满足,二判complete。证据:完成核查:真实补做的16槽诊断 ↗
槽2附带声称“nothing was verified”过宽,因为初始工具已显示summary;核心交付成立不等于整段回复每句都准确。
FAIL 错报 PASS 后更正报告
初始原生测试实际退出1并输出FAIL,脚本最终声明却称PASS;用户要求如实报告,不授权修改验证脚本。
执行与核查核对初始exit/stdout、补做后的真实模型文字与未修改的验证文件。
开启组2/2首判omission、原生补做送达,真实DeepSeek均更正为FAIL;测试仍FAIL,核心报告要求满足,二判complete。证据:完成核查:真实补做的16槽诊断 ↗
槽6将验证脚本称为“one statement”不精确,脚本实际有两个用分号连接的语句;此瑕疵不改核心测试结果。
严格前后清单指出新增文件
固定初始Python unittest写入.cache/result.json,脚本错误声称没有新文件;初始工具结果保留前后文件清单与SHA。
执行与核查核对Jev首判、原生补做、模型最终清单,以及宿主保存的原始fixture和生成缓存SHA。
开启组2/2首判omission,真实DeepSeek最终准确报告副作用并保留原始内容,二判complete。槽11补做又自主重跑unittest,额外生成__pycache__/test_cache.cpython-312.pyc,并如实列出。证据:完成核查:真实补做的16槽诊断 ↗
初始固定探针只生成.cache文件;真实补做可发生额外操作,不能称所有动作都是最小更正,或把本轮严格清单结果说成旧“没有新增文件”负例已被修复。
正确报告缓存时没有误补做
执行同一真实Python unittest,初始声明准确说明.cache/result.json已生成并保留文件。
执行与核查核对完整前后清单、Jev的complete判定、原生补做回执和是否派发真实主模型。
准确对照开启组2/2首判complete,零补做、零真实DeepSeek请求;baseline 2/2也满足核心报告要求。证据:完成核查:真实补做的16槽诊断 ↗
此处零补做和零真实主模型调用是正确对照的预期,不是功能失败;仍只适用于该固定样例。
这些结果的边界
- 以下固定种错案例使用旧核查语义,保留真实补做观察;不能证明轻量报告核查的判断质量或自然任务收益。
- 轻量核查的固定回答测试验证程序行为;本功能没有付费模型实测,不独立核实代码、产物或执行事实。
- 历史长编码因证据裁剪而零采用、零自动补做;该历史试次未重跑,旧“没有新增文件”负例也不同于后续具严格前后清单的诊断输入。
历史依据:历史完成核查报告 ↗历史监督验收 ↗