自我验证循环
页面堆叠了上百个日期化简报片段,核心张力——模型自报完成与真实端到端状态之间的系统性偏差——被淹没在按天追加的流水账里,验证手段(E2E、消融、receipt、独立 verifier)散落在互不引用的段落中。
主题导航
- 单元测试通过不等于功能可用:多处来源一致指出 Agent 倾向于在缺少端到端证据时宣布完成,最小 E2E smoke test、视觉回看和已知错误输入的负向检查是把『绿色』变成可信信号的手段。具体哪些检查值得常驻仍取决于任务风险,没有统一配方。
- 验证器必须与生成器分离:模型自评系统性偏正,独立 verifier sub-agent、新上下文审查和低实现 effort 加高验证 effort 的两层循环都被报告优于自我批评。各方案的成本与逃逸缺陷对比多为个人转述,缺少受控数据。
- 验收标准与证据产物先于实现:独立的 Definition of Done、行为标准评测和可回放的证据包(trace、PR、CI、截图、录像)被反复提出,用来把『agent 说完成了』换成可检查产物。证据分级的粒度和人工审阅预算如何匹配仍是开放问题。