
书名:《Agent Runtime 工程化:从工具调用循环到可恢复执行系统》
作者:陈堂会
章节:第十章 Eval Harness 与 CI 回归 / 导读
电子版系列:查看完整目录
第十章 Eval Harness 与 CI 回归:导读
说 Agent '变好了'很容易。证明它变好了,要靠 eval。
Agent 产品很容易陷入'今天试了几个问题,感觉不错'的幻觉。工程系统不能靠感觉上线。Eval Harness 要把真实任务变成可重复的测试,把 trace 变成回归样本,把 prompt、工具和 runtime 策略的变化变成可比较的数据。
系列导航
前 5 篇
- 第九章 可观测与 Trace:9.7 验收标准
- 第九章 可观测与 Trace:9.6 动手任务
- 第九章 可观测与 Trace:9.5 本地 trace JSON
- 第九章 可观测与 Trace:9.4 trace 与隐私
- 第九章 可观测与 Trace:9.3 失败归因

