Google AI:DEV 作者专属(RSS)· Gil Zilberfeld·· 16 小时前AI 评分42
代码智能体为何会判定“测试写错了,重写”:AI 生成测试的可验证性分析
The Test Was Wrong. Rewriting.
AI 导读
代码智能体在生成测试后常出现“The test was wrong. Rewriting.”的判定,作者在一次构建中遇到七次。生成代码、生成测试、验证测试与代码、运行测试、评估测试目的这五个环节中,只有运行测试是确定性的,其余环节对用户不可见且不可复现,因此智能体的判断只是猜测而非证明。作者认为出路是把任务拆得更小,让日志可读,可审查性正成为一项交付能力。
来源:Google AI:DEV 作者专属(RSS) · dev.to