T learn.traeai

第 5 节 · 本站原创中文课程 · 建议 25 分钟

用评测定位错误与成本

学完能做:构建开发与独立测试样本。

先写预期

准备完整、缺失、冲突、超长、无权限和伪指令案例。信息不足应承认缺口,不能每题都要求完整答案。先定义标准防止事后迎合结果。

质量与过程分开

看任务、引用以及工具次数、时间和费用。模型自评分是定性信号,不代替标注与确定检查。失败分类到检索、理解、工具或权限。

case | 预期 | 实际 | 错误类 | 工具次数 | 时延
missing_owner | 待确认 | 待测 | 待测 | 待测 | 待测
conflict_dates | 列冲突 | 待测 | 待测 | 待测 | 待测

保留独立样本

调提示词用的样本不应作为最终唯一测试。固定模型与环境,每次改一个因素。越权错误不能被总体平均掩盖,必须单独处理。

这是本站独立编写的讲解与示例,并非官方课程逐字翻译。理解之后,请完成下面的练习、自测和笔记。

参考来源:Agentic AI

动手,把理解变成成果

本节练习

正在读取本机草稿…

设计八个案例,分开发/测试集,覆盖缺失、冲突、权限和伪指令,列质量与成本。

26 / 6000 字。本页不执行代码;可下载后在本地运行,或用 Agent 获取定性建议。

给我一个提示

待测不能算成功率。

查看参考思路(本站预写,非实时 Agent)

5个开发、3个独立;记录引用、成功、次数与时延。没运行标待测,关键越权单独处理。

人工自评:逐项核对自己的作品

这些勾选由你确认,不是自动测试结果。遇到待测项,请在作品里明确注明。

理解自测

独立测试集用于?

自己的学习笔记

0 / 3000 字 · 仅保存在此浏览器

围绕当前章节学习

Agent 答疑与作品评价

正在检查连接…

本站讲解、提示、参考思路和自测可独立使用。连接模型服务后,才能实时提问或评价;这里不会把预写内容伪装为 Agent 回答。

走完学习闭环

完成本节

保留练习、勾选人工自评并通过自测后,可记录完成。修改作品或答案会重新打开本节。

课程进度:0 / 6 · 本机记录,不是外部官方证书

下一节:项目:资料整理 Agent →
← 上一节:反思与有界修正