P6-1.1 把生成式 AI 输出看成需要检查的产出物¶
Section ID:
P6-1.1Version:v2026.07.26
在 Part 5 中,我们抓住了这样一种感觉:生成模型会制造候选分布,并通过采样选择实际输出。Part 6 要把这种感觉移到真实生成式 AI 服务的使用经验中来阅读。
生成式 AI(generative AI) 不同于只给出一个类别或一个数字的模型,它会制造用户必须阅读、检查和修改的产出物。产出物可以是句子、代码、图像说明、语音脚本等多种形式,但 Part 6 会把文本生成式 AI 作为代表路径。
| 使用场景 | 模型给出的东西 | 用户需要做的事 |
|---|---|---|
| 这篇文字是垃圾信息吗? | 垃圾信息、正常 这样的分类结果 | 确认它是否按标准被分类。 |
| 下个月需求是多少? | 数值预测值 | 确认误差范围和依据数据。 |
| 请写一封发给客户的回复 | 句子产出物 | 同时检查事实、语气、证据、遗漏和风险表达。 |
这个差异很重要。生成结果即使看起来像自然合理的句子,也不是可以直接相信的结论。理解生成式 AI,不只是看模型怎样制造产出物,还要一起看这个产出物应该用什么标准检查、怎样补强。
产出物不能只用一个标准判断¶
分类结果和数值预测也可能出错。不过,它们的输出形式相对较窄。比如是不是 垃圾信息,预测值和实际值相差多少,比较容易先设定检查标准。生成式 AI 的产出物不同。一个句子里可以同时包含事实说明、承诺、政策解释和语气,所以必须先把需要检查的内容分开看。
例如,假设模型生成了 很抱歉配送延迟。我们今天会马上重新寄出。 这样的回复。句子很自然,但句子里仍然有必须确认的项目。
| 检查项目 | 检查问题 | 直接发送可能产生的问题 |
|---|---|---|
| 事实 | 今天真的可以重新寄出吗? | 如果承诺无法兑现,客户不满会变大。 |
| 权限 | 客服人员有权确认重新寄出吗? | 这等于在没有内部批准的情况下承诺补偿。 |
| 遗漏 | 是否需要订单号、物流公司、预计到达日? | 客户缺少判断下一步行动的信息。 |
| 语气 | 是否符合公司的回应标准? | 可能过于肯定,或道歉覆盖的责任范围过大。 |
所以,生成式 AI 的产出物不能因为它是 可读的句子 就足够。用户必须把产出物的自然程度放在一边,另行检查事实、权限、遗漏和风险表达。Part 6 后面会讨论 prompt、RAG、工具使用、评价和运营记录,原因也在这里。要把生成结果用好,不能只阅读生成本身,还要一起阅读检查和补强结构。
案例与示例¶
把同一个客户请求变成三种模型输出,差异会更加清楚。
| 请求 | 输出形式 | 检查标准 |
|---|---|---|
这个咨询是退款请求吗? | 退款请求 或 一般咨询 | 确认标签标准和例外条件是否正确。 |
这个客户获得退款的可能性有多高? | 0.72 这样的分数 | 确认分数背后的依据数据和阈值。 |
请写一封发给这个客户的回复。 | 由多个句子组成的回复草稿 | 同时确认事实、政策、权限、遗漏和语气。 |
三个输出都是 AI 生成的结果,但读者需要用不同方式阅读。第一个要看它是否是符合标准的标签。第二个要看分数来自什么数据和标准。第三个要一边阅读整段句子,一边同时分开多个检查标准。
这里可以看出为什么生成式 AI 的产出物会让人觉得困难。句子自然时,人很容易感觉检查已经结束了。可是自然的句子不是检查结果,而是检查对象。句子里可能混合着已经确认的事实、尚未确认的推测、模型顺着上下文接上的合理表达,以及需要实际执行权限的承诺。
直接应用一下¶
请把下面的回复草稿按三个标准分开标记。
您好。您订购的商品已经处理重新寄出,预计明天下午到达。给您带来不便,我们深表歉意。
| 句子片段 | 先附上的检查标准 | 检查说明 |
|---|---|---|
已经处理重新寄出 | 事实、权限 | 必须确认是否有实际重新寄出的处理记录,以及客服人员是否可以确认这个状态。 |
预计明天下午到达 | 事实、证据 | 如果没有物流公司追踪信息,就不能断定。 |
给您带来不便,我们深表歉意 | 语气、政策 | 道歉表达本身很自然,但必须看它是否符合公司的回应标准和责任边界。 |
只做这一个小分类,也能看出生成结果为什么很难直接使用。输出越像句子,检查标准就不会变窄,反而会变宽。
练习与示例¶
看到下面三个输出时,先想一想用户还需要额外确认什么。右侧列是检查说明。
| 输出 | 额外确认项目 |
|---|---|
这是正常交易。 | 分类标准和例外交易条件 |
下周销售量是 1,240 件。 | 预测误差范围和依据数据期间 |
退款会在 3 个工作日内处理。 | 实际退款政策、不同支付方式的差异、客户订单状态 |
第一个和第二个输出也需要检查,但生成式 AI 产出物会让检查项目变得更宽。因为一个句子里会同时混合事实、政策、权限和语气。
这一节要留下的标准很明确。生成式 AI 的输出不是 答案标记,而是 需要检查的产出物。所以 Part 6 不会停在生成结果是否自然,而会继续讨论用什么证据补强结果、用什么记录再次检查结果。
检查清单¶
- 能说明生成式 AI 的输出与分类结果或数值预测有什么不同。
- 能说明即使生成结果看起来自然,为什么仍然需要检查。
- 能说明 Part 6 为什么应该从生成产出物和检查问题开始。