检查 AI 输出中的事实、数字和格式

AI 最危险的输出不是明显胡说,而是结构完整、语气笃定、数字具体,却在计算、因果、遗漏或使用方式上经不起复查。这节课让你亲手验收一份经营摘要,决定它是可以交付、需要返工,还是必须停止使用。

练习任务:验收一份 4 月经营摘要

负责人要了解 4 月相对 3 月的销售变化和退款风险。资料只有下面四项指标,不能推断客户类型、渠道原因、利润或广告回报率。

预计 35—50 分钟

3 月销售额 100000 元

订单 500 单
退款订单 20 单
广告费 12000 元

4 月销售额 112000 元

订单 520 单
退款订单 52 单
广告费 15000 元

资料缺口不能计算或解释

没有退款金额、商品、渠道、客户类型、毛利和退款原因。

原任务要求

  1. 比较 4 月与 3 月销售额。
  2. 分别计算两个月退款订单率。
  3. 指出可以确认和不能确认的结论。
  4. 给出下一步需要补查的数据,不作未经证明的投放决定。

AI 首稿:读起来像结论,实际上不能交付

4 月经营表现强劲,销售额环比增长 18%,主要由新客户和广告投放带动。
退款情况整体稳定,广告回报率继续改善。建议下月增加 30% 广告预算,以保持增长势头。

数字可能错18% 没有计算过程
原因没有来源没有客户或渠道字段
风险被遗漏退款订单从 20 增至 52
行动建议越权现有资料不支持增投 30%

第一步:检查结果之前,先把“合格”写出来

没有验收条件,就只能凭语气和排版判断。这里把原任务改成五项能逐条打勾的标准。

01要求正确

回答销售变化、退款率、资料缺口和下一步检查。

02事实正确

月份、金额、订单数和状态与原表一致。

03计算正确

公式、原始值、过程、结果和单位齐全。

04解释不过界

没有把缺失数据、相关变化或猜测写成原因。

05能够使用

负责人看得懂,待补数据明确,不含未经授权动作。

交付物:
目标读者和使用场景:

必须回答:
1.
2.
3.

事实标准:
计算标准:
完整性标准:
格式标准:
安全与权限标准:

出现以下情况必须退回:
- 无来源的数字、名字、日期或引用
- 没有过程的关键计算
- 把相关、顺序或猜测写成因果
- 遗漏会改变决策的风险或限制
- 建议执行未获授权的发送、删除、发布或付款动作

第二步:把顺畅文字拆成可以证明的断言

首稿断言 类型 需要的证据 核验结果 决定
销售额增长 18% 计算 两月销售额和公式 实际为 12% 纠正
主要由新客户带动 原因 新老客户销售增量 没有客户字段 删除
广告投放带动增长 原因 渠道归因或对照数据 只有广告费总额 无法验证
退款情况稳定 解释 两月退款率 4% 上升至 10% 改为风险
广告回报率改善 计算 归因收入或利润 字段缺失 删除
增加 30% 广告预算 行动建议 目标、回报、预算约束和授权 均未提供 不执行
来源证明原资料直接支持计算证明可按公式复算无法验证资料不足,不能保留为事实人工决定证据之外的授权或业务判断

编号:
输出原句:
断言类型:事实/计算/引用/解释/因果/行动建议
需要的证据:
实际来源:
原始值或原句:
计算过程:
核验结果:来源证明/计算证明/无法验证/需要人工决定
处理决定:保留/纠正/删除/标记不确定/退回确认
修改后复查:

第三步:关键数字自己复算一次

销售额环比

(112000 − 100000) ÷ 100000 = 12%

首稿的 18% 错误。必须使用同一口径的前后月份数据。

3 月退款订单率

20 ÷ 500 = 4%

分子和分母都使用订单数量口径。

4 月退款订单率

52 ÷ 520 = 10%

较 3 月上升 6 个百分点,而不是“稳定”。

不能计算广告回报率

缺少归因收入、利润或约定口径

销售额与广告费同时增加,不能证明广告带来了多少收入。

指标:
业务含义:
公式:
分子及来源:
分母及来源:
时间范围:
单位:
缺失值处理:
计算过程:
AI 输出结果:
人工复算结果:
差异:
复算人和日期:

第四步:检查“没写出来的错误”

事实都正确仍可能不完整。对照原任务逐项检查,尤其关注被流畅文字掩盖的风险、限制和待确认事项。

要求 1:销售变化首稿提到,但数字算错未通过
要求 2:两月退款率没有计算,还误写“稳定”未通过
要求 3:能与不能确认没有资料缺口,反而编造原因未通过
要求 4:下一步补查没有补查项,直接建议增投未通过

遗漏检查的最小方法

  1. 把原任务中的每个动词和必填栏目编号。
  2. 在成品中标出对应位置;找不到就是遗漏。
  3. 再问:有没有未写出但会改变读者决定的风险、限制或未知项?
  4. 不要让新补内容引入资料之外的事实。

第五步:最后检查格式、可用性和权限

格式

是否按要求给负责人阅读,而不是写成分析过程或宣传稿?

文件

最终文档能否在目标软件打开,表格公式和链接是否仍有效?

安全

是否带入不必要的个人信息、隐藏批注、密钥或内部路径?

权限

建议中的发送、发布、删除、付款和预算调整是否需要人工批准?

最终成品:只写证据真正支持的内容

4 月经营摘要对比范围:3 月与 4 月

销售变化:4 月销售额为 112000 元,较 3 月的 100000 元增长 12%。

退款风险:退款订单率由 3 月的 4% 上升至 4 月的 10%,增加 6 个百分点,应优先核查退款原因。

当前不能确认:资料没有客户类型、渠道归因、退款金额和利润,不能判断销售增长原因、广告回报率或利润变化。

下一步补查:按商品、渠道和退款原因补充订单数据;明确广告归因口径后,再决定是否调整预算。

要求四项任务均已回答通过
事实原始数值一致通过
计算三个关键指标已手算通过
完整风险、缺口和下一步齐全通过
可用与安全没有越权决定或敏感信息通过

交付物:
原始任务版本:
资料版本:
AI 输出版本:

要求核对:
□ 每项任务要求都有对应位置

事实与计算:
□ 数字、日期、名称和引用可回到来源
□ 关键计算包含公式、原始值、过程、结果和单位
□ 无法验证的断言已删除或明确标记

完整性:
□ 会改变决定的风险、限制和未知项没有遗漏
□ 建议与证据强度相符

可用与安全:
□ 文件、链接、公式和版式已在目标环境检查
□ 没有泄露不必要的敏感信息
□ 发送、发布、删除、付款和预算决定仍由获授权人员确认

发现的问题:
返工位置:
最终决定:可以交付/需要返工/停止使用
验收人和日期:
能不能让另一个 AI 帮忙核验?

可以让它帮助拆断言、找可能遗漏和生成核验表,但不能把“另一个 AI 也同意”当成证据。事实仍要回到原始来源,计算仍要用实际数据复算,最终业务决定和权限动作仍由人负责。