AI 最危险的输出不是明显胡说,而是结构完整、语气笃定、数字具体,却在计算、因果、遗漏或使用方式上经不起复查。这节课让你亲手验收一份经营摘要,决定它是可以交付、需要返工,还是必须停止使用。
练习任务:验收一份 4 月经营摘要
负责人要了解 4 月相对 3 月的销售变化和退款风险。资料只有下面四项指标,不能推断客户类型、渠道原因、利润或广告回报率。
预计 35—50 分钟
订单 500 单
退款订单 20 单
广告费 12000 元
订单 520 单
退款订单 52 单
广告费 15000 元
没有退款金额、商品、渠道、客户类型、毛利和退款原因。
原任务要求
- 比较 4 月与 3 月销售额。
- 分别计算两个月退款订单率。
- 指出可以确认和不能确认的结论。
- 给出下一步需要补查的数据,不作未经证明的投放决定。
AI 首稿:读起来像结论,实际上不能交付
4 月经营表现强劲,销售额环比增长 18%,主要由新客户和广告投放带动。
退款情况整体稳定,广告回报率继续改善。建议下月增加 30% 广告预算,以保持增长势头。
第一步:检查结果之前,先把“合格”写出来
没有验收条件,就只能凭语气和排版判断。这里把原任务改成五项能逐条打勾的标准。
回答销售变化、退款率、资料缺口和下一步检查。
月份、金额、订单数和状态与原表一致。
公式、原始值、过程、结果和单位齐全。
没有把缺失数据、相关变化或猜测写成原因。
负责人看得懂,待补数据明确,不含未经授权动作。
交付物: 目标读者和使用场景: 必须回答: 1. 2. 3. 事实标准: 计算标准: 完整性标准: 格式标准: 安全与权限标准: 出现以下情况必须退回: - 无来源的数字、名字、日期或引用 - 没有过程的关键计算 - 把相关、顺序或猜测写成因果 - 遗漏会改变决策的风险或限制 - 建议执行未获授权的发送、删除、发布或付款动作
第二步:把顺畅文字拆成可以证明的断言
| 首稿断言 | 类型 | 需要的证据 | 核验结果 | 决定 |
|---|---|---|---|---|
| 销售额增长 18% | 计算 | 两月销售额和公式 | 实际为 12% | 纠正 |
| 主要由新客户带动 | 原因 | 新老客户销售增量 | 没有客户字段 | 删除 |
| 广告投放带动增长 | 原因 | 渠道归因或对照数据 | 只有广告费总额 | 无法验证 |
| 退款情况稳定 | 解释 | 两月退款率 | 4% 上升至 10% | 改为风险 |
| 广告回报率改善 | 计算 | 归因收入或利润 | 字段缺失 | 删除 |
| 增加 30% 广告预算 | 行动建议 | 目标、回报、预算约束和授权 | 均未提供 | 不执行 |
编号: 输出原句: 断言类型:事实/计算/引用/解释/因果/行动建议 需要的证据: 实际来源: 原始值或原句: 计算过程: 核验结果:来源证明/计算证明/无法验证/需要人工决定 处理决定:保留/纠正/删除/标记不确定/退回确认 修改后复查:
第三步:关键数字自己复算一次
销售额环比
(112000 − 100000) ÷ 100000 = 12%
首稿的 18% 错误。必须使用同一口径的前后月份数据。
3 月退款订单率
20 ÷ 500 = 4%
分子和分母都使用订单数量口径。
4 月退款订单率
52 ÷ 520 = 10%
较 3 月上升 6 个百分点,而不是“稳定”。
不能计算广告回报率
缺少归因收入、利润或约定口径
销售额与广告费同时增加,不能证明广告带来了多少收入。
指标: 业务含义: 公式: 分子及来源: 分母及来源: 时间范围: 单位: 缺失值处理: 计算过程: AI 输出结果: 人工复算结果: 差异: 复算人和日期:
第四步:检查“没写出来的错误”
事实都正确仍可能不完整。对照原任务逐项检查,尤其关注被流畅文字掩盖的风险、限制和待确认事项。
遗漏检查的最小方法
- 把原任务中的每个动词和必填栏目编号。
- 在成品中标出对应位置;找不到就是遗漏。
- 再问:有没有未写出但会改变读者决定的风险、限制或未知项?
- 不要让新补内容引入资料之外的事实。
第五步:最后检查格式、可用性和权限
是否按要求给负责人阅读,而不是写成分析过程或宣传稿?
最终文档能否在目标软件打开,表格公式和链接是否仍有效?
是否带入不必要的个人信息、隐藏批注、密钥或内部路径?
建议中的发送、发布、删除、付款和预算调整是否需要人工批准?
最终成品:只写证据真正支持的内容
销售变化:4 月销售额为 112000 元,较 3 月的 100000 元增长 12%。
退款风险:退款订单率由 3 月的 4% 上升至 4 月的 10%,增加 6 个百分点,应优先核查退款原因。
当前不能确认:资料没有客户类型、渠道归因、退款金额和利润,不能判断销售增长原因、广告回报率或利润变化。
下一步补查:按商品、渠道和退款原因补充订单数据;明确广告归因口径后,再决定是否调整预算。
交付物: 原始任务版本: 资料版本: AI 输出版本: 要求核对: □ 每项任务要求都有对应位置 事实与计算: □ 数字、日期、名称和引用可回到来源 □ 关键计算包含公式、原始值、过程、结果和单位 □ 无法验证的断言已删除或明确标记 完整性: □ 会改变决定的风险、限制和未知项没有遗漏 □ 建议与证据强度相符 可用与安全: □ 文件、链接、公式和版式已在目标环境检查 □ 没有泄露不必要的敏感信息 □ 发送、发布、删除、付款和预算决定仍由获授权人员确认 发现的问题: 返工位置: 最终决定:可以交付/需要返工/停止使用 验收人和日期:
能不能让另一个 AI 帮忙核验?
可以让它帮助拆断言、找可能遗漏和生成核验表,但不能把“另一个 AI 也同意”当成证据。事实仍要回到原始来源,计算仍要用实际数据复算,最终业务决定和权限动作仍由人负责。