沈毅全栈与 AI

巴黎 • 新加坡 • 上海

RAG Formation · 第 16 课 · 可靠性与产品就绪

试点评审与 30 天实施计划

把评估证据转化为有优先级的待办、试点上线/不上线决定和下一个月的工程工作。

$ lesson --status
▸ course RAG Formation
▸ lesson 16 / 16
▸ phase 可靠性与产品就绪
▸ status 已完成
● build → measure → learn

独立课程

在这里学习完整课程并检验你的理解。

RAG Formation 的 16 节课程内容已完成。本页包含完整课程内容、本地参考资料和可直接在浏览器中完成的即时练习。

本课的具体收获

你会写出一份原型就绪报告,包含清晰的上线/不上线标准,以及按优先级排列的 30 天待办事项。

观看讲解视频

1 · 核心技能

从前面课程中选出三个价值最高的修复,然后明确验收门槛、回归检查、负责人和要重新运行的确切命令。

  • 就绪门槛:基于质量、安全、性能和运维明确阈值的上线/不上线决定。
  • 最高价值修复:因为它解决了真实、可测量的失败而选择的改动,而不是因为它恰好流行。
  • 试点范围:有意收窄的一小部分用户、文档和工作流,风险和成功标准都已经明确。

主要阅读:Google《机器学习规则》

2 · 运行证据闭环

cd demo
python3 eval.py run --mode both --workspace meridian_demo --tag lesson-16-readiness

把新报告与基线并排比较,并为每条就绪标准标记:通过、失败,或仍未测量。

演示做得漂亮并不代表适合试点——你仍然需要针对质量、安全和运维设置明确门槛。

3 · 决策工作表

基线证据一个假设/改动指标回归检查有边界的结论
_________________________

4 · 检索练习

问题:某个修复提高了准确率,却也提高了幻觉率。你该怎么做?

企业场景连接

30 天目标是一个真正可以辩护的原型,而不是承诺每个答案都会完美。可靠的试点计划会公开限制,并为走向生产建立有纪律的路径。

5 · 交付物与下一步

  1. 保存命令输出或报告本身。
  2. 填写决策工作表。
  3. 写下一个失败案例,以及计划运行的下一项检查。

交付物是一份原型就绪报告,包含清晰的上线/不上线标准,以及按优先级排列的 30 天待办事项。

下一步:课程完成——回顾使命和课程路线图。

如果对证据、指标、失败案例或下一项实验有疑问,尽管继续问我。 这门课我就是你的老师。