产品指标与 A/B

状态:🚧 占位待补齐
一句话定义:用 任务成功率、解决率、升级人工率、CSAT、成本/会话 等产品指标评估 AI,并用实验验证改动。

大纲(待补齐)

  1. 指标树:体验 / 质量 / 成本 / 安全
  2. A/B 与互斥层(提示、模型、检索)
  3. 样本量与显著性直觉
  4. 警惕「代理指标」优化(只追点赞)

已有相关文档(先读这些)

学习要点(补齐后应能回答)

  • 客服 Bot 的核心北极星指标是什么?
  • 提示改版如何设计最小 A/B?

参考资料(待补充)

-