AI
AI 电商基础 入门课
第四篇章 · 电商业务流进阶
电商 免费公开课 第 06 / 08 节
数据看板:AI 业务流的量化管理
拿一个天猫运营的真场景来说:你让运营智能体每周出一份店铺经营诊断——流量结构、推广投产、竞品动向,最后给优化建议。它干得怎么样,怎么衡量?“感觉还行”不是管理——这节给你三个核心指标,直接抄。
电商管理8 分钟
运营智能体的三个核心 KPI
- 结论准确率:诊断报告里的结论,经你抽样复核“站得住”的占比——这是 AI 的“业绩”。AI 做数据分析,最重要的不是快,是结论不能错:投产比算错一个点,你整个月的推广策略都可能被带偏。及格线 80%,优秀 90%。
- 人工返工率:报告被运营打回重做的占比——这是 AI 的“求助率”。偶尔打回是正常的,人写报告也得改;但返工率持续偏高,说明它根本没理解你的分析框架。
- Token 单耗:平均每份报告烧多少 Token——这是 AI 的“饭量”(2-10 附有 Token 账速算)。饭量突然暴涨,多半是哪里出了死循环或上下文失控。
动手调调看:三个指标的联动关系
天猫运营分析看板模拟器 · 拖动滑块,看健康度变化
提示词质量(越右越好)60 上下文完整度(背景与数据喂得全不全)50 分析深度(每任务平均推理步数)8 步
结论准确率76%及格线 80% / 优秀 90%
人工返工率5%健康 < 20% / 预警 > 35%
Token 单耗9,480每份报告均耗 / 警戒 12000
🚨 准确率不及格:优先补上下文(拖右边第二个滑块试试)——背景数据喂不全,是 AI 分析跑偏最常见的病根。
多拖几组组合你会发现一个反直觉的事:分析深度浅不一定是省事,可能是偷懒——3 步就给你出结论的 AI,多半只看了表面数据;真正的诊断要“下钻”:从流量看到转化、从转化看到SKU、从SKU看到推广词。但深度也不能无限加,每深一步都在烧 Token。准确率和单耗的平衡点,就是你要找的管理水位。
看板怎么搭:先手工,再自动
- 第 1 个月:手工周报——每周抽 5 条 AI 结论人工复核,Excel 里记三个指标。别嫌土,这一步是让你建立“手感”,知道正常水位在哪。
- 第 2 个月:自动日报——用 4-3 节的长任务 Agent,每天凌晨自动算好三个指标发群里。异常(返工率突增 50%)自动 @ 你。
- 长期:指标联动改进——准确率跌了 → 查上下文完整度,是不是背景数据没喂全(3-6、3-7 节);Token 单耗涨了 → 查上下文压缩(3-9 节);返工率涨了 → 查提示词和质检漏斗(4-4、4-5 节)。每个指标异动,都要有一条对应的排查路径。
看板的终极意义不是“监控 AI”,是让 AI 的改进可衡量:上周把店铺口径定义补进了上下文,结论准确率 78% → 84%,这 6 个点就是你的运营功力。没有看板,所有优化都是玄学。
📌 本节要点
- 三指标:结论准确率(业绩)、人工返工率(求助率)、Token 单耗(饭量)。
- 准确率是第一指标:数据分析的结论错了,速度再快也是负资产。
- 深度与成本要找平衡:浅了是偷懒,深了烧钱——管理就是找水位。
- 每个异动都要有排查路径:准确率→上下文完整度、单耗→上下文压缩、返工→提示词与质检。