把 Token 当 KPI:AI 转型最贵的坑
把 Token 调用量、AI 使用次数当成 AI 转型的 KPI,是当下企业最贵、也最隐蔽的一个坑。 它看起来在”推动落地”,实际上把团队的注意力从”用 AI 把活干好”扭曲成了”把使用数据刷上去”——花了钱、出了报表,业务结果一动不动。
这篇写给正在推 AI 转型、又被”怎么衡量进展”困住的管理者。读完你会明白:为什么用量类指标必然失效、它会催生哪些荒诞行为,以及怎么把 KPI 重新锚回业务本身。
现象:报表很漂亮,业务没动静
一个典型场景:CTO 给全公司下了指标——每人每月 AI 调用不低于 N 次,部门 AI 渗透率纳入考核。三个月后数据很好看:调用量翻了几番,“AI 渗透率 92%”。
但你去问一线:交付变快了吗?质量提升了吗?成本降下来了吗?答案往往是含糊的”感觉有点用”。数据涨了,价值没涨。 钱花在了 Token 上,回报却找不到。
这不是个例,而是用量类指标的必然结局。要理解为什么,得先看清一条铁律。
原因一:你考核什么,员工就生产什么
管理学有句老话——“考核什么,就得到什么”(你度量什么,就优化什么)。这条规律在 AI 转型里被放大得淋漓尽致。
当 KPI 是”调用次数”,理性的员工会怎么做?不是去琢磨”哪些活该交给 AI”,而是直接想”怎么把次数刷够”:
- 把一句话拆成五句话分别问,凑调用量;
- 让 AI 重写早就写好的文档,只为留下一条记录;
- 把本可一次完成的任务,故意切成多轮对话;
- 团队里专门有人”代刷”,帮整个组完成渗透率。
Token 是成本,不是成果。 把成本当成果来奖励,等于花钱买了一堆假动作。这背后是同一个老问题的新版本——指标和真实目标错位时,组织会本能地优化指标、绕开目标。我们在 企业 AI 转型为什么总推不动 里也反复见到这个模式。
原因二:用量指标天然可被”表演”
好 KPI 的一个隐性要求是:难以靠表演伪造。而”调用量""使用率”恰恰是最容易表演的一类——它只记录”动作发生过”,不关心”动作有没有意义”。
对比一下两类指标:
| 指标类型 | 例子 | 能不能刷 | 反映什么 |
|---|---|---|---|
| 用量类(坏) | Token 调用量、AI 使用次数、渗透率 | 极易 | 员工有没有”碰”AI |
| 结果类(好) | 交付周期、缺陷率、人均产出、客单响应时长 | 难 | 业务有没有真的变好 |
用量指标的根本缺陷在于:它衡量的是输入(你往 AI 里投了多少),而不是产出(你从中得到了什么)。 输入永远可以靠堆动作做大,产出骗不了人。
原因三:它把”工具”误当成了”目标”
更深一层,把 Token 当 KPI 暴露了一种认知错位——把”用上 AI”本身当成了目标。
AI 是干活的工具,不是目的。没人会把”今年用了多少度电""开了多少次会”当成公司战略目标;同理,“调用了多少次 AI”也不该是。真正的目标永远是业务侧的:更快交付、更低成本、更高质量、更好体验。
当管理者盯着用量看,团队就会默认”用得多 = 干得好”,于是出现”为了用 AI 而用 AI”——明明手写更快的活,硬塞给模型,反而更慢更糟。工具一旦变成 KPI,就从帮手沦为了负担。
怎么破:把 KPI 锚回业务结果
把上面三条反过来,就是正确的做法。核心一句话:不考核”用没用 AI”,只考核”活有没有干得更好”。
第一步,先定业务结果指标,再谈 AI。 拿出团队原本就在用的北极星指标——交付周期、缺陷率、人均产出、响应时长、转化率。AI 转型的成败,用这套指标的变化来衡量,而不是新造一套用量指标。
第二步,把 AI 当作”达成结果的手段”,而非被考核对象。 管理者该问的是”这个季度交付周期能不能从 10 天压到 7 天”,至于团队用不用 AI、用多少、怎么用,是他们自己的选择。给目标,不给动作指标。
第三步,做对照,而不是看绝对值。 想知道 AI 到底有没有用,最干净的办法是对照:让两个相似团队/项目,一个用 AI、一个照旧,比业务结果的差。绝对的”调用量”毫无意义,有意义的是同样的活、有没有更省更快更好。
第四步,警惕”伪 KPI”的回潮。 凡是带”率""量""次数”且与业务结果无直接因果的指标,都要警惕:AI 渗透率、自动化覆盖率、提示词数量……它们都是 Token KPI 换了层皮。问一句”这个数字涨了,公司赚到了什么”,答不上来就别考核它。
关于结果导向的指标体系怎么搭,我们在 AI 转型该用什么 KPI(规划中)里有更系统的拆解。
一个能传出去的判断口诀
如果只记一句话,记这个:Token 是成本,业务结果才是 KPI。
把它讲给你的管理团队听——任何让员工”为了数据而用 AI”的考核,都是在花钱买表演。衡量 AI 转型,永远用你本来就关心的那些业务数字,AI 只是让它们变好的手段之一。
常见问题
问:那 AI 使用数据是不是完全不该看? 答:可以看,但只作为观察性参考,绝不作为考核指标。用量帮你了解”团队在不在用、卡在哪”,是诊断工具;一旦和奖惩挂钩,就立刻变成被表演的对象。诊断和考核,分清楚。
问:业务结果短期看不出变化,怎么证明 AI 转型有进展? 答:用过程性的结果代理指标+对照,而不是退回用量。比如交付周期、返工率、单任务耗时这些更敏感的中间指标,配合”用 AI 组 vs 对照组”的横比,几周内就能看出端倪。看不出差别本身也是结论——说明这个场景 AI 还没真正帮上忙。
问:高层就想要一个”AI 推进进度”的数字,怎么办? 答:给他一个与业务挂钩的复合指标,而不是裸的调用量。例如”AI 已落地并带来可量化收益的业务场景数”——它既是个能汇报的数字,又强制要求每个场景必须证明真实收益,天然防刷。
问:员工已经被”用量考核”训练出刷数据的习惯了,怎么扭转? 答:先取消用量考核,再公开换锚点——明确告诉团队”以后只看业务结果,不看用了多少次”。同时把几个真用 AI 把活干漂亮的案例拎出来表扬,让大家看到”干得好”比”用得多”更被认可。指标变了,行为才会变。
👉 看看 AI 时代的组织与管理 专栏,或了解 AI 时代管理者认知课。需要定制落地与陪跑,欢迎聊 企业服务。