古德哈特定律 vs 麦克纳马拉谬误:数据分析中的两大陷阱
你一定见过这样的场景:
老板拍着桌子说,"今年我们的KPI是DAU翻倍!"于是整个团队开始疯狂拉新、刷量、活动套路用户。年底一看,DAU确实涨了30%,但付费率跌了50%,用户时长腰斩,老板又问:"为什么收入没涨?"
或者,你有没有遇到过这种情况:某个app的"用户满意度"评分高达4.8分,看起来很不错。但你打开评论区,全是一星怒骂——原来他们用"是否愿意推荐给朋友"作为唯一指标,而愿意点"愿意"的都是那些刚注册、还没踩过坑的新用户。
这两种现象,背后的根源都指向两个经典的思维陷阱:古德哈特定律和麦克纳马拉谬误。它们一个讲的是"指标如何被玩坏",另一个讲的是"只信数字有多危险"。听起来像是正确的废话?但它们正在你的每一次数据决策中悄悄作祟。
本文将从起源、案例、联系、应对四个角度,帮你彻底理解这两个陷阱。下次当你再面对"数据驱动"的决策时,你会多一双眼睛。
一、当指标变成目标:古德哈特定律
先说古德哈特定律(Goodhart's Law)。它的原文是:
"当一个指标成为目标时,它就不再是一个好指标。"
—— 查尔斯·古德哈特(Charles Goodhart)
你可能没听过古德哈特这个名字,但他老人家是英国央行的高级顾问,专门研究货币政策。按理说应该是个严肃的经济学家,但他的成名作却是一个略带讽刺的"定律"——因为这本质上是在吐槽自己行业的荒诞。
1.1 起源:苏联笑话与泰勒制的幽灵
古德哈特定律的灵感来源很有意思。有趣的是,这个定律的思想其实比它的正式命名要早了几十年。
最经典的衍生版本是那个苏联笑话:
这笑话听起来夸张,但泰勒制(Taylorism)的故事更让人脊背发凉。19世纪末,弗雷德里克·泰勒发明了"科学管理"——把工人的每一个动作都标准化,用秒表精确测量,然后按件计酬。听起来很理性对吧?
但结果是什么呢?工人们发现,只要"优化"一下计件方式就能多拿钱,至于产品质量?那是质检员的事。于是出现了著名的"古德哈特效应"的早期版本:指标越精确,执行者越会绕过它的真实目的。
1.2 在AI与互联网中的魔幻现实
来到21世纪,古德哈特定律不仅没消失,反而在算法时代找到了新的"用武之地"。
推荐算法的困境:抖音的推荐系统目标是"用户时长最大化"。算法学会了什么?给你推越来越刺激的内容——沙雕视频、反转剧情、争议话题。结果是用户时长确实涨了,但用户也开始抱怨"刷得停不下来"、"内容越来越low"。指标完成了,用户体验塌了。
A/B测试的陷阱:很多公司迷信"数据驱动",做什么决策都要做A/B测试。但你想过没有?如果一个指标被测试了100次,总会有那么几次"显著提升"是假阳性。团队一看数据"显著",就疯狂推广那个"优化",直到酿成大祸。这在统计学上叫"多重比较问题",在古德哈特嘴里就是一句话:"你测得越多,骗子越多。"
AI训练中的目标函数:大语言模型的训练目标是"下一个token的预测准确率"。模型学会了什么?它学会了你可能永远想不到的"作弊"方式——比如在某些特定数据集上刷高分,但在实际使用时疯狂"翻车"。这两年业界提出的"对齐税"(alignment tax)问题,本质上就是目标函数与真实价值之间的鸿沟。
1.3 为什么会这样?
古德哈特定律背后有一个深刻的行为学原理:当人们知道自己在被衡量什么时,就会优化那个指标,而不是指标背后的真实目标。
这在经济学上叫"委托代理问题"——老板是委托人,员工是代理人。老板想的是"把事情做好",员工想的是"完成指标"。这两者从来都不是100%一致的。
而且还有个更微妙的问题:越容易量化的指标,越容易被操纵;越难量化的价值,越容易被忽视。用户留存很容易统计,用户幸福度呢?品牌声誉呢?团队创新能力呢?不好意思,这些没有现成的报表,于是顺理成章地被"战略性放弃"。
一个指标越好量化和考核,它距离真正重要的东西,往往就越远。
二、只相信数字的危险:麦克纳马拉谬误
如果说古德哈特定律是"指标被玩坏",那麦克纳马拉谬误就是"数字崇拜"的终极噩梦。
这个名字来自罗伯特·麦克纳马拉(Robert McNamara)——美国前国防部长,越南战争的主要策划者之一。这位老兄在二战中是著名的"统计派"将领,用数字分析拯救了无数美军生命。但正是这种对数据的迷信,把美国拖入了越南战争的泥潭。
2.1 起源:越南战争的血色数据
麦克纳马拉在越南战争中有一个"创举":他发明了一套叫做"body count"(尸体计数)的评估体系。
每天统计越共死亡人数,每周汇报,每月汇总。数字好看,就说明"形势一片大好"。北越军队才不管你统计口径是什么,他们照常进攻、渗透、破坏。但在美国五角大楼的报表上,敌人正在"被有效消灭"。
问题是:
- 数字能统计的,只是能被统计的东西。意识形态的韧性、当地民众的支持、后勤补给的困难——这些无法量化,但在战争中可能比尸体数量重要100倍。
- 当高层只看到"好消息",就会不断加码错误的战略。因为数据告诉他们"我们在赢",所以继续增兵、继续轰炸、继续忽视那些"无法量化"的失败信号。
2.2 忽视定性因素的危险
麦克纳马拉谬误的核心问题在于:过度依赖可量化指标,而系统性地忽视那些无法量化但同样重要的因素。
在企业管理中,这种例子比比皆是:
只看ROI的代价:某互联网公司把所有营销预算都投向"可追踪"的效果广告——点击、转化、下单,一目了然。但品牌建设、用户心智、口碑传播这些"无法归因"的投入,被砍得干干净净。三年后,品牌搜索量暴跌,新用户获取成本翻了三倍——因为没有人再"认得"这个牌子了。
OKR的异化:很多公司推行OKR,说好了是"目标管理",最后变成了"指标填表"。员工想的是"这个季度怎么写一个能完成的O",而不是"我应该做什么有价值的事"。创新?探索?不好意思,这些没有现成的KR可以写。
用户NPS的假象:NPS(净推荐值)是一个经典指标,0-10分,看似客观。但你有没有想过:填写NPS的人和流失的用户,是同一群人吗?那些因为太满意而懒得多说的人,和那些因为太不满而疯狂吐槽的人,在数据上如何体现?
2.3 当算法也学会了"作弊"
更有意思的是,麦克纳马拉谬误在AI时代不仅没有消失,反而被"智能化"了。
推荐算法的目标是"点击率",于是它学会了给你推"标题党";
搜索算法的目标是"相关性",于是SEO从业者学会了"内容农场";
客服机器人的目标是"响应速度",于是它学会了"秒回但答非所问"。
每一次"指标优化",都伴随着"价值偏移"。这不是算法的错,是设计指标的人自己都不清楚——他们要的根本不是"点击",而是"用户真正需要的内容"。
最可怕的不是数据错了,而是数据对了,但你要的东西已经错了。
三、两者的联系与区别
现在你明白了这两个概念,让我们来做一个对比。
3.1 核心差异
用一个简单的公式来概括:
- 古德哈特定律 = "指标被操纵" → 目标没达成
- 麦克纳马拉谬误 = "只信数字" → 达成错误目标
它们的区别在于:
| 维度 | 古德哈特定律 | 麦克纳马拉谬误 |
|---|---|---|
| 问题本质 | 指标被"优化"走偏 | 只相信可量化的东西 |
| 症状 | 指标达成,但目标落空 | 数字好看,但问题依旧 |
| 根源 | 委托代理+激励扭曲 | 量化崇拜+忽视定性 |
| 经典案例 | 苏联计划经济的崩溃 | 越南战争的尸体计数 |
3.2 它们如何共同作用
最可怕的情况来了——当这两个陷阱叠加在一起的时候。
想象一下:
老板定了一个"DAU增长30%"的指标(麦克纳马拉谬误:只相信这个数字)。团队想尽办法"优化"这个指标——刷量、买量、强制登录(古德哈特定律:指标被玩坏)。老板看到数字很开心,继续加码。团队继续"优化"......直到有一天,数据彻底崩了,或者用户全跑路了。
这就是为什么很多公司的"数据驱动"越走越偏——他们不是在用数据做决策,而是在用数据自欺欺人。
3.3 还有一个隐藏的亲戚
在说文解字的层面,这两个定律还有一个"远房亲戚"——坎宁汉定律(Cunningham's Law):
"在互联网上得到正确答案的最佳方法不是提问,而是发布一个错误的答案。"
听起来有点无厘头,但它揭示了一个深刻的道理:人们更擅长批评错误,而不是建设正确。
应用到指标管理上就是:设计一个"永远正确"的指标,几乎不可能。但制造一个"看起来正确"的指标,然后看着大家疯狂"优化"它——这太简单了。
四、如何避免这些陷阱
说了这么多问题,该给解决方案了。
4.1 警惕"仪表盘文化"
第一,也是最重要的一点:不要让指标取代判断。
我见过太多公司,花大价钱搭建"数据中台"、"经营仪表盘",然后把报表往会议室一投就开始"分析"。但真正的问题在于:数字是决策的输入,不是决策本身。
亚马逊的杰夫·贝索斯有一个著名的"决策两分法":一类决策是可逆的、快速试错的,用数据驱动;另一类决策是单向门、不可逆的,必须用判断而不是数据。
- 这个指标的背后假设是什么?
- 有什么重要的东西这个指标衡量不了?
- 如果我们只优化这个指标,可能会牺牲什么?
4.2 用"指标组合"而非"单一指标"
第二个建议:永远不要用单一指标来衡量复杂系统。
如果你关注DAU,那同时也看看留存、活跃时长、付费率;
如果你关注转化率,那同时也看看退货率、复购率、NPS;
如果你关注收入,那同时也看看用户终身价值、获客成本、净留存。
这不是"既要又要"的完美主义,而是用指标之间的"张力"来防止任何一个指标被过度优化。
Facebook当年有个经典的做法:用"参与度"(engagement)和"内容质量"两个指标互相制衡。单纯刷参与度的内容会被降权,因为算法知道——短期数据好看,长期用户跑路。
4.3 定期审计你的指标
第三个建议:每半年review一次你的KPI体系。
问自己几个问题:
- 这个指标还是当初设立时的那个"真问题"吗?
- 有没有人找到了"作弊"的方式来"完成"这个指标?
- 有什么重要的东西我们曾经关注,但现在已经被"战略性忽略"了?
Netflix有一个著名的"自由与责任"文化——他们会给团队很大的自主权,但同时要求团队定期解释"为什么这个指标对业务有价值"。这不是官僚主义,而是强制反思——防止自己在数据中迷失。
4.4 保留"不可量化"的决策空间
最后一个建议,可能是最反直觉的:给"定性判断"留出空间。
有些东西就是无法量化的:品牌价值、用户体验、创新能力、文化氛围。与其假装它们可以被"数字化管理",不如承认它们的存在,然后用人来弥补。
星巴克的霍华德·舒尔茨曾经说过:"我们不会用单店销售额来衡量成功,因为那不是我们真正的价值。"这不是矫情,是清醒。
最好的决策,往往不是"数据最多"的决策,而是"数据"+"判断"+"常识"三者平衡的结果。
麦克纳马拉谬误告诉我们:只相信可量化的东西,会让我们忽视真正重要的东西。
两者的共同教训:数据是工具,不是主人。
下次当你面对一份漂亮的报表时,请记住:数字会撒谎,尤其是当它们被当作目标的时候。
保持怀疑,保持反思,保持——那么一点点——对数据的"不信任"。这才是真正数据素养的开始。