有一条危险的滑坡,一共四步:从「先测容易测的」开始,滑到「测不了的东西不存在」为止。名字叫 McNamara 谬误,来自越战期间的美国国防部长 Robert McNamara。
越战是一场反叛乱战争,没有战线,没法用「推进了多少公里」衡量进展。McNamara 从福特汽车带来一整套系统分析方法,他需要一个能进报表的进展指标,选中的是尸体计数(body count):敌方死亡人数、双方战损比,可测、可汇报、每天有数字,能画成向上的曲线。
随后是定律的标准展开。前线各级军官发现,晋升与考核看的就是这个数字,于是数字被逐级灌水上报;考核压力还诱发滥杀,Campbell(B02 那位提出指标腐蚀定律的社会科学家)1979 年直接把 body count 与美莱村惨案并举为例。与此同时,真正决定战争走向的东西,乡村的政治情绪、民心向背,在系统分析的行话里被叫作 x-factor:因为无法量化,被直接丢弃。两股力量因此叠加:数字被灌水,报表因此好看;x-factor 被丢弃,报表因此看不见真正的风险。战报显示「我们在赢」,直到不可测的那部分现实上门收账。
要紧的一点:McNamara 不是漫画式的反派,这正是谬误可怕的地方。他出身福特的「神童」统计管理团队,把系统分析引入五角大楼在管理史上本是革新。谬误因此不是出在动机或能力:工具没有问题,问题在于把工具的边界当成了现实的边界。四步滑坡描述的,就是这一步跳跃如何分四次、每次都显得合理地完成。
四步的原文值得逐字过一遍,注意每一步的坡度有多缓。
第一步,测量所有容易测量的东西。到此为止没有问题,原文说 this is okay as far as it goes。第二步,对不容易测量的东西,要么无视,要么赋一个随意的量值。原文的判词是人为、误导(artificial and misleading)。第三步,假定不容易测量的东西并不真的重要。判词是盲目(blindness)。第四步,断言不容易测量的东西并不存在。判词是自杀(suicide)。
台阶设计得极缓:从第一步到第二步只隔着一次「先放一放」,从第三步到第四步只隔着一次预算会议;单看任何相邻两级都像合理的简化,走完全程就是认知上的自我了断。滑坡的动力学也不神秘:测得出的维度天然长在报表、周报与排行榜上,测不出的维度每被省略一次,地位就降一格,四步只是把这个渐进过程按刻度标了出来。作者给最后一步选的词是 suicide 而不是 error,用意很准:他要说的不是算错了,而是决策系统亲手切除了自己感知世界的一部分器官。
还有一个常被忽略的细节:这段话不是在军事场合说出的,它诞生在一场营销会议上,听众是销售主管。作者 Yankelovich 是民意与消费研究的从业者,他警告的对象是把消费者的生活方式压成几个易测数字的同行。谬误从战场搬进会议室不需要翻译,它本来就是在会议室里被命名的。
越战在蓝支出现两次,值得分清。这里是测量端:body count 定义了什么算进展。B06(奖励 A 却指望 B)是激励端:Kerr 指出轮换与考核制度实际奖励的是个体避险而非战争胜利。同一场战争,一头是尺子选错了要测的东西,一头是奖励挂错了要奖的行为,两条线互相放大。
在家族里,McNamara 谬误占据一个独特的位置。Goodhart 与 Campbell 讲被瞄准的指标如何失真,这里讲未被测量的维度如何失踪:一个是尺子被压弯,一个是尺子之外的世界被注销。两者由同一条机制焊在一起:B09 的多任务定理(Holmström 与 Milgrom 证明:只要人的力气在任务间此消彼长,给可测任务发重赏就等于给「从不可测任务撤出」发补贴)说明,第四步不需要有人宣布,激励结构自己会执行它。至于第二步的「赋一个随意的量值」,红支有它的专门研究:R03 的可通约化(把无法比较的东西强行压进同一把尺子)讲的正是这种强制定价,任意的权重一旦写进公式,就成了没人再追问的既成事实。
这个谬误后来有了自己的临床科室:O'Mahony 2017 年在爱丁堡皇家内科医学院的院刊撰文《Medicine and the McNamara Fallacy》,把四步滑坡接进医学的量化文化。谬误的现代生命力不在战史,在一切「用数据说话」的行当。
边界也要说清:四步谬误反对的不是测量,第一步被原文明确放行;它反对的是把测量边界当成存在边界的那一步跳跃。可测性是工具属性,重要性是价值判断,两者相互独立,混淆二者的代价从西贡到病房再到排行榜,账单一直在续写。这就是本节的全部命题。
留一个问题:你手上那份 eval 报告里,哪些维度正处在第二步,被赋了一个随意的量值还没人追问?把它们列出来,比给已有的分数再涨一分更能改变结论。附带一个更难的:列出来之后,谁在下一次会议上替它们发言?
一句话带走:可测不等于重要,测不了更不等于不存在;报表决定组织能想什么,比它决定组织做什么更早发生。
来源 / 延伸阅读
- Yankelovich, D. (1971). "The New Odds"(1971-10-15 演讲,四步引文原始出处;浓缩版刊 Sales Management 1971-11-15)。
- Handy, C. (1994). The Empty Raincoat(误归主源);档案考证:Ryan Madden。
- Campbell, D. T. (1979).(body count 与美莱村并举,见
B02)。 - O'Mahony, S. (2017). "Medicine and the McNamara Fallacy." J R Coll Physicians Edinb(医学下游)。
- 考证见
research/03c§1、research/03§6.1 与research/deep/D2§9。