博文
天气预报有多准？
|||
天气预报作为公共服务已成为经济建设和日常生活的重要参考。尽管目前天气预报已经达到相当的水准，但免不了时有出错。因为关注者众，又不是特别了解天气预报的知识背景，人们在享受天气预报信息带来便利的同时，往往更在意天气预报失败的例子，并刻意渲染，因此，挑剔的声音就显得不绝于耳。在国内的时候，我时常在一些不同的场合听到人们对气象象局的天气预报颇有微词，甚至热潮冷讽。其实，国外也一样，我曾转发过一篇关于天气预测的幽默博文，其实那也是拿气象人调侃说事的。
那么，天气预报究竟有多大的可信度？如何衡量？我想很多人是有兴趣了解的。记起多年前曾经收藏过一篇文章，也许能够回答一些关于天气预报准确率的疑问。
这篇文章的题目是“How right can you be”，发表在1997年8月的“NewScientist”（中文译版《新科学家》）上，作者Robert Mattews。中文是从网上转载来的，翻译yimin（亦民）。
这种措辞的微妙变化带来了全新的结果，至少看起来是这样。在加州大学圣巴巴拉分校的勒达·考斯米德和约翰·托比（Leda
Cosmides and John Tooby）去年发表的研究中，受试学生回答了与哈佛大学研究中类似的疾病诊断问题。当问题以概率的术语提出来时，他们表现同样糟糕；可当问题以频率的形式提出来时，许多学生都意识到了基础概率的影响。
陪审团和法官经常碰到包含概率信息的证据。更好地理解基础概率效应会对他们的工作颇有助益。有关DNA鉴定的证据特别容易受到基础概率的影响。许多法学专家对这种证据在法庭上的出示表示担忧，因为陪审团、法官和法医专家很可能误解DNA匹配概率的真实含义。（参见《增加公正的机率？》，《新科学家》杂志，1994年6月15日，12－13页）"Improving the odds on
justice?", New Scientist）
那么，天气预报究竟有多大的可信度？如何衡量？我想很多人是有兴趣了解的。记起多年前曾经收藏过一篇文章，也许能够回答一些关于天气预报准确率的疑问。
这篇文章的题目是“How right can you be”，发表在1997年8月的“NewScientist”（中文译版《新科学家》）上，作者Robert Mattews。中文是从网上转载来的，翻译yimin（亦民）。
你准备去集市上买点东西，大概需要一个小时左右就可以回来。不过天气预报说有雨，你该怎么办？假如你知道，预报的准确率在80%左右。那么，你需要一把雨伞的可能性是80%，不是吗？非也，下雨的可能性其实只有30%。
这个结论看起来有些奇怪，不过这与预报员的夸大其词或天意弄人可没什么关系。人们在理解概率问题时，有一种奇特的数学效应总会使我们出错，刚才提到的只是其中一个例子。这种效应影响极为广泛，不仅阴晴雨雪这类日常预测受其影响，从地震的预测到谋杀案的目击证词，没一个逃得出它的掌心。
隐藏在幕后的那股力量就是"基础概率效应"。简单地说，我们经常需要预测某件事在将来是否发生，而这种预测的效果会受到基础概率的影响。所谓基础概率，就是指我们从经验数据中得到的某件事的实际发生概率。当你预测任何罕发事件时，这种影响就会非常明显。即使你认为自己的预测是非常准确的，你的准确预测也会淹没在大量错误预测之中。
降雨的预报是个经典的例子。英国气象局对于降雨的预报准确率为80%左右，这很容易让人产生这样的预期：如果气象局预报有雨，那么八成就真的要下雨。这种推测之所以是错的，是因为它忽视了降雨的基础概率。
仔细一想就会发现这一点有多重要。即使是最蠢的预报员也能以惊人的准确率预报智利阿塔卡马沙漠的降雨：在那里，数十年才下一场雨。因此，如果想以近乎100%的准确率预报那里的天气，你只需说："各位观众，明天不会下雨。"
对英国变化无常的天气来说，情况就要复杂一些，但基础概率对天气预报的可靠性仍然有巨大的影响。英国的小时降雨基础概率是0.1，就是说，在任何一个小时内，降雨的可能性均为十分之一。这个基础概率决定了我们应该对80%准确率的降雨预报抱有几分信任。
为什么这么说呢？假设你一年内会进行100次这样的"一小时购物"。10%的小时降雨基础概率意味着你的90次购物之旅不会碰上下雨，另外10次则没那么幸运。在这10次下雨天气中，天气预报将会准确预报其中的8次，因为它的准确率为80%。
不过80%的准确率同时也意味着20%的不准确率——因此气象局将会把18次晴好天气预报成有雨（译者注：18=90*20%）。加起来，共有26次预报有雨，其中8次是准确的。所以，尽管预报的准确率高达80%，但在预报有雨的日子里，出门的一个小时内真碰上雨的可能性只有30%。
被放大的误差
实际上，大量晴好天气将降雨预报中的微小误差放大了，以致准确的预报被淹没在错误预报之中。（参看本文"计算罕发事件的发生概率"）这清楚地提醒我们是否该认真对待天气预报。在最近的一期《自然》（Nature）杂志上，我证明了：如果你只需出门一两个小时，而且可以忍受偶尔被淋湿，那么，即使气象局预报说有暴雨，最佳的做法仍是：不带伞。
除了帮助我们决定是否带伞，基础概率效应也解释了为何当今准确率颇高的天气预报仍然饱受质疑。在最新一期的《当代数学》（Mathematics Today）中，我认为这是因为人们出门的次数和呆在户外的时间不够长，等不到下雨的那一刻。如果你打算在户外待上一整天，那么你可得认真看天气预报：日降雨的基础概率是0.4，这就使得在预报有雨的日子里，下雨的概率比不下雨的概率高出近两倍（译者注：给定预报的准确率为80%，此时当天下雨的概率是73%，是不下雨的概率27%的近三倍）。可以这么说，一件事越常见，就越容易准确地预测。
这么一说，基础概率效应似乎是显而易见的。可让心理学家们不解的是：既然如此，为何我们在碰到类似问题时总是出错？斯坦福大学已故的阿莫斯·特沃斯基（Amos Tversky）和普林斯顿大学的丹尼尔·卡纳曼（Daniel Kahneman）开创性地研究了人类对于不确定性信息的认知能力。他们的研究成果长期以来被广泛引用，证明人类在处理概率问题时会变得无可救药，尤其在处理与基础概率有关的问题时。经常被引用的一个例子就是所谓的"出租车问题"（Cab
Problem）。
蓝车还是绿车？
一个城镇中发生一起出租车夜间肇事逃逸案，这个城镇只有两家出租车公司营运：一家的车子是绿色的，数量占所有出租车总数的85%，另一家的车是蓝色的，占15%。一个目击者声称肇事车是蓝车。警察在出事当夜相同的环境下测试得到目击者的判断准确率为80%. 那么，肇事车确实是蓝车的可能性有多大？
如果对基础概率一无所知，很可能回答：80%——这是人们直觉倾向的答案。但正确的答案却是41%（用列联表可以很容易得到这个结果）（译者注：列联表的使用见本文最后一部分）。占多数的绿色出租车意味着：被目击者错认为蓝车的绿车数量会大于他认对的蓝车数。结论是：警察抛硬币来决定肇事者更靠谱。
有人会把这样的问题仅仅当作智力游戏，但医生在做出生死攸关的决定时，也会受到基础概率的影响。哈佛大学医学院发表于1978年的一项研究中，60名受试的教师和学生被问到以下问题：假定一项疾病检验的准确率为95%，即患病者的检验结果呈阳性的概率，和未患病者的检验结果呈阴性的概率都是95%。已知被测人群中这种疾病的患病率为千分之一. 那么，已知一个人的检验结果呈阳性，则他确实患病的可能性有多大？
半数受试人完全没有意识到基础概率的影响，他们的答案是95%. 只有不到五分之一的人给出了正确答案：此人患病的概率不足2%.
令人担心的是，对于医务工作者的其它类似研究都得出同一结论：受试者普遍头脑混乱。在诊断阶段如果忽略基础概率的影响，将会造成大量的过度医疗。不过，一些心理学家开始问："如果这种研究以更加浅显的形式进行呢？"最近发表在《行为科学和脑科学》（Behavioral and Brain Sciences）上的一篇基础概率综述文章中，德克萨斯大学奥斯汀分校的乔纳森·科勒（Jonathan Koehler）指出，许多研究都预先设定受试者无法正确回答问题，这些研究与其说揭示了我们认知概率信息的能力，还不如说暴露出他们提问的方式有问题。
他认为类似"出租车问题"的那些难题总是语焉不详。比如，你可以说：重要的基础概率不是蓝车在车辆总数中所占的比例，而应该是蓝车在有夜间事故记录的车辆中所占的比例。毕竟，蓝车虽少，但也许他们的安全记录普遍更差呢？这个基础概率并没有给出，受试者只能瞎猜。科勒说，如果你没有给出受试者认为重要的信息，那么他们犯错误就没什么好奇怪的。
以正确的方式提问
科勒补充道，最近研究显示，如果以频率的形式而非概率的术语提问，受试者对基础概率的认知会好许多。比如，不要求他们估计检验呈阳性的人确实患病的概率，而是要求他们估计100个检验呈阳性的人当中，有几个确实患了病。
这个发现对于如何训练医生解读检验结果有着清晰且重要的意义。俗话说"罕见的病不容易诊断"，话是没错，可这对诊断没什么帮助，何况陪审团也不会认可对医疗事故的这种解释。
即使证据显得无可置疑，忽略基础概率也会导致误判。如果对被告不利的证据非常少——即其犯罪的基础概率很低——那么就算DNA匹配程度极高，我们仍有权利对"被告就是罪犯"的论断表示合理的怀疑。
回到现实中来
忍辱负重的气象局如果更加重视基础概率，他们也能从中获益。考虑到天气预报的难度，气象局已经做得相当不错了。如果他们能在预报时考虑基础概率，比如在预报时说："如果您只出门一小会儿，那么很可能不用带伞。"这样他们可能会得到更多的认可。
理解基础概率效应能帮我们更好地预测天气，处理法庭上的证据，以及诊断疾病，不仅如此，它给我们的核心启示——罕发事件很难预测——还能帮我们节省一大笔很可能有去无回的科研经费。
以地震预测为例。过去100年里，地震学家将大笔的经费投入到地震预测研究中，收获廖廖。尽管如此，研究者们仍固执地寻找那些可能帮我们预测大地震的种种"前兆"。
基础概率效应清楚地告诉我们，这种执着误入了歧途。预测像神户地震这种强度的大地震当然很了不起，可这样的地震极其罕见，大约50到100年发生一次。这么低的基础概率意味着，如果要让决策者下定决心，命令大规模人口转移的话，任何地震前兆都必须极其可靠。
粗略的计算显示，任何有价值的地震预测手段，其观测的地震前兆的准确率必须达到98%以上。到目前为止，任何所谓的地震前兆都远未达到这个准确率。而且，不断有证据表明，地震就像雪崩一样，本质上是极不稳定的"临界"现象。所以，找到高度准确的地震前兆的可能性微乎其微。
虽然长期以来基础概率效应主要出现在心理学研究当中，但它远非仅供学者娱乐消遣的简单逻辑游戏。理解它可以帮助我们更好地做出决策，并避免无用功。
* * *
计算罕发事件的发生概率
如果有预报说某件事会发生，则可以用概率论来计算其发生概率，可这办法不仅枯燥而且不易理解。"列联表"是个更便捷、易懂的工具。最简单的列联表中，两列代表两种可能的实际状态，比如下雨和没下雨；两行代表相应的预测，比如预报有雨和预报无雨，只要几次简单的算术运算，你可以填满这个表格，并从中得到任何你感兴趣的事件概率。
以降雨预报为例。有两项关键数据：每小时的降雨基础概率10%，以及预报准确率80%。 这意味着在100次为期一小时的外出中，有10次会碰上下雨，90次无雨。把这写到每列的标题中去。
先来填第一列，标题为"下雨"，我们知道，在确实下雨的情况下，给定预报的准确率为80%，则预报有雨的次数为8次（10*0.8），预报无雨的次数为2次（10*0.2），依次填入第一列。
同样地，在90次无雨的外出中，预报有80%是准确的，即预报无雨72次（90*0.8），预报有雨18次（90*0.2），填入相应单元格内。这样表格就完整了，所有信息一目了然。
比如，从第一行中，我们马上可以知道在这100次外出中，共有26次预报有雨，可实际上只有8次是准确预报的，准确率仅为30%. 不过，在74次无雨预报中，有72次是准确的预报，准确率高达97%. 所有的预测系统，从地震预测到癌症诊断，只要给定事件基础概率和预测准确率，都可以用这种方法分析相关的概率。
下雨(10) 没下雨(90)
预报 有雨 8=10*80% 18=90*20%
预报 无雨 2=10*20% 72=90*80%
https://blog.sciencenet.cn/blog-665782-559115.html
上一篇：春分月圆复活临，天飞霰粒日耀晨
下一篇：足不出户看彩虹
扫一扫，分享此博文
全部作者的精选博文
- • 布拉格美景补遗（二）人与木偶
- • 漫步克鲁姆洛夫
- • 布拉格之念
- • 用光影重塑结构
- • 斧头帮第二期优秀作品显摆
- • 丹麦面面观：这个小小的国家其实是大数据王国
全部作者的其他最新博文
- • 布拉格美景补遗（二）人与木偶
- • 布拉格美景补遗（一）伏尔塔瓦河和查理大桥
- • 漫步克鲁姆洛夫
- • 布拉格之念
- • 生态之歌
- • 昨夜电闪雷鸣，今晨雷鸣电闪