||
零假设显著性检验和P值是科学研究中广泛使用的统计推断方法,但是自从它在20世纪20年代诞生以来,对它的质疑和争论就没有间断过。最近几十年来,许多科学家认为零假设显著性检验和P值是造成科学研究成果“可重复性危机”的主要原因之一,并且认为零假设显著性检验和P值在哲学上和方法论上都是错误的,因此呼吁进行统计学改革。改革的重点是:(1)抛弃传统的零假设显著性检验范式和P值,(2)采用估计(统计学)范式:注重效应量及其不确定度评估。一般认为统计学改革开始于20世纪80年代中期,迄今已经40年了。下表列出了统计学改革方面发生的重要事件以及发表的重要文献,作为统计学改革40年历程的简要回顾。表中疏漏在所难免,恳请网友补充。
| 重要事件及文献 | ||||||
| 1980’s | 根据Fiona, Cumming, Burgman, Thomason 2004年发表的综述论文,20世纪80年代中期,医学领域经历了一场重大的统计学改革。在严格的编辑政策推动下,医学期刊中出现的P值数量急剧下降,与此同时,置信区间的报告率则相应上升。 | |||||
| 1994 | 雅各布·科恩(Jacob Cohen)于1994年12月发表了一篇批判零假设显著性检验的极具影响力的论文:"The Earth is round (p < .05)", American Psychologist, 49 (12): 997–1003, doi:10.1037/0003-066x.49.12.997。根据Google Scholar,该论文迄今引用次数已经超过6800次。 | |||||
| 2004 | Fiona, Cumming, Burgman, Thomason 发表了一篇关于统计学改革的综述论文: "Statistical reform in medicine, psychology and ecology," Journal of Behavioral and Experimental Economics (formerly The Journal of Socio-Economics), Elsevier, 33(5), 615-630。这篇综述可能是最早使用“统计学改革”一词的论文之一。根据该综述,统计学改革于上世纪80年代在医学领域开始,之后逐渐扩展到心理学和生态学领域。 --------------------------------------------------------------------------------------------------- 雷克斯·克莱恩(Rex Kline)关于统计学改革的专著出版:《超越显著性检验:行为科学中的统计学改革》(Beyond Significance Testing: Statistics Reform in Behavioral Sciences),2004年首版;2013年第二版。 | |||||
| 2012 | 杰夫·卡明(Geoff Cumming)关于新统计学的专著出版:Understanding The New Statistics: Effect Sizes, Confidence Intervals, and Meta-Analysis New York: Routledge。“新统计学”包括效应量估计,置信区间,荟萃分析等。 | |||||
| 2014 | 杰夫·卡明(Geoff Cumming)在APS(心理科学协会)年会上举办了主题演讲:“新统计学:估计与研究诚信”(The New Statistics: Estimation and Research Integrity)。 ---------------------------------------------------------------------------------------------------- 雷克斯·克莱恩(Rex Kline)在University of Nebraska–Lincoln举办了主题演讲:《你好,统计学改革》(Hello, Statistics Reform)。克莱恩在演讲中深入剖析了统计显著性检验的局限性,鼓励研究人员在探讨研究的实际意义时使用效应量估计和置信区间估计。 | |||||
| 2015 | 心理学期刊《Basic and Applied Social Psychology》主编Trafimow 和 Marks发表社论,宣布禁止在该期刊论文中使用显著性检验和置信区间。 详见Trafimow, D. and Marks, M. (2015). Editorial Basic and Applied Social Psychology 37, 1-2。根据Google Scholar,该社论迄今引用次数已经超过600次。 | |||||
| 2016 | 美国统计协会(ASA)于2016年3月发布了关于统计显著性和P值的官方声明。该声明旨在纠正学术界对P值的长期滥用和误解。详见Wasserstein, R. and Lazar, N. (2016). The ASA’s Statement on p-Values: Context, Process, and Purpose. The American Statistician, 70, 129-133. https://doi.org/10.1080/00031305.2016.1154108。根据Robert Matthews (2021), 该声明迄今引用次数已经超过8000次。 | |||||
| 2017 | 2017 年 10 月在马里兰州贝塞斯达(Bethesda)举行了一场国际研讨会《超越 p < 0.05 的世界》。该研讨会被誉为“统计推断界的伍德斯托克音乐节(Woodstock of Inference)”,引发了巨大反响;许多场次座无虚席,甚至连站立席位都挤满了人。会议还展示了如何从 p 值中挖掘出远超“统计显著性”这一单一维度的丰富信息;这些内容在 2019 年《美国统计学家》特刊发表的 40 多篇特邀论文中得到了深入探讨(Robert Matthews, 2021)。 | |||||
| 2019 | 美国统计协会(ASA)旗下期刊《美国统计学家》出版了讨论统计显著性问题的特刊。该期刊主编在这期特刊的社论中明确提出:彻底抛弃‘统计显著性’概念,不要再说‘统计上是显著的’。即应停止使用任何p值阈值以及“统计显著性”之类的术语。详见Wasserstein, R .L., Schirm ,A. L., and Lazar, N. A., (2019). Editorial: Moving to a World Beyond “p < 0.05”, The American Statistician, Vol. 79. https://www.tandfonline.com/doi/full/10.1080/00031305.2019.1583913 --------------------------------------------------------------------------------------------------------------------------- 2019年3月,800多位学者在《Nature》上联名呼吁‘抛弃整个统计显著性概念’。详见Scientists rise up against statistical significance, https://www.nature.com/articles/d41586-019-00857-9 | |||||
| 2021 | 罗伯特.马修斯(Robert Matthews)发表文章:“美国统计学会的p-值声明发表五年后的情况跟踪总结”。详见谢钢博主的演讲PPT:https://www.researchgate.net/publication/359879840_meiguotongjixuehuiASA2016niandep-zhishengmingfabiaowunianhoudeqingkuanggenzongzongjie_xiangxijieshaoluobotemaxiusiRobert_Matthewsdewenzhang --------------------------------------------------------------------------------------------------------------------------- 美国统计协会 (ASA) 主席专题组发表了关于统计显著性和可重复性的声明(The ASA President’s Task Force Statement on Statistical Significance and Replicability https://errorstatistics.files.wordpress.com/2021/06/presidents-task-force-statement.pdf)。 这个声明反应了保守派学者对统计学改革的反对立场。声明发表后立即受到改革派学者的抨击,详情请见另一篇博文。 | |||||
| 2022 | 《欧洲理疗学报》发表了一篇社论:《通过估计进行统计推断:国际理疗期刊编辑协会的建议》。这篇社论阐述了使用零假设统计检验的统计推断以及这种方法固有的问题;探讨了统计推断的替代方法(称为‘估计方法’);并鼓励从事理疗研究的读者熟悉估计方法以及如何解释结果。社论还告知研究人员,一些属于国际理疗期刊编辑协会 (ISPJE) 成员的理疗期刊将期望论文手稿使用估计方法而不是零假设统计检验。详见 Statistical inference through estimation: recommendations from the International Society of Physiotherapy Journal Editors, European Journal of Physiotherapy, (2022) 24:3, 129-133, DOI: 10.1080/21679169.2022.2073991 | |||||
| 2026 | 罗伯特.马修斯(Robert Matthews)发表文章The ASA p-value statement 10 years on: An event of statistical significance?, Significance, Volume 23, Issue 2, March 2026, Pages 4–5, https://doi.org/10.1093/jrssig/qmag004。文章旨在纪念美国统计协会(ASA)发布关于p值与统计显著性的里程碑式的声明(2016年)十周年,评估了这十年间发生的变化,追踪了科学文化、数据分析实践以及围绕“零假设显著性检验”(NHST)的持续争论是如何演变的。罗伯特·马修斯指出,尽管美国统计协会(ASA)于2016年发布了关于p值的声明,但在随后的十年间,科学报道并未发生显著改变。由于体制惯性以及科学界对于可行的替代方案缺乏共识,p值的误用现象依然根深蒂固。 | |||||
Archiver|手机版|科学网 ( 京ICP备07017567号-12 )
GMT+8, 2026-10-16 09:06
Powered by ScienceNet.cn
Copyright © 2007- 中国科学报社