意得辑专家视点 - 科研资源门户分享 http://blog.sciencenet.cn/u/editage

博文

审稿人:不可复制危机能否彻底根除? 精选

已有 2828 次阅读 2017-5-16 14:45 |系统分类:科研笔记


本文首发于意得辑专家视点 科学界肆意蔓延的不可复制危机能否彻底根除

转发请联系小编 封面图片来自网路


我们曾经探讨过很多关于“不可复制危机”的情况,包括不可复制危机的真实存在及对科学界的短板效应,以及医学统计学家Jonas Ranstam的访谈,他认为不可复制危机是一个被误解的词。

科学发表的不可复制问题也是发表道德很关注的因素,今天这篇文章来自一位美国分析化学教授,他将从一位审稿人的角度阐述自己关于能否根除不可复制危机的观点。


作者介绍:

Ira Krull's picture

Ira Krull 美国东北大学的分析化学终身教授,目前处于半退休状态,至 2008 年为止,有将近三十年的经验。在他的职业生涯中,一直都有参与分析方法开发和优化的相关工作。他指导和追求需要分析化学知识和分析方法验证的研究,包含有机光化学、天然产物隔离、分析食品/药物中的亚硝胺、分离科学和质谱。他也将自己的研究带到全世界,发表许多文章到期刊、科研杂志、书籍、社论上,在国际范围内指导本科生和研究生。他也持续审查发表在分析相关的期刊和杂志上的科研论文。

1997 至 2010 年间,他与同事 Michael Swarz 博士一同在 LCGC North America 发表过无数关于验证观点 (Validation Viewpoint) 的专栏文章。多年来,也有多篇综述文章发表在分析化学期刊和书籍上。



在我在分析化学三十年的工作过程中,我为多个期刊评审过很多论文,大部分的论文只有一点或甚至没有分析方法验证,这表示它们缺少重复、重现、验证、耐用性的证据,还有大部分演示方法验证需要的其他条件。令人意外的是,这些论文大部分都是投稿到分析相关的期刊,而不是生物类期刊,如《科学》、《自然》、《细胞》或《Bio Techniques》等。因此,既有文献以及近来发表的文献会缺少可重复性和其他分析方法验证也就不足为奇。

或许好的科学研究和发表文章的基础条件是在成功地完成和发表后,能够让其他人在具备相似培训、准备和设备的实验室中重复这项工作。作者在投稿发表之前,至少应该要确保他们的研究能在自己和他人的实验室中重复,如果无法达到这个关键要素,那么这些研究发现就不该发表。原创工作应该要遵循科研方法 (protocol),例如良好实验室实践 (good laboratory practice, GLP),照理来说应该要在有质量管控和质量保证的 GLP 设备中进行。还有,应该要有足够的硬性数据(数字),每一个测量都只好要重复三次,全部都分析式对待和制表。

这样做的原因是什么?越来越多的论文因为没有可重复或可充值的特定要素而被拒稿。如果我自己的经验能跟现在在审稿分析式文献的人串联起来,那么就很清楚了,期刊和编辑在评估稿件时。对作者的要求应该更多,论文应该要有可重复、可重现、可验证、耐用等证据,还要有其他事实和完整分析方法验证要素。还有,如果这些东西显著,那么此类的工作就有可能无法发表,其他科研人员将无法重复这些研究发现,我们会持续面临我们现在的困境:许多甚至大部分过去的或正在进行的科研发表文献都无法重复的普遍现象。

我收到的分析论文大部分都只有一部分或没有分析方法验证。这表示它们缺乏验证性、耐用性、重复性、重现性、检测限制、定量限制、定量线性的校准图、重复次数 n 至少大于等于 3 的数据统计处理、试剂稳定性、质量控制、质量保证、良好实验室实践等等条件。还有,相较于产业或政府实验室,缺少可重现要素的分析仪器、药品、生物制药等领域的文章大部分来自学术界。公司和实验室大部分都符合美国食品药品监督管理局 (U.S. Food & Drug Administration)、欧洲药品管理局 (European Medicines Agency) 和日本薬剤師会 (Japan Pharmaceutical Association) 的相关规定,这是高质量方法验证的证据,也是到现在学术还没有强制规定或者期刊或编辑没有强制要求的。大部分的学者都倾向节省任何跟分析方法验证要素相关的时间、金钱和精力,如果他们早先能照着规定走的话,现在的无法重复危机或许就能避免了。

基于以上论点,科学界要怎么解决这些问题,让未来的文献都可以重复呢?是科研作者、审稿人、编辑、期刊出版社、基金单位还是其他方面的问题?最终,还是科研作者要负责递交有效、可重复、可重现的诚实结果、数据。至于审稿人,在评估稿件时,对于没有可重复性、可重现性、方法验证等等与工作可信度相关的条件要素必须要更严格。尤其期刊会在网站上提供在线指南和规定给审稿人,让最好的论文才能达到发表水平。编辑在做决定之前,应该考虑审稿人的意见和建议,或许他们不应该将没有重复或重现条件的论文发给审稿人。最后,出版商也该修改投稿内容的政策,进一步确保他们在发表后的验证性、可重复性和可重现性。

所以期刊才能避免面被不可重复和撤稿等问题困扰。有些期刊,如《自然》、《Bio Techniques》和《The Analyst》等,会要求作者在研究叙述中指出特定初始目标,例如可重复和可重现证据,以及每个实验的重复次数。有些指南讨论应该包含在论文内文中的分析方法验证条件。或许,期刊编辑和审稿人需要更谨慎自己核准可以发表的论文,特别是只有一点或跟根本没有任何分析方法验证证据的文章,这有可能会导致该研究未来的重复或重现工作失败。整体的目标应该是确保最终论文含有足够的数据、细节以及方法验证,在发表后让读者有办法重复同样的工作。

缺乏可重复性和可重现性会影响科研的进步速度。除此之外,这也有可能对基金资助造成不利的影响,因为研究不可重复是科学经费的主要绊脚石。这样的研究也可能对健康及卫生政策带来危害,甚至让人们对科学失去信任。因此,发表高质量的科学应该是科学界各个群体的首要任务。




http://blog.sciencenet.cn/blog-769813-1055274.html

上一篇:什么是“香肠论文”?对作者和学界有什么影响?
下一篇:【女博士就业】西方学术女性的傲慢与偏见

0

该博文允许注册用户评论 请点击登录 评论 (0 个评论)

数据加载中...

Archiver|科学网 ( 京ICP备14006957 )

GMT+8, 2017-5-28 14:42

Powered by ScienceNet.cn

Copyright © 2007-2017 中国科学报社