WileyChinaBlog分享 http://blog.sciencenet.cn/u/WileyChina

博文

有关注册报告、研究预注册及为何两者十分重要的8个回答 精选

已有 1970 次阅读 2018-2-6 11:22 |个人分类:开放获取|系统分类:博客资讯

有关注册报告、研究预注册及为何两者十分重要的8个回答

8 Answers About Registered Reports, Research Preregistration, and Why Both Are Important

我们有一些关于注册报告的疑问。所以我最近和来自开放科学中心(Center for Open Science)的David Mellor谈了一些问题。以下是我们的谈话内容。对于Wiley期刊的编辑们,我们有一个特别的信息(我们会在最后重复):请与你的出版商谈谈我们的注册报告工具包,这样我们能够一起为您的社区的研究人员提供这一选项。


Q.David,非常感谢您能同意和我们谈谈。所以预注册有什么值得大惊小怪的地方吗?

A.预注册是一个可实时追踪的研究计划,在进行一项研究之后,你可以指出预注册来向自己和他人证明你确实正在对预测的关系进行测试。

预注册存在已经有一段时间了。数十年来,统计学家一直都在警告我们,如果我们仅仅报告一些答案,让数据告诉我们正在测试的假设,或转换结果,那么常用的测试将歪曲科学证据。这些问题正在影响药品临床试验的可信度,所以近20年,很多国家法律要求临床研究要有事先详细说明。但是,相似的工具可以运用到通报政策和影响我们理解世界运作方式的基础研究中,因此预注册也能够提高这些情况下的可信度。


Q.似乎是研究人员跳过的另一个坑……这有什么意义?何必呢?

A.对一些人来说,这当然是工作流程中的一个新步骤。但是,每个人都想要做出最缜密的、可信的研究发现。预注册可以更清楚地辨别实证性研究和探索性研究。实证性研究测试的是一个非常具体地预测。探索性研究是寻找一些未曾预料的结果。对于知识进步而言两者都十分重要。但是,在探索性报告时使用实证性假设检验的工具,初步结果能够使得研究更易于发表,但是却以牺牲可信度为代价。解决这个矛盾激发了我们的工作。


Q.哦,我明白了。对研究整体可能有好处。但对预注册的研究人员有好处吗?

A.对个人研究者有一些好处。这些好处首先来自更好的计划。进行预注册的每一步:写假设、定义变量、创建统计测试,都是我们在某些时候必须采取的步骤。在收集数据之前进行这些步骤能够改进研究者的研究设计。

我们创建一个结构化的、便于使用的系统来指导研究者在开放科学架构(the Open Science Framework)中完成这一流程。因为这一步骤对科学水平的提高来说是全新的、有效的,the Laura and John Arnold基金会(the Laura and John Arnold Foundation)为1000名通过the Preregistration Challenge发表预注册研究的研究人员提供1000美元的奖励。这一教育活动是将这一概念介绍给不熟悉操作的研究人员的一种方式。


对于研究者的另一个主要的好处来自与提供注册报告的期刊的合作。这些期刊(现在有80本)考虑在结果已知之前接受研究。提交的研究计划通过同行审查,审查基于:1)研究问题的重要性;2)使用的方法具有能够回答这些问题的能力。如果这些指标都能够得到肯定地评价,那么这篇论文就可以被原则性接受,这是一个出版的承诺,无论结果如何。

对研究人员来说这是一个很大的好处。研究者能够更早得到关于他们所发起的研究的反馈,能够拥有改进作品的机会。出版决定取决于作品的质量和研究问题的重要性,而非产出,这对于想要出版作品的所有人都是非常有吸引力的。


Q.即使这样仍然不能说服我。我们有什么迹象表明研究人员对预注册有很大的兴趣呢?

A.临床研究人员已经使用这一流程很久了。但是对基础科学和临床前领域而言,这还是一个新事物。从2013年开始,我们为所有研究者提供工具,OSF上预注册的数量有了爆炸性的增长。


OSF是为所有领域的研究人员而设计的,但是预注册在诸如由美国经济学会( American Economics Association)所管理的特定学科的注册、国际影响力评估教育方面存在很大的需求。甚至还有预注册的支持者提供工具来帮助研究人员进行简单的预注册


Q.我们谈到这儿。所以期刊可能在预注册中扮演什么角色呢?

A.期刊可以采取四个具体的步骤,在《透明度和开放促进(TOP)指南》(the Transparency andOpenness Promotion (TOP) Guidelines)概述的政策中总结了这四点。

  1. 第一步,让研究人员透露是否有任何实证工作是进行了预注册的。

  2. 下一步,包括将预注册协议和已报告的发现进行对比,以评估是否执行研究计划。预注册链接至少允许在出版之后进行这一步骤,但是我们也乐意在进行同行评审的同时进行对比。

  3. 第三步,任何相关工作都需要预注册。出版临床研究的期刊要采取这一步骤,其他领域也是如此。

  4. 最后一步是提供注册报告,这一步是研究人员可使用的一个选项。


Q.所以这是如何与“开放研究”(“open research”)的日常工作相适应的?

A.开放科学是关于将研究中得出最终结果的每一部分都连在一起的。传统上说,我们无法较为容易地分享数据,或指出一个实时追踪的研究计划,抑或传递在纸质期刊的附录部分以外的材料。但是,现在我们能有渠道来实现这一理想的工作流程,并使科学工作能够以它想要的方式工作。


Q.这些对刚从事研究的研究人员来说意味着什么呢?

A.我认为这个领域在十年内将会有不同的期望。研究人员被期望能够提供一个包含作品所有基本部分的框架,来展示可重复的作品:预注册计划,具有连续而独特的ID标识的材料,清晰描述的数据集,运行这些数据测试的代码,展示初步结果的预印本,最后是经过同行评审、能够通过完整精确的叙述来引导读者的手稿。

我们现在位于尖端 。引用处于尖端的研究人员完整的工作流程是可能的。但是它也使得人们关注科学,关注透明度,使得决定发表、奖励和提供工作是基于学者作品的可重复性和透明度。

Q.好的。我相信这是一个有意义的工作。所以一本期刊能够如何帮助进行预注册的研究人员呢?

A.除了我们已经提到的四个具体的步骤之外,期刊能够做很多事情使其得以很快实现。它们能够使用开放科学标记( Open Science Badges),允许研究人员在他们进行这些步骤时进行标记。它们能够通过在它们的网站或社交媒体平台上分享有关预注册挑战(the Preregistration Challenge)的新闻,让它们的作者知道预注册是有价值的。它们能够展示预注册案例来指导研究人员。



十分感谢David。我们将把发布注册报告的新的期刊添加到已有的5本Wiley期刊列表中,点击这里可以查看。对于在Journal of Neuropsychology   (published for theBritish Psychological Society by Wiley)上发表文章的作者,注册报告很快就会出版。我们还有很多期刊即将加入这一行列。


原文来源: Wiley Exchanges



论文写作
http://blog.sciencenet.cn/blog-822310-1089631.html

上一篇:免疫学主题特刊|先天免疫机制如何对抗感染
下一篇:虚拟特刊推介--炎症小体和炎症性疾病

1 黄永义

该博文允许注册用户评论 请点击登录 评论 (2 个评论)

数据加载中...

Archiver|手机版|科学网 ( 京ICP备14006957 )

GMT+8, 2018-7-23 17:40

Powered by ScienceNet.cn

Copyright © 2007-2017 中国科学报社

返回顶部