||
学者们常以预印本形式先行发布其早期研究成果,但这些成果尚未经过同行评审。因此,部分学者担忧预印本的质量参差不齐,难以判定其学术价值。针对这一现象,本篇专栏文章将深入探讨预印本的可靠性,并提出在评估其可靠性时需着重注意的几个方面。
01 预印本版本vs同行评审版本
在评估预印本的可靠性时,一种有效的方法是对比预印本和其对应的同行评审论文在文章质量、研究结论等方面是否存在显著差异。近年来已有许多学者做了相关研究——
其中一项研究对临床研究预印本及其同行评审论文进行了对比,深入分析了它们的研究特征、结论以及解释[1]。在所选的预印本样本中,高达97.6%的期刊论文在正式发表时并未对预印本中临床实验的关键观察指标进行修改,且绝大部分论文的关键指标结果都与预印本保持一致,或仅存在微小差异。96.2%的期刊论文在分析和解释研究结果时,与它们的预印本版本保持了高度的一致性。
另一项研究聚焦于以COVID-19患者治疗随机对照试验为主题的预印本和其后续发表的期刊论文,对比了它们研究结论的一致性[2]。结果显示,74.3%的期刊论文与预印本在研究结论上完全一致,另有21.1%的期刊论文在研究结果上相较于预印本有所补充或仅存在细微差异。
此外,还有一项研究比较了新冠肺炎大流行期间发布的预印本和其同行评审论文之间的差异和变化[3]。结果显示,在考察的样本中,有83%的研究结论在期刊论文正式发表时并未显著变化。而在不涉及新冠肺炎疫情的研究中,这一比例更是攀升至93%。
这些研究在一定程度上证明了,大多数预印本在内容上与它们的同行评审论文相比,差异并不显著,且这些差异大多处于可信赖和可接受的范围内。
值得注意的是,大多数预印本平台都支持版本管理,并且当其同行评审版本在期刊上发表后,平台还会将预印本与其对应的期刊论文进行关联。
以Preprints.org为例[4],平台允许并鼓励作者在用户界面提交更新后的预印本,以及链接同行评审版本(推荐阅读:发布预印本需要注意什么?)。这一机制不仅确保了研究成果的及时更新,还使预印本与投递至期刊的论文保持了更高的同步性,确保读者及时关注到经过同行评审的版本。
图1:Preprints.org鼓励作者在用户界面提交更新后的预印本和链接同行评审版本
02 判断预印本可靠性的几个要素
尽管已有研究证明预印本与同行评审论文在质量上相近,但在实际阅读预印本时,我们往往难以确定这些预印本是否能够成功在期刊上发表,或者它们的研究内容是否还需要进一步的更新和完善。因此,为了确保获取的信息准确且可信,我们有必要关注一些评估预印本可靠性的关键要素[5]——
1. 研究问题的明确性
当研究问题、目的和假设被明确阐述时,读者就能理解其研究的背景和动机,从而对预印本的研究价值和创新性做出初步的判断。
2. 研究方法的清晰度
脉络清晰、逻辑严密的研究方法不仅使读者能够评估预印本的科学性和严谨性,同时也为复现研究过程及验证研究结果提供了可行路径。
3. 数据的可访问性
当预印本中的研究数据允许读者直接访问和验证时,读者就能方便地核实数据的真实性,进而对研究的可信度做出进一步判断。
4. 图表与文本信息的一致性
图表是研究数据或研究结果的可视化呈现,若其内容与文字描述相符,两者便能相互印证,共同为预印本内容的准确性提供一定佐证。
5. 已核实的作者身份
当作者的真实姓名、所属机构、联系方式及ORCID(开放研究者与贡献者身份识别码)等信息都能得到核实,读者便可以确认作者具备真实的身份和相应的研究背景。
值得注意的是,一些预印本平台在其作者投稿须知中便对这些关键要素进行了强调,同时对预印本的文章质量进行了初步审查。这些举措不仅提升了平台所发布预印本的质量,也为读者带来了更佳的阅读体验。
以Preprints.org为例,平台在其作者发文须知中,明确要求作者提供与稿件相关的所有数据,并鼓励他们将数据上传至公认的数据存储库,确保数据公开透明、可访问[6]。
图2:Preprints.org要求作者提供与稿件相关的所有数据
同时,Preprints.org还倡导所有作者在投稿过程中将其ORCID账号与平台账号关联,以增强作者身份的可信度[6]。当预印本成功发布后,作者的姓名旁边将展示一个ORCID标志,点击即可查看作者的学术背景信息。
图3:Preprints.org鼓励作者将其ORCID账号与平台账号关联
图4:在Preprints.org上,关联了ORCID的作者姓名旁将展示ORCID标志
此外,平台还会审核稿件的基本科学内容,并检查作者是否有学术不端行为记录,以及文章是否符合伦理标准等,从而对预印本的质量进行初步把关[7]。
图5:Preprints.org将对稿件进行初步筛查
总的来说,大多数预印本文章的质量是值得信赖的。不过本着科学探究的严谨精神,我们鼓励以积极和理性的态度来对待预印本——在通过预印本获取前沿研究成果的同时,对其进行必要的评估与验证。如此一来,我们能够更深入地理解和利用预印本中的知识和见解,使预印本在科研交流中发挥出其应有的价值,进而促进科学研究的持续进步。
《预印本知多少》专栏预告
在掌握了判断预印本可靠性的方法之后,接下来我们将探讨预印本引用的相关话题:学术界是否认可预印本的引用?在引用预印本时,需要注意什么?
注:本文中展示的Preprints.org平台截图均来自其最新界面。我们正在逐步向广大学者推出新版Preprints.org,欢迎体验!
本文首发于“PreprintsOrg 预印本”公众号:
https://mp.weixin.qq.com/s/nnpbUATgByBSS1lYm7OeYQ
参考文献
[1] Janda, G. S. (2024). Comparison of Clinical Study Results Reported in medRxiv Preprints vs Peer-Reviewed Journal Articles (Order No. 31142917). Available from ProQuest Dissertations & Theses Global. (3049902920). https://www.proquest.com/dissertations-theses/comparison-clinical-study-results-reported/docview/3049902920/se-2
[2] Davidson, M., Evrenoglou, T., Graña, C., Chaimani, A., & Boutron, I. (2024). Comparison of effect estimates between preprints and peer-reviewed journal articles of COVID-19 trials. BMC Medical Research Methodology, 24, 1-8. https://doi.org/10.1186/s12874-023-02136-8
[3] Liam Brierley, Federico Nanni, Jessica K. Polka, Gautam Dey, Máté Pálfy, Nicholas Fraser, & Jonathon Alexis Coates. (2022). Tracking changes between preprint posting and journal publication during a pandemic. PLoS Biology, 20(2)https://doi.org/10.1371/journal.pbio.3001285
[4] Preprints.org - the multidisciplinary preprint platform. (n.d.-b). https://www.preprints.org/
[5] Preprints, reproducibility, and integrity in publications. (2022). ASAPbio. https://asapbio.org/preprints-reproducibility-and-integrity-in-publications
[6] Instructions for authors | Preprints.org. (n.d.). https://www.preprints.org/instructions_for_authors
[7] About | Preprints.org. (n.d.). https://www.preprints.org/about
Archiver|手机版|科学网 ( 京ICP备07017567号-12 )
GMT+8, 2024-11-5 09:12
Powered by ScienceNet.cn
Copyright © 2007- 中国科学报社