教你如何识别预印本论文的质量和可信度

预印本的可信度高低不等,但有一些方法可以衡量其可信度和质量。本期,AJE将详细的介绍甄别预印本质量的方法,以便大家能够轻松识别出预印本的质量来。

更新于2024年3月14日

教你如何识别预印本论文的质量和可信度

预印本的可信度高低不等,但有一些方法可以衡量其可信度和质量。这些方法包括查看与稿件相关的任何可用数据、审稿人评论、作者声誉以及预印本在同行评审过程中的状态--如果预印本服务器提供该功能的话。预印本服务器的筛选标准、质量控制和其他功能也会影响预印本的整体质量。以下是你衡量预印本质量和可信度的多种方法。

发现预印本可信度的方法

有很多方法可以辨别预印本的可信度。在阅读预印本时,问自己以下问题将有助于你做出判断。

预印本的科学发现与哪些数据有关?

如果预印本服务器允许,一些研究人员会上传与预印本相关的数据。这可能包括研究数据、材料、代码和其他补充文件。这些文件支持与研究相关的图表、结果和其他部分,并允许分析结果被复制。

预印本已经促进了公开性和透明度。但是当作者在预印本中分享他们的数据和其他补充信息时,就会增强他们的可信度。

科学界如何评价预印本?

一些专门的预印本平台如 Research Square 等预印本服务器允许发表评论。评论者可以是该领域的知名同行、相关领域的研究人员,甚至是科学爱好者。这些 "社区评论 "可以提供重要的背景信息,并指出论文的优缺点。

即使反馈意见中包含不同意见,也不应将其视为论文缺点的标志。事实上,认真的参与往往是论文可信度的积极标志。反过来说,没有公开反馈也不一定说明论文有缺点;有些科学家只是喜欢通过电子邮件直接与作者分享评论。

作者的声誉如何?

所有预印本服务器都提供有关作者的信息。这可以用来进一步调查作者本人。

例如,谷歌学术(Google Scholar)可以提供一些有用的指标,帮助了解作者的声誉,如

  • 被引用的次数;
  • 作者的 h 指数以及发表文章的期刊的引用影响力;以及
  • i10 指数:另一种对作者影响力进行排名的方法。
教你如何识别预印本论文的质量和可信度

此外,作者和合著者隶属于哪些机构?他们是在哈佛大学或索尔克生物研究所等知名机构工作,还是来自名不见经传的机构?

不过,请记住,作者所在的机构并不是衡量该研究人员声誉的最佳指标。伟大的研究可能来自任何地方。来自知名机构的研究人员实际上也有从事过欺诈性研究活动的事例。

预印本在同行评审过程中的状态如何?

有一小部分预印本平台提供与同行评审期刊的整合服务,让读者可以看到稿件在同行评审过程中的状态。例如Research Square的In Review服务就是一个例子。

通过 In Review,作者可以在向 600 多种参与期刊之一投稿的同时向 Research Square 提交预印本。

作者提交稿件后,预印本上会显示同行评审时间轴,显示稿件的状态,如 "Under Review"、"Under Revision"或 "Published"。

"Published"状态表示稿件已通过同行评审并在合作期刊上发表。这也是预印本可信度的最权威指标。它表明稿件已通过同行评审。

衡量可信度的其他方法

同行评审时间表上的其他信息可以帮助读者衡量预印本的可信度。例如,审稿人是否对预印原稿进行了大修或小修的建议?

如果是小修,那么研究很可能是可信的。

如果需要进行重大修改,那么至少第一版预印稿可能存在相当大的问题,或者缺少重要信息。不过,在作者进行了这些重大修改后,可信度可能会在后续版本中提高。

以下案例:预印本的第一版于 2024 年3 月 10 日提交。编辑决定被记录到预印本平台Research Square的 "In Review"中。 目前论文状态为 "Under Review"。

教你如何识别预印本论文的质量和可信度

预印本是否显示了质量或认证指标?

研究人员可能会选择预印本认证,以在投稿给期刊前显示稿件的可信度,或稿件背后的数据和方法。这些通常是通过编辑和科学评审等各种编辑服务提供的证书。

这些质量指标可以在预印本上看到。

例如,Research Square 提供两种徽章作为质量指标:

  • 方法报告徽章--证明稿件的方法报告是透明的,从而保证了可重复性
  • 数据报告徽章--证明稿件以最高行业标准提交数据和统计资料

以下是获得方法报告徽章的预印本。

教你如何识别预印本论文的质量和可信度

预印本服务器及其在预印本可信度中的作用

预印本的可信度通常取决于托管预印本的预印本服务器的质量。查看服务器的预印本筛选流程、管理水平、编辑政策细节和其他标准。所有这些在不同的服务器之间都可能存在很大差异。这些都是服务器可信度的线索。下面介绍如何解读它们。

预印本服务器的筛选过程有多全面?

预印本服务器的工作人员在提交预印本发布之前可能会提出一系列严格的问题。

  • 作者是否遵守适当的研究和报告伦理?
  • 提交预印本时是否附有适当的同意声明?
  • 该科学出版物的作者是否披露了任何利益冲突。
  • 稿件中是否存在不恰当、有争议、引发恐惧或伪科学的说法?
  • 论文是否通过抄袭检查?
  • 是否有可获取的数据支持文章中报告的研究?
  • 稿件是否符合预印本的定义?例如,如果稿件已通过同行评审程序并已发表,那么它就不再符合预印本的定义,也不会发布在某些预印本服务器上。
  • 文章是否包含常见的学术论文的所有关键部分,如图、表或引用部分?
  • 预印本是否已在其他地方出版(所谓的预印本复制)?
  • 作者是否遵守了与研究相关的法律和道德准则?例如,如果研究对象是儿童,是否征得了家长或监护人的同意?
  • 所有作者在投稿前是否都被告知文章将作为预印本发布,或者至少投稿作者是否确认他们已被告知?

一些预印本服务器,例如由学会或专有组织运行的服务器,可能会以其他方式对其内容进行把关。例如

  • AMRC Open Research 是医学研究慈善机构协会(AMRC)的预印本服务器,它要求提交的论文中至少有一位作者在发表前隶属于 AMRC。
  • 盖茨开放研究(Gates Open Research)是比尔盖茨及梅林达-盖茨基金会资助的预印本平台,该平台也要求至少有一位作者隶属于该组织资助的项目。

有关预印本服务器及其筛选过程的综合列表,请访问 ASAP Bio 的预印本服务器目录

预印本服务器是否得到积极管理?

预印本服务器应该有一个团队,确保提交的论文在成为预印本之前经过适当的筛选和处理。明确的领导层、编辑人员和编辑委员会应为这些团队提供指导。

服务器是权威机构

预印本服务器背后是否有明显的编辑领导?例如,是否有主编、创始人或其他个人积极管理预印本服务器的内容和日常运作,或许还担任预印本领域的思想领袖?这些都会提高预印本服务器的可信度。

服务器有专门的编辑人员

预印本未经同行评审,但在发布前应经过人工筛选。更重要的是,这些人应该具有一定的研究专长。因此,衡量预印本可信度的另一个指标是是否有专门的审稿人员根据编辑政策和预印本筛选标准对预印本进行筛选。

在衡量预印本和预印本服务器的可信度时,还有一点也很重要:

  • 是否对筛选人员进行了全面的培训?
  • 筛选员是否接受过足够的教育以了解他们正在审查的研究?
  • 是否有升级流程允许筛选员就是否发布预印本与其他人进行协商?

许多预印本服务器都会宣传自己的做法。你通常可以在每个预印本服务器的网站上找到此类信息。

服务器设有编辑或顾问委员会

编辑委员会和顾问委员会也是可信预印本服务器的良好标志。这些委员会成员可能包括顶尖研究人员、图书馆员、出版业专家和其他关键利益相关者。

这些专家可以为平台提供学术指导,确保平台满足目标研究群体的需求。

关于预印本和预印本服务器可信度的结论

发布到预印本服务器上的预印本不像传统科学期刊的投稿那样经过同行评审,但它们中的大多数确实是可信的。

大多数提交的预印本都经过编辑检查,并符合质量标准。许多预印本通过了社区评审,这有助于改进预印本;大多数预印本通过了同行评审,并在期刊上发表。

参考文献

“Systematic examination of preprint platforms for use in the medical and biomedical sciences setting”, Kirkham et al., BMJ Open. 2020. http://dx.doi.org/10.1136/bmjopen-2020-041849 

“Credibility of preprints: an interdisciplinary survey of researchers” Courtney K Soderberg, et al. Royal Society Open Science. 28 October 2020.

https://doi.org/10.1098/rsos.201520 

“Meta-Research: Tracking the popularity and outcomes of all bioRxiv preprints”, Richard J Abdill and Ran Blekhman, eLife. 24 April 2019.
https://elifesciences.org/articles/45133

撰稿人
标签
预印本预印本平台预印本论文
目录
订阅邮件
订阅我们的邮箱后可提前获得AJE作者资源的文章,享受AJE服务的折扣,以及更多的优惠

查看 "隐私协议"

AJE英文润色帮您彻底解决论文语言问题!

来自Nature的实验数据表明, 使用AJE的润色服务之后,来自中国的稿件接收率平均由28%提高到了42%。