复制报告建议的审阅人员说明
作为这一主题的专家(通常是原始研究的作者),编辑们寻求您的帮助,以确保该研究的复制方案尽可能准确。通过提供缺失的信息,指定何时偏离原始设计是重要的,并注意复制中必要的任何操作检查,您可以确保复制尝试紧密模仿原始设计,从而增加其他实验室重现原始结果的机会。作为审稿人,您的任务是审查所提议的复制设计,以验证它准确并完全复制了原始研究设计。为此,你的审查应该只关注提案表格中的信息。
提议者填写的表格报告了从原始研究的方法部分收集到的详细信息以及提议的复制的相应详细信息。这张详细的表格将帮助您识别设计之间的任何重要差异。对于每个项目,我们要求您验证您的研究描述是否准确和完整,注意任何需要的差异或操作检查,并添加其他项目未涵盖的任何其他评论或资格。最重要的是,我们要求您确定每个值的容差范围。也就是说,什么范围的值是可以接受的,这个研究仍然是你的研究的直接复制。请指定您认为将产生相同结果的最宽可接受范围。
在我们对这个审查程序的测试中,我们发现它比传统的审查花费的时间更少。对于研究的每个方面,您将被要求回答以下问题:
- 申请人描述的准确性你最初研究的这方面描述准确吗?输入“是”或“否”。如果你的回答是“没有”,请解释描述的不准确之处。如果原文章中遗漏了一个细节,请在这里提供。如果你不再有相关的信息,请估计它,并注意这是一个估计。如果你认为一个方法细节是适用的,但是提交者将它标记为“不适用”,请在这里提供方法细节。还请指出原始研究和拟议研究在这方面的其他差异。对于每一个额外的差异,说明它是否足够显著,不应被认为是直接复制。请记住,任何被列为显著的差异都意味着原始结果的一般性是有限的。根据经验,考虑如何解释建议的复制报告中的积极结果。 If the replication attempt produced the same effect as the original, would you treat it as a direct replication of the original? If the answer is yes, then you should not flag a discrepancy as significant. If the answer is no, then you should.
- 可接受的值:请提供在你的研究的这方面适合于直接复制的数值范围。你认为你的研究应该复制什么范围的值?请记住,指定一个过于严格的公差范围会限制研究的泛化性。如果你相信你的结果适用于所有人,那么样本就不应该受到限制。如果您认为您的效果只适用于年轻参与者,那么请指定可接受的容忍范围(例如,参与者必须在18到24之间)。
- 操作检查:是否需要进行操作检查?如果是,请描述它们并注明每次检查的可接受值范围。
- 评论或资历:如果你对复制建议的这方面有其他问题所不包括的意见或资格,请描述。
我们依赖于您的合作,以确保研究方案的适当。与传统的审查程序不同,最终方案计划将“签署”并公开,在收集数据之前,您有机会作为公共记录的一部分表达任何担忧和反对意见。只有提案者和原作者之间的编辑过程和合作产生的最终版本的提交表格才会被公开。在接受协议之前的中间阶段,将不会公开发布。作为审核人员,在协议公开之前,您将有最后一次机会添加/删除注释和资格。我们希望这一正式的审查程序将使审查方法有效,并允许您以正式和透明的方式表达任何担忧。