有什么新心理科学

AO:你要结束你的第二年的主编心理科学(PS)。过去两年的经验如何符合你预期之前你做什么工作的?
情感表达:我有好运学徒与名誉主编抢钱开始在2011年的秋天。在他的指导下,我在9月和10月担任副主编,切换到高级编辑器在11月和12月。经验非常有助于缓解我主编的角色,2012年1月开始。经验也给了我一个早期的迹象。与抢劫开始训练之前,我知道PS每年收到了大约3000建参赛作品,但这个数字仅仅是一个抽象。现在每天都很现实。

AO:有方面的工作感到惊讶吗?
情感表达:PS是一个遥远的企业:我住在温哥华;同行评审经理艾米画,APS总部在华盛顿特区;米歇尔·内森,《华尔街日报》的主编,在维吉尼亚工作;克里斯汀Medeiros检查新提交的从她的家在夏威夷;圣人出版物的制作团队是洛杉矶附近;和《华尔街日报》23日高级和副编辑在9个国家基于三大洲。我惊喜无缝的工作日报如何流动,由于电子邮件、Skype和其他现代通讯奇迹,大多数人,包括我,认为是理所当然的。

AO:你似乎享受自己。最有趣的是哪些部分?
情感表达:第一天的工作——1月1日,2012年是令人难忘的。午夜我的未婚妻,乔安妮·艾略特,我开了一瓶香槟,点燃了MacBook,等待第一个提交的到来。我们没有等太久:15分钟后,一篇来自北京,其次是提交从阿姆斯特丹,多伦多,和其他城市在北美前在旧金山接近尾声。就像看新年展开全球从一些严重的角度专门人——毕竟,这应该是一个假期!

我更享受来自对心理学的学习新事物,尤其是我之前不熟悉的领域,并与朋友分享这些知识,同事和学生。去年,我开发了一个新课程旨在传授先进的哥伦比亚大学主修心理学的思考和写像评论家PS。在小组或单独工作,学生阅读和批判性回顾了各种压机论文(手稿最近进入生产管道)进行了比较和对比他们的评估与实际的审查和决定字母写的裁判和编辑。这是一个有趣的课程来教,给了学生一个独特的机会来磨练他们的批判性推理能力,加强他们的口语和写作技能,了解前沿研究心理学。我期待着明年教一遍。

AO:听起来很有趣,但如果你将做一个学生发现的致命缺陷的压纸审稿人和编辑(包括你自己)错过了?
情感表达:这个课程的学生将得到一个自动;这是比较容易的部分。至于作者,我们将一起穿过那座桥来。

AO:有什么变化你提起心理科学自从你开始你的词,他们收到了吗?
情感表达:在2012年1月,我添加了一个新的转折manuscript-submission过程。当提交手稿展示原始的实证研究,作者被要求简要回答三个问题:(1)将本文的读者了解心理学,她或者他不知道(或者不可能)吗?(2)为什么对领域知识重要吗?(3)如何在本文主张合理的方法?

插入的“关于心理学”和“场”的问题1和2,分别是为了开车回家明显但重要的一点PS不是社会认知神经科学期刊或杂志或一种情感研究杂志或者其他类型的专业杂志。它是关于心理学,这就是为什么这个词是嵌入在前两个问题。也对应用科学的方法来研究行为和经验,激励要求作者明确把他们声称他们的方法在问题3。

我希望这三个问题的答案将有助于作者把自己最好的情况下,帮助编辑和评论员审议。的反馈我已经收到优惠,以至于,从2014年开始,编辑和评论员将被要求评估提交《华尔街日报》的三个问题。手稿提供明确和令人信服的答案“,”“为什么”和“如何”的问题将会有最好的前景被接受发表。

2012年1月以来,我们已经取得了一些其他的更改杂志,例如,将补充材料变成了与未审核类型和要求作者描述他们的贡献的研究或写手稿。但都是——我敢说,这个词增量系统调整。我大部分的时间都用来复习手稿迄今为止(约1700),这给了我一个好的合理的《华尔街日报》的优点和缺点,并帮助我思考的方式提高我们的标准和实践。

AO:所以,有什么变化在商店在2014年为《华尔街日报》?
情感表达:将五大举措,包括新的审稿标准我们刚才讨论。下面是详细描述剩余的四:

增强报道的方法。2014年1月开始,手稿提交门户将有一个新的部分为四个公开声明项包含复选框(非常类似于现有的项目确认研究符合伦理指南,等等)。提交作者必须检查每一项为了他们的手稿继续编辑评价;通过这样做,作者积极宣布他们已经披露每个研究的所有必需的信息提交的手稿。公开声明涉及四类重要的方法论的细节——的排除,操纵,措施,样本大小,(不需要披露在当前报告标准PS特别是或者心理学期刊),但对于解释研究结果至关重要。bd体育在线app下载安卓

这个倡议的启发PsychDisclosure.org最近的一项倡议艾蒂安勒贝尔和同事。将最近的想法提出论文西蒙斯,纳尔逊和Simonsohn (2011年,2012年假阳性心理学),勒贝尔等人开发了一个four-item调查——公开声明和寄给作者文章的一个随机样本在一些期刊,包括bd体育在线app下载安卓心理科学。所有研究的文章中,作者被问及他们是否报道(1)观测的总数被排除在外,如果有的话,和这样做的标准;(2)所有测试实验条件,包括失败的操作;(3)所有管理措施/项目;(4)如何确定样本大小和决定何时放弃收集数据。

由勒贝尔等人的账户,主要的好处PsychDisclosure.org包括

增加最近发表文章的信息价值,以便更准确的解释报告发现…使可见到底发生了什么在雷达下的官方出版物,和…促进测深仪研究实践通过提高意识对于无效的和过时的报告标准在我们的领域,希望我们的网站会激励期刊编辑改变编辑政策的四类,方法论的细节披露在这个网站上成为一个必需的组成部分提交的手稿。

我和我的同事们认为,这将是一件好事来创建一个简单的公共规范报告应该必要的信息。我们的感觉是,西蒙斯,叔叔,和他们的同事在正确的轨道上PS已经具备良好的推动事业的发展。四个公开声明项作者在提交过程中必须完成从1月开始是一个办法。

检查表是这样的:

对于每一个研究报告在你的手稿,检查下面的框:

(1)确认(a)的总数被观察和(b)的原因这样做已报告在方法部分(s) []。如果没有排除在外,观察检查[]。

(2)确认所有的独立变量或操作,无论是成功还是失败,在方法部分(s)已报告[]。如果没有独立的变量或操作,在相关研究中,检查[]。

(3)确认所有依赖变量或措施,分析了本文的目标研究问题已报告在方法部分(s) []。

(4)确认(a)样本量的确定方式和(b)你收集停止规则已报告在方法部分(s)[]的页码(s),并提供这些信息出现在你的手稿:______________________________________________________________________

几点值得注意。首先,如上所示,four-item披露声明只适用于“每个研究报告在你的手稿。“最初,我们考虑增加五分之一项目覆盖额外的研究,包括试点工作,正文中没有提到,但这测试相同的研究问题。然而,从几个来源的反馈建议,这将打开一个大的蠕虫。套用一位评论员(Leif Nelson),它是太容易被研究者认为一个排除研究不计数。此外,这实际上把有意义的负担“完全公开”研究员。上面所示的四项在公开声明中对每个人都同样容易回答;这些信息已经在手稿或他们可以回去并添加它。但潜在的第五项,覆盖额外的研究,是不同的。研究者说服自己,一个或多个不排除研究数已保存的时间可能需要写这个查询。 File-drawering studies is damaging, but we are not convinced that this will solve that problem. A better solution involves preregistration of study methods and analyses — an approach we also take up.

第二,项目3的焦点是因变量(dv)或措施,分析了解决目标提出在当前提交的研究问题。非常不寻常的实验包括一个或多个“探索性”措施在给定的研究和区分这些“焦点”的德国焊接学会代表调查的关键。没关系他们不披露探索性德国焊接学会独立研究评估的问题,但它不是好的停止探索德国焊接学会评估当前文章的目标的研究问题。出于同样的原因,相关人员在行为遗传学等不同领域,人格理论,文化心理半岛体育官方网址入口学和认知发展可能成百上千的测量变量,其中大多数是留出其他涉及不同的文件在不同的问题分析。3项写入传达我们的信任在实验和nonexperimentalists报告目标研究问题相关的所有分析措施在这个特殊的纸。

第三,与第四项,编辑和评论员将验证样本大小和停止规则信息是为每一个研究报道,鉴于这是唯一作者总是需要报告的信息。其他三个项目,没有什么编辑或审稿人来检查,因为他们只会把作者的词他们披露的所有信息。,编辑和评论员将作者的话,他们已经披露所有排除观测(如果有的话),所有的独立变量/操作(如果有),并分析了dv /措施。

最后,我看到了强制性披露除外,操作,措施,样本量的给读者更能准确反映实际的方法用于获得发布调查结果。与此同时,我希望有些读者会抱怨披露声明走得太远,而另一些人会说它不远远不够。同样,每一个读者认为,公开声明太武断和好奇,另一个会认为它把太多的信任在作者的自然的美丽天使。我欢迎读者的建议改善信息披露流程或任何其他计划了。

修订后的词限制。研究文章和研究报告《华尔街日报》的主要平台原始出版的实证研究;他们一起占绝大多数的提交PS。以前,研究文章和研究报告仅限于4000和2500字,分别包括所有主要部分的主要文本(介绍、方法、结果和讨论)指出,确认和附录。

展望未来,新限制研究的文章和研究报告将2000和1000字,分别。和之前一样,notes、确认和附录计入这些限制,介绍和讨论材料(包括临时讨论和关闭一般讨论)。然而,方法和结果部分的手稿被排除在这个词限制这些文章类型。这里的意图是提供作者报告他们所做的机会,他们发现,的方式清晰,简洁,完整。

今年早些时候,我跑一个试点项目,这里描述,作者最近提交的《华尔街日报》被要求完成4-item披露声明,估计花了多长时间。

均值和中位数完成时间8 - 5分钟,分别表明任务是相当简单的和可行的。这是好消息。坏消息是,不少作者说他们会报告一个或更多的四个主要类别的信息,数据除外,操作/静脉注射,措施/ dv,样本大小,如果不是因为《华尔街日报》的词的限制。

在某些情况下,作者可能已经部分的主要文本补充材料,从而使轴承的空间信息披露项目,或者他们可能会对这个词刷爆了限制(这些提交100 +的几个单词在帽)。更一般的,更重要的是,它是作者的责任在空间限制PS提交(或任何杂志)集。

也就是说,我认为消除边界是有价值的方法和结果部分支持和鼓励作者描述他们所做的,他们发现,的方式不仅清晰简洁,但完成。早在2011年,它是好的对我们说:“心理科学通常不提供广泛的实证研究的主要出版物的完整表示方法和标准的数据更专业研究期刊。bd体育在线app下载安卓“这不是好今天,因为有理由担忧——可复制性,p-hacking,跑跳,等等——最近出现在心理学和其他科学(包括癌症研究、制药学、决策科学和行为遗传学)。

在2014年提交指南这个词,我设置限制研究文章和研究报告2000和1000字,分别。正如前面提到的,这些限制包括笔记,确认,和附录,以及介绍和讨论材料。原则上,作者没有限制他们的方法和结果部分。然而在实践中,审稿人和编辑坚持认为,作者将尽可能简洁。可以实现简洁不牺牲清晰或完整性。作者应该转移不重要的,团队作战方面的方法和结果部分正文的补充材料。

顺便说一句,专注于研究文章和研究报告的原因是,他们占所有新提交的83%PS。我们将保持1000字,包括一切的上限短报告相对罕见的情况下,一个有天赋的作家可以告诉他或她的故事最有效地在这种格式。

促进开放的实践。PS的运载火箭是一个程序,旨在鼓励开放的沟通在研究社区。接受PS文章可能有资格获得多达三个不同的徽章承认作者取得了他们的数据,材料,或抢注的设计和分析计划公开。徽章是贴在文章链接开放数据,材料,或抢注的设计和分析计划。

尽管科学进步开放沟通的重要性,提出规范不为个人提供强有力的激励研究人员共享数据,材料,或他们的研究过程。半岛体育官方网址入口原则上,期刊可以提供激励科学bd体育在线app下载安卓家们承认他们采用开放实践的出版物。在实践中,面临的挑战是建立开放的实践应该承认,标准必须满足收入确认,确认如何被显示在《华尔街日报》。

在过去的几个月里,一群11 Brian Nosek领导的研究人员已经解决了这些问题和其他半岛体育官方网址入口一些问题。结果是一个开放的实践文档,提出了三种形式的确认:

• 开放数据徽章,获得让公开繁殖所需的数字可共享的数据报告的结果。

• 开放的材料徽章,获得让公开必要的数字可共享材料/方法复制报告结果。

• 抢注的徽章,获得的抢注的报道研究设计和分析计划和报告结果显示,计划。计划包括分析规范的变量并进行分析。预先登记是一种有效的对策与早些时候档案柜问题提到公开声明。

标准为每一个徽章,他们获得的过程,介绍了开放实践文档以及常见问题的答案。文档提出了两种方法对认证机构授予徽章个人研究:披露或同行审查。就目前而言,PS会简单的披露方法。

手稿发表在1月1日或之后,2014年,有资格获得任何或所有的三个提到的徽章。人员会联系相应的期刊作者与细节badge-awarding过程。

心理科学》杂志上首次实现徽章程序,所以肯定会变化之际,编辑和作者获得经验在这个领域。再一次,我欢迎我们的社区的改进意见和建议。

拥抱新的统计数字。零假设意义测试(NHST)一直以来的主要方法,分析数据,得出结论在心理学和许多其他学科。尽管这一事实,几乎一样长,研究者已经认识到与一般NHST和这两个基本问题(重要与不重要的)思维产生。半岛体育官方网址入口

弥漫的问题NHST由“新统计”,避免影响大小,置信区间和荟萃分析www.latrobe.edu.au /小组/研究/项目/ esci)。事实上,第六版的美国心理协会出版手册(APA 2010)建议心理学家应该,只要有可能,用点估计和基础的解释研究结果和区间估计。

PS秒这个建议和寻求援助的研究人员从依赖NHST转向估计和其他首选技术。半岛体育官方网址入口为此,我们由Geoff Cumming发布教程,新统计运动的领导者,包括例子和引用书籍、文章、软件和在线计算器,将帮助作者在理解和实施评估技术在广泛研究设置。

一个新的部分统计数据已经添加到2014年提交指南结合Geoff Cumming的教程使用评估方法分析数据的优点而不是依靠零假设意义测试。这里的目标是强烈建议作者方向估计,不需要它。大多数研究半岛体育官方网址入口人员印在NHST,它需要一些时间,持续推动他们(和我们)变得舒服和自信的解释和报告结果的新方法。

AO:你担心提交者滥用把太多的新单词限制他们的方法和结果部分?
情感表达:我的几个同事对我的计划有强烈保留删除单词限制方法和结果部分,同时限制介绍和讨论部分。两个主要问题是(a)的作者可能会讨论混合成的结果,甚至包装方法部分材料,理应属于引进和(b)不再是报纸编辑和评论员意味着更多的工作。

这样的担心是完全合理的,和我分享。跟进Ralph Adolphs领先于我联系了约翰•Maunsell主编的神经科学杂志》上。拉尔夫指出,《限制大小的介绍和讨论部分(分别在500和1500字),但不限制他们的材料和方法或结果部分。

Maunsell博士回答说:

我没有见过太多作者包装方法或结果与讨论的证据材料。我认为大多数的作者意识到这不是一个有效的沟通战略的讨论点。作者可能包括几句话将导致上下文时给出结果,但它已经很少看到过多的讨论。可以说情况可能有所不同(心理科学]。我看过的一些心理学期刊允许文章格式的…Methods-Resubd体育在线app下载安卓lts-Discussion-Methods-Results讨论——…一般的讨论”。出于这个原因,你的作者可能更倾向于包括讨论结果。在任何情况下,我完全赞成你的举动,让作者提供一个完整的、独立的描述他们的实验中,不能用限制方法和结果。

深入这个问题得深一些,我估计48个随机选择的单词计数神经科学杂志》上下文章,一半在1993年出版的“旧规则”(没有限制的任何部分的手稿)和另一半在1996年出版的“新规则”(与上述限制的介绍和讨论)。开关从旧到新规则宣布在1994年2月出版,和手稿提交旧规则是在1994年和1995年出版;这就是为什么我选择1996代表新规则。

图1表明,正如所料,从老转向新规则产生明显减少长度的介绍(791和518字的方法)和讨论(2114和1443字的手段)。然而,没有明显的改变长度的材料与方法或结果。如果神经科学杂志》上作者可以抵制诱惑把讨论结果或介绍和方法心理科学作者可能——给予适当的指导和鼓励。

为此,2014年提交指南状态,作者应该能够提供一个令人生厌的账户的研究方法和结果在2500字的文章和2000字的研究报告。如果作者满足这些期望,那么新上限介绍和讨论部分,研究论文和研究报告将分别增加约500字在他们当前的限制。我认为,这些增加的成本(审稿人,编辑,和journal-production人员)有好处抵消了心理科学领域和杂志都在增强透明度和独立的账户。所以,我的建议是,我们把新模型作为实验和重新审视这件事在2014年6月或7月,当我们可以凭借我们的实际经验而不是假设猜想。

AO:而不是脱帽方法和结果部分,你为什么不鼓励作者包括更多的补充材料吗?
情感表达:一些人建议我们增加1000字限制在线补充材料,大概检查类型的(SOM-R),代替我的计划脱掉帽子方法和结果部分。乍一看这似乎是一个好主意,但我认为,我们应该谨慎。在2010年的一次编辑,约翰Maunsell描述了神经科学杂志》上与不断增加的索姆的经验,达到了顶点,辅料几乎一样大目标的文章。Maunsell博士描述了神经科学学会的原因决定消除所有的SOM,包括审查不足、不精确的区分核心和补充材料,为编辑和评论员和沉重的工作负载(将进行材料从主要的文本到一个补充文件不减轻任何人的负担)。

我不提倡这个时候我们完全SOM-R随着下降神经科学杂志》上在2010年11月。但是我认为我们不应该让它扩大为了适应的研究方法和结果,正确属于主要的文章。补充材料应该是——补充,不重要。不过,Maunsell博士的经验表明,编辑,评论家和作家神经科学杂志》上文章往往很难区分基本与不必要的材料。是我们的经验PS乐观吗?可能不会。

作为一个有趣的一边,Maunsell博士告诉我:

当我们不再允许作者包括补充材料提交2010年,我们很担心结果部分会大大增长,填鸭式的人之前补充材料变成结果。然而,这并没有发生。我们看到在我们文章的长度没有明显的增加。

AO:将手稿不符合所谓的开放实践处罚的徽章吗?

情感表达:几个编辑担心,非实验研究的个性,文化、认知发展、和许多其他领域可能弱势群体相对于实验研究完成时获得徽章的公开声明或上传原始数据或材料用于出版项目。

关于公开声明,我很欣赏,在许多研究领域(包括自然的和纵向研究)、研究人员很少报告所有数据。半岛体育官方网址入口正如前面提到的,相关人员在行为遗传学等不同领域,人格理论,文化心理学和认半岛体育官方网址入口知发展可能成百上千的测量变量,其中大多数是留出其他涉及不同的文件在不同的问题分析。

在当前信息披露的计划,任何领域的研究人员的研究(实验、纵向、自然等)都半岛体育官方网址入口必须报告只有因变量,分析了某篇文章的有针对性的研究问题。如果我测量1000德国焊接学会和分析只有3为特定的纸,我需要报告的结果对于那些3 -无论结果如何——但不是剩下的997。因此,作者就不会让一个尴尬的声明,如:“我们不报告数据,我们收集的三分之二。“另一方面,一个说,“我们不报告三分之二的数据分析为本文的目标研究的问题,”然后就象一些解释。

关于徽章,大部分的反馈是积极的,但我理解和欣赏为什么有些担心,徽章和熟悉面向实验研究参与者样本(例如,大学生或MTurk受访者)。考虑,例如,开放数据徽章。半岛体育官方网址入口研究人员的工作与难以组织(例如,非法移民)或临床人群可能会避免公开张贴他们的数据由于隐私,安全,或其他问题。同理,一些研究项目需要的合作组织(例如公立学校系统),不允许发表的数据,和许多资助机构有自己的报告要求和法规(例如,在国家收集的数据不能驻留在服务器位于国家B)。

一般的观点是:如果研究者不感兴趣获得给定的徽章,因为任何原因半岛体育官方网址入口,这很好。但如果研究人员半岛体育官方网址入口不能获得一个给定的徽章(比如上面给出的原因),我们将为他们提供机会这么说,包括他们的声明发表论文。

AO:你已经不可分割的一部分,APS的努力解决问题的复现性和研究实践。《华尔街日报》,并能发挥什么作用在这些努力吗?将心理科学发布失败如果方法的复制?
情感表达:为了改善的出版标准和实践PS五个项目我们已经讨论过,最多步骤正确的方向,而不是一个理想的最终状态。复现性和研究实践的问题是复杂的但不是棘手如果社区的参与。科学组织APS和他们的杂志可以帮助,但我认为真正的、持久的进步来自于,而不是自上而bd体育在线app下载安卓下。

你问如果PS会发布失败复制方法是强大的。我们已经这样做了。许多研究人员之间的交流我们发布的评论是没有找到和那些最初成功产生影响。半岛体育官方网址入口在他即将出版的Geoff Cumming写道教程:

一个研究很少,明确;其他相关证据是必需的。这可能来自一个关闭复制,荟萃分析,应该给更精确的估计比原来的研究。更一般的复制可能增加精度,也提供一般性的证据或鲁棒性的原始发现。我们需要增加识别的价值接近和更一般的复制,和更大的报告他们的机会。

AO:谢谢你花时间跟我谈论在变化心理科学。这些都是令人兴奋的新发展,我连同APS的所有成员,将期待《华尔街日报》的持续发展。我非常感谢你的努力工作在编辑它。这个杂志已经有一系列的编辑,每个让《华尔街日报》更好,有助于提高其总理在心理状态。

AO注意:额外的上述计划的详细信息可在《华尔街日报》的2014年提交指南和一个新的心理科学编辑。