上升的报告p小幅值为“重大”
研究人员收集数据,运行统计检验,发现p价值大约是07。接下来会发生什么?根据一项研究由劳拉Pritschet(伊利诺伊大学香槟分校)、德里克·鲍威尔(加州大学洛杉矶分校),和扎卡里·霍恩(也伊利诺伊大学),研究人员可能会报告,结果“近乎显著”——不太重要,但到达那里。虽然是常见的,Pritschet和他的同事们认为,这种做法是“根植于严重的统计错误”,并有可能导致假阳性错误(有时假阴性)。更糟的是,有证据表明,这种做法是在上升。
Pritschet、鲍威尔和霍恩指出,报告近乎显著结果的做法是有问题的,主要有两个原因。首先,心理科学领域没有商定的标准如何以及何时结果应报告为近乎显著。美国心理协会风格的第二版手册,在1974年发表的建议,“不要从数据推断出趋势不以小的优势达到一般水平的意义。“这语言很快就减少,然而,和信息的边际意义已经缺席手动了30多年。
可能更令人不安的是,近乎显著结果的报告和两种类型的科学推理:Neyman-Pearson决策理论,依靠努力达标,和费雪的假设检验方法,p值可以被认为是一个测量的证据。
“边际的概念意义下的框架中,“作者警告。
边际的调查报告结果,Pritschet和同事研究了论文每一个十年1970年至2010年三大认知、发展、与社会心理学期刊每十年,1535年出版。bd体育在线app下载安卓作者对每一篇文章的报道近乎显著结果,通过搜索术语“保证金”和“方法”,并检查第一个实例的边际报告时出现了。
Pritschet和他的同事们发现,研究人员称许多不同半岛体育官方网址入口p价值边际,从p= 0。p=只要。超过90%的p值称为边际. 05至.10,然而。
图1所示。的柱状图p文章分析了价值观贴上近乎显著
接下来,研究人员检查半岛体育官方网址入口了文章的比例,包含报告边际报告,并随着时间的推移,这些比例发生了变化。所有期刊bd体育在线app下载安卓显示,增加报告的边际结果:1970年,18%的研究描述了文章p值略微意义重大,但在2000年,超过一半的所有文章。研究人员半岛体育官方网址入口注意到,社会心理学日报是最有可能包含近乎显著结果的报告。
在额外的分析,研究人员发现,论文报道的实验结果更有可能包半岛体育官方网址入口括报告的一个近乎显著的结果。甚至还,控制了这种效果,社会心理学》杂志上的文章更有可能这种类型的报告结果。
“我们不愿公司得出结论仅在这些结果的基础上,“作者警告说。
Pritschet和同事承认的更广泛的解释这些结果有待商榷。
”是接受略微增加显著影响分级的代表,Fisherian的解释p值,根据硬被切断被认为是任意的?或者它会显示更可疑状态的出现心理方法?”他们写道。
无论哪种方式,作者建议仔细看在心理科学边缘结果的报告。
参考
Pritschet, L。鲍威尔,D。霍恩,z (2016)。近乎显著效果作为假设的证据:在四十年改变态度。心理科学。doi: http://pss.sagepub.com/content/early/2016/05/14/0956797616645672.abstract
评论
是的,报告的结果是“近乎显著”是可悲的,但更重要的问题是,即使是“重大”p值不告诉你大多数人认为他们买单——概率,结果可能是偶然因素,或者他们将无法复制。看到科恩,j . (1994)。地球是圆的(p < . 05)。美国心理学家49(12),第1003 - 997页(1994年12月),和Nuzzo r (2014)。统计错误。自然506(2014年2月13日),页150 - 152。
我认为轻微的重要结果仔细看看他们的解释是很重要的——如果这些意想不到的/出乎意料的结果与先前的知识是不一致的,他们可能偶然发生。但如果预测结果是重要的,甚至是重要但弱,他们与已知的信件,甚至比他们的体重增加,如果p是略高于0.05
我的独立研究者,总是有一个切割和干燥0.05 =统计上显著的问题。我是受,当我disertation。但是我最近进行了一项试点研究,混合方法的方法和结果显示一致的主题,出现匹配与DSM V标准甚至水平被认为是严重的,和参与者的生活问题几乎模仿DSM V标准。当对治疗前后生活质量调查,有一个强烈的正相关系数r = 0.85。这意味着数据强烈相关研究的开始和结束之间的生活质量。唯一的问题,p = 0.11,这不是“统计学意义。“但我照我的方法做事。因为p = 0.05意味着95%的信心的结果,然后0.11意味着89%的信心的结果。和统计学意义的分数意味着相关的概率是随机的。如果0.05意味着有95%的可能性并不是由于我的相关性的机会,这意味着0.11意味着有89%的机会我的相关性不是仅仅是因为机会。所以…。 could all these correlations be random? Ok possibly. But likely? No and so it seems to me that the scientific community is asking that we accept chances that are extremely improbable as reasons for invalidating otherwise elucidating studies. I am saying when I publish that my study was significant at the 89% confidence level and a likely indication that the correlations give us the right picture. Say what you want, this is my study and I’ll present it how I want to. Thank you!
弗雷德——不,这不是假定值是什么意思。“既然p = 0.05意味着95%的信心的结果”。假定值的这是一个常见的误解是,和我很惊讶有人指出这不是你当你做你的论文。
假定值(在理想的情况下)的可能性是观察你的检验统计量或下一个更极端的零假设。它不代表你的结果的信心。它代表一种力量对零假设的证据。
APS定期打开特定的在线文章讨论在我们的网站上。有效的2021年2月,你必须登录APS成员发表评论。通过发布评论,你同意我们社区指导原则和显示您的个人信息,包括你的名字和联系。任何意见、发现、结论或建议在文章评论的作家和不一定反映APS的观点或文章的作者。有关更多信息,请参阅我们的社区指导原则。
请登录你的APS账户置评。