评级上升随着时间的推移,因为他们觉得容易

这是一个说明有人给五星级评级。

经常感到更容易完成的任务我们获得经验,可以产生意想不到的后果,当任务涉及评级的一系列项目,根据发现发表在心理科学的杂志心理科学协会。的发现表明,人们倾向于属性的增加缓解评级项目本身而不是评级过程,导致评级通货膨胀。

“我们发现增加经验简化评价过程,在许多情况下,导致了上升趋势在法官的评估,”研究作者说基兰奥康纳的弗吉尼亚大学麦金太尔商学院。”这种效应出现在舞蹈表演与法官,以教师给更高的成绩他们教课的时间越长,在实验室里,我们让人们评价照片或短篇小说在连续几天。”

考虑到连续的评级是许多日常活动的一部分,该研究具有潜在的深远影响。

“这些发现表明,人们新的评估任务可能更重要比那些一直在做评估任务时间更长,”奥康纳指出。“这可以偏见决定招聘,员工评估、分级、和得分,仅仅基于评估者的经验。”

在一项研究中,奥康纳和合作者Amar Cheema调查法官的评级从电视节目与星共舞。专门研究半岛体育官方网址入口人员观察了5511名成绩由三个核心法官超过20的季节。他们发现,法官的平均得分20-season运行增加了季节的季节。额外的分析表明,评级的上升并非由于专业舞蹈伙伴的增加经验,或增加舞蹈能力,在连续的季节。

评级通货膨胀也出现在一个域与广泛的相关性:学生成绩。研究人员半岛体育官方网址入口分析了来自991个课程部分的数据在一个大型美国大学从2000年到2009年连续在春季和秋季学期。他们发现连续部分提供的相同的教师有更高的成绩随着时间的推移,这种现象无法解释为教练能力或学生成绩改善随着时间的推移,甚至日历年(即。随着时间的推移,一般分数膨胀)。

研究这种现象在控制实验环境,奥康纳和Cheema还发现学生评级的评级通货膨胀效应短篇小说。学生评估1故事两周,每天评估共有10个故事以随机的顺序。分析1572年的168名参与者的观察结果显示,参与者倾向于每个连续的速度比前一个更积极的故事。参与者还报道,评级过程变得更容易,更快,随着时间的推移,更有乐趣,但不相信它们的评级更加有利。

另一个在线学习产生了相似的结果,表明参与者认为评级过程更流畅,更容易和更快——当他们评估更多的故事,随着时间的推移,提高它们的评级。尽管如此,参与者仍没有意识到研究的目的。

通货膨胀的影响可能会很小,研究人员注意到,但它是一致的在不同的上下文和以有意义半岛体育官方网址入口的方式会影响结果。在大学成绩的研究中,例如,从B +课程平均绩点增加到一个连续——在大约20。

典型的方法确保客观性,如随机化项目的顺序,不会解决通货膨胀的效果。因此,重要的是要理解的因素可以缓解这种偏见:

“让人们意识到这种模式,可能提供一个明确的标准,他们应该坚持评估的时候,可能是路要走,”O ' connor说。

这项研究受到了资金从麦金太尔商学院。

数据和材料研究1、3、4和S1 ~ S4已经公开的通过开放科学框架。完整的开放实践为本文披露是可用的在线。这篇文章已经收到了徽章开放数据和开放的材料。


APS定期打开特定的在线文章讨论在我们的网站上。有效的2021年2月,你必须登录APS成员发表评论。通过发布评论,你同意我们社区指导原则和显示您的个人信息,包括你的名字和联系。任何意见、发现、结论或建议在文章评论的作家和不一定反映APS的观点或文章的作者。有关更多信息,请参阅我们的社区指导原则

请登录你的APS账户置评。