特色
孩子在他们的舒适区
使用Lookit进行在线发展研究
在成人心理学领域,在线测试加快了数据收集的速度和民主化,扩大了我们可以回答的问题的范围,并提供了一种新的“方便”抽样形式,它比依赖本科生甚至是对当地广告做出反应的志愿者更具代表性。考虑到将他们带到实验室的不成比例的困难,与儿童有关的研究将受益更多,但发展心理学接受在线测试的速度较慢。主要是因为技术障碍和我们学科的特殊要求。
在线研究可以帮助缓解许多限制发展研究范围和质量的实际障碍。如果我们能够在世界任何地方的孩子家中进行研究,我们就可以减少实验室测试中固有的抽样偏差程度,此外还可以招募患有罕见疾病的家庭,并能够观察到更多的自然互动。如果我们能够绕过招募和测试参与者的瓶颈,我们就可以更容易地衡量分级效应,并观察随着时间的推移或个体差异的变化。最重要但最不重要的是,我们可以为我们的研究提供足够的动力,这样其他研究人员就可以在我们的工作基础上进行富有成效的研究。半岛体育官方网址入口
在一开始只是一个小的副项目的项目中,我一直在研究一个名为Lookit的平台,它允许发育研究人员对婴儿和儿童进行在线研究。半岛体育官方网址入口家庭成员可以在家里、在自己的电脑上、按照自己的时间表参加活动。家长可以从各种实验室中选择研究。为了参与,他们和孩子一起在网络浏览器中完成一个简短的活动,孩子回答的网络摄像头视频将被发送回Lookit。bd手机版官方网站首页我们计划在5月份向其他研究人员开放这个平台,我欢迎研究人员考虑加入我们。半岛体育官方网址入口
Lookit平台:当前状态和功能
早在2015年,作为一名在麻省理工学院学习认知发展的博士生,我就用一个简单的Lookit原型完成了几项测试研究。这些研究证实,在线收集发展数据和依赖于代码的测量(如从收集的视频中优先观察)是可能的,与在实验室中一样可靠(Scott & Schulz, 2017)。从那时起,我得到了NSF发展与学习科学项目的第二项拨款,以扩大对Lookit的访问,我一直专注于扩展这个平台,以支持多个研究人员独立开展自己的研究,最初是与开放科学中心合作,现在是与我们自己的内部软件工程师合作。半岛体育官方网址入口
Lookit是用Django构建的,Django是一种广泛使用的基于python的web框架,提供了可靠的通用功能,比如登录系统。从研究人员界面,研究人员可以创建、编辑和尝试研究;半岛体育官方网址入口启动和停止数据采集;管理合作者的访问;确认同意;下载儿童、人口统计和会话数据和视频;并联系参与者。
研究程序本身使用实验组件库(“框架”)和框架播放器进行设置。对于典型的实验组件,有可定制的框架,如同意、说明、显示视频或故事书页面,以及调查。它还内置了对随机条件分配、平衡和条件逻辑的支持。半岛体育官方网址入口研究人员使用JavaScript对象符号(JSON)指定一个研究协议,JSON是一种标准的人类可读的文本格式,不需要编写任何代码——尽管可以选择添加自定义框架。在部署时,每个研究都被隔离在自己的docker容器中,使用代码库的快照,以防止协议最终确定后对研究功能的任何意外更改。
Lookit平台适合于一个不断增长的相关但互补空间的工具生态系统:例如,耶鲁大学的childlab.com项目开发了通过网络摄像头与儿童进行定期实时互动研究的技术。平台,如JSPsych, LabJS, PsyToolkit,可测试的,PsychStudio,和大猩猩提供的功能,建立和/或托管(一般成人)在线行为实验运行在web浏览器。bd手机版官方网站首页多产的,可测试的头脑,和亚马逊机械土耳其提供(成人)参与者招募和管理。我们在Lookit中自己的自定义实验构建器允许我们支持各种开发任务,这些任务通常比成人测试试验更复杂(例如,包括更多音频和/或视频指令,自定义动画,交互元素);然而,随着其他系统的成熟,我们期待能够集成其他选项的实验创建。
随着Lookit的积极开发,我们已经接受了有限数量的合作beta测试研究,以确保我们专注于对最终用户(包括研究人员和参与者)重要的事情。半岛体育官方网址入口我们现在有来自8个机构的10项研究处于不同的完成阶段——4项正在进行测试,3项已完成,3项在撰写本文时正在准备中。仅在过去一年,就有800多个家庭报名参加,来自美国41个州、说20种不同语言的儿童参加了活动。数据质量优秀;该平台的视频质量和总体可靠性与最初使用原型进行的研究相比都有了很大的提高。与实验室数据的额外比较,以及第一个新颖的结果,很快就会从我们的beta测试人员那里得到。
发布和愿景
我们的目标是2020年5月正式“推出”Lookit,让任何人都可以免费使用它进行自己的研究。(通过Github项目了解我们发布的最新进展:github.com/orgs/lookit/projects/)。半岛体育官方网址入口研究人员将需要与麻省理工学院签署一份一般机构协议,由麻省理工学院的律师制定,并模仿数据库协议,允许研究人员访问和贡献来自发展研究的共享视频存储库。半岛体育官方网址入口研究人员还将负责获得其所在机构的机构审查委员会(IRB)的批准。
我们的目标是提供基础设施,使广泛的研究人员能够创造性地和有效地解决他们自己的问题。半岛体育官方网址入口随着越来越多的研半岛体育官方网址入口究人员在平台上进行研究,我们希望他们通过积极参与社区来回报:尝试彼此的研究,提供建议,添加文档,并提交错误报告和功能请求,为开发提供输入。
虽然Lookit的所有代码都是开源的,并且可以公开使用,但对于研究人员来说,联合起来使用和支持某个特定的代码有很大的好处半岛体育官方网址入口实例化这种工具的。我们都受益于托管、功能开发和软件维护以及IRB和法律协调方面的规模经济。我们可以让Lookit成为一个不断更新有趣内容的地方,这将有助于招募和吸引参与者。
在线收集发展数据的独特挑战
虽然Lookit背后的基本想法很简单,但它花了近十年的时间才从一个想法变成一个平台。当然也有一些项目管理和行政方面的障碍——毕竟,我们提议让其他人利用麻省理工学院的基础设施在互联网上收集儿童的视频。但在大多数情况下,我们已经想出了一些方法来应对为整个领域创建和管理平台的挑战。以下是我们正在研究的一些解决方案:
在家收集视频
在网上和参与者家中收集视频,除了典型的实验室视频之外,还引入了一些道德和隐私方面的考虑。由于我们计划扩大规模,我们的很多工作都集中在构建负责任地处理参与者数据的保障措施上。
首先,我们必须非常确定所有家庭同意对网络摄像头录像,以及我们妥善处理那些我们不能确定的情况。与实验室不同的是,有些人可能会因为好奇而在Lookit上“点击”研究,却不知道发生了什么。在Lookit上的家庭同意通过录制口头或签名声明来参与,以确保他们能听懂书面英语,并知道他们正在被录音。为了最大限度地减少同意过程中人为错误的可能性,“同意管理器”视图允许研究人员在网络浏览器中确认同意视频。半岛体育官方网址入口bd手机版官方网站首页确认信息存储在数据库中,只有经过确认同意的回复才能查看或下载。
其次,在家里录像更有可能偶然捕捉到其他家庭成员、个人信息和未经审查的互动。在所有Lookit研究的最后,一个标准的“退出调查”组件让参与者选择他们的视频的可接受用途,包括是否可以与数据库共享。父母也有机会(很少使用)从研究中完全撤回视频。撤回的视频将自动不可用,并从我们的服务器删除。在研究结束时而不是研究开始时提供隐私选项,可以让父母根据整个研究过程中发生的情况做出共享视频的知情决定。
支持数据分析和共享工作流程,同时最大限度地减少意外泄露的可能性
我们的核心工程目标之一是使它尽可能容易地下载、分析和分享数据可复制和负责任。半岛体育官方网址入口研究人员可以下载带有研究数据的CSV文件以及自动生成的数据字典。潜在的识别信息,如孩子的出生日期或确切的参与时的年龄,技术上是可以访问的,但默认情况下,响应数据下载中会省略它。通过设置这种默认行为,我们从一开始就将敏感数据分开,“推动”研究人员计划最终的数据共享。半岛体育官方网址入口为了避免每个实验室为了常见的工作流程而重新发明轮子,Lookit还提供了经过处理的数据,可以在没有编辑的情况下发布。例如,研究人员可以下载四舍五半岛体育官方网址入口入的年龄以及他们自己研究中唯一的儿童id,以避免跨研究数据的意外组合。
共同的声誉
一个跨实验室共享的中心平台,不仅让研究人员从工程和招聘的规模经济中受益,还意味着Lookit的研究在很大程度半岛体育官方网址入口上在家庭中享有共同的声誉。Lookit研究的设计在一定程度上标准化了,以减少参与者家庭的认知负荷,进一步加强了研究之间的联系。如果另一个实验室的研究真的很有趣,工作顺利,并得到了积极的媒体关注,你也会受益。另一方面,如果另一个实验室不小心泄露了个人信息或进行了道德上有问题的研究,你也会受到影响。Lookit的共同声誉在很大程度上解释了为什么我们的使用条款保留了在发布技术和道德问题之前审查研究的权利,以及为什么我们在什么构成必须披露的“欺骗”方面比大多数irb有更保守的指导方针。
在线招聘
现存的最大障碍之一是扩大在线招聘规模。开发实验室已经在招募现场参与者方面积累了大量的专业知识,但他们在招募在线参与者方面的经验通常很少。我们已经让一些本科生尝试了有机的付费社交媒体广告;我们的主要结论是,如果没有在广告和媒体推广方面的协调一致和熟练的努力,我们不应该指望这个平台能神奇地吸引更多的父母。好的一面是,对于使用Lookit的多个研究人员来说,招聘在经验上不是零和游戏:广告一项研究对网站上的其他研究有实质性的好处。半岛体育官方网址入口
将你的学习转化为网络环境的技巧
注重沟通
根据我的经验,发展研究人员在将研究转移到Lookit上时面临的最大挑战是非技术性的:尽管是非交互式的设置,但半岛体育官方网址入口要与父母清晰地沟通。虽然我们擅长让幼儿直观而清晰地了解研究,但我们习惯于在社会背景下向父母解释研究的目标和说明,我们可以根据他们的线索和问题进行调整。
试图在没有互动设置的情况下覆盖这些相同的基础是困难的。然而,花时间去润色面向家长的研究概述、汇报、指导文本和/或口头指示是值得的。甚至研究设计本身也可能需要更多的标志。在实验室里可能没问题的过渡——例如,从最后一次实验测试到退出调查和汇报——在网上可能会感觉更突然。
让它变得有趣!
在网上,家长们会含蓄地将一项研究与儿童应用程序或视频游戏进行比较(相比之下,最接近实验室访问的是去看医生!)尽管期望一个开发实验像最畅销的应用程序那样吸引人是不现实的,但有时交付或刺激比任何科学需求都要枯燥,这只是出于习惯。
当研究人员半岛体育官方网址入口录制音频或视频时,他们应该问自己这些问题:在科学上是否真的需要扁平化的传播方式?在你的故事书中添加愚蠢的页面或有趣的合唱,真的会让孩子们的答案变得无效吗?有什么理由让父母不能在提出问题或提供反馈方面发挥积极作用吗?
创造性地思考家庭的价值
对于决定是否参加的家庭来说,无形的奖励可能和提供的补偿一样重要。我们都刚刚开始思考网络上的可能性,但这里有一些非金钱的“奖励”可以考虑:
- 一段研究的可爱视频。例如,我们的研究涉及密集抽样,产生了12个会议剪辑的视频“拼贴”。
- 对孩子特定行为或独特优势的洞察
- 通过平台上的学习“反馈”建立一些社会联系,即使只是你认为某个孩子的思想很迷人
- 关于与你的研究相关的常见育儿问题的个人建议或鼓励,或定制教育或育儿资源的参考资料
有兴趣加入我们?
同样,我们计划在5月份全面开放这个平台。但研究人员可以提前采取一些步骤来开展工作。半岛体育官方网址入口
我必须成为一个“技术迷”吗?
简短的回答是否定的。半岛体育官方网址入口研究人员无需编写一行代码就可以创建一个实验;他们不需要了解任何编程语言,也不需要之前在网上进行过学习。研究规范(目前)还不是拖放式的,但是需要编辑来构建一个研究的是一个简单的、人类可读的文本文档,说明以什么顺序使用什么框架。
也就是说,对于研究人员来说,阅读文档并对自己的能力保持开放的半岛体育官方网址入口心态是很重要的,比如不要假设错误消息超出了他们的能力范围。在互联网上用婴儿做实验可能就是这样创建一个技术迷。
它对我的学习有用吗?我可以收集哪些相关指标?
在研究协议方面,研究人员可以在网络浏览器中完成大部分可以半岛体育官方网址入口想象的事情。bd手机版官方网站首页其实专注于什么更容易不是还可能工作:查看度量的实时编码;精确(帧级)的录像反应时间,例如在一些预测研究中;严格控制环境(例如,精确控制房间内的照明或与屏幕的距离);让实验人员互动或特定的定制对象成为实验设计的关键。
一些研究可能不太适合这个平台,因为它有共同的声誉。例如,我们不建议让学龄前儿童接触关于气候变化的“辩论”,也不建议做一项故意让父母感到沮丧的研究。
目前,我们的测试人员正在收集或计划收集新生儿到青少年的数据。他们在自定义游戏中使用了观察测量,口头或指向反应,笑声,调查和表现。如果研半岛体育官方网址入口究人员不确定某件事是否可行,他们可以直接问我们!
人人共享的平台
在这一点上,我们只是触及了在线发展研究的可能性的表面:最初的beta测试者主要集中在实验室研究的直接改编上,以验证他们的基本协议是否有效。我特别渴望开始支持我还没有想象到的应用程序,以及那些(潜在的)研究人员,否则他们不会这么做半岛体育官方网址入口是因为缺乏资源,他们根本无法进行发展研究。
我希望你今年春天能加入我们!
以下是如何开始
步骤1:把你的法律事务处理好
如果您对使用Lookit感兴趣,第一步是要求您的机构签署Lookit访问协议。您可以在github.com/lookit/researchresources/wiki/IRB-and-legal-information上找到协议和更多信息。
我们建议马上开始学习这篇文章。应该只需要几分钟,但你的机构可能需要几个月才能归还。你只需要将表格通过电子邮件发送给你所在机构的某位可以作为“授权机构代表”的人。
步骤2:学会安排你的学习
了解lookkit的最佳方法是完成文档中包含的教程,地址是:look .readthedocs.io/ zh /develop/tutorial.html。您将学习如何访问lookkit平台和社区;获得舒适的编辑和故障排除的例子研究;从头开始建立一个现实的学习;并练习编码同意和解释下载的数据。您甚至可以学习自己添加到文档中(我知道,这很刺激!),以防您发现遗漏了什么。
参考资料及资源
斯科特,K., &舒尔茨,L.(2017)。Lookit(第一部分):一个新的发展研究在线平台。开放的头脑,1学报》第4 - 14 (1),
看维基:github.com/lookit/research-resources/wiki
Lookit文档和教程:lookit.readthedocs.io / en /开发/
查看代码库和开发计划:github.com/lookit/
评论
大家好,Kim和同事们!我们是澳大利亚悉尼西部悉尼大学的一半岛体育官方网址入口组研究人员,我们希望对6个月以下婴儿的语音抽象基本能力进行一系列研究,并进行18个月的纵向随访,以调查早期能力对早期语言发展后期方面的预测性。
我们正在通过LookIt教程和研究人员的常见问题:注册和设计,然后通过LookIt发布我们的研究。半岛体育官方网址入口我猜在进行过程中我们可能会有更多的问题,但现在我们有两个问题,希望您或您的团队能够回答:
1.您的主网站上最新的帖子是“2020年5月4日,想要更多在家和孩子一起参与科学的方法,请查看新推出的网站“儿童帮助科学”。这是否意味着其他研究人员也可以通过LookIt提交他们的研究?半岛体育官方网址入口当然,遵循您的在线研究人员的指示等!
2.LookIt是否适用于纵向研究,即同一婴儿在不同年龄的多次计划参与?我们认为是这样,但只是想确认,如果我们在我们的家庭大学服务器上进行研究并收集电子邮件,那么对通过电子邮件提醒父母进行纵向研究没有任何限制(我们认为选项C看起来最适合我们)。
感谢您在方便的时候提供任何建议/确认!
欢呼,
Cathi Best, Denis Burnham和Anne Cutler, MARCS研究所,西悉尼大学,澳大利亚
嗨Cathi !
首先,纵向研究在Lookit上很受欢迎。我们认为,将研究转移到网上的最大好处之一是后续会议的便利性!由于冠状病毒危机,我们的发布日期略有推迟-我们将很快宣布更新日期。(维基和Slack上都有最新的信息。)
ChildrenHelpingScience.com实际上是一个完全独立的项目——它是一个提供在线研究链接的网站,但不提供任何收集数据的基础设施。我们的一些测试者在那里添加了他们的Lookit研究的链接。在你自己的大学服务器上进行研究与在Lookit上进行研究是不同的方法,但任何在线研究都可以提交到ChildrenHelpingScience的索引中。
解决问题的最佳方式是通过Lookit Slack工作空间,其他研究人员也可以在那里分享他们的经验和建议。半岛体育官方网址入口使用说明在教程的开头,但如果你有任何问题,请告诉我们!
愿一切都好!
金
APS定期在我们的网站上开放某些在线文章供讨论。从2021年2月起,您必须是登录的APS成员才能发表评论。发表评论,即表示您同意我们的社区指导原则以及显示您的个人资料信息,包括您的姓名和隶属关系。文章评论中出现的任何观点、发现、结论或建议都是作者的观点,并不一定反映APS或文章作者的观点。欲了解更多信息,请参阅我们的社区指导原则.
请登入您的APS帐户进行评论。