小技巧|如何对你的研究进行预先备案(pre-register)?
点击蓝字,轻松关注
预注册报告的流程
注1:本文意在提供一个简单快速的预注册(也叫预先备案,Pre-register)的指导,关于预先注册的优点,以及大家对预先注册存在的担忧,以后再说。
注2: 封面图片来源:http://www.pnas.org/content/early/2018/03/08/1708274114
预先注册是什么?简单来说,就是在你的实验开始之前把你的研究计划登记在册,坦诚地说明你的计划。这样可以避免很多可能导致研究报告中假阳性增加的操作,比如HARKing (Hypothesizing After the Results are Known),也可能让阴性结果更容易得到发表。(关于这些问题,可以参考心理学的七宗罪 1:偏见(Bias): https://zhuanlan.zhihu.com/p/30047716)。
最近一些学术期刊在推行Registered Reports,就是向杂志提供你的研究计划,杂志方进行第一次审稿(有评审意见),然后如果杂志方表示认可你的计划,接受你的方案,会在原则上接受你的研究(in-principle acceptance)。然后你再收集数据,分析,写文章,最后再提交,杂志再来第二次审稿(见上图)。具体见(https://cos.io/rr/)。
国内的同行可能觉得预注册跟自己没有太大的关系,但是,最近《心理学报》开始推荐这种做法了:
4 以治疗疾病为目的临床实验,建议在收集数据前预先备案(pre-register)。也鼓励其他实验研究预先备案。备案要求写出所有的研究假设及其支持,以及实验/干预的详细过程和步骤。本期刊的预先备案网站 https://osf.io/。如果您的研究有预先备案,会显著增加被录用的机会。如果您的研究有预先备案,请写出登记号。预先备案的重要性可参考https://osf.io/5awp4/。
怎么预先备案?
首先,选择一个合适的平台。目前,据我所知,有两个比较受到认可的平台:OSF (osf.io) v. AsPredicted (https://aspredicted.org/)。AsPredicted是为了让预先备案更加简化、方便,是不少人的选择。但是现在OSF中提供了多种方式,所以总体来说,我更推荐OSF。以下说在OSF上如何注册。
第二,到OSF注册。在国内注册可能需要注意一点点,见我们之前的文章:开放工具 | 如何在国内注册OSF。
第三,在OSF的页面,创建一个新的Project:
这个Project里有不少信息,只填写标题即可创建:
创建完了之后,打开这个Project的页面后,会发现这个Project里有许多选项和相应的功能,这个是OSF提供给研究者进行数据保存以及合作等的功能。对于预注册来说,很简单,点击Registrations:
然后,开始一个新的注册:
然后会发现,有许多种不同的注册方式:
点击每个注册方式后,都有相应的说明,大家可以根据自己的需要进行注册。但总体而言,注册的内容都会包括一些最关键的内容:研究问题及假设、样本量选取及其原因、停止收集数据的具体标准、排除数据的具体标准、研究中所测量的变量、统计分析的方法等。
值得说的是第一个:Prereg Challenge。这是目前Center for Open Science的有奖挑战!如果以这种方式注册之后,会有专家审你的研究设计,并且可能会提出反馈。反馈之后如果有问题,修改实验设计,再提交。没有问题之后,可以开始收集数据。如果最后文章发表到他们认可的杂志上,则可以得到1000美元的奖励。
但是,参加这个挑战需要你有一个中国大陆之外的地址,至于为什么,可以仔细阅读网页上的标注(当然,你只需要一个大陆之外的地址,就可以绕过这个问题)。
AsPredicted Preregisteration,就是跟AsPredicted网站上一样的方式,只问一些关键的问题,适合于急着要去收集数据的情况。
如果是重复实验的话,那就需要选择后面的方式了,Replication Recipe。这个是APS(Association for Psychological Science)认可的方式。
以下为AsPredicted Preregistration的截图:
最后,填写好了之后,会有一个选择:是现在就立刻公开你预注册的研究设计,还是等一段时间再公开(Enter registration embargo)?这个就看你自己的选择了。但记住:注册的目的,最终还是为了公开。
希望对大家有帮助!
往期文章
统计知识 | 使用SPSS、R和JASP计算效应量的置信区间