将预注册的重复实验纳入心理学研究方法的课程
胡传鹏
(Neuroimaging Center, Johannes Gutenberg University Medical Center, 55131 Mainz, Germany)
心理学界的可重复性问题是近年来的一个热点。从2011年到2016年，国际心理学界对可重复性问题的认识大致经历了暴露问题、否认/争论、接受和应对几个阶段。2011年到2012年间集中爆发了Bem的超感知觉研究、Stapel长期学术造假和老年启动(elderly priming)重复失败等几个重大的事件。这些事件的集中爆发，将严重的重复危机暴露在心理学家的面前，成为了国际心理学界关注的热点问题。2013～2014年期间，不少期刊组织了专刊对可重复性问题进行了讨论，各种学术会议上也出现了相应的专题讨论。这一阶段中，主要讨论点在于：心理学研究中是否存在“可重复危机”？已经发现的重复失败问题是特殊现象还是心理学研究的常见现象？2015年开放科学合作组(Open Science Collobration)在《科学》杂志上发表的《对心理科学中可重复性的估计(Estimating the reproducibility of psychological science)》，发现2008年发表在《人格与社会心理学杂志(Journal of Personality and Social Psychology )》《实验心理学杂志：学习、记忆与认识(Journal of Experimental Psychology :Learning ,Memory ,and Cognition )》和《心理科学(Psychological Science )》三个杂志上的100篇文章的可重复性大约为39%，该文引起了广泛的关注。与此同时，美国心理科学协会(Association of Psychological Sciences，APS)也组织了预注册的重复报告(Registered Replication Reports, RRR)，这些规范的、大规模的重复也发现了许多重要的研究无法重复。这些重复研究使得心理学研究者不得不接受一个事实：心理学中不可重复的研究，可能不是少数，而是很常见的。2016年开始，国际同行们开始更加认真地讨论如何应对可重复危机，包括在讨论可重复性危机时的语气(tone)的问题、如何开放数据、材料等。同一时间，越来越多的研究者开始使用开放科学框架(Open Science Framework, OSF)， 越来越多的杂志开始采用透明开放的用稿政策， 包括《自然》与《科学》。
从某种程度上讲，将直接重复研究当作是“不具有创新”“没有意义”的工作，可能正是心理学研究可重复性不高的原因之一。由于直接重复验证工作的缺乏，心理学的理论与假设既不会被证实也不会被否定，变成了不死的“僵尸”理论(Ferguson & Heene, 2012)。正是如此，最近Zwaan等人(2018)在《行为与脑科学(Behavior and Brain Science )》上撰文，指出直接重复实验应该成为心理学的主流。从以上对可重复性问题的简单回顾中可以看出，可重复危机已经给国际心理学界带来了许多新的变化，其中有许多变化直接与论文发表的政策相关，包括鼓励直接重复研究。国内心理学界也出现了可喜的变化：《心理学报》开始加强对可重复性的关注，对《作者自检报告》进行了修改。
1.3.3 投放高度试验 选择“1.3.2”试验确定的诱捕器的最优摆放间距，按照诱捕器的投放高度进行优化试验，试验设3个处理高度：高于茶丛蓬面20、40、60 cm，每个处理设4次重复。各处理间距100 m以上，诱捕器设置方法同上，试验期间，统计不同处理诱捕量。试验时间为2017年9月3—24日，每周调查1次，连续调查4周。
值得注意的是，可重复性虽然是检验科学的黄金标准，但在本科生与研究生的学术训练中却极少。在当前背景，将重复实验作为培养学生一部分，可加强本科生和研究生对可重复性的理解，例如，将预注册的直接重复实验(preregistered direct replication)作为方法课的大作业进行。预注册的直接重复实验可能会带来如下好处:
首先，预注册的直接重复实验有助于学生完整地体验和学习当前国际心理学界主流的研究过程。目前，国际心理学界已经对研究各个阶段中可能存在的问题以及相应地正确做法进行了充分地讨论，也对如何进行开放透明的研究编写了非常详细的指南(如：https://osf.io/xf6ug/)。但总体而言，进行预注册的研究，对于科研新手来说仍很困难，尤其是研究假设与数据分析部分。但直接重复实验却能够克服这部分问题：直接重复实验有明确的实验假设与数据分析方案(包括统计方法、数据排除标准等)，能够相对容易进行预注册(Preregistration)、数据收集和数据分析。数据收集与分析中，学生能比较原实验与当前重复实验的差别，有助于学生理解原实验的结果与结论。此外，将直接重复实验数据进行公开，学生能够体验数据公开的细节，学习到如何公开数据。因此，通过预注册的重复实验训练，学生能够完整地经历整个研究过程(图1)，对心理学的实验建立地更加宏观和完整的印象，为今后的科研打下基础。
图1 研究过程中符合公开、透明和开放原则的研究操作(上)以及可疑研究操作(下)
注：引自胡传鹏, 王非, 过继成思, 宋梦迪, 隋洁, 彭凯平(2016)
党的十八届六中全会以来，特别是党的十九大胜利召开以后，随着全面从严治党向纵深发展的不断深化，县纪委监委承担的执纪审查调查任务也越来越重。为优质高效完成县委交办的执纪审查任务，县纪委监委干部聚焦主业主责，长期加班加点、夜以继日开展工作。由于纪委监委干部大量时间精力都花在查办案件上，专门再腾出时间精力来系统学习政治理论和业务知识相对困难，许多干部、特别是执纪审查调查科室的干部工学矛盾问题突出，需要深度研究，统筹解决。
再次，注册的直接重复实验可以在正式的期刊上发表，增强学生参与感。由于直接重复实验受到了心理学界的重视，而预注册又是保证重复实验的一个重要手段，因此预注册的重复实验已经被许多心理学期刊所接受，包括顶级杂志如《心理科学(Psychological Science )》。因此，通过预注册实验，老师可以组织学生将结果进行组合，将合格的数据写成报告，在正式期刊上发表。通常，参与数据收集过程的学生均可以作为共同作者，因此，这将有助于增强学生的科研参与感，提高学生对科研的兴趣。
其次，注册的直接重复实验，可能用来重新检验一些重要的研究假设。由于心理学研究中的效应量本来就比较小(社会心理学的效应量中值约为相关系数r =0.2左右)，因此，直接重复实验检验一些重要的研究假设是非常好的机会。假如多个学校的学生同时重复一个重要的实验，这将能够获得大量的重复数据，从而能够使用具有较强的统计检验力的实验来检验一些重要的研究假设。如果重复成功，则为原研究提供了新证据；如果重复失败，则可能否定原理论，迫使研究者反思重复失败的原因，并设计新实验来进行验证，避免了心理学中的“僵尸”理论。
《史记·殷本世》：“周武王崩，武庚与管叔、蔡叔作乱，成王命周公诛之，而立微子于宋，以续殷后焉。”《史记·宋微子世家》：“武王崩，成王少，周公旦代行政当国。管、蔡疑之，乃与武庚作乱，欲袭成王、周公。周公既承成王命诛武庚，杀管叔，放蔡叔，乃命微子开代殷后，奉其先祀，作微子之命以申之，国于宋。微子故能仁贤，乃代武庚，故殷之馀民甚戴爱之。”依《史记》，宋乃是殷商后裔所立之国，是周公旦立微子开以继殷祚，所以，人们在论及宋之姓时，自然而然地要追溯到殷商之国姓。
以上几点优势，已经体现在欧洲的合作性重复与教育项目(Collaborative Replication and Education Project, CREP)中。CREP是欧洲心理学家联合起来进行的，通过集中资源来进行重复实验以培养本科生科研能力的项目。该项目中，研究者邀请本科生从事先准备的实验名单中选择出一个进行重复。一般而言，这些实验是在高引文章中论述并且适合大学生完成的。随后，研究者可能会联系原作者，来形成重复实验的方案，并在OSF上专门创建新的项目页面，对实验方案进行注册。注册完成后，将进行数据收集工作。自2013年上线以来，已经有超过350名本科学生参与了CREP，并且有一项研究即将发表(Leighton, Legate, LePine, Anderson, & Grahe, 2018)。
对于国内的研究者而言，可以联合起来进行类似的中国CREP项目，也可以加入CREP，与国际同行一起来进行预注册的直接重复实验，加强对学生的科研能力训练。
参考文献
胡传鹏, 王非, 过继成思, 宋梦迪, 隋洁, 彭凯平 (2016). 心理学研究中的可重复性问题: 从危机到契机. 心理科学进展, 24 (9), 1504-1518.
Ferguson, C. J., & Heene, M. (2012). A vast graveyard of undead theories: publication bias and psychological science’s aversion to the null. Perspectives on Psychological Science, 7 (6), 555-561.
Leighton, D. C., Legate, N., LePine, S., Anderson, S. F., & Grahe, J. (2018). Self-Esteem, Self-Disclosure, Self-Expression, and Connection on Facebook: A Collaborative Replication Meta-Analysis. Psi Chi Journal of Psychological Research, 23 (2), 98-109.
Zwaan, R. A., Etz, A., Richard E., L., & Donnellan, M. B. (2018). Making replication mainstream. Behavial Brain Science, 41 , e120.
通讯作者: 胡传鹏, E-mail: hcp4715@hotmail.com
标签：心理学家论文; 重复实验论文; 注册论文; 可重复性论文; 心理科学论文; 课程论文; MEMORY论文; 《科学》论文; Neuroimaging Center论文; Johannes Gutenberg University Medical Center论文;