原文作者:KatherineButton,英国巴斯大学心理学系讲师
KatherineButton说,通过机构间合作训练学生进行开放、合作研究的能力,可以帮助他们更好地应对未来的挑战。
三年前,当我准备开始在巴斯大学心理学系担任讲师时,我反思了一下我接受过的本科训练。哪些地方值得我仿效?哪些地方可以进一步完善?
当时,“可重复性危机”正全面袭来。我曾经接受的许多标准研究实践训练现在看来都是有缺陷的,包括P值操纵、‘HARKing’(先有结果再有假设)以及过度依赖统计功效不足的研究(即通过规模不足的样本得出夸大的结论)。
KatherineButton
我突然意识到,学生们最后一年的论文撰写阶段很容易成为滋生这些不良习惯的温床。项目数量多,时间有限,资源有限,样本规模小,潜在未披露的分析弹性(P值操纵)以及凡事创新至上的种种因素,恰好形成了一副研究结果不可重复的“处方”。
大部分本科论文最终成了统计研究设计到底有多少局限的一场练习——对于学生和导师而言皆是一种折磨。但是,每年还是会有少数足够幸运的学生能发表论文,成功为自己的简历镀金。我想知道我们可以从中学到什么教训。我们是否在建立这样一种文化,鼓励一些偶然性结果而非可靠的研究方法?
为了扭转这种文化,我与巴斯、布里斯托尔、卡迪夫和埃克塞特大学的同事共同创立了“GW4本科心理学联合体”(GW4UndergraduatePsychologyConsortium)。我们的初衷是将严谨的研究实践纳入本科生教育,通过采用研究方法预注册等做法,设计统计功效充足的研究,保障研究方法与研究结果报告的透明度。
问题在于如何落实我们的初衷。严谨的研究方法所需耗用的时间和资源一般超过了一个学生项目所能承载的程度。而我们的解决方法:合作。通过合作,学生可以把收集数据的力量汇聚起来,达到充分的样本规模以便进行有效的分析。
GW4本科心理学联合体已经进入第三个年头了。我们仍在不断改变,但是已经形成了一套富有成效的做法。最好的做法是,由博士生或博士后为本科生确定一个主要研究问题,同时拟定一个研究方法“骨架”,并管理该项研究的进展。在英国的暑假期间,我们把这个方法发给本科生(一般一个机构里面2-5名学生),每个学生再设计一个二级研究问题和适当的研究方法。
在本科生最后一年开学时(10月的第一周),举行首次联合体会议,学生们提出他们的二级研究问题,并决定把哪一个纳入最后的研究中。
例如,如果主要研究问题是冲动-控制训练对于减少不健康食物选择的影响,那么本科生也许会提议调查该影响是否受冲动等性格特征的调控,进而提议采取某种方法衡量该性格特征,并展开分析以检验自己的假设。这样一来,每一名学生都能贡献一些设计,同时又能保证主体项目的样本规模和研究诚信。
此外,每一名学生都可以专注于一个略有不同的研究问题,从而满足个人评估的要求。上述研究方法被公开预注册(在本例中的预注册地址是开放科学框架治疗白癜风中药方白癜风好治愈吗