增强心理学研究的可重复性工作坊:方法与实践
2019年8月16日

近年来,心理学研究的可重复性问题愈发受到国际心理学界的广泛关注,加强可重复性的方法与政策也在不断发展,开放、透明、可重复的科研实践已经成为新的趋势。了解这些新的标准对于研究者来说具有重要意义。本次工作坊将回顾心理学可重复问题的历史、现状,分析导致研究无法重复的原因。

在此基础上,我们将介绍近年来国际心理学界针对可重复性问题提出的解决方案。通过理论与实操相结合的方式, 我们将介绍如何进行重复实验、统计检验力(power)和效应量相关的方法以及一些高级统计方法(Linear Mixed Model、变量间网络分析等)如何在开源软件(R、Python)中实现。通过本次工作坊,同行可了解国际学界最新的动态并学习一些实用的技能,以期能够为大家今后的研究实施、数据分析和文章投稿起到一定帮助。

以下为本次工作坊的具体信息:

工作坊时间: 2019 10 18 9:00-17:00

招生人数:50-100人

报名费用:免费

报名方式:请点击链接,填写报名信息:https://www.wjx.top/jq/44158464.aspx

工作坊大纲

一、介绍

1: 心理学的可重复危机与方法革命:历史与现状(清华大学:王非)

二、重复实验

2: 直接重复实验:以水稻理论为例(杭州师范大学:胡超、张昊天)

3: 一次完整的注册重复研究(Registered Replication Report; RRR)——来自助教的视角(HKU:史嘉鑫)

三、统计检验力与效应量

4: 多中心合作与可重复的心理与脑科学研究(马普心理语言所:孔祥祯)

5: EEG/ERP研究中如何获得稳定可信的结果或效应(贵州师范大学:念靖晴)

6: 使用JASP和R计算效应量的置信区间(中山大学:王珺)

7: 使用JASP计算贝叶斯因子(美茵茨医学院:胡传鹏)

8: 如何正确地解读非显著的结果(上海体育大学:贾彬彬)

四、高级统计方法及其在开源软件中的实现

9: 多层线性模型 / 线性混合模型:原理与R语言实现(中科院心理所:包寒吴霜)

10: 基于R语言的多层线性模型 / 线性混合模型的shiny用户界面 (beta version)(中科院心理所:张光耀)

11: 心理测量/诊断数据的网络模型分析 (清华大学:蔡玉清)

12: Python在心理学研究中的应用:以MNE为例(HKU:夏涛)

彩蛋:现场互动的观众将获得南开大学吕小康老师赠予的《R语言统计学基础》!

主讲人简介:

  • 王非,清华大学心理学系助理教授,研究方向:社会文化神经科学
  • 史嘉鑫, 香港大学社会心理学博士生。研究兴趣:(自我)去人性化,物化,道德行为,松紧文化,颜色效应。
  • 胡超,杭州师范大学副研究员。
  • 夏涛,香港大学认知心理学博士生。研究兴趣:睡眠与情绪记忆的遗忘
  • 蔡玉清,清大学外语系。研究兴趣:心理健康的代际传递。
  • 张昊天,杭州师范大学心理科学研究院硕士研究生。研究方向与兴趣:未来时间取向与智慧思维,社会冲突解决,文化心理学,积极心理学,认知科学与哲学。
  • 孔祥祯,马普心理语言学研究所语言与遗传系博士后。研究方向:Brain Imaging Genomics, Neuroimaging, Brain Lateralization
  • 胡传鹏,德国美茵茨大学神经成像中心博士后。Ambassador of Center for Open Science;Assistant Director of Translation & Cultural Diverstiy Committee, Psychological Science Accelator
  • 包寒吴霜,中科院心理所博士生(社会心理学方向)。bruceR、drawMap、ChineseNames等R包开发者。研究方向:名字的心理效应、社会认知与社会动机。
  • 张光耀,中科院心理所博士生(基础心理学方向)。DPEEM包,HLM/GLM的Shiny用户界面开发者。研究方向:工作记忆与语义加工的脑机制,眼动的脑机制。
  • 念靖晴,贵州师范大学心理学院硕士研究生。研究方向:急性应激、工作记忆、注意偏向。
  • 贾彬彬,上海体育学院心理学院博士研究生。研究方向:运动员认知加工、时间知觉
  • 王珺,中山大学心理学系硕士研究生。研究方向:贝叶斯分析,结构方程模型

参考文献:(部分全文下载链接:http://pan.baidu.com/s/1nvjMlF7, 更多关于可重复性相关的文献,见Brent Roberts & Dan Simons收集的列表: https://osf.io/xunpj)

刘宇, 陈树铨, 樊富珉, 邸新, 范会勇, 封春亮, . . . 胡传鹏. (2018). 心理研究的元分析报告标准:       现状与建议. ChinaXiv. Retrieved from http://www.chinaxiv.org/abs/201809.00177

王珺, 宋琼雅, 许岳培, 贾彬彬, 胡传鹏. (2019). 效应量置信区间的原理及其实现. 心理技术与应用, 7(5), 284-296. doi:10.16842/j.cnki.issn2095-5588.2019.05.003

胡传鹏, 孔祥祯, Wagenmakers, E.-J., Ly, A., 彭凯平. (2018). 贝叶斯因子及其在JASP中的实现. 心理科学进展, 26(6), 951-965. doi:10.3724/SP.J.1042.2018.00951

胡传鹏, 王非, 过继成思, 宋梦迪, 隋洁, 彭凯平. (2016). 心理学研究的可重复性问题:从危机到契机. 心理科学进展, 24(9), 1504–1518. doi:10.3724/SP.J.1042.2016.01504

孔祥祯. (2019). 多中心合作与可重复的心理与脑科学研究. 心理技术与应用, 7(5), 297-304. doi:10.16842/j.cnki.issn2095-5588.2019.05.004

Bakker, M., van Dijk, A., & Wicherts, J. M. (2012). The rules of the game called psychological science. Perspectives on Psychological Science, 7, 543-554.

Bollen, K. A. (1989). Structural equations with latent variables. New York: Wiley. [Chapter 3]

Bullock, J. G., Green, D. P., & Ha, S. E. (2010). Yes, but what’s the mechanism?(don’t expect an easy answer).Journal of Personality and Social Psychology, 98, 550-558.

Camerer, C. F., Dreber, A., Forsell, E., Ho, T.-H., Huber, J., Johannesson, M., . . . Wu, H. (2016). Evaluating replicability of laboratory experiments in economics. Science. doi:10.1126/science.aaf0918

Cohen, J. (1990). Things I have learned (so far). American Psychologist, 45, 1304-1312.

Culpepper, S. A., & Aguinis, H. (2011). Using analysis of covariance (ANCOVA) with fallible covariates. Psychological Methods, 16, 166-178.

Fanelli, D. (2011). Negative results are disappearing from most disciplines and countries. Scientometrics, 90,891-904.

Gilbert, D. T., King, G., Pettigrew, S., & Wilson, T. D. (2016). Comment on “Estimating the reproducibility of psychological science.” Science, 251, 1037a.

Inzlicht, M., Gervais, W., & Berkman, E. (2015). Bias-Correction Techniques Alone Cannot Determine Whether Ego Depletion is Different from Zero: Commentary on Carter, Kofler, Forster, & McCullough, 2015. Available at SSRN: http://ssrn.com/abstract=2659409 or http:// sc i -hub . cc /10.2139/ssrn.2659409

Ioannidis, J. P. (2005). Why most published research findings are false. PLoS Med, 2, e124.

Maxwell, S. E., Lau, M. Y., & Howard, G. S. (2015). Is psychology suffering from a replication crisis? What does “failure to replicate” really mean? American Psychologist, 70, 487-498.

Meehl, P. E. (1990). Why summaries of research on psychological theories are often uninterpretable. Psychological Reports, 66, 195-244.

Nosek, B. A., Spies, J. R., & Motyl, M. (2012). Scientific utopia II. Restructuring incentives and practices to promote truth over publishability. Perspectives on Psychological Science, 7, 615-631.

Open Science Collaboration. (2015). Estimating the reproducibility of psychological science. Science, 349(6251), aac4716.

Pashler, H., & Harris, C. R. (2012). Is the replicability crisis overblown? Three arguments examined. Perspectives on Psychological Science, 7, 531-536.

Rouder, J. N., Morey, R. D., Verhagen, J., Province, J. M., & Wagenmakers, E. J. (2016). Is there a free lunch in inference? Topics in Cognitive Science, 8, 520-547.

Van Elk, M., Matzke, D., Gronau, Q. F., Guan, M., Vandekerckhove, J., & Wagenmakers, E. J. (2015). Meta-analyses are no substitute for registered replications: A skeptical perspective on religious priming. Frontiers in Psychology, 6.

Westfall, J., & Yarkoni, T. (2016). Statistically controlling for confounding constructs is harder than you think. PloS one, 11, e0152719.