管理心理学与应用心理学中心理测量元分析方法的比较评估：以期更深入地理解其准确性

《Personnel Psychology》：A Comparative Evaluation of Psychometric Meta-Analysis Methods in Management and Applied Psychology: Toward a Nuanced Understanding of Their Accuracy

本研究比较了五种心理测量元分析方法，包括显式/混合随机效应（RE）方法及固定效应（FE）方法，通过模拟数据评估其准确性和效率。结果显示RE方法在效应量估计和异质性分析上更优，其中显式/混合RE方法精确度更高，但Schmidt and Hunter方法实际差异较小，需结合具体情境选择方法。

　　

摘要

本研究比较了五种心理测量学元分析方法的准确性，这些方法包括：两种新的显式/混合随机效应（RE）方法，其RE研究权重分别基于Hedges和Vevea（1998年）以及Schmidt和Hunter（2015年）的研究；两种现有的RE方法，其研究权重采用固定效应（FE）（Raju等人，2006年；Schmidt和Hunter，2015年）；以及一种传统的FE方法（Hedges和Olkin，1985年）。在模拟数据的基础上，这些方法同时考虑了抽样误差、测量误差和范围限制的影响。我们通过一系列蒙特卡洛模拟，在多种现实条件下评估了它们的绝对和相对准确性。研究结果表明，所有RE方法在估计总体效应量方面表现良好，在一定程度上也能较好地估计效应量的异质性（真实标准差）和精确度（95%置信区间覆盖范围）。正如预期的那样，每种RE方法都优于FE方法。此外，在精确度估计方面，采用显式/混合RE方法且RE研究权重基于Schmidt和Hunter（2015年）的方法比其他两种采用FE研究权重的RE方法更为准确。总体而言，基于Schmidt和Hunter（2015年）的混合RE方法似乎比其他RE方法更准确，但实际差异较小。值得注意的是，虽然Schmidt和Hunter的方法应用广泛且总体准确，但它并非统计上最优的选择。总体而言，本研究强调了细致理解每种心理测量学元分析方法的优点和缺点的重要性。我们讨论了本研究对元分析方法及其应用的影响，同时指出了研究的局限性和未来研究的方向。