《Methods in Psychology》:Inside the experimental causal black box: A heuristic for generating (alternative) explanations in experiments
编辑推荐:
统计关联(如相关与均值差异)在极少数例外情况下可被视为因果过程的经验表征。研究人员面临的核心挑战在于如何从观测到的统计关联推进至对生成该关联、进而对其做出因果解释的现实机制的诊断。随机对照实验常被视为评估因果主张的黄金标准,其方法融合了培根式的主动干预、密尔的
统计关联(如相关与均值差异)在极少数例外情况下可被视为因果过程的经验表征。研究人员面临的核心挑战在于如何从观测到的统计关联推进至对生成该关联、进而对其做出因果解释的现实机制的诊断。随机对照实验常被视为评估因果主张的黄金标准,其方法融合了培根式的主动干预、密尔的差异法以及费舍尔的随机化原则。然而,单一实验即便在理想条件下,也只能支持极为狭窄的因果论断,且依赖大量辅助假设的成立,实际研究中往往存在多种竞争性解释。本研究旨在发展一种方法论启发式工具——实验因果推断启发式(Heuristic for Experimental Causal Inference, HECI),以促进对实验中潜在替代因果解释的系统化识别。传统构念效度理论虽将操纵与测量的效度纳入考量,但其在支持因果假设发展与评估方面的功能存在局限。本文将构念效度理论解构为一组明确界定的因果假设,主张将效度问题从“理论标签的正确性”转向“测量与操纵工具同心理属性之间的因果关系”,从而提升实验结果的解释严谨性。在系统阐述测量与操纵的因果语言考量后,本文提出HECI作为一种概念性思维工具,为基础研究人员解读实验证据、识别替代解释提供支持。
背景:坎贝尔实验因果推断范式
心理学中实验因果推断的经典路径主要依托坎贝尔及其同事提出的框架,该框架将因果推断视为效度控制与排除(合理)替代解释的过程。坎贝尔早期区分了内部效度与外部效度,其中内部效度关注变量间协变是否反映特定形式的真实因果关系,外部效度则涉及因果效应在个体、情境、处理变量与测量变量上的可推广性。坎贝尔后期进一步提出“局部整体效度”(local molar validity)概念,强调干预作为多成分程序包的整体效应,而不必精确界定具体活性成分。真实验中,随机分配通过平衡基线时所有观测与未观测变量的期望值,控制了大部分前处理阶段对内部效度的威胁。坎贝尔因果模型(Campbell’s Causal Model, CCM)后续纳入了统计结论效度与构念效度。统计结论效度关注协变推断的质量,即条件与结果间协变关系是否存在及程度的准确性;构念效度则被定义为对研究操作进行恰当“标签化”或“命名”的能力,例如判断某结果变量应被描述为智力还是成就,或判断某操纵能否获得特定的理论解释。尽管CCM对效度威胁的系统分类仍是实验心理学的基石,但其四大效度类型均在不同程度上受到学界批评。
测量与操纵的构念效度
CCM对构念效度的拓展直接源于克罗恩巴赫与米尔的奠基性工作。构念效度理论反对当时的操作主义思潮,明确区分了假设构念与其测量工具,主张构念验证需要依托构念理论,通过检验由该理论推导出的可证伪假设来实现。这一过程通常依赖于对构念所属法则网络的阐释,通过聚合效度与区分效度证据来支撑构念解释的合理性,典型方法包括多质多法矩阵。CCM将构念效度延伸至操纵层面,即“原因与结果的构念效度”,其核心同样是对研究操作进行恰当的理论标签化,例如判断“分心程序”是否能有效代表“注意”这一构念,或“冷水暴露”操纵是否恰当反映了“不适感”或“疼痛”。针对操纵的构念效度威胁包括单操作偏差与单方法偏差,应对策略通常建议采用多种操作化方式与实施方法进行交叉验证,以获取支持构念解释的聚合与区分证据。然而,构念效度理论本身面临诸多批判:法则网络在软科学中往往难以完备;效度概念本身存在歧义,可指代测量解释的论证、工具本身的属性或工具使用的适宜性;构念概念的多重含义亦导致学术讨论中的概念混淆与使用不一致。这些问题使得构念效度在实际应用中的可靠性受到质疑,促使学者寻求替代性的效度概念框架。
效度的因果解释路径
博尔斯布姆等人提出了回归经典效度概念的路径,主张测量工具的效度取决于其是否对心理属性的变异具有因果响应性,且该属性本身必须真实存在。这一因果效度观与测量哲学中的实在论立场及结构方程建模中的反映型与形成型指标区分相契合,将验证过程从间接的构念理论检验转变为对特定因果假设的评估。进一步地,因果效度概念可被适配至实验操纵情境。与测量相比,操纵本质上是一种明确的因果活动,因此将效度问题表述为“操纵是否引起目标属性的变异”更为简洁且符合语义直觉。基于此,操纵效度可被定义为:当且仅当某程序导致目标属性Q发生变异时,该程序才可被视为对属性Q的有效操纵。这一界定要求目标属性真实存在且操纵确实对其产生因果影响。尽管因果视角简化了操纵效度的定义,但如何实证检验这一主张仍构成认识论层面的挑战,且因果视角的引入并不意味着验证证据的获取变得容易。总体而言,借鉴博尔斯布姆等人的思路,将“原因的构念效度”重构为“操纵程序是否导致其声称操纵的目标属性发生变异”的因果问题,有助于澄清实验操纵的本质。
超越效度的因果假设
多重决定测量
使用有效的测量工具与操纵是实验因果推断的必要条件,但非充分条件。心理测量工具常具有多重决定性,即测量结果同时受到目标属性与其他属性的因果影响。这一特性导致研究人员无法确信观测分数仅由目标属性引起,复合分数(如包含认知与情感维度的态度量表总分)与反应时指标均是典型例子。多重决定测量在实验因果推断中引发严重解释问题:即使发现操纵显著影响某复合指标,也无法确定该效应是通过目标属性的哪个成分实现;不同操纵可能通过改变复合指标的不同成分而产生表面上相似的组间差异;当分析层次从群体均值转向亚组或个体层面时,这种不确定性会进一步加剧,因为相同观测分数可能由不同属性的不同组合所导致。因此,若观测到操纵对指标Y的平均效应,而Y同时反映属性P与Q,则无法确定P、Q或两者均受操纵影响,也无法假定该过程在不同分析层次上保持一致。
胖手操纵
因果建模文献指出,理想的操纵应当仅改变目标变量的取值,而不影响其他变量。当操纵违反这一条件,即通过非目标路径影响结果时,即构成“胖手”(fat handed)操纵或“笨拙”(ham-fisted)操纵。严格而言,所有现实操纵均具有某种程度的胖手性,但需区分无关紧要的副作用与方法学意义上的实质性胖手效应。后者指操纵通过不经由预设原因的路径,直接或间接地影响焦点结果。安慰剂效应是胖手操纵的典型案例,社会心理学中的拒绝操纵也可能同时引发羞耻、疼痛、内疚等多种情绪,这些非目标路径可能成为解释结果的替代因果通道。胖手操纵在心理学研究中可能十分普遍,其与多重决定测量共同构成了实验结果解释的主要障碍。
实验因果推断启发式(HECI)
前述关于效度、多重决定测量与胖手操纵的因果假设可被整合为一个因果图模型,即实验因果推断启发式(HECI)。该模型描述了从操纵(A)到结果测量(D)之间所有可能存在的因果路径与实体,旨在帮助研究人员对“局部整体”实验效应进行因果解构。HECI假设实验具有内部效度,即除操纵A外不存在其他因素与结果D相关联。模型中,路径1(A→B)代表操纵效度,即操纵A成功引起目标属性B的变异;路径2(B→C)代表待检验的因果假设,即目标属性B导致假设结果C;路径3(C→D)代表测量效度,即结果测量D对属性C的变异具有因果响应性;路径6(A→V)与路径8(V→C)共同刻画了胖手操纵,即操纵A同时引起其他属性V的变异,而V又影响结果C;路径4(A→C)代表最直接的胖手效应,即操纵A直接影响结果C;路径7(W→D)与路径9(B→W)、路径10(V→W)则刻画了多重决定测量,即结果测量D还受到其他属性W的影响,而W可能由目标属性B或其他属性V引起;路径5(B→D)代表另一种测量失效,即目标属性B直接影响测量D,而非通过其假设的结果C。HECI通过可视化这些潜在路径,揭示了即使在内效度理想的实验中,观测到的操纵效应仍可能存在多种因果解释。以肥料对作物产量的农业实验与社会拒绝对孤独感的心理实验为例,对比显示心理学实验中更容易构想出具有先验合理性的替代解释路径,这凸显了软科学中胖手操纵与多重决定测量的普遍性。HECI指出,为了支持焦点假设(路径2),研究人员最需要排除的替代解释来自路径8(替代原因)与路径9(替代结果),因为它们比同时需要替代原因与替代结果的路径10更简洁。降低这些替代解释合理性的关键在于通过预研究确保操纵与测量工具仅与目标属性存在因果关联,这一策略本质上是以因果语言重构了传统的区分效度检验。
隔离因果假设
HECI作为启发式工具,可辅助研究人员评估与发展针对实验现象的因果假设。在传统假设演绎框架下,研究人员基于理论提出因果假设B→C,并推导出经验预测A→D,通过实验检验该预测。然而,由于HECI揭示的多条兼容路径,观测到A→D并不能唯一证实B→C,因为多种替代模型(包括仅含替代原因、仅含替代结果、同时含替代原因与结果,或其组合)均可导出相同的观测结果。这暴露了传统假设检验中“肯定后件”推理谬误的风险。反之,未观测到A→D也不能直接证伪B→C,因为效应可能被辅助假设失败(如操纵无效、测量失准或正负效应相互抵消)所掩盖。因此,从观测到的实验效应到因果假设B→C的真伪不存在直接的推断捷径。HECI强调,对因果假设的证实依赖于对其在因果图中位置的隔离,而实现这一隔离的核心在于深入理解实验工具(操纵与测量)的因果特性,即遵循“认识你的工具”这一原则。研究人员需同时评估操纵是否有效改变了目标属性以及是否存在胖手效应,并评估测量工具是否仅由目标属性驱动且不受其他因素影响。相较于传统的显著性检验导向的操纵核查,基于因果理解的验证策略能为实验结果的解释提供更坚实的支撑。
讨论
本文并非旨在全面批判构念效度理论,而是出于实用主义考量,主张采用因果语义替代构念标签语义来澄清实验工具与心理现实之间的关系。构念效度视角聚焦于为程序赋予理论标签的正当性,却无法排除操纵的实质性胖手效应,也难以直接阐明操纵对目标属性的因果效力。因此,即使某程序具有高构念效度,仍可能存在多条通往结果的替代因果路径。将效度问题重构为工具与属性间的因果关系,能够改变实验结果解释与效度主张评估的标准。HECI的核心启示在于:证实因果假设需要将其从替代路径中隔离出来,而这依赖于对实验工具因果机制的深入理解。未来研究可考虑引入“高质量操纵”概念,特指不仅有效改变目标属性,且仅改变该属性的操纵,并建立相应的评估方法。这一视角超越了传统操纵核查的局限,为提升实验因果推断的严谨性提供了清晰路径。