《JOURNAL OF SENSORY STUDIES》：“From Sound to Shade”: How Emotion and Music Genre Guide Crossmodal Color Selection
编辑推荐：
本研究探讨了音乐与颜色之间的跨模态对应关系，重点关注目标情绪条件和音乐流派如何共同影响人们对颜色的选择以及感知一致性（perceived coherence），即音乐片段与所选颜色之间匹配或对应的主观强度。在一项被试内实验设计中，278名参与者评估了15个音乐
本研究探讨了音乐与颜色之间的跨模态对应关系，重点关注目标情绪条件和音乐流派如何共同影响人们对颜色的选择以及感知一致性（perceived coherence），即音乐片段与所选颜色之间匹配或对应的主观强度。在一项被试内实验设计中，278名参与者评估了15个音乐片段，这些片段涵盖了快乐（Joy）、悲伤（Sadness）和怀旧（Nostalgia）三种情绪与古典（Classical）、流行（Pop）、摇滚（Rock）、爵士（Jazz）和电子（Electronic）五种流派的交叉组合。参与者在CIELAB色彩空间中选择颜色，并对一致性和情绪强度进行评分。研究结果表明，情绪与流派之间存在稳健的交互作用，对一致性和颜色维度均有显著影响。特别是，亮度（L）成为主要的视觉线索，情绪解释了大部分方差：参与者倾向于将明亮颜色映射到快乐情绪，而将更暗、饱和度更高的颜色映射到悲伤情绪。彩度（Chroma）而非色相（Hue）始终追踪情绪意义，而色相则表现出更强的流派依赖性。情绪强度在实验条件之外增加的预测价值极小，尽管鉴于各条件下强度评分的变异性相对有限，这一效应应谨慎解读；本分析未直接将效价和唤醒度与分类情绪变量进行比较。中介检验表明，L在情绪与一致性的关系中起到抑制变量（suppressor）的作用。这些发现与音乐-颜色对应的情绪相关解释相一致，同时证明了音乐流派约束了多感觉映射，而亮度作为一个知觉维度，在采样的刺激中始终与目标情绪条件共变。由于参与者报告的体验并未显示中介这些效应，因此不应将这些结果视为更强因果或机制意义上情绪中介的直接检验。与任何单示例每单元格设计一样，这些效应最直接地可解释于所采样刺激的层面；大量且统计功效充足的参与者样本增强了对这些特定片段所报告模式的信心，而将设计扩展至每单元格多个示例则是建立跨更广泛情绪和流派类别普适性的自然下一步。
研究背景与问题
人类对音乐的体验本质上是多感官的，不仅涉及听觉系统，还能唤起生动的视觉、触觉和情绪反应。其中，跨模态对应（crossmodal correspondences）现象尤为引人注目，指不同感官特征、属性或维度之间的系统性关联，例如听觉与视觉特征之间的联系。该领域的理论根基可追溯至Marks提出的“感官统一性”（unity of the senses）假说，认为知觉系统共享一个共同的情感维度空间，从而实现跨感官的系统性映射。近年来，研究焦点已从低层次的跨模态对应转向情绪相关的对应解释，该假说植根于Russell的情绪环状模型（circumplex model of affect），主张音乐与颜色的关联主要由音乐所唤起的情绪驱动，而非直接的感官相似性。
然而，现有研究方法论存在局限：许多研究依赖分类式的情绪和颜色测量，音乐流派往往局限于古典乐，这限制了发现的普适性并掩盖了跨模态关联的复杂性。此外，个体差异如音乐训练、文化背景和人格特质的作用仍未得到充分探索。将刺激限制在单一音乐流派可能混淆流派水平与目标情绪条件的变异，从而削弱内部和外部效度。为填补这些空白，研究人员采用多维实验设计，使用跨越三种目标情绪（快乐、悲伤、怀旧）与五种音乐流派（古典、流行、摇滚、爵士、电子）的多样化音乐刺激集，结合映射到CIELAB空间的标准化颜色选择网格，对情绪相关对应假说及其边界条件进行了全面检验。
研究设计与方法
研究采用完全被试内设计，包含两个被试内因素：目标情绪（三个水平：快乐、悲伤、怀旧）和音乐流派（五个水平：古典、流行、摇滚、爵士、电子），每位参与者完成15个实验试次。所有音乐刺激均选自情绪-音乐映射图谱（Emotion-to-Music Mapping Atlas, EMMA），这是一个通过日内瓦音乐情绪量表（Geneva Emotional Music Scales, GEMS）验证的系统化情绪唤起音乐片段数据库。颜色选择使用标准化的8列×10行颜色网格，包含80个色块，响应随后转换为CIELAB坐标（L, a, b），并由此导出彩度（Chroma, C=√(a2+b2)）和色相角（Hue Angle, h°=arctan(b/a)）。主要统计分析采用完全交叉的被试内重复测量方差分析（ANOVA），分别应用于音乐-颜色一致性、情绪强度和每个CIELAB维度。事后成对比较采用Holm序贯校正。使用Mundlak组内-组间分解回归评估情绪强度在实验条件之外的贡献。采用自助法（2000次迭代）中介分析检验颜色亮度（L*）是否中介了目标情绪条件与一致性之间的关系。所有分析在R语言环境中完成。
研究结果
音乐-颜色一致性：情绪与流派的影响。重复测量ANOVA显示，目标情绪和音乐流派的主效应均显著，且两者被一个显著的交互作用所限定。快乐相关片段引发最高的一致性评分，显著高于怀旧和悲伤。特别值得注意的是，古典-悲伤条件产生了整个设计中最高的均值，而电子-悲伤条件则产生最低值，两者之间0.84分的差距构成了情绪×流派交互作用最突出的表现。
情绪强度：情绪与流派的影响。情绪强度的分析揭示了与一致性大致平行的结构。快乐相关片段引发的强度显著高于悲伤和怀旧。在流派层面，流行和电子音乐片段总体上引发了最高的强度，而古典-怀旧条件产生的强度最低。值得注意的是，悲伤条件产生了最低的整体强度，却产生了第二高的整体一致性，这种分离值得进一步关注。
CIELAB色彩空间中的颜色选择。颜色领域中最引人注目的发现涉及亮度。ANOVA显示目标情绪对L存在非常大的主效应，这是跨模态对应文献中报告的最大效应量之一。快乐与最亮的颜色选择相关联，其次是怀旧，而悲伤则产生明显更暗的选择。情绪×流派对L的交互作用显著，表明亮度梯度并非在所有流派中恒定不变。在色度维度上，红绿轴显示出显著的情绪效应，悲伤相关的选择向红色正极偏移。彩度也随情绪显著变化，悲伤最高而快乐最低，表明悲伤音乐促使人们选择暗但色度强烈的颜色。相比之下，色相角的情绪效应较小且变异性大，流派而非情绪是色相的更强预测因子。
情绪强度的增量贡献。组内-组间分解回归显示，当情绪类别和流派作为额外预测因子纳入完整模型后，组内强度效应降至不显著，正式模型比较确认增加强度仅边际性地改善了拟合。这表明跨模态音乐-颜色映射主要由语义-情感分类驱动，而非由情绪反应的感受强度驱动。
中介分析。以快乐与悲伤的对比为自变量，中介分析显示，总效应为负且显著，悲伤音乐片段引发较低的整体一致性。控制L后，情绪对一致性的直接效应变得更强，而通过L的间接效应基于自助法置信区间达到统计显著。中介比例为负，表明存在抑制效应而非传统中介：当L*被统计控制时，情绪对一致性的直接效应绝对值变大，这意味着悲伤片段引发的较暗颜色选择携带了一个微小的竞争性正向影响，部分抵消了情绪驱动的降低。
讨论与结论
研究核心发现可概括为：（1）情绪特征和音乐流派共同且交互地决定了音乐-颜色感知一致性的强度以及所选颜色在CIELAB空间中的属性；（2）亮度是主导的跨模态维度，反映了跨模态对应文献中最大的目标情绪效应量之一；（3）悲伤音乐矛盾地同时引发高色度饱和度和低亮度，指向暗但鲜艳的颜色关联；（4）情绪唤醒幅度在分类信息之外对一致性的贡献可忽略不计；（5）颜色亮度在情绪-一致性路径中充当抑制变量而非中介变量。这些发现实质性地扩展了情绪相关对应假说，同时强调了流派施加的边界条件和颜色表征的多变量结构。
研究结论部分指出：本研究证明音乐-颜色跨模态对应关系受到目标情绪条件的稳健驱动，但受到音乐流派的实质性调节，并且亮度作为一个知觉维度，在所采样的刺激中比色相或饱和度更一致地与情绪意义相对应。值得注意的是，这些发现涉及在不同刺激复杂度水平上运作的跨模态对应，将复杂动态的听觉刺激映射到相对简单的视觉特征上，这与现有文献中通常在可比复杂度水平内考察对应关系形成对比，暗示了跨模态映射比先前认识到的更广泛的范围。
