思维之窗：从神经生理学到驾驶舱的多模态测量

《Current Research in Behavioral Sciences》：Windows into the Mind: From Neurophysiological to Multimodal Measurements in the Cockpit

　　

现代飞机中日益增加的自动化旨在减轻飞行员的身体和认知负荷，从而减少人为错误。借助新技术，可能设计出根据情境和飞行员需求提供定制支持的自适应辅助系统。然而，要做到这一点，系统需要关于飞行员状态和情境的信息。神经生理测量，如脑电图（EEG）和功能性近红外光谱（fNIRS），似乎是实现自适应自动化的有力工具，通过监测飞行员的认知状态。这些测量需要可靠且有效，以获得可解释且稳健的结果。然而，研究人员的研究表明，这可能并不像看起来那么简单。在本文中，研究人员简要概述了研究的方法论方法和结果，识别了关于神经生理评估有效性和可靠性的问题与研究空白，并讨论了可能的缓解措施，以使这些测量成为研究人员所期望的稳健且可靠的信息来源。

**论文解读：从神经生理到多模态测量的飞行员认知状态监测——基于效度与混淆控制的系统研究**

**1. 研究背景与问题提出**

航空自动化水平的持续提升（如自动驾驶、减少机组人员）旨在降低飞行员的操作负荷，但同时也带来了新的挑战：传统静态任务分配（Fitts列表）已无法适应动态情境，而自适应自动化（adaptive automation）虽能根据预先定义的情境因素调整任务，但缺乏对飞行员实时认知状态的直接感知。随着单飞行员操作（Single Pilot Operations, SPO）和缩减机组操作（Reduced Crew Operations）概念的推进，飞行员的认知状态监测成为保障飞行安全的关键。然而，现有自报告或行为数据（如驾驶偏离）在高度自动化驾驶舱中局限性明显：飞行中手动输入极少，且行为数据无法区分医学紧急事件、惊吓、空间定向障碍、注意力缺失或高任务负荷等不同原因导致的认知变化。因此，学界转向神经生理测量，如脑电图（EEG）和功能性近红外光谱（fNIRS），以获取连续、客观的认知状态信息。但关键问题在于：这些测量能否在真实任务环境中提供足够精确、可靠且具有区分度的信息？《Current Research in Behavioral Sciences》发表的这项研究，正是针对神经生理测量在飞行员心理负荷（mental workload）评估中的效度（validity）与可靠性（reliability）问题，通过系统实验设计，揭示了单一或联合神经生理测量在面对混淆因素（confounds）时的局限性，并提出多模态融合（multimodal measurements）的解决路径。

**2. 关键技术方法**

研究人员采用以下关键方法：①同步采集EEG与fNIRS数据，使用兼容设备并确保电极与光极覆盖相同脑区（额叶与顶叶），以评估收敛效度（convergent validity）；②通过改编的n-back任务（n-back task）在飞行情境中诱导四个难度等级的心理负荷，并严格控制任务时长（约45分钟）以避免心理疲劳（mental fatigue）混淆，同时收集自报告心理负荷（NASA-TLX）和任务绩效以验证操纵成功性；③独立设计心理疲劳实验（90分钟恒定中等难度任务），保持心理负荷恒定，通过自报告疲劳量表（F-ISA）和睡眠量表（KSS）验证疲劳诱导效果；④对比分析EEG频段（额叶θ_{4-8 Hz}、顶叶α_{8-13 Hz}和β_{13-30 Hz}）与fNIRS血氧参数（氧合血红蛋白HbO、脱氧血红蛋白HbR）及常用指标（任务负荷指数TLI、参与度指数EI）在两种实验中的变化模式。实验样本来自德国航空航天中心（DLR）招募的35名参与者（第一项实验），第二项实验采用相似设计，但未重复提及具体样本量（原文仅引用具体出版物）。

**3. 研究结果**

**3.1. 收敛效度：EEG与fNIRS的联合测量**
研究发现，同步EEG与fNIRS能提高心理负荷水平区分能力（四个难度等级均可区分），优于单一测量。但额叶fNIRS信号（如前额叶皮质血氧增加）与EEG额叶θ功率增加均对心理负荷敏感，却同样对心理疲劳敏感（即缺乏特异性）；顶叶EEGα功率则对心理负荷变化不敏感。这表明，即使联合两种神经生理测量，仍无法区分心理负荷与心理疲劳。

**3.2. 内部效度：控制混淆因素后的心理负荷诱导**
通过严格控制任务时长（<45分钟）、随机化难度顺序、排除过度困倦参与者，研究人员成功诱导了三个有效区分的心理负荷水平（自报告指标显著差异，但绩效因天花板效应仅三个水平）。心理疲劳自报告仅轻微增加（从2.09到2.77），未与心理负荷产生交互作用，验证了实验控制的成功。

**3.3. 敏感性与特异性：跨概念对比测试**
在心理疲劳实验中，研究人员保持心理负荷恒定（中等难度），通过延长任务时间（90分钟）成功诱导疲劳（自报告疲劳值从1.61升至3.03，增幅为前者的两倍）。对比发现：额叶EEGθ功率和TLI在心理负荷与心理疲劳下均显著增加（即缺乏特异性）；额叶fNIRS的HbO在心理负荷下增加，而在心理疲劳下变化不一致（结论不确定）；顶叶EEGα和β功率及EI对心理负荷变化不敏感（即缺乏敏感性）。因此，额叶皮层激活（EEG和fNIRS均可捕捉）仅能反映整体认知需求增加，无法区分需求来源（心理负荷 vs. 心理疲劳）。

**4. 讨论与结论**

研究人员指出，在驾驶舱真实环境中，心理负荷很少单独出现：长航程飞行必然伴随心理疲劳、轮班导致困倦、任务切换频繁等。神经生理测量虽能捕捉飞行员额-顶网络（FPN）的激活/去激活变化，却无法解释变化原因。因此，单纯依赖神经生理测量（甚至EEG+fNIRS联合）不足以支撑高精度自适应辅助系统（如自动紧急着陆）的决策。若辅助系统仅需发出警报（如疲劳驾驶检测），则检测认知需求变化可能足够；但若需独立执行任务切换或接管控制，则需高度准确的状态归因。

为此，研究人员提出多模态测量方案：融合外周生理参数（心率、皮电等）、眼动追踪（注视行为）以及情境协变量（飞行阶段、时间、天气、系统故障信号等）。例如，额叶激活伴随心率增加和系统故障告警可能指向高心理负荷，而相同脑区激活在数小时平静飞行后更可能反映心理疲劳。通过多源数据交叉验证，可提升状态评估的置信度。研究人员强调，无论采用单一或多模态测量，都需明确其能力与局限，而非假定效度，并谨慎应用于适合的场景。

**结论翻译**：在本研究中，研究人员通过自身严格结构化的系统性实验（尽管未提供绝对答案），强调了神经生理测量在驾驶舱心理负荷评估中的潜力与局限。虽然分析脑活动变化评估心理负荷变化具有明确潜力，但存在许多混淆因素（如其他认知状态或任务特征）挑战评估效度。为克服这一挑战，添加更多数据源以提供测量背景可能是有益的。例如，额叶皮层激活伴随心率增加和飞机系统故障信息可能是心理负荷的良好指标，而相同模式的额叶激活在数小时无事飞行后可能源于心理疲劳。这种多模态方法——结合飞行员状态（通过生理或行为）和飞机状态（通过协变量）的整体评估——有助于实现自适应辅助系统根据飞行员当前需求提供定制化支持的愿景，而不过度依赖单一测量的能力。最终，研究人员需要意识到其方法（无论是单一还是多模态测量）的能力与局限，而非假设效度，并在适合且有用的地方谨慎应用。