《Journal of the American Medical Directors Association》:Development and Validation of a Culturally Adapted Interactive Game-Based Digital Tool for Screening Mild Cognitive Impairment in Older Adults
编辑推荐:
本研究开发并验证了整合游戏场景与中国文化元素的数字认知评估工具IGD-CAT,用于筛查中国老年人群的轻度认知障碍(MCI)。通过与传统评估工具(蒙特利尔认知评估量表)的效度检验及随机森林模型分析,结果显示IGD-CAT在区分MCI和非MCI患者方面敏感性89.65%,特异性96.55%,AUC达0.96,表明其高效、便捷且适合初级卫生保健等场景应用。
孙瑞克|王宇|谢玉清|李慧贤|潘泽文|吴蓓|刘小雷|王艳艳
国家老年医学临床研究中心(四川大学华西医院),四川省护理重点实验室,华西医院医疗创新研究实验室,四川大学华西护理学院,中国四川省成都市
摘要
目的
本研究旨在开发并验证一种基于游戏的数字认知评估工具(IGD-CAT),该工具融合了游戏场景和中国文化元素,用于在中国筛查轻度认知障碍(MCI),并评估其同时效度和区分效度。
设计
本研究采用横断面方法对IGD-CAT进行了开发和验证。
研究环境和参与者
2023年7月至2024年2月期间,共招募了218名参与者,他们来自社区和医院环境。所有参与者首先接受了传统的认知评估,随后完成了IGD-CAT测试,并被分为认知正常组(NC)和MCI组。
方法
通过文献回顾、专家小组讨论和德尔菲调查建立了理论框架。随后在医学工程团队的合作下开发了IGD-CAT。通过将IGD-CAT的得分与蒙特利尔认知评估(MoCA)的结果进行相关性分析来评估其同时效度。还构建了一个随机森林模型来评估IGD-CAT在筛查MCI患者方面的区分效度。
结果
IGD-CAT包含14项任务,涵盖了7个认知领域:时间定向、注意力、记忆、语言、计算、视空间能力和执行功能。在196名参与者(平均年龄63.6 ± 5.81岁)中,93人被诊断为MCI,103人为认知正常。任务得分与MoCA得分呈显著正相关(r = 0.140–0.387),而完成时间则呈负相关(r = ?0.476至?0.168)。IGD-CAT总分与MoCA总分呈正相关(r = 0.529,P < .001),总完成时间也呈负相关(r = ?0.549,P < .001),表明较高的得分和更短的完成时间与更好的认知表现相关。随机森林模型的分类效果显著,敏感性为89.65%,特异性为96.55%,曲线下面积为0.96。
结论与意义
IGD-CAT能够全面评估多个认知领域,操作时间高效,且设计适合不同年龄段的人群。凭借其高敏感性、特异性和准确性,IGD-CAT非常适合在初级卫生保健机构、社区、医院和家庭环境中使用。
研究内容片段
方法
IGD-CAT的开发和验证分为两个主要阶段。第一阶段通过文献回顾、专家小组讨论和德尔菲调查建立了理论框架。随后,与软件工程师合作采用跨学科方法开发了该工具。第二阶段从社区和医院招募参与者,以评估IGD-CAT与传统认知评估工具的同时效度。
IGD-CAT的开发过程
最初的设计包含7个主要维度、20个次要维度和88个任务项(见补充材料A.3),经过专家小组的修订后,最终形成了7个主要维度、13个次要维度和59个任务项的版本(见补充材料A.4)。后续的德尔菲调查(n = 16;Cr = 0.875)显示高度共识,各维度的平均重要性得分≥4.25,变异系数大多≤0.25,肯德尔检验结果显著(P = .002;见补充表1–6)。基于这些结果,排除了6个项目。
讨论
本研究开发了一种创新的数字认知评估工具,用于评估老年人的认知功能。随后,我们评估了该工具与MoCA的同时效度,以及其在区分MCI患者与无认知障碍患者方面的区分效度。此外,我们还利用机器学习中的随机森林模型评估了该工具的准确性、敏感性和特异性。
结论与意义
本研究开发的IGD-CAT涵盖了广泛的认知评估内容,设计吸引人且完成时间短,无需专业指导即可独立或在最小协助下使用。初步的社区和医院应用验证表明,该工具在区分MCI患者与认知健康的老年人方面具有较高的敏感性、特异性和准确性,因此非常适合广泛应用。