长期教师发展项目对提升多选题(MCQ)质量的效应研究:一项基于Kirkpatrick二级评估的影响评价

【字体: 时间:2025年04月16日 来源:BMC Medical Education 2.7

编辑推荐:

  编辑推荐:针对医学教育中MCQ质量低下问题,巴基斯坦国家医学科学大学团队设计为期6个月的建构主义理论框架教师发展项目(CHPE),通过三阶段干预(前测-工作坊-后测)评估1800道MCQs发现,结构化培训使平均分从13.24提升至20.24(P<0.05),证实长期项目能显著提升教师高阶认知能力评估技能,为医学教育评估体系改革提供实证依据。

  

在医学教育领域,多选题(Multiple Choice Questions, MCQ)因其高效覆盖知识点和便捷的评分特性,已成为评估认知能力的黄金标准。然而现实却充满悖论——尽管全球医学院校广泛使用MCQ,但研究表明超过60%的题目存在技术性缺陷,主要评估低阶记忆而非临床推理能力。这种状况在巴基斯坦尤为突出,即使教师参加过短期培训,仍持续产出包含语法错误、模糊题干等问题的低质量题目,最终导致"评估驱动学习"的恶性循环:劣质MCQ促使学生死记硬背而非培养问题解决能力。

为破解这一困局,巴基斯坦国家医学科学大学健康职业教育系的Rukhsana Ayub团队开展了一项开创性研究。他们发现问题的根源在于传统培训模式——孤立的工作坊缺乏理论框架,且未建立课程设计、教学策略与评估的有机联系。更关键的是,短期干预无法克服技能衰减规律。基于此,团队设计出为期6个月的证书课程(CHPE),以建构主义理论为指导,将蓝图设计(Blueprinting)作为核心枢纽,通过三阶段渐进式训练提升教师命题技能。这项发表在《BMC Medical Education》的研究首次证实,结构化长期项目能使MCQ平均质量评分提升52.9%,有效促进高阶认知能力评估。

研究采用准实验设计,纳入124名完成CHPE的教师(男75/女49),通过独创的21项校验清单评估1800道MCQs。关键技术方法包括:1)基于NBME指南开发评估工具(Cronbach's α=0.861);2)三阶段干预:前测收集620题→6小时工作坊+6个月在线课程(ALTA/CPE/EBTL/AFL)→后测分析600题;3)混合教学法:面对面研讨+ Moodle平台课程+同行评议;4)统计采用Friedman ANOVA和Wilcoxon检验,效应量达0.68。

研究结果揭示三个关键发现:

  1. 质量提升的阶段性特征
    前测(Step 1)平均分仅13.24±0.13,凸显基线水平薄弱。经过蓝图设计工作坊和四门衔接课程后,Step 2分数跃升至17.07±0.09(P<0.001)。最终考核(Step 3)更达到20.24±0.05,中位数21分,显示持续干预的累积效应。

  2. 技术缺陷的系统性改善
    题目结构分析显示,临床情境型题干占比从38%提升至72%,"以上全非"类干扰项减少81%。特别在认知层级方面,评估Bloom's分类中应用分析能力的题目增加2.3倍,印证培训成功将命题焦点从记忆转向临床决策。

  3. 跨学科培训的普适性价值
    尽管参与者来自基础/临床医学等不同领域,各组别改善幅度无显著差异(P>0.05)。这表明基于建构主义的培训框架能有效跨越学科壁垒,解决医学教育中的共性评估难题。

在讨论部分,作者强调该研究的三大突破:首先,首次验证长期项目(>6个月)在Kirkpatrick二级评估中的优越性,其效应量(0.68)远超文献报告的短期工作坊(通常0.3-0.5)。其次,创新性地将蓝图设计作为课程整合工具,使教师真正理解教学目标-教学方法-评估手段的协同关系。最后,开发出可推广的混合式培训模式,其中同行评议和72小时内反馈机制对技能巩固至关重要。

这项研究对全球医学教育产生深远启示:其一,为资源有限地区提供可复制的教师发展模板,其成本效益比优于碎片化培训。其二,证实评估能力应作为医学教师核心胜任力进行系统培养。团队建议后续研究追踪长期行为改变(Kirkpatrick三级评估),并建立跨院校MCQ质量监测网络。正如研究者所言:"优质评估如同精准的导航仪,只有持续校准教师命题技能,才能引领医学教育驶向胜任力培养的彼岸。"

相关新闻
生物通微信公众号
微信
新浪微博
  • 急聘职位
  • 高薪职位

知名企业招聘

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号