师资发展干预对能力本位医学教育中导师叙述性反馈质量的影响

《Canadian Journal of Emergency Medicine》：The impact of faculty development interventions on supervisor narrative feedback quality in competency-based medical education

　　**摘要****目的**改进医学教育中督导向住院医师提供的反馈具有挑战性。自动化评估叙述性反馈质量方法的发展，为量化针对这一目标的干预措施效果提供了机会。**方法**我们使用此前开发的一种基于学习质量评估（QuAL）评分的自然语言处理模型，对2018年7月至2024年6月期间皇家学会急诊医学专科培训项目中的每条评论质量进行评分。我们采用干预前后QuAL评分对比的方式，量化了三项教师发展干预措施（电子邮件反馈、审核与反馈研讨会、评估表修改）的有效性。**结果**研究期间共对9709条叙述性评论进行了评分。平均QuAL评分从2019年的3.2/5上升至2024年的4.5/5。以评估员加权平均衡量，所有干预措施均带来平均QuAL评分的整体提升：附有改进建议的个性化电子邮件（35.1%）、评估表模板变更（24.3%）、研讨会（19.1%）以及感谢高质量评论的个性化电子邮件（11.0%）。**结论**通过将多面教师发展方法与可扩展的成果测量相结合，我们证实了督导叙述性评论质量的提升，并量化了每项干预措施的影响。尽管各项干预措施之间可能存在互补效应，但附有改进建议的个性化电子邮件和评估表修改与最大的质量提升相关。这些结果可为其他旨在提高督导叙述性评论质量的培训项目提供参考。