大语言模型生成与住院医师改写版出院小结的多维度语言评估

《International Journal of Medical Informatics》：Multidimensional linguistic evaluation of LLM-generated and resident-rewritten discharge summaries

　　

摘要

背景

临床文档通常涉及复杂的术语和密集的信息，这给护理交接期间的通俗语言沟通带来了挑战。大语言模型（LLM）越来越多地被用于生成更易理解的医学文本，但其输出的多维语言评估仍然有限。本研究比较了GPT-5生成版本和住院医师改写版本的出院总结在生成患者友好语言方面的表现。

方法

出院总结被随机分配给培训项目中的住院医师进行改写，同时由OpenAI模型GPT-5进行改写。这些总结使用跨越词汇、语义、衔接和语篇领域的定量语言学指标评估可读性和文本可理解性。提示指令通过提示工程程序进行标准化。通过Wilcoxon符号秩检验进行配对比较，并使用Spearman相关系数检查语言学变量之间的关联。

结果

共分析了59对出院总结。LLM生成的文本表现出更高的可读性和词汇简化，更强的指代衔接性和更大的文本可预测性，并使用了更熟悉和更具意象性的词汇。相反，住院医师改写的出院总结呈现了更高的信息密度、更低的语义模糊性和更高的词汇多样性。两组之间的总体句法复杂度保持相似。相关分析表明，LLM输出呈现出更加聚类、领域隔离的关联模式，而住院医师改写的总结则表现出跨越更广泛语言领域的关联。

结论

评估的大语言模型提高了出院总结的可读性和可及性，而住院医师改写的总结保留了更高的语义特异性和信息密度。为确保面向患者的出院文件在临床上的可靠简化，人工监督和与患者的验证仍然至关重要。

章节片段

背景

有效的出院沟通对于安全的护理交接和以患者为中心的实践至关重要。电子健康档案（EHR）支持跨护理环节的临床信息交流[1]、[2]，但如果未很好地整合到临床工作流程中，也可能增加工作负荷和文本碎片化[3]。医学写作将临床事实和诊断推理组织成可分享的语言[4]。然而，其技术性话语、对准确性的承诺以及中立的文档化声音

研究设计与设置

本研究在巴西巴伊亚州萨尔瓦多的Santa Izabel医院进行，这是一所学术医疗中心。该医院提供专门的临床和外科护理，特别是在肿瘤学、心脏病学和重症监护领域。使用自动化的多维语言学指标比较了GPT-5和住院医师改写的患者友好版出院总结。

出院总结与纳入标准

出院总结从电子健康档案（EHR）中提取

研究样本与文本特征

最初共识别出519份出院总结。住院医师于2025年8月至12月完成改写任务，GPT-5改写于2025年12月进行。经过纳入评估和去标识化处理后，选取了134份总结进行改写。60份住院医师回复完整，59对住院医师改写和GPT-5生成的总结具有完整的语言数据可供分析（图1）。

在59名住院医师中，33人为男性（55.9%），26人

讨论

本研究比较了GPT-5与住院医师在将出院总结改写为患者友好语言方面的表现。主要发现是可及性与语义特异性之间存在可衡量的权衡。模型生成的总结表现出更高的可读性、更强的指代衔接性、更大的文本可预测性以及更具可及性的心理语言学特征。住院医师改写的总结表现出更高的信息密度、词汇多样性和更低的语义模糊性。

伦理批准与参与同意

本研究经Hospital Israelita Albert Einstein研究伦理委员会批准，通过Plataforma Brasil平台进行，CAAE编号为86235525.9.3001.5520。负责原始出院总结的主治医师、住院医师及提示词开发团队在参与前均提供了知情同意。

手稿准备过程中生成式AI和AI辅助技术的声明

OpenAI GPT模型工具被用于支持语言修订、手稿组织和编辑润色。作者已审阅和编辑了内容，并对最终手稿承担全部责任。GPT-5作为研究干预手段的使用在方法和附录中进行了描述。

CRediT作者贡献声明

Raphaell Pinto de Arruda Trindade：写作—审阅与编辑，写作—原稿撰写，方法论，调查，正式分析，数据管理，概念构思。Lucas Pla Cid Senra：写作—审阅与编辑，方法论，调查，数据管理。Gustavo Freitas Feitosa：写作—审阅与编辑，方法论，调查，正式分析，数据管理。Eduarda Ribeiro dos Santos：写作—审阅与编辑，写作—原稿撰写，监督，方法论，调查，

资金支持

本研究未从公共、商业或非营利部门的任何资助机构获得专门拨款。

利益冲突声明

作者声明不存在已知的可能影响本文所报告工作的竞争性经济利益或个人关系。

致谢

无。

Raphaell Pinto de Arruda Trindade | Lucas Pla Cid Senra | Gustavo Freitas Feitosa | Eduarda Ribeiro dos Santos

以色列阿尔伯特·爱因斯坦健康科学学院，巴西圣保罗