评估ChatGPT-4针对心力衰竭患者的心脏康复相关回复的准确性和可读性

本研究评估了ChatGPT-4在心衰患者心脏康复教育中的准确性和可读性，通过16个专家设计的问题，发现其准确率达81.25%，但可读性指标显示语言需简化以优化患者教育效果。

　　

摘要

背景

本研究旨在评估ChatGPT-4在回答与心力衰竭（HF）患者心脏康复（CR）相关问题时的准确性和可读性，以便评估其作为患者教育工具的潜力。

方法

研究设计了16个与心脏康复相关的问题，这些问题由两位专家（一位心脏病专家和一位物理医学与康复专家）共同制定。这些问题被提交给ChatGPT-4，其回答的准确性和可读性进行了评估。准确性采用6点李克特量表进行评估，而可读性则通过Flesch阅读难度指数（FRE）、Flesch-Kincaid分级指数（FKGL）、Coleman-Liau指数（CLI）和Gunning Fog指数（GFI）进行分析。评估者间的一致性通过类内相关系数（ICC）来衡量。

结果

ChatGPT-4的回答平均准确率为5.25±0.77（评分者为A）和5.38±0.62（评分者为B），其中81.25%的回答被评为5分或以上。可读性分析显示FRE中位数为59.5，表明可读性处于中等水平；FKGL为7.1，CLI为11.2。两位评估者之间的ICC值为0.854，表明他们之间的评估结果具有较高的一致性。

结论

ChatGPT-4为心力衰竭患者提供了准确可靠的心脏康复信息。尽管其可读性略高于理想水平，但其整体表现表明它具有作为患者教育工具的潜力。为了进一步提升其可用性，还需要在语言简洁性方面进行进一步改进。