基于专家对ChatGPT关于脑瘫回答的质量、可靠性、可理解性与可读性的评估

《Child's Nervous System》：An expert-based assessment of the quality, reliability, understandability, and readability of ChatGPT responses on cerebral palsy

　　**摘要****目的**近年来，基于人工智能的语言模型已成为快速获取健康相关信息的途径之一。本研究旨在评估ChatGPT对脑瘫（CP）儿童家庭常提问的回答的质量、可靠性、可理解性和可读性。**方法**获取了ChatGPT免费版对脑瘫儿童家庭最常提出的十个问题的回答。从质量、可靠性、可理解性和可读性四个维度对这些回答进行评估。使用DISCERN工具评估内容质量。由20位持有硕士或博士学位的物理治疗师使用5点Likert量表评估可靠性。使用印刷材料患者教育评估工具（PEMAT-P）评估可理解性和可操作性，使用Flesch-Kincaid年级水平（FKGL）分析可读性。**结果**DISCERN评分中位数为45分，反映平均的内容质量。所有问题的Likert量表评分中位数为4分（满分5分），表明回答可靠。博士学位和硕士学位专家评分者在Likert量表评分上无显著差异。PEMAT-P中位数为69.23分；然而，只有40%的回答超过了可理解性阈值，且没有回答达到可操作性阈值。所有回答的撰写水平均高于高中水平，表明对普通公众的可读性有限。**结论**ChatGPT有潜力为脑瘫儿童家庭提供准确的信息；然而，需要改进可理解性、操作性和可读性，以更好地支持家庭。为了支持决策和护理过程，还需要进一步发展。**已知：**- 尽管ChatGPT可能提供一般有用且易获取的健康相关信息，但也报告了有关生成内容准确性、可靠性和可读性的重要局限性。**新知：**- 本研究强调了ChatGPT满足脑瘫儿童家庭信息需求的潜力。虽然ChatGPT可能提供教育益处，但所提供的信息应进行批判性评估，特别是在临床决策的背景下。