在人工耳蜗植入的背景下，评估ChatGPT回答的准确性和可重复性

《Acta Oto-Laryngologica》：Evaluating the accuracy and reproducibility of ChatGPT responses in the context of cochlear implantation

ChatGPT在人工耳蜗植入相关问题的回答中表现准确且可重复，支持其作为患者教育工具，但复杂或关键问题仍需专家审核。

　　

摘要

背景

ChatGPT在耳鼻喉科领域的应用日益增多；然而，关于人工耳蜗的相关研究仍相对不足。

目的/目标

评估ChatGPT（GPT-4o）对人工耳蜗相关问题的回答准确性和重复性，探讨其在患者教育中的潜在作用。

材料与方法

从可靠的在线资源中选取了104个问题，涵盖五个类别（基础知识、术前准备、手术过程、术后护理以及术后预期）。每个问题分别向ChatGPT-4o提出了两次。两名评审员对回答的准确性进行评分（完全正确/部分正确、具有误导性或完全错误/不相关）。重复性通过不同会话间回答的一致性来评估。如有分歧，由第三位专家进行裁决。

结果

在104个回答中，84.6%正确，5.8%部分正确，6.7%具有误导性，2.9%错误。整体重复性为88.4%，其中手术相关问题的重复性达到100%。不同问题类别在准确性（p = 0.829）和重复性（p = 0.348）方面均无显著差异。

结论与意义

ChatGPT对人工耳蜗相关问题的回答具有高度的准确性和重复性，表明其可作为有效的教育工具。不过，对于复杂或关键性话题，专家审核仍然必不可少。