《Frontiers in Digital Health》:Evaluating the accuracy, quality, and reliability of septoplasty-related content on TikTok
编辑推荐:
:
引言: TikTok已成为健康信息的主要来源,但平台上医疗内容的质量和可靠性仍令人担忧。鼻中隔成形术(septoplasty)是最常实施的耳鼻喉科手术之一,在该平台上被频繁讨论。本研究旨在评估TikTok上鼻中隔成形术相关内容的准确性、质量和可靠性。
方法
:
引言: TikTok已成为健康信息的主要来源,但平台上医疗内容的质量和可靠性仍令人担忧。鼻中隔成形术(septoplasty)是最常实施的耳鼻喉科手术之一,在该平台上被频繁讨论。本研究旨在评估TikTok上鼻中隔成形术相关内容的准确性、质量和可靠性。
方法: 研究人员于2025年4月至5月间对TikTok上可公开获取的视频进行了横断面内容分析。使用“septoplasty”“deviated septum”和“septal reconstruction”作为检索词识别视频。经筛选后,173个视频纳入分析,采用全球质量量表(GQS)和改良DISCERN(mDISCERN)进行评估;其中74个视频包含足够的健康信息,可使用数字健康信息准确性工具(ANDI)进行评估。描述性和比较性分析评估了不同创作者类型在内容质量、可靠性、准确性及互动度方面的差异。
结果: 总体而言,视频表现出中等准确性(平均ANDI 2.82)、低至中等质量(平均GQS 2.31)和低可靠性(平均mDISCERN 0.78)。大多数视频(67.1%)由非医疗保健专业人员创作。医生创作的视频在准确性、质量和可靠性评分上显著高于非医生视频(所有P ≤ .001)。互动指标在创作者类型间无显著差异(所有P > .30)。认证账户状态是与更高互动度最持续相关的因素。
结论: 鼻中隔成形术相关的TikTok内容表现出中等准确性,但总体可靠性和质量较低。由医生和其他医疗保健专业人员创作的内容在准确性、质量和可靠性方面优于非医疗保健专业人员创作的内容。这些发现支持合格的医疗保健专业人员更多地参与在社交媒体上传播循证信息,但此类内容对观众理解和医疗决策的影响尚未评估。
论文解读文章:
一、研究背景与问题提出
社交媒体已成为公众获取健康相关信息的重要渠道,深刻影响着患者对疾病和治疗方案的认知。据统计,近80%的美国卫生部门维持社交媒体账号,而TikTok作为短视频平台,用户规模从创立之初的1.33亿增长至2024年的17亿,对年轻受众尤其具有深远影响。然而,社交媒体内容的缺乏事实核查机制引发了对其准确性和可靠性的担忧。鼻中隔成形术(septoplasty)是耳鼻喉科最常实施的手术之一,用于矫正鼻中隔偏曲并缓解鼻气道阻塞。解剖学研究显示鼻中隔偏曲在人群中患病率高达75%–80%,但仅约2%出现临床显著症状。由于手术的择期性质及潜在风险——如鼻中隔穿孔、嗅觉改变、出血或感染——充分的知情同意和患者期望管理至关重要。然而,患者可能难以区分鼻中隔成形术与其他鼻部手术如鼻中隔鼻成形术(septorhinoplasty),后者具有不同的风险特征和恢复过程。在线内容的不准确或过度简化可能引发误解或不切实际的期望。此前虽有研究利用全球质量量表(GQS)和改良DISCERN(mDISCERN)评估其他专科的TikTok内容,但针对鼻中隔成形术相关内容的系统评估尚属空白。本研究旨在系统评估TikTok上鼻中隔成形术相关视频的质量、可靠性和准确性,考察创作者及内容特征差异,并识别改进循证健康信息数字传播的机会。
二、研究设计与主要技术方法
研究人员于2025年4月30日至5月3日期间,使用新建且无浏览历史的TikTok账号,以“septoplasty”“deviated septum”和“septal reconstruction”三个检索词各收集前50个视频,以规避算法个性化推荐的影响。排除重复及无关视频后,最终纳入173个视频。研究人员开发了标准化编码手册对视频内容进行分类,包括教育性、轶事性和娱乐性等目的代码。评估工具包括:全球质量量表(GQS,1–5分)评估整体质量、流畅度和教育价值;改良DISCERN(mDISCERN,0–5分)评估可靠性,涵盖清晰度、来源和平衡性五个标准;数字健康信息准确性工具(ANDI,0–4分)基于当前临床指南评估事实正确性,仅对74个包含足够实质性健康信息的视频进行评分。每位符合条件的视频由两名研究人员独立评分,评分不一致时取均值。创作者分为医疗保健专业人员(HCPs)和非医疗保健专业人员(non-HCPs),其中HCPs进一步区分医生(MD/DO)和其他专职医疗人员。统计分析使用Python 3.11.10,采用Mann–Whitney U检验比较组间差异,Pearson和Spearman相关系数评估线性及单调关系,多元线性回归模型评估互动度预测因素,Benjamini-Hochberg方法校正多重比较。研究还进行了敏感性分析,排除含美容内容的视频以验证主要发现的稳健性。
三、研究结果
3.1 视频特征与创作者人口统计学
173个视频中,74个(42.8%)有足够健康信息进行ANDI评估。准确性方面,ANDI平均分为2.82(SD 1.21),表明中等至良好准确性;质量方面,GQS平均分为2.31(SD 1.18),反映低至中等质量;可靠性方面,mDISCERN平均分为0.78(SD 0.74),表明低可靠性。互动度差异极大,中位观看次数为46,700次(IQR 11,300–226,200)。非HCPs制作了67.1%的视频,医生占17.9%,其他HCPs占15.0%。内容分析显示47.4%为教育性、42.8%为娱乐性、73.4%为轶事性。31.2%的视频涉及鼻部外观和美容提及。HCPs显著更可能创作教育性内容(73.1%其他HCPs和64.5%医生vs. 37.1%非HCPs),而非HCPs更倾向于娱乐性内容(50.0%)和轶事性内容(87.1%)。
3.2 评分者间信度
ANDI的二次加权Cohen's kappa值为0.501(中等一致性),GQS为0.973(极佳一致性),mDISCERN为0.808(极佳一致性)。
3.3 与视频质量的关联
创作者类型与准确性、质量和可靠性显著相关。HCPs在所有指标上均高于非HCPs:ANDI(3.11 vs. 2.60,P = 0.001)、GQS(2.78 vs. 2.08,P < 0.001)和mDISCERN(1.20 vs. 0.58,P < 0.001)。医生在所有工具上得分最高,ANDI(3.73 vs. 2.60)、GQS(2.98 vs. 2.08)和mDISCERN(1.29 vs. 0.58)均显著高于非HCPs(均P ≤ 0.001)。医生在ANDI上高于其他HCPs(3.73 vs. 2.15,P = 0.017),但GQS和mDISCERN差异不显著。互动度在创作者类型间无显著差异(均P > .30)。教育性视频在ANDI(2.93 vs. 2.44,P = 0.021)、GQS(3.16 vs. 1.54,P < 0.001)和mDISCERN(1.29 vs. 0.32,P < 0.001)上均显著高于非教育性内容。娱乐性和轶事性内容与较低的GQS和mDISCERN相关(均P < 0.001)。创作者性别也与质量指标显著相关,未露面的创作者GQS和mDISCERN得分最高。
3.4 内容特征与质量关联
使用热门话题与较低质量和可靠性显著相关。未使用热门话题的视频GQS(2.69 vs. 1.79)和mDISCERN(0.97 vs. 0.53)得分更高(均P < 0.001)。美容提及在医生创作者中最为频繁(41.9%),但相关关联在校正后不再显著。视觉元素在各创作者类型中普遍存在,但与质量指标无显著关联。
3.5 内容特征与互动度
提及美容方面的视频在观看次数(中位数30,000 vs. 91,000,P = 0.004)、点赞(433 vs. 1,375,P = 0.015)和分享(20 vs. 94,P = 0.001)上显著较低。认证创作者表现出显著更高的互动度,中位观看次数是非认证创作者的24倍(932,100 vs. 38,200,P < 0.001),点赞(10,300 vs. 628)和评论(191 vs. 32)也显著更高(均P < 0.001)。认证创作者视频的ANDI(3.62 vs. 2.66,P = 0.014)和GQS(3.00 vs. 2.22,P = 0.023)得分也更高。
3.6 视频互动度的预测因素
回归模型解释了互动度方差的16.8%至32.1%。作者认证是最一致的互动度关联因素,与更高观看次数(β = 1.87,P = 0.015)、点赞(β = 2.45,P = 0.007)和评论(β = 1.42,P = 0.050)显著相关。娱乐性内容预测更高的点赞数(β = 2.30,P = 0.033)。个体质量评分(ANDI、GQS、mDISCERN)和其他内容特征不是显著预测因素。模型诊断未发现严重违反假设的情况,但存在潜在影响观测值,回归结果被解释为探索性。
3.7 敏感性分析
排除54个含美容内容的视频后,剩余119个视频中,HCP创作的视频仍表现出显著更高的GQS(2.99 vs. 2.14,P < 0.001)和mDISCERN(1.33 vs. 0.59,P < 0.001)得分。在62个可进行ANDI评估的视频中,HCP视频的ANDI得分也显著更高(3.00 vs. 2.44,P = 0.003),与主要分析一致。
四、讨论与结论
研究揭示了TikTok上鼻中隔成形术相关内容质量与受众互动之间的不匹配。尽管视频准确性中等,但可靠性和质量偏低,多数视频未引用来源、未参考循证信息或未披露潜在偏见。医生创作的内容最为准确可靠,但医生仅占创作者不到五分之一,且其视频中美容主题稀释了教育焦点。互动度更强烈地与平台相关特征(认证状态和娱乐内容)相关联,而非内容质量指标。认证创作者互动度显著更高,但TikTok认证通常限于广泛认可或出现在新闻中的用户,大多数医生难以获得认证,造成有利于已有知名度创作者的结构性偏见。热门话题与较低质量和可靠性相关,表明趋势驱动的内容优先考虑可见性而非深度和可靠性。美容提及与较低互动度相关,挑战了美学框架驱动流行的假设。回归模型最多解释了约三分之一的互动度方差,表明内容质量本身并不能完全解释健康信息在数字平台上的传播和互动。临床意义在于,通过TikTok寻求鼻中隔成形术信息的患者可能遇到轶事性、娱乐导向或低可靠性的内容。医生创作的内容更准确但可见性有限,耳鼻喉科医生需要策略性地参与社交媒体。研究局限性包括单一平台限制、ANDI中等评分者间一致性、部分创作者类别样本量较小、横断面设计无法推断因果关系、未评估观众理解或医疗决策影响。未来研究应扩展检索策略、分析其他平台、纳入观众解读的定性评估,并评估改善可信手术内容可见性的干预措施。
研究结论:鼻中隔成形术相关的TikTok内容表现出可变的准确性、质量和可靠性,医疗保健专业人员创作的内容普遍获得高于非医疗保健专业人员内容的评分。然而,互动度与创作者和平台相关特征的关联强于与内容质量指标的关联。这些发现描述了用户在TikTok上搜索鼻中隔成形术相关内容时所遇到的信息环境,但并未确定观众如何解读这些信息或这些信息是否影响后续医疗决策。未来研究应直接评估观众对鼻中隔成形术相关社交媒体内容的理解、感知和行为反应。