建立可应用创新(Usable Innovations)的研究

《Frontiers in Health Services》:Establishing usable innovations

【字体: 大 中 小 】 时间:2026年01月16日 来源:Frontiers in Health Services 2.7

编辑推荐:

  "科学到服务鸿沟(science to service gap)"长期存在,证明仅有循证证据并不足以定义循证项目(evidence-based programs, EBPs)。创新(innovation)的开发须同时关注其内部效度(internal valid

  
"科学到服务鸿沟(science to service gap)"长期存在,证明仅有循证证据并不足以定义循证项目(evidence-based programs, EBPs)。创新(innovation)的开发须同时关注其内部效度(internal validity,"实验可解释性的最低基本条件")与外部效度(external validity,"可推广性问题"),方可实现复制与规模化推广。本文阐述了建立一项创新的要求,提出可应用创新(usable innovation)的标准,并描述用于满足这些要求的可用性测试(usability testing)流程。可用性测试是一种系统性过程,用以高效确定创新的核心成分(essential components)并开发相应的保真度测评工具(fidelity measure)。可用性测试是为创新本身确立内部效度与外部效度的基础。一旦可应用创新的核心成分被界定、测量并与结局关联,以高保真度(fidelity)实施和扩展可应用创新便能缩小科学到服务鸿沟。
《建立可应用创新(Usable Innovations)——缩小科学到服务鸿沟的实施科学路径》
一、研究背景与立题依据
"科学到服务鸿沟(science to service gap)"指大量经原始研究验证有效的循证干预(evidence-based interventions, EBIs/EBPs)未能被真实场景中的服务机构采纳、忠实执行并产生预期人群获益的现象。既往努力集中于提高结局研究的统计学严谨性以强化证据说服力,但该鸿沟依旧顽固存在。研究表明,问题不仅在于证据质量不足,更在于作为自变量(independent variable)的"创新(innovation,指基于人际互动的实践、项目或干预)"本身未被明确定义和测量——即核心成分(essential components,"创新必不可少、不可缺失的要素")未得到规范提炼与操作化,也未开发与之强相关的保真度测评(fidelity assessment)。缺乏核心成分界定便无法测量实施保真度(fidelity),进而无法判断干预是否有效施行,亦无法区分"硬核(hard core,即核心成分)"与可供情境调整的"软外围(soft periphery)"。此外,实施过程本身也是一种互动型创新。因此,研究人员指出,在开展大规模实施与推广前,须先通过后续研究(subsequent research)将原始原型创新发展为"可应用创新(usable innovation)"——即核心成清晰、可操作、可测评且与结局强相关的创新,从而奠定内部效度(internal validity,核心成分被识别、测量并与结局关联的程度)与外部效度(external validity / consequential validity,多情境下的可复制性)。
二、主要研究方法概述
研究人员采用概念分析与文献整合方法,结合已有经典循证模式(Teaching?Family Model、Multisystemic Therapy/MST、Assertive Community Treatment/ACT、Functional Family Therapy/FFT等)的开发史例,系统阐述"可用性测试(usability testing)"这一基于计划?执行?研究?处理循环(Plan?Do?Study?Act Cycle, PDSAC)的小样本迭代法(small?n research)。可用性测试以每轮约 n~5 名参与者进行多轮(通常3~5轮)原型修订与观察,逐步剔除非必要环节、锁定核心成分、编制保真度工具,直至核心成分执行保真度与预期结局呈强相关(±0.70),并通过指数级扩大用户数(1?5?25?125?625……)检验外部效度。该方法是对英国医学研究委员会(Medical Research Council, MRC)复杂干预开发指南中"迭代周期"和美国国立卫生研究院(National Institutes of Health, NIH)阶段模型StageⅠ?Ⅲ的操作化落实。
三、论文主体结果与各小节结论
(一)Establishing innovations(建立创新)
研究人员定义了关键术语:"建立(establish)"指使创新稳固存在且无庸置疑;"原始研究(original research)"勾勒创新轮廓及可能结局;"后续研究(subsequent research)"基于可用性测试确立可复制、可推广的可应用创新;"创新(innovation)"指定个体/群体间特定互动交换以令接受者获益;"核心成分(essential components)"为创新存在及复制时必具之特征,缺之则实验不可解释且无法产生预期结局。当前NIH阶段模型与MRC指南均未给出"何时终止密集开发阶段进入实践应用"的明确标准。研究人员提出,以是否满足"可应用创新四项标准"作为"move on(推进)"的显式判据。
(二)Usability testing(可用性测试)
可用性测试源自人机交互界面测评,此处被移植为识别并操作化互动型创新核心成分的循证方法。基于PDSAC逻辑:Plan(使用候选核心成分)→Do(参与者执行)→Study(是否按Plan执行——保真度;是否达预期结局)——Act(修订创新或使用者支持)。每轮约5人,经3~5轮可发现并修正逾80%的原型缺陷。随迭代推进,保真度测评渐聚焦核心成分,其与结局的相关性增强。当核心成分的使用保真度与预期结局呈强相关(±0.70)时,创新的内部效度即告确立。为建立外部效度,需在多轮中逐步扩大使用者规模以暴露于多样真实情境,确认可应用创新能在多场景中高保真复制——此即外部效度阈值。Endostatin抗癌药案例说明:药物疗效嵌入一套未明确定义的制备?储存?注射条件中,后者同样是核心成分;Teaching?Family Model首例复制失败促使研究人员回溯录像,发现原先被忽视的"教学互动(teaching interaction)"与"关系建立(relationship development)"同属核心成分,经补充定义与从业者胜任力培训后成功复制。故可用性测试可逐步扩充"有效方法库"以应对文化、地域等变异。
(三)Usable innovations(可应用创新)
引述McGrew与Bond等人要求,研究人员归纳可应用创新须同时满足四项标准:
  1. 1.
    理念、价值观与原则及受试者纳入排除标准(Philosophy, values, principles and inclusion/exclusion criteria)——为非常规情境下决策提供基准,并明确目标受益人群(如MST纳入有监禁风险的严重青少年犯、排除伴精神病性发作或孤独症者)。
  2. 2.
    已识别的核心成分描述(Description of the identified essential components)——区分不同创新及与常规实践之差异(如ACT九项核心成分;MST多项核心成分)。
  3. 3.
    核心成分的操作性定义(Operational definitions of the essential components)——规定从业者何时、何地、如何说与做,及禁止行为,将概念转为具体互动行为(innovation configurations / practice profiles)。
  4. 4.
    与期望结局强相关(≥|0.70|)的实用保真度测评(Practical fidelity assessment)——保真度测评须关联核心功能与活动,可在日常使用中重复施测。Teaching?Family Model中"教学互动"观测得分与青少年再犯率呈 r=?0.86、与满意度呈 r=0.73;FFT高保真(前20%)治疗师所治青少年再犯率8% vs 低保真(后20%)34%、对照组22%,佐证核心成分?保真度?结局因果推断。
道德(morals)、伦理(ethics)与判断力(judgement)可视需列为核心成分,通过接收者评价或观察者评定(如Teaching?Family Model中评"察觉并回应教学机会的能力",MST中由家庭评"理解问题整体关联""同意目标")纳入保真度工具。四项标准达成后,密集开发阶段结束,可进入实施与规模化研究。
(四)Usable innovations in practice(实践中可应用创新的运用)
满足四项标准后,核心成分与保真度工具成为各层级(从业者─组织─系统)推广基石。从业者层面:个体高保真使用核心成分直接决定服务对象获益,长期大样本研究显示保真度可区分持续实施者与放弃者。组织层面:保真度检验的是实施过程与行政支持是否有效——Teaching?Family Model大型机构50年间"实施商数(implementation quotient)"由1.1升至4.6(5分制)并维持;MST+ARC组织干预联合提升组织支持与保真度后青少年结局最优。系统层面:国家级/跨区域推行依赖系统性条件保障多组织高保真使用——如全球天花根除运动中各国"监测?隔离团队"经可用性测试定型,频繁测评保真度并反馈修正,印度一邦单月接触14万村庄;挪威全国行为健康证据项目系统通过数十年维持高保真与好结局。各层级保真度评估始终是第一顺位指标,确保核心成分?保真度?结局链条在服务传递层成立。
四、讨论与结论(翻译浓缩)
本文详述了建立可应用创新的流程以推展科学与服务。可用性测试是系统性确定核心成分并开发保真度测评、进而为创新确立内部效度("实验可解释性的最低基本条件")与外部效度("可推广性问题")的基础。可应用创新符合McGrew等人的创新要求:其核心成分已知、可被保真度测评度量、与有益结局强相关。作为自变量,可应用创新提供清晰可复制的结局链接;作为实施研究中的因变量,其保真度测评清晰反映创新被使用的程度与强度。高保真使用核心成分是产生预期获益的必要要求,"裁剪(tailoring)"与"适应(adaptation)"已在可用性测试过程中完成,最终留存为核心成分。确立可应用创新需转变对创新开发的认知——循证项目评级网站可指示值得进一步开发者,但正式投入实践推广前须经基于可用性测试的后续研究使之成为可应用创新。可用性测试实现了MRC迭代周期建议与NIH Stage Model Ⅰ?Ⅲ的目标,只有满足可应用创新标准才应进入Stage IV(有效性研究)与Stage V(传播与实施研究)。唯有明确且可重复之创新,配合以高保真使用为目标的实施,规模化方能实现全人群获益。借由可应用创新,"科学到服务鸿沟"可转化为"科学到服务通路(science to service pathway)"。

发表于《Frontiers in Health Services》
相关新闻
生物通微信公众号
微信
新浪微博

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号