-
摘要: 实施科学旨在弥合知识与实践之间的鸿沟,促进循证实践的采纳与应用。在欧美国家,实施科学正快速发展,并走向成熟;在我国,该领域仍处于起步阶段。本文重点阐述了实施科学的定义、起源、国内外发展状况、研究热点、难点和机遇,以期为国内学者提供借鉴和参考。尽管实施科学在我国的发展尚处于起步阶段,但发展势头迅猛,中国学者可充分利用国内特有的研究资源和条件,以高质量实施性研究为抓手,开展创新性研究,在实施科学领域发挥全球引领作用。Abstract: Implementation science aims to close the gap between knowledge and practice by fostering the uptake and implementation of evidence-based practices. In Europe and America, implementation science is rapidly evolving and improving. In China, the field is still in its infancy. This paper focuses on the definition, origin, domestic and international development, research hotspots, challenges, and opportunities of implementation science. Although implementation science is still at an early stage in China, it has shown rapid development momentum. Chinese scholars, therefore, should leverage China's distinctive research environment to conduct high-quality and innovation implementation studies in order to excel in implementation science areas and lead globally.
-
心脏骤停是成人死亡的主要原因之一,全球每年新增病例达800万至900万,而我国每年约54万人发生心脏骤停且该数据呈逐年上升趋势[1]。心脏骤停后机体血流循环中断,数分钟内即可导致脑缺血死亡,即使进行有效的心肺复苏,短期死亡风险仍较高,而住院期间转归是临床医生及患者家属最迫切关注的问题。准确预测心脏骤停患者院内死亡风险有助于治疗方案的优化、临床决策的制订以及和谐医患关系的建立。由于心脏骤停病因的多样性和病情的复杂性、危重性,传统指标如神经元特异性烯醇化酶(neuron-specific enolase,NSE)、S100β、脑电图、颅脑影像学表现、格拉斯哥昏迷评分(Glasgow coma score,GCS)、急性生理学评分系统Ⅲ(acute physiology score Ⅲ, APSⅢ)在此类患者死亡风险的预测中难度较大[2]。
近年来,伴随计算机性能的巨大突破,医工融合现象逐渐明显,机器学习算法逐步被引入医学领域。Ngiam等[3]研究表明,对于病情严重、临床数据广泛且复杂患者的健康评估,机器学习算法的表现优于传统方法。基于其运行速度快、可高效处理大数据的优势[4],机器学习算法已广泛用于多种危重症患者的预后评估[5-9]。在心脏骤停方面,既往大量研究已证实,基于机器学习算法构建的模型在此类人群神经功能评定、疾病复发风险预测方面表现出良好的性能[10-13]。但此类模型存在“黑盒子”问题,即缺乏临床易于理解的可解释性。2020年Lundberg等[14]建立了Shapley加法解释(Shapley additive explanation, SHAP)算法用以解释任何机器学习模型的输出,其不仅可根据SHAP值正负性反映变量对模型的影响程度,并可通过SHAP值对模型中每个变量的贡献进行量化,突破了机器学习模型难以解释的“黑盒子”问题[15]。迄今为止,基于可解释机器学习模型对公共医疗卫生大数据库中心脏骤停患者住院期间死亡风险预测的相关研究仍较缺乏。本研究基于美国重症监护医学信息数据库Ⅳ(Medical Information Mart for Intensive Care database Ⅳ,MIMIC-Ⅳ)2.0中的数据,开发6种预测心脏骤停患者住院期间死亡风险的机器学习模型,经筛选后采用SHAP算法对最优模型进行解释,以期辅助心脏骤停患者临床决策的制订。
1. 资料与方法
1.1 研究对象
本研究数据来源于MIMIC-Ⅳ 2.0(https://mimic.physionet.org/)。该数据库包含2008—2019年贝斯以色列女执事医疗中心4万余例转入ICU的患者临床资料。纳入标准:(1)年龄≥18岁;(2)根据国际疾病分类(international classification of diseases, ICD)诊断为心脏骤停,疾病编码为ICD-9中的“4275”,ICD-10中的“I46”“I462”“I468”“I469”“I9712”“I97120”“I97121”“I9771”“I97710”“I97711”。排除标准:(1)多次(≥2次)住院;(2)住院时间<24 h;(3)孕妇;(4)临床资料不完整者。
本研究以心脏骤停患者住院期间转归为结局指标,并据此将患者分为死亡组和存活组。
本研究人员已完成美国国立卫生研究院开设的“保护人类研究参与者”课程,并获得MIMIC-Ⅳ2.0数据库使用权限(认证号:10264242),可下载数据进行相关研究。
1.2 方法
1.2.1 数据提取与处理
采用PostgreSQL 13提取患者转入ICU后24 h内的临床资料(若多次检测,以首次数据为准),主要包括:(1)转入ICU首日记录:如年龄、性别、生理特征及实验室检查,并计算GCS、器官功能障碍逻辑性评分(Logistic organ dysfunction score,LODS)、APSⅢ、牛津急性疾病严重程度评分(Oxford acute severity of illness score,OASIS)、序贯器官功能衰竭评价(sequential organ failure assessment,SOFA)评分、全身炎症反应综合征(systemic inflammatory response syndrome,SIRS)评分;(2) 主要的基础疾病:包括高血压、糖尿病、心力衰竭、肾衰竭等;(3) 使用的药物及特殊操作:抗感染药物、血管活性药物、抗凝药物、静脉补液量、尿量、是否机械通气/肾脏替代治疗等。(4) 其他资料:住院时间、转入ICU时间等。变量缺失值的处理:若缺失值超过40%,该变量予以删除;否则采用K近邻(K-nearest neighbor,KNN)插补法进行填补。KNN插补法可根据已知的数据点之间的距离,选择K个距离最近的点作为邻近点,然后根据邻近点的属性值进行加权平均,得到缺失值的估计值。
1.2.2 模型构建与评估
基于机器学习算法,构建6种预测心脏骤停患者院内死亡风险的模型,分别为XGBoost模型、轻量级梯度提升机(light gradient boosting machine, LGBM)模型、决策树(decision tree,DT)模型、KNN模型、Logistic回归模型、随机森林(random forest,RF)模型。模型构建时,采用网格搜索法对超参数进行优化。随机将80%的数据划分为一个训练集,同时保留剩余20%的数据作为独立的测试集。采用十折交叉验证法进行模型训练。在训练集中,将训练集数据随机划分为10个小组,其中9个小组用于模型训练,1个小组用于算法的性能评估。将训练集中所有可能的训练小组和测试小组进行折叠组合,重复该过程10次,然后在独立测试集中对得到的10个模型进行评估并计算评价指标均值。评价指标包括灵敏度、特异度、曲线下面积(area under the curve,AUC)、阳性似然比(positive likelihood ratio,PLR)、阴性似然比(negative likelihood ratio,NLR)。选取AUC居前3位的模型,绘制临床决策曲线和校准曲线,进一步评价模型的临床实用性(净收益)及准确性。
1.2.3 可解释性分析
SHAP是一种机器学习解释方法,可用于解释模型预测结果的特征重要性。其基于合作博弈理论中的Shapley值概念,采用一种加性方法计算每个特征对模型预测结果的贡献。SHAP算法可为每个特征提供一个解释值,表示该特征对于模型预测结果的影响程度,计算结果不仅可解释单个预测结果的特征重要性,还可用于解释整个数据集的特征重要性分布。同时,该方法可提供一种可视化工具,以直观展示每个特征对于每个数据点的影响程度,以及整个数据集的特征重要性分布结果。此外,SHAP支持对多输出模型和时间序列数据进行解释,并能够处理缺失值和分类特征等常见问题。因此,该方法已成为机器学习领域中重要的解释方法之一,被广泛应用于数据科学、自然语言处理、计算机视觉等领域。本研究采用Python 3.9软件构建模型并通过SHAP算法对模型进行解释,采用代码“shap.summary_ plot”导出汇总图,采用代码“shap.dependence_ plot”导出依赖图。
1.3 统计学处理
采用SPSS 25.0软件进行统计学分析。年龄、心率、呼吸频率等符合正态分布的计量资料以均数±标准差表示,组间比较采用t检验;体温、住院时间、SIRS评分等不符合正态分布的计量资料以中位数(四分位数)表示,组间比较采用Mann-Whitney U检验。性别、合并的主要基础疾病等计数资料以频数(百分数)表示,组间比较采用卡方检验。采用受试者操作特征(receiver operator characteristic, ROC)曲线计算模型预测心脏骤停患者院内死亡的AUC、灵敏度、特异度等指标。采用Python 3.9软件绘制临床决策曲线和校准曲线。以P<0.05为差异具有统计学意义。
2. 结果
2.1 一般临床资料
基于MIMIC-Ⅳ 2.0数据库共筛选1996例心脏骤停患者,排除多次转入ICU者253例、ICU住院时间<24 h者233例、临床资料不完整者45例,最终入选1465例符合纳入与排除标准的心脏骤停患者。其中存活组773例、死亡组692例。研究对象入选流程见图 1。
死亡组在年龄、心率、呼吸频率、药物治疗、合并基础疾病、多种系统评分以及住院时间等方面与存活组均有显著差异(P均<0.05),详见表 1。
表 1 1465例心脏骤停患者基线主要临床资料指标 死亡组(n=692) 存活组(n=773) P值 年龄(x±s,岁) 67.57±16.35 65.57±16.15 0.019 女性[n(%)] 286(41.3) 290(37.5) 0.136 心率(x±s,次/min) 93.66±22.36 87.44±22.19 <0.001 呼吸频率(x±s,次/min) 21.25±6.50 20.01±6.22 <0.001 体温[M(P25, P75), ℃] 36.50(35.80,36.89) 36.72(36.33,37.06) <0.001 糖尿病[n(%)] 113(16.3) 141(18.2) 0.335 心力衰竭[n(%)] 248(35.8) 345(44.6) 0.001 肾衰竭[n(%)] 395(57.1) 340(44.0) <0.001 肾脏替代治疗[n(%)] 97(14.0) 74(9.6) 0.008 使用多巴胺[n(%)] 125(18.1) 91(11.8) 0.001 使用肾上腺素[n(%)] 147(21.2) 113(14.6) 0.001 GCS评分[M(P25, P75), 分] 10(3,15) 13(9,15) <0.001 SOFA评分(x±s,分) 9.82±4.32 7.60±4.38 <0.001 LODS评分(x±s,分) 9.24±3.80 6.59±3.75 <0.001 APSⅢ评分(x±s,分) 81.63±29.39 59.34±27.76 <0.001 SIRS评分[M(P25, P75), 分] 3(3,4) 3(2,3) <0.001 住院时间[M(P25, P75), d] 5.76(2.77,11.28) 11.88(6.97,22.05) <0.001 GCS:格拉斯哥昏迷评分;SOFA: 序贯器官功能衰竭评价;LODS:器官功能障碍逻辑性评分;APSⅢ:急性生理学评分系统Ⅲ;SIRS:全身炎症反应综合征 2.2 6种预测模型的性能
经筛选,共纳入82个临床特征用于构建6种机器学习模型(每个模型均包括82个相同的临床特征),并基于测试集数据评价了模型性能。ROC曲线显示,LGBM模型预测心脏骤停患者院内死亡的AUC最高(AUC:0.834),Logistic回归模型(AUC:0.809)、XGBoost模型(AUC:0.827)次之,KNN模型、DT模型、RF模型的AUC较低(AUC均低于0.8)。详见图 2,表 2。
表 2 6种机器学习模型预测心脏骤停患者院内住院死亡风险的性能比较预测模型 AUC(95% CI) 灵敏度(95% CI, %) 特异度(95% CI, %) PLR(95% CI) NLR(95% CI) KNN模型 0.748(0.659~0.815) 71(67.4~82.2) 63(57.7~73.6) 1.93(1.662~2.215) 0.46(0.152~0.694) DT模型 0.687(0.581~0.778) 61(59.3~75.5) 74(66.9~83.9) 2.43(1.790~2.683) 0.52(0.263~0.821) RF模型 0.776(0.650~0.820) 59(55.1~72.9) 84(66.8~88.4) 3.77(2.825~4.556) 0.48(0.189~0.701) Logistic回归模型 0.809(0.661~0.853) 76(66.8~84.7) 75(52.2~81.4) 3.06(2.549~4.018) 0.32(0.125~0.682) XGBoost模型 0.827(0.679~0.875) 75(64.5~80.1) 78(63.8~82.0) 3.36(2.699~4.343) 0.32(0.119~0.668) LGBM模型 0.834(0.688~0.894) 70(63.2~81.0) 81(65.9~85.4) 3.64(2.776~4.626) 0.37(0.165~0.694) KNN、DT、RF、LGBM:同图 2;AUC:曲线下面积;PLR:阳性似然比;NLR:阴性似然比 校准度反映模型预测概率与实际概率之间的差异,该数据越小表示模型预测结果与实际结果越接近,即模型的准确性越高。校准曲线如图 3所示,通过计算,LGBM模型的校准度(0.166)较Logistic回归模型(0.178)、XGBoost模型低(0.179)。临床决策曲线可用于衡量机器学习模型在不同决策阈值下的性能表现。临床决策曲线显示,相较于Logistic回归模型、XGBoost模型,若阈值概率(判断结局变量发生的概率)处于5%~90%,则LGBM模型预测患者住院死亡风险时可增加更多的净收益,整体来看LGBM模型的临床应用价值更优(图 4)。
图 3 预测效能Top 3模型的校准曲线LGBM:同图 2图 4 预测效能Top 3模型的临床决策曲线LGBM:同图 22.3 模型可解释性分析
采用SHAP算法对LGBM模型进行可解释性分析,并输出SHAP汇总图,汇总图可视化展示了临床特征对LGBM模型输出结果的影响。其中图 5A展示了前20个临床特征SHAP值的分布情况:图中每个点表示一个特征,点的位置表示特征的SHAP值,其值代表该特征对模型输出的贡献大小。如果数值为正,则说明该特征对输出结果产生正面影响;如果数值为负,则说明该特征对输出结果产生负面影响。红色表示高值,蓝色表示低值。颜色越深表示该特征对目标变量的影响越强。条形图为按照特征的平均SHAP绝对值大小从高至低进行排列后形成,该排序表示每个特征对于整个模型的贡献程度,SHAP绝对值越大表示该特征越重要,对模型输出结果的影响越大。影响性居前10位的重要临床特征依次为GCS睁眼反应评分、碳酸氢盐水平、白细胞计数、APSⅢ评分、谷草转氨酶水平、GCS运动评分、红细胞分布宽度、体温、钙离子含量、年龄(图 5B)。
图 5 SHAP汇总图A.不同临床特征对模型输出结果影响性的SHAP值;B.各临床特征的平均SHAP绝对值
SHAP:Shapley加法解释; GCS: APSⅢ、SOFA: 同表 1基于SHAP汇总图,进一步导出影响性居前3位临床特征的SHAP依赖图,以解释临床特征对患者死亡风险的影响。SHAP依赖图的纵轴为临床特征的SHAP值,横轴为该临床特征的变化范围,若SHAP值高于零,表示患者院内死亡风险增加,见图 6。
3. 讨论
本研究基于MIMIC-Ⅳ 2.0数据库,构建了6种可预测心脏骤停患者院内死亡风险的机器学习模型,并尝试采用SHAP算法对最优模型进行可解释性分析。结果显示,LGBM模型在心脏骤停患者院内死亡风险的预测中表现[AUC: 0.834(95% CI: 0.688~0.894)]优于其他模型,且临床实用性强、预测准确性高,综合性能最佳。可解释性分析显示,对LGBM模型输出结果影响性居前10位的临床特征依次为GCS睁眼反应评分、碳酸氢盐水平、白细胞计数、APSⅢ评分、谷草转氨酶水平、GCS运动评分、红细胞分布宽度、体温、钙离子含量、年龄。
3.1 机器学习预测模型构建与评价
机器学习算法可对数据进行深度挖掘,以分析数据之间的内部联系,在大数据的处理中优势凸显。近年来,其在心脏骤停预警及心脏骤停患者神经功能预后预测方面取得了长足进步[12, 16-18]。Wu等[16]研究表明,相较于传统预测模型,基于机器学习算法生成的XGBoost模型可提高急性冠脉综合症患者住院期间发生心脏骤停风险的预测准确性。系统评价显示,机器学习模型可更准确地预测院外心脏骤停患者神经功能结局,且在某些特定情况下其预测效能优于传统统计学模型[17]。Mayampurath等[19]基于117 674例院内心脏骤停患者的临床资料比较了不同机器学习模型在此类人群神经功能预后中的预测作用,发现梯度增强算法模型的预测准确性最高。本研究以MIMIC-Ⅳ 2.0数据库中心脏骤停患者的临床资料为基础,经筛选后保留82个临床特征用于建立6种可预测心脏骤停院内死亡风险的机器学习模型,包括KNN模型、DT模型、RF模型、Logistic回归模型、XGBoost模型、LGBM模型。本研究首先通过ROC曲线评估了6种模型的区分度,即早期识别出心脏骤停院内死亡患者的能力,结果显示Logistic回归模型、XGBoost模型、LGBM模型具有较高的识别度,其中以LGBM模型的表现最佳。进一步对3种区分度较好模型的准确性及临床实用性进行评价。相较于Logistic回归模型、XGBoost模型,LGBM模型校准曲线的校准度最低,提示该模型的准确性较高;临床决策曲线示,LGBM模型的整体净收益高于Logistic回归模型、XGBoost模型,提示其临床实用性更佳;且综合灵敏度、特异度等指标后,LGBM模型的整体表现亦更好,提示其在心脏骤停患者死亡风险的预测中更具优势。LGBM模型是一种经过改进的梯度提升集成算法,主要用于分类和回归预测,其可利用决策树迭代训练以提升模型的性能[20],具有准确度高、内存消耗低、训练速度快的优势[21]。既往Rufo等[22]在糖尿病的研究中证实,LGBM模型凭借其训练速度快、预测性能高的优势在糖尿病诊断模型的构建中优势得到凸显。Ge等[23]在一项纳入12 460例脓毒症患者的研究中亦发现,基于LGBM构建的脓毒症相关脑损伤预测模型显著优于XGBoost、DT等常见模型。由此可见,LGBM模型训练速度快、支持大样本量运算的优势可满足心脏骤停患者住院期间死亡风险预测的全面性、广维度要求。综上可知,LGBM模型预测心脏骤停患者院内死亡风险的总体性能较高,可辅助临床早期识别死亡高风险个体,有助于对患者进行个体化管理和精准诊疗的实施。
3.2 模型的可解释性
机器学习预测模型作为临床疾病诊断及患者预后评估的有效工具,由于其形成过程存在的“黑盒子”问题,导致临床医生难以理解模型的原理,进而限制了其临床应用。本研究基于SHAP算法对LGBM模型预测心脏骤停患者院内死亡风险的可解释性进行分析,结果显示对模型输出结果影响性较大的3个临床特征分别为GCS睁眼反应评分、碳酸氢盐水平、白细胞计数,可作为预测此类患者住院死亡率的重要指标。GCS评分是神经系统检查的常用指标,可评估患者昏迷程度,具有简便、快捷、低成本的优势,既往研究证实入院时GCS评分超过4分可预测院外心脏骤停患者的院内生存率[24]。睁眼反应是GCS评分的重要组成部分,蔡兰兰等[25]研究发现,GCS睁眼反应评分≤2分的心脏骤停患者预后明显较≥3分患者差。本研究SHAP依赖图显示,GCS睁眼反应评分≤2分时,心脏骤停患者住院死亡风险显著升高(图 6A),进一步证实了上述观点。血液中碳酸氢盐是调节机体酸碱度的重要成分,对心脏骤停时因缺血缺氧造成的酸中毒具有中和作用。Chen等[26]研究发现,院外心脏骤停患者予以适当的碳酸氢钠干预有助于提高生存率。Celik等[27]则研究认为,过高或过低的碳酸氢盐均可增加心脏骤停患者死亡风险。本研究结果符合既往研究结论,发现碳酸氢盐处于20~40 mmol/L时,心脏骤停患者住院期间的死亡风险显著降低(图 6B),提示维持适宜的碳酸氢盐水平对改善患者预后至关重要。白细胞是反映机体炎症水平的重要因素,与多种患者住院期间死亡率密切相关。既往研究显示,根据白细胞中的中性粒细胞、淋巴细胞计算的比值与心脏骤停患者不良预后风险呈正相关[28]。本研究亦证实,白细胞>15×109/L时心脏骤停患者院内死亡风险显著升高(图 6C),进一步验证了白细胞水平在心脏骤停患者住院期间死亡风险预测中的重要性。
本研究局限性:(1)临床特征相关信息为回顾性收集,可能存在信息偏倚;(2)由于数据库限制或变量存在严重缺失(如体质量指数、脑功能表现分级评分等),可能影响了预测模型性能的提高;(3)部分患者于入院24~48 h内死亡,其入院24 h内首次检查/检验结果可能极差,针对该部分人群,预测模型可能存在一定程度的标签泄露风险;(4)研究数据来源于MIMIC-Ⅳ 2.0,模型的普适性仍有待验证。
综上,本研究基于大型公共医疗卫生数据库,建立了可预测心脏骤停患者住院期间死亡风险的可解释性机器学习模型。结果示LGBM模型在心脏骤停患者死亡风险的预测中更具优势,对该模型影响较大的3个临床特征分别为GCS睁眼反应评分、碳酸氢盐水平、白细胞计数,上述研究结果有助于增加临床医师对机器学习模型的理解度,促进了模型的临床应用,从而早期识别院内死亡高风险人群并优化治疗方案,作出符合患者最大利益的临床决策。
志谢: 感谢赵青、刘思源和万御婷协助完成论文部分数据的收集和整理工作。编者按科学研究日新月异,大量科研成果转化为实际应用,并取得证据支持,但这些循证实践往往需要漫长的时间才能在公共卫生和医疗实践中得以采用和实施。实施科学作为一门新兴交叉学科,旨在弥合知识与实践之间的鸿沟,促进循证实践的采纳与应用。为提升医疗卫生从业人员对实施科学的认识,推动我国实施科学的快速发展,《协和医学杂志》特开设“实施科学”专栏,系统介绍实施科学的概念、起源、发展、理论、模型、框架、研究范式、研究设计和研究方法等内容,深入探讨实施科学的核心要素,分析其在医疗卫生领域的应用案例,讨论其对社会发展的重要性,以期为科研工作者提供参考和启示,推动社会进步和科技创新与应用。作者贡献:徐东负责论文选题及初稿撰写;陈江芸参与初稿修订和文字整理;蔡毅媛负责结构设计、论文初稿数据与信息审核、质量控制和论文修订。利益冲突:所有作者均声明不存在利益冲突 -
表 1 2023年获得国家自然科学基金委员会资助的实施性研究项目*
Table 1 The implementation research project funded by NSFC in 2023*
序号 项目名称 项目类别 1 “医疗-口腔”协同模式下基层医疗机构开展儿童龋风险管理的实施科学研究 面上项目 2 产后抑郁症阶梯式干预策略的实施性研究:基于多重方案随机序贯试验 面上项目 3 游戏化mHealth干预模式下精神障碍出院患者自杀风险管理策略的实施科学研究——基于多阶段优化策略 面上项目 4 促进西部基层医疗卫生机构结核病项目开展的实施性研究:基于实施科学框架和多中心阶梯随机对照试验 面上项目 5 基于CFIR框架促进循证用药指南应用的实施科学研究 青年项目 6 促进社区全科医生开展居家老年轻度认知障碍患者认知训练干预:基于多阶段优化策略(MOST)的实施科学研究 青年项目 7 实施科学视角下食管癌加速康复外科证据转化障碍机制与多元靶向干预策略研究 青年项目 8 基于CFIR框架的社区老年房颤筛查实施促进模式构建与混合实施科学研究 青年项目 9 基于BCW模型的医师指南实施行为的干预策略构建与实证研究 青年项目 *仅包含项目名称中含有“实施性研究”或“实施科学”的项目 -
[1] Bauer M S, Kirchner J A. Implementation science: What is it and why should I care?[J]. Psychiatry Res, 2020, 283: 112376. DOI: 10.1016/j.psychres.2019.04.025
[2] Chalmers I, Glasziou P. Avoidable waste in the production and reporting of research evidence[J]. Lancet, 2009, 374(9683): 86-89. DOI: 10.1016/S0140-6736(09)60329-9
[3] National Institute of Health. Implementation science news, resources and funding for global health researchers[EB/OL]. [2024-02-16]. https://www.fic.nih.gov/researchtopics/pages/implementationscience.aspx.
[4] Odeny T A, Padian N, Doherty M C, et al. Definitions of implementation science in HIV/AIDS[J]. Lancet HIV, 2015, 2(5): e178-e180. DOI: 10.1016/S2352-3018(15)00061-2
[5] Eccles M P, Mittman B S. Welcome to implementation science[J]. Implement Sci, 2006, 1: 1. DOI: 10.1186/1748-5908-1-1
[6] Eccles M P, Foy R, Sales A, et al. Implementation science six years on-our evolving scope and common reasons for rejection without review[J]. Implement Sci, 2012, 7: 71. DOI: 10.1186/1748-5908-7-71
[7] Metz A, Jensen T, Farley A, et al. Is implementation research out of step with implementation practice? Pathways to effective implementation support over the last decade[J]. Implement Res Pract, 2022, 3: 26334895221105585.
[8] Allison M, Albers B, Katie M, et al. Implementation Practice in Human Service Systems: Understanding the Principles and Competencies of Professionals Who Support Implementation[J/OL]. (2021-03-15)[2024-01-12]. https://www.tandfonline.com/doi/full/10.1080/23303131.2021.1895401.
[9] Hoke T. Implementation research: The unambiguous cornerstone of implementation science[EB/OL]. (2018-02-06)[2024-01-12]. https://researchforevidence.fhi360.org/implementation-research-the- unambiguous-cornerstone-of-imple- mentation-science.
[10] Mellis C. Evidence-based medicine: what has happened in the past 50 years?[J]. J Paediatr Child Health, 2015, 51(1): 65-68. DOI: 10.1111/jpc.12800
[11] Lang E S, Wyer P C, Haynes R B. Knowledge translation: closing the evidence-to-practice gap[J]. Ann Emerg Med, 2007, 49(3): 355-363. DOI: 10.1016/j.annemergmed.2006.08.022
[12] Glasgow R E, Vinson C, Chambers D, et al. National institutes of health approaches to dissemination and implementa-tion science: current and future directions[J]. Am J Public Health, 2012, 102(7): 1274-1281. DOI: 10.2105/AJPH.2012.300755
[13] Wang Y X, Wong E L Y, Nilsen P, et al. A scoping review of implementation science theories, models, and frameworks-an appraisal of purpose, characteristics, usability, applicability, and testability[J]. Implement Sci, 2023, 18(1): 43. DOI: 10.1186/s13012-023-01296-x
[14] The Lancet Global Health. Implementing implementation science in global health[J]. Lancet Glob Health, 2023, 11(12): e1827. DOI: 10.1016/S2214-109X(23)00523-5
[15] Norton W E, Lungeanu A, Chambers D A, et al. Mapping the growing discipline of dissemination and implementation science in health[J]. Scientometrics, 2017, 112(3): 1367-1390. DOI: 10.1007/s11192-017-2455-2
[16] 国家自然科学基金委员会. 2017年度国家自然科学基金委员会(NSFC) 与加拿大卫生研究院(CIHR) 精神健康与痴呆症实施性合作研究项目指南[EB/OL]. (2016-12-30)[2024-01-12]. https://www.nsfc.gov.cn/publish/portal0/tab442/info61110.htm. National Natural Science Foundation of China. Notice of Approval for the 2017 National Natural Science Foundation of China (NSFC) and Canadian Institutes of Health (CIHR) collaborative research program on mental health and dementia implementation[EB/OL]. (2016-12-30)[2024-01-12]. https://www.nsfc.gov.cn/publish/portal0/tab442/info61110.htm.
[17] Landes S J, McBain S A, Curran G M. An introduction to effectiveness-implementation hybrid designs[J]. Psychiatry Res, 2019, 280: 112513. DOI: 10.1016/j.psychres.2019.112513
[18] Waltz T J, Powell B J, Matthieu M M, et al. Use of concept mapping to characterize relationships among implementation strategies and assess their feasibility and importance: results from the Expert Recommendations for Implementing Change (ERIC) study[J]. Implement Sci, 2015, 10: 109. DOI: 10.1186/s13012-015-0295-0
[19] Gaynes B N, Akiba C F, Hosseinipour M C, et al. The Sub-Saharan Africa Regional Partnership (SHARP) for mental health capacity-building scale-up trial: study design and protocol[J]. Psychiatr Serv, 2021, 72(7): 812-821. DOI: 10.1176/appi.ps.202000003
[20] Faija C L, Gellatly J, Barkham M, et al. Enhancing the behaviour change wheel with synthesis, stakeholder involve-ment and decision-making: a case example using the 'enhancing the quality of psychological interventions delivered by telephone' (Equity) research programme[J]. Implement Sci, 2021, 16(1): 53. DOI: 10.1186/s13012-021-01122-2
[21] Bing A, Spiegelman D, Nevo D, et al. Learn-As-you-GO (LAGO) trials: optimizing treatments and preventing trial failure through ongoing learning[EB/OL]. (2023-07-13)[2024-02-16]. https://arxiv.org/abs/2307.06552.
[22] Wiltsey Stirman S, Baumann A A, Miller C J. The FRAME: an expanded framework for reporting adaptations and modifications to evidence-based interventions[J]. Implement Sci, 2019, 14(1): 58. DOI: 10.1186/s13012-019-0898-y
[23] Miller C J, Barnett M L, Baumann A A, et al. The FRAME-IS: a framework for documenting modifications to implementation strategies in healthcare[J]. Implement Sci, 2021, 16(1): 36.
-
期刊类型引用(5)
1. 王敏,胡兆,徐晓巍,郑思,李姣,姚焰. 融合知识驱动和数据驱动的混合决策模型构建:以室性心动过速病因诊断为例. 协和医学杂志. 2025(02): 454-461 . 本站查看
2. 吴孟达,毛紫阳,王丹. Shapley值及其应用. 数学建模及其应用. 2024(01): 110-119 . 百度学术
3. 李深,唐霁松,曹颖,刘琳,谭魁,万毅,卿竹君,景渝,谢明莉,彭正良. XGBoost模型分析院内心脏骤停患者恢复自主循环的特征. 临床急诊杂志. 2024(11): 579-585 . 百度学术
4. 胡冬雪,牛承志,赵春雨,赵丽丽,王鑫. 基于机器学习的ICU多发伤患者发生谵妄预测模型的构建与评估. 中华创伤杂志. 2024(11): 1016-1021 . 百度学术
5. 张伟丽,邱晨,宋玉祥,罗云根,宋咪,高远. 机器学习在谵妄风险预测模型构建中的研究进展. 解放军医学院学报. 2023(11): 1292-1296 . 百度学术
其他类型引用(2)