文献速递重症综合管理与镇静镇痛

基于AmsterdamUMCdb的可解释机器学习用于ICU出院决策支持:重症医生与数据科学家联合开发

Explainable Machine Learning on AmsterdamUMCdb for ICU Discharge Decision Support: Uniting Intensivists and Data Scientists.
PubMed 文献 · Crit Care Explor · 2021-09-10
一句话结论基于AmsterdamUMCdb开发的可解释机器学习模型可预测ICU出院后7天内再入ICU或死亡,6%风险阈值下敏感度0.72、特异度0.70、PPV 0.15。

本研究利用AmsterdamUMCdb中2004—2016年14,105例ICU住院数据开发机器学习模型,预测ICU出院后7天内再入ICU和/或死亡,并以2016—2019年3,929例进行验证。采用梯度提升算法,验证集AUC 0.78(95%CI 0.75–0.81),PR曲线下面积0.19;在6%风险阈值下敏感度0.72、特异度0.70、阳性预测值0.15。最常见预测特征包括常规生理参数及营养支持等较少被关注的变量。影响分析提示,基于概率-时间曲线和6%阈值识别高危患者并改变出院管理,可能实现14%的相对风险降低。

要点

  • 在验证队列(n=3,929)中,模型预测ICU出院后7天内再入ICU/死亡的AUC为0.78(95%CI 0.75–0.81),PR曲线下面积0.19。
  • 在6%风险阈值下,模型敏感度(召回率)0.72、特异度0.70、阳性预测值(精确率)0.15。
  • 预测特征包括常规生理参数以及营养支持等较少被关注的变量,SHAP用于解释个体化风险趋势和特征重要性。
  • 影响分析使用概率-时间曲线和6%风险阈值识别特定高危患者组,提示改变出院管理可能使相对风险降低14%。
  • 开发队列来自单中心混合外科-内科ICU 2004—2016年14,105例住院,验证队列为同中心2016—2019年数据。

适用人群与场景

  • 开发队列:2004—2016年单中心混合外科-内科学术医疗中心ICU收治的患者,共14,105例住院。
  • 验证队列:同一中心2016—2019年数据,n=3,929。
  • 目标人群为计划从ICU出院、需评估出院后7天内再入ICU和/或死亡风险的患者。

诊断标准与关键阈值

  • 预测终点为ICU出院后7天内再入ICU和/或死亡。
  • 模型输出再入ICU/死亡概率,原文采用6%风险阈值进行敏感度、特异度、阳性预测值评估及影响分析。

处置流程与药物剂量

  • 原文未提及

红旗征与不能漏的情况

  • 原文未提及

研究设计与关键结果

  • 研究类型为单中心回顾性机器学习模型开发与验证研究;开发队列14,105例住院,验证队列3,929例。
  • 联合终点(ICU出院后7天内再入ICU/死亡)发生率为5.3%。
  • 采用梯度提升算法,验证集AUC 0.78(95%CI 0.75–0.81),PR曲线下面积0.19。
  • 在6%风险阈值下,敏感度0.72、特异度0.70、阳性预测值0.15。
  • 最具预测性的特征包括常规生理参数以及营养支持等较少被关注的变量。
  • 影响分析使用概率-时间曲线和6%风险阈值识别特定高危患者组,提示改变出院管理可能使相对风险降低14%。

证据类型、等级与局限

  • 证据类型为单中心回顾性机器学习模型开发与验证研究。
  • 局限性:单中心数据;回顾性设计;验证集PR曲线下面积较低(0.19);6%阈值下阳性预测值仅0.15;影响分析为模型估计而非前瞻性干预验证。

对床旁实践的改变

  • 该模型可能辅助识别ICU出院后7天内再入ICU/死亡高危患者,但原文未提供具体出院管理改变方案。
  • 原文提示改变出院管理可能使相对风险降低14%,但该结果为影响分析估计,需前瞻性验证。
  • 6%风险阈值下阳性预测值0.15,提示假阳性较多,不能仅凭模型阳性结果延迟出院。
  • 适用人群为单中心混合外科-内科ICU患者,外推至其他中心或特定亚群需谨慎。

指南或共识出处

  • 原文未提及

以上提炼依据论文摘要(全文未开放获取,或许可不允许翻译转载);全文请点「阅读原文」。

英文原文(摘要)· 点击展开

UNLABELLED: Unexpected ICU readmission is associated with longer length of stay and increased mortality. To prevent ICU readmission and death after ICU discharge, our team of intensivists and data scientists aimed to use AmsterdamUMCdb to develop an explainable machine learning-based real-time bedside decision support tool.

DERIVATION COHORT: Data from patients admitted to a mixed surgical-medical academic medical center ICU from 2004 to 2016.

VALIDATION COHORT: Data from 2016 to 2019 from the same center.

PREDICTION MODEL: Patient characteristics, clinical observations, physiologic measurements, laboratory studies, and treatment data were considered as model features. Different supervised learning algorithms were trained to predict ICU readmission and/or death, both within 7 days from ICU discharge, using 10-fold cross-validation. Feature importance was determined using SHapley Additive exPlanations, and readmission probability-time curves were constructed to identify subgroups. Explainability was established by presenting individualized risk trends and feature importance.

RESULTS: Our final derivation dataset included 14,105 admissions. The combined readmission/mortality rate within 7 days of ICU discharge was 5.3%. Using Gradient Boosting, the model achieved an area under the receiver operating characteristic curve of 0.78 (95% CI, 0.75-0.81) and an area under the precision-recall curve of 0.19 on the validation cohort (n = 3,929). The most predictive features included common physiologic parameters but also less apparent variables like nutritional support. At a 6% risk threshold, the model showed a sensitivity (recall) of 0.72, specificity of 0.70, and a positive predictive value (precision) of 0.15. Impact analysis using probability-time curves and the 6% risk threshold identified specific patient groups at risk and the potential of a change in discharge management to reduce relative risk by 14%.

CONCLUSIONS: We developed an explainable machine learning model that may aid in identifying patients at high risk for readmission and mortality after ICU discharge using the first freely available European critical care database, AmsterdamUMCdb. Impact analysis showed that a relative risk reduction of 14% could be achievable, which might have significant impact on patients and society. ICU data sharing facilitates collaboration between intensivists and data scientists to accelerate model development.

来源:Crit Care Explor,查看原文。版权归原作者所有。

参考来源

  1. Thoral PJ, Fornasa M, de Bruin DP, et al. Explainable Machine Learning on AmsterdamUMCdb for ICU Discharge Decision Support: Uniting Intensivists and Data Scientists. Crit Care Explor. 2021. PMID: 34589713. doi:10.1097/CCE.0000000000000529

供执业医师抢救与诊疗参考,不替代临床判断;剂量请结合体重、肝肾功能和本院药品规格复核,以指南原文为准。