文献速递腹部技术与安全CTMR

胆管癌影像组学研究的系统评价及影像组学质量评分:EuSoMII影像组学审计组倡议

Systematic review with radiomics quality score of cholangiocarcinoma: an EuSoMII Radiomics Auditing Group Initiative.
PubMed 文献 · Insights Imaging · 2023-02-01

该系统评价纳入38项胆管癌CT/MRI影像组学研究,共6242例患者,采用影像组学质量评分(RQS)评估研究质量。三位读者评定的中位RQS为8-10分(约占总分的22.2%-27.8%),组间一致性良好(ICC=0.75)。所有研究均为回顾性,均未进行体模评估、多时间点成像或成本效益分析,研究质量不足。

要点

  • 胆管癌影像组学研究均为回顾性,中位RQS仅8-10分,约占总分四分之一,质量不足。
  • 所有研究均未进行体模评估、多时间点成像或成本效益分析,这些项目占总分28%。
  • 仅Park等在一项外部测试集中验证了术后结局预测模型,获得RQS第12项满分5分。

核心结论

  • 基于影像组学质量评分,胆管癌影像组学研究质量不足,中位RQS为8-10分,约占总分的22.2%-27.8%。
  • 未来研究应考虑前瞻性研究设计、标准化方法学、多机构外部队列验证和开放科学数据。

研究设计与样本

  • 系统评价,遵循PRISMA指南,方案注册于PROSPERO(CRD42022295218)。
  • 检索PubMed/Medline、Web of Science和Scopus数据库,检索2010年1月1日至2021年11月30日发表的文献。
  • 纳入38项原始研究,共6242例患者(中位134例/研究,IQR 98-198),均为回顾性研究。
  • 三位来自不同机构、经验水平不同的放射科医生独立采用影像组学质量评分(RQS)评估研究质量,RQS包含16个项目,总分范围-8至+36。
  • 参考标准为RQS,组间一致性采用ICC评估。

关键影像表现/征象

  • CT为最常用成像技术(20/38,52.6%),MRI采用于16/38(42.1%)研究,仅2项(5.3%)同时使用两种技术。
  • 病灶分割最常在肝动脉期(27/38,71.1%)和/或门静脉期(25/38,65.8%)进行,几乎均为手动勾画感兴趣区(35/38,92.1%)。
  • 仅5/38(13.1%)研究对瘤周或邻近肝实质进行分割。
  • 仅2项(5.3%)研究讨论了影像组学模型相关的生物学关联。

诊断标准与关键数值

  • RQS总分范围-8至+36,百分比范围0-100%。
  • 中位RQS:读者1为9分(25.0%,IQR 1-13),读者2为8分(22.2%,IQR 3-12),读者3为10分(27.8%,IQR 5-14)。
  • 总RQS的组间一致性ICC为0.75(95%CI 0.62-0.85),百分比RQS的ICC为0.77(95%CI 0.65-0.86)。
  • 33/38(88.6%)研究提供了详细记录的图像采集方案。
  • 26/38(68.4%)研究进行了多次分割,但无研究进行体模评估或多时间点成像。

临床应用与阅片要点

  • 作者认为,未来研究应关注多中心背景下验证现有模型,而非基于单中心经验提出替代模型。
  • 作者认为,影像组学模型的的前瞻性验证也是需要的,以评估其在临床实践中的潜力,重点关注患者相关结局如治疗后总生存期。
  • 作者认为,开放科学数据提供代码和影像组学数据对于促进影像组学广泛应用和模型可重复性至关重要。
  • 作者认为,可鼓励将RQS应用于同行评议期刊投稿论文的质量评估,以促进稿件决策并提高影像组学研究整体质量。

局限性

  • 未进行Meta分析,原因是纳入研究异质性大,针对特定目标的影像组学模型研究数量相对较少,难以合并数据进行强效Meta分析。
  • 胆管癌相较于肝细胞癌和肝转移瘤更为罕见,影像组学在该领域的应用相对较新,55%的纳入研究于2021年发表。
  • 未纳入超声和PET/CT的胆管癌影像组学研究,因这些成像方式在胆管癌患者中临床适用性有限且影像组学分析高度探索性。
  • RQS基于专家意见,目前未获科学学会认可,且强烈依赖于理想影像组学工作流程的方法学质量,与潜在临床影响相关性低。
  • 部分项目如体模评估和多时间点成像在基于回顾性观察研究的真实世界数据中难以开展。
全文中译13 节 · 点击展开
本译文由 AI 依据开放获取原文逐段翻译,供学习参考,可能存在误差,请以原文为准。原文 © 原作者,按 CC BY 许可使用,本译文为翻译改编。出处:Insights Imaging. 2023 Feb 1;14:21. doi: 10.1186/s13244-023-01365-1

引言

影像组学是一个快速扩展的活跃研究领域,基于从生物医学图像中提取和分析大量定量特征,已取得了有前景的结果[1]。近期的影像组学研究旨在构建预测模型,这些模型可与定性放射学特征、临床特征和实验室标志物相结合,以开发决策支持工具并改善患者照护[1]。多项研究提出了基于计算机断层扫描(CT)和磁共振成像(MRI)检查的模型,在术前病变表征、治疗反应预测以及手术切除后预后评估方面具有高性能[2]。尽管在研究环境中取得了有前景的结果,但由于当前影像组学研究的局限性,其向临床实践的转化仍然非常有限。这些局限性包括成像采集方案的异质性、分割、提取特征的类型以及缺乏多中心验证[3, 4]。影像组学研究的质量是改善影像组学研究和未来临床应用的重要里程碑。

Lambin等[5]提出了影像组学质量评分(RQS),基于与影像组学工作流程主要步骤相关的16个项目来评估影像组学研究的质量。在肝脏影像学领域,近期的系统综述已应用RQS评估肝细胞癌[6–9]和肝转移瘤[10]影像组学研究的质量,分别报告总体RQS为8–14(对应于总分的23–39%)和10(28%)。胆管癌是起源于胆管的最常见恶性肿瘤,也是第二常见的原发性肝内癌[11]。胆管癌可发生于不同部位,在CT或MRI上具有异质性影像学表现,其特征为高生物学侵袭性和不良预后[11]。近年来,越来越多的影像组学应用被提出用于接受CT或MRI成像的胆管癌患者,包括与其他肝脏恶性肿瘤的鉴别诊断、淋巴结转移预测以及根治性切除后复发预测。然而,迄今为止,胆管癌影像组学研究的质量尚未得到全面调查。评估影像组学研究质量是改善影像组学研究和未来临床实践实施的必要且基础性的步骤。

本系统综述旨在概述影像组学在胆管癌患者中的当前研究应用,并评估CT和MRI影像组学研究的质量。

材料与方法

本研究按照系统综述和荟萃分析优先报告条目(PRISMA)指南进行[12]。综述方案已在国际前瞻性系统综述注册平台注册(CRD42022295218)。

文献检索策略

在PubMed/Medline、Web of Science和Scopus数据库中使用以下术语进行了系统检索:“纹理”、“影像组学”、“机器学习”、“人工智能”、“胆管癌”和“胆道癌”。详细检索式见附加文件1。文献检索针对2010年1月1日至2021年11月30日之间发表的文章进行。

纳入标准

去除重复研究后,三位作者(R.Ca.、F.V.和L.U.,均为放射科医生,各自具有五年影像组学研究经验)独立评估了所有研究的标题和摘要,以根据以下标准排除不合格论文:(1)非英文研究;(2)动物研究;(3)会议论文摘要;(4)综述、系统综述和病例报告。阅读相关文章的全文以确定其纳入。在全文稿件审阅期间,应用以下合格标准纳入原创论文:(1)基于对胆管癌肿瘤分割所获定量特征评估的影像组学研究;(2)从CT或MRI检查中提取的特征。仅评估语义特征、胆管癌以外的其他病变或其他诊断检查(即超声或PET/CT,因其在胆管癌中的应用有限)特征的研究被排除。审稿人之间的任何分歧均通过共识讨论解决。

数据提取

从纳入研究中收集以下数据:作者、期刊及其类型、根据四分位数和影响因子的期刊排名、研究发表年份以及基于研究人群CT/MRI检查获取机构所在的国家。根据Web of Science的主要期刊类别,将期刊分为影像学、临床和计算机科学类。根据主要期刊科学领域的期刊四分位数和影响因子从Journal Citation Report数据库检索,并登记发表年份的四分位数和影响因子。对于2021-2022年发表的文章,考虑2020年报告,因为这是数据分析时可获得的最近报告。评估全文稿件以收集以下数据:研究类型(回顾性或前瞻性)、涉及机构数量、纳入患者总数(分为训练队列和验证队列)、胆管癌类型(即肝内、肝门部或肝外)、成像模式(CT和/或MRI)、进行分割的序列和/或期相、用于分割和影像分析的软件,以及提取的影像组学特征数量。

根据主要研究目的将研究分组:诊断性(包括用于肝脏病变鉴别诊断、预测肿瘤组织病理学分化及标志物或淋巴结受累的影像组学分析)、预后性(预测早期复发和生存)和治疗反应性(对局部区域或全身治疗的反应)研究。

影像组学质量评分评估

三位来自不同机构、经验水平不同的读者(读者1,R1,A.P.,一名在影像组学研究方面有4年经验且有RQS评估经验的放射科医生;读者2,R2,M.E.K.,一名在放射学研究方面有10年经验、在影像组学研究方面有4年经验的放射科医生;读者3,R3,E.P.,一名在放射学研究方面有9年经验的放射科医生),未参与稿件筛选,使用RQS独立评估了所有研究[5]。在稿件评估之前,举行了一次培训会议,讨论RQS的主要条目以及未纳入本系统评价的稿件示例。全文稿件和补充材料均进行了筛选。RQS由16个条目组成,分为三个主要检查点:第一个检查点包括条目1,第二个包括条目2至4,第三个由条目5至16组成[5]。RQS的详细描述见附加文件2:表S1。从所有三位读者处记录了总RQS(范围为−8至+36)和总分百分比(0–100%)[5]。

统计分析

分类变量以数量、比例和百分比报告,而连续变量在应用Shapiro–Wilk正态性检验检测正态分布后,以中位数和四分位距(IQR)报告。对最有经验的读者(R1)计算了RQS报告质量的依从率,考虑的是在每个特定条目中获得至少一分的文章比例。根据发表和研究特征评估总RQS的差异,酌情使用Kruskal–Wallis检验或Mann–Whitney U检验。总RQS、期刊影响因子和纳入患者数量之间的相关性使用Spearman秩相关系数(Spearman's ρ)计算。

使用基于绝对一致性双向混合效应模型的组内相关系数(ICC)及95%置信区间(CI),评估三位读者之间总RQS和百分比RQS的读者间一致性。一致性分类为差(ICC < 0.50)、中等(ICC = 0.50–0.75)、好(ICC = 0.75–0.90)或优秀(ICC > 0.90)[13]。

p值 < 0.05被认为具有统计学意义。统计分析使用SPSS软件(v26.0. IBM, Armonk, NY, USA)进行。

结果

文献检索

系统检索初步识别出503篇文章(图1)。去除214篇重复稿件后,对289篇进行了标题和摘要筛选,214项研究进行了全文筛选以评估其合格性。最终,纳入了38篇关于胆管癌影像组学的原创文章进行RQS评估[14–51]。

图1 研究选择过程的流程图 查看原图 ↗

纳入研究的特征

纳入文献的特征总结于表1。在纳入的原创性文章中,18/38(47.4%)发表于影像学期刊,15/38(39.5%)发表于临床期刊,其余(5/38,13.1%)发表于计算机科学期刊。21篇(55.3%)文章发表于2021年,9/38(23.7%)发表于2020年,5/38(13.2%)发表于2019年,3/38(7.8%)发表于2018年或更早年份。17/38(44.7%)的纳入文章发表于第一四分位期刊,总体中位影响因子为4.43(IQR,3.50–5.31)。研究人群最常来自中国(27/38,71.1%),其次为美国(3/38,7.8%)。30项(79.0%)研究在单一机构完成,7/38(18.4%)在两家机构完成,仅一项(2.6%)涉及六个不同中心。所有纳入研究均为回顾性研究。

研究目的和方法学详见表2。最常见的研究目的(图2)包括与其他肝脏病变的鉴别诊断(10/38,26.3%)、预测手术切除后的生存(10/38,26.3%)以及预测淋巴结转移(7/38,18.4%)。仅有一篇文章探讨了影像组学在预测肝内胆管癌放射栓塞治疗反应方面的潜力[23]。患者总数为6242例(每项研究中位数=134;IQR,98–198)。分别有29/38(76.3%)、4/38(10.5%)和5/38(13.2%)篇论文评估了肝内、肝门周围和肝外胆管癌。CT是最常用的成像技术(20/38,52.6%),而MRI在16/38(42.1%)项研究中被采用。仅两项(5.3%)同时使用了两种技术。用于影像组学特征提取的病灶分割更常在肝动脉期(27/38,71.1%)和/或门静脉期(25/38,65.8%)进行,几乎总是通过手动勾画感兴趣区(35/38,92.1%)。仅在5/38(13.1%)项研究中进行了瘤周或邻近肝实质的分割。

表1 纳入研究的一般特征 查看原表 ↗
表2 纳入研究的主要目的和方法学 查看原表 ↗
图2 影像组学研究目的概述。值得注意的是,每项研究可能包含多个目的 查看原图 ↗

影像组学质量评分

三位独立评估者的总RQS结果总结于表3。每位评估者各条目评分的详细信息见附加文件2:表S2、S3和S4。R1的RQS中位数为9(对应于总RQS的25.0%;IQR 1–13),R2为8(22.2%,IQR 3–12),R3为10(27.8%;IQR 5–14)。评估者间一致性良好,总RQS的ICC为0.75(95% CI 0.62–0.85),RQS百分比评分的ICC为0.77(95% CI 0.65–0.86)。

每个条目的依从率(根据R1)如图3所示。对于第一个检查点(条目1),33/38(88.6%)项研究提供了记录良好的图像采集方案。在第二个检查点(条目2至4),26/38(68.4%)项研究进行了多次分割,但均未进行体模评估或多个时间点的成像。在第三个检查点(条目5至16),30/38(78.9%)项研究采用了特征降维和多检验校正,22/38(57.9%)项研究在多变量分析中纳入了非影像组学特征。仅有两篇(5.3%)文章讨论了与影像组学模型相关的生物学相关性。截断值分析、判别统计量和校准统计量分别在9/38(23.7%)、37/38(97.4%)和14/38(36.8%)项研究中可得。关于影像组学模型的验证,大多数研究(23/38,60.5%)基于内部队列进行验证,但13/38(34.2%)项研究缺乏验证。与金标准的比较和潜在临床适用性的讨论分别在20/38(52.6%)和11/38(28.9%)项研究中涉及。所评估的文章均未在试验数据库中进行前瞻性注册或提供成本效益分析,仅有三篇(7.9%)公开了其代码或数据。

表3 由三名独立读者评估的纳入研究的总影像组学质量评分(RQS)及占总分的百分比 查看原表 ↗
图3 根据最有经验的读者(R1)评估的影像组学质量评分中各条目报告质量的依从率 查看原图 ↗

亚组分析

亚组分析结果见表4。根据期刊类型、发表年份、期刊分区、纳入胆管癌类型和成像 modality,均未发现统计学差异。在第一四分位期刊中,RQS各条目(根据R1)均无显著更高(p ≥ 0.101)。影响因子 > 4的期刊发表的研究根据R1(p = 0.048)和R2(p = 0.035)的RQS显著更高。纳入超过100例患者的研究中RQS显著更高(所有读者p < 0.001)。

对于所有三名读者,总RQS与纳入患者数量之间存在统计学显著的高相关性(所有读者p < 0.001)(表5)。总RQS与其他特征之间未观察到显著相关性。

表4 由三名独立读者评估的总影像组学质量评分的亚组分析 查看原表 ↗
表5 由三名独立读者评估的总影像组学质量评分与期刊影响因子、纳入患者数量及影像组学特征数量之间的相关性 查看原表 ↗

讨论

影像组学研究的质量不足正逐渐成为当前文献的一个主要问题,导致该领域从研究向临床应用的转化缓慢[52]。这篇对38项胆管癌影像组学研究的系统综述表明,通过RQS评估,当前发表文献的质量欠佳,总体总分为8–10分,约相当于此类研究理想质量的四分之一。这与基于RQS评估肝脏病变影像组学的其他系统综述一致,后者报告的中位RQS为8–14分,相当于总分的23–39%[6–10]。重要的是,在本综述中,纳入的研究均未进行体模评估、多个时间点的成像、在试验数据库中进行前瞻性注册,也未进行成本效益分析。这些项目占RQS总分的10分(28%)[5]。

影像组学已被用作诊断工具,用于胆管癌与其他肝脏肿瘤的鉴别诊断、术前识别与不良预后相关的组织病理学和分子标志物,以及预测术后生存,而在治疗反应和不适合手术切除的晚期病变方面经验仍然非常有限[23]。迄今为止,所有关于胆管癌影像组学的研究均为回顾性研究,大多基于单中心数据集,其中34%缺乏验证队列。这是一个相关问题,导致RQS总分损失5分,因为外部验证是分类模型临床实施前的关键项目。只有Park等人的研究[25]在来自五个不同机构的外部测试数据集中验证了用于预测肝内胆管癌患者术后结局的影像组学模型(在RQS第12项中获得最高分+5分)。这意味着,尽管大多数关于胆管癌影像组学的研究具有很大潜力,但其结果仍局限于模型来源的学术中心。进一步的研究应侧重于在多中心背景下验证现有模型,而非提出基于单中心经验的替代模型。还需要对影像组学模型进行前瞻性验证,以评估其在临床实践中的潜力,重点关注相关患者结局,如治疗后总生存期的评估。在此背景下,提供代码和影像组学数据的开放科学数据对于促进影像组学的广泛应用和所提出模型的可重复性至关重要。然而,本系统综述纳入的研究中不到10%公开提供了其代码或数据。

尽管在过去几年中人们一直强调需要开展实施良好的影像组学工作流程,但根据影像组学质量评分(RQS)对胆管癌已发表影像组学论文的质量进行评估,2021年与2013–2020年相比并未提高。高影响力期刊已提供指导,强调影像组学研究需要稳健的数据和准确的方法学[1, 53, 54]。然而,对当前胆管癌研究的分析显示,基于期刊类型或四分位分区的RQS无显著差异,尽管在三位读者中有两位观察到影响因子大于4的期刊RQS有更高的趋势。在既往研究中,Spadarella等[55]在鼻咽癌研究的RQS中未发现根据期刊计量指标的差异,而Ponsiglione等[56]和Chang等[57]分别在心脏影像研究中观察到影响因子或四分位分区更高的期刊RQS显著更高。因此,影像组学、机器学习和数据驱动科学研究的热潮导致已发表影像组学论文数量增加,但并未伴随这些研究质量的显著提高。这可能与基于课题新颖性而非改进影像组学分析的严格方法学和工作流程来开展和发表探索性影像组学研究的总体倾向有关[52, 58]。肝脏影像采集方案的标准化是一项基础性工作,以尽量减少影像组学特征在不同中心和扫描仪之间的变异性[59]。此外,国际生物标志物标准化倡议(IBSI)正在致力于医学图像提取的定量特征提取的标准化,并且已经提供了CT影像组学特征的参考值[60]。

RQS对每个条目的评分提供了详细描述[5]。然而,其应用可能受到读者经验以及根据论文中可用数据对每个条目解读的影响。本综述纳入的所有研究均由三位独立读者评估,他们具有不同水平的研究经验和RQS评估经验,结果显示出良好的观察者间一致性。很少有研究评估RQS的可重复性,且结果不一致(报告的ICC在0.57至0.99之间),据我们所知,这些研究中没有一项评估了来自不同机构的读者之间的观察者间一致性[55, 61–63]。应当注意,RQS基于专家意见,目前尚未得到科学学会的认可,并且其局限性在于强烈依赖于理想影像组学工作流程的方法学质量,而与潜在临床影响的相关性较低。某些条目,如体模评估和多时间点成像,在考虑基于回顾性观察研究的真实世界数据时仍然难以进行研究。尽管如此,可以鼓励应用该评分对提交至同行评审期刊的论文进行质量评估,以促进稿件决策并提高影像组学研究的整体质量。

本研究存在一些局限性。首先,由于纳入研究之间存在异质性,未进行荟萃分析,针对特定目的评估影像组学模型的论文数量相对较少,这使得难以汇总数据以进行强有力的荟萃分析。其次,与肝细胞癌和肝转移瘤相比,胆管癌是较为罕见的肿瘤,影像组学在该领域的应用相对较新。纳入研究中55%发表于2021年这一事实即说明了这一点。最后,由于超声和PET/CT影像组学在胆管癌患者中的临床适用性有限,且这些影像模态的影像组学分析具有高度探索性,应用超声和PET/CT影像组学于胆管癌的论文未被纳入。

总之,关于胆管癌的影像组学研究质量不足,影像组学质量评分总分较低。需要进一步开展前瞻性研究,采用标准化方法学、在多机构外部队列中进行验证以及开放科学数据,以将影像组学领域有前景的研究成果转化为改善多种临床场景下患者管理的有用应用。

补充信息

附加文件1。详细检索策略。

附加文件2。表S1:影像组学质量评分的详细清单,附有Lambin等[5]报告的相应检查点和条目。表S2:由阅片者1评估的纳入研究的影像组学质量评分。表S3:由阅片者2评估的纳入研究的影像组学质量评分。表S4:由阅片者3评估的纳入研究的影像组学质量评分。

引用

  1. Cannella R, Vernuccio F, Klontzas ME, et al. Systematic review with radiomics quality score of cholangiocarcinoma: an EuSoMII Radiomics Auditing Group Initiative. Insights Imaging. 2023. PMID: 36720726. doi:10.1186/s13244-023-01365-1
  2. 全文:PMC9889586(PMC 开放获取,CC BY)https://pmc.ncbi.nlm.nih.gov/articles/PMC9889586/

供执业医师工作参考,不替代临床判断;数值与分级以指南原文为准。