2020至2022年荷兰放射科人工智能产品的临床使用情况
该研究通过2020至2022年每年春季向荷兰放射科AI网络发放问卷,追踪CE认证AI产品的临床使用、融资与障碍。使用AI的科室从2020年14个增至2022年23个,产品多样性与实施总数快速增加,主要障碍为费用和IT整合。
要点
- 2022年荷兰至少三分之一的中心在临床中使用AI,使用科室数从2020年14个增至2022年23个。
- AI主要用于胸部CT(肺结节、肺栓塞、新冠严重程度)、神经CT(大血管闭塞、颅内出血、ASPECTS、CTP)和骨肌X线(骨龄、骨折、自动测量)。
- 主要采用障碍为费用缺乏预算和IT整合困难;2022年28%受访者认为AI带来健康改善,32%认为兼有健康改善与成本节约。
核心结论
- 荷兰放射科AI产品采用率持续增长,2022年至少三分之一中心使用AI,但费用与IT整合仍是广泛采用的主要障碍。
研究设计与样本
- 研究为2020至2022年每年春季向荷兰放射科AI网络发放问卷的重复横断面调查,网络为每家医院组织一名放射科医生或AI代表。
- 荷兰共有69家医院组织,研究收集到54家组织的联系方式;2020、2021、2022年受访者分别为43、36、33名。
- 仅纳入截至2022年7月列于www.AIforRadiology.com的CE认证AI产品,共202个产品、97家供应商。
诊断标准与关键数值
- 使用AI的科室数2020年14个(20%)、2021年19个(28%)、2022年23个(33%)。
- AI产品多样性从2020年7个独特产品增至2022年34个,累计实施数从2020年19次增至2022年68次。
- 2022年AI主要用于胸部CT分析17次、神经CT分析17次、骨肌X线分析12次。
临床应用与阅片要点
- 原文未据此给出推荐。
局限性
- 研究存在应答率和可能偏倚的局限,未能获得荷兰每家中心AI使用情况的洞察。
- 使用AI的中心参与度更高,而未使用AI的中心在第一年后出现脱落。
- 每家中心单一代表可能不了解整个科室情况,影响数据质量,且他们通常是早期采用者和项目负责人,可能对AI报告更积极。
- 许多临床中心未深入研究AI实施的影响,因此所报告的附加价值应视为主观判断。
- 排除未列于www.AIforRadiology.com的产品可能导致AI使用被轻微低估;若无此排除标准,2022年将有25家医院组织、80次实施、45种不同工具(而非23家、68次、34种)。
全文中译10 节 · 点击展开
引言
考虑到已有基于人工智能(AI)的商业化产品可供使用[1],放射学领域在医疗保健中处于前沿地位。目前市场上已有超过两百个获得CE认证的放射学AI产品可用于临床[2]。提供这些产品的供应商声称能够提高效率和医疗质量[3],但迄今为止,这些声称是否在临床实践中得到兑现仍不清楚。然而,要在放射学中通过AI产生影响力,第一步就是采用这些产品。
在美国和欧洲,已有一些关于个体放射科医生对AI的经验和态度的研究[4–7]。然而,尚无关于按执业机构层面采用AI的研究,也没有关于所采用具体产品的研究。
在本研究中,我们监测了荷兰放射科在3年期间(2020–2022)对商业化AI软件的临床使用情况。此外还探讨了AI软件的经验附加价值、AI产品的中止使用、平台采用、AI的融资方式以及AI实施的主要障碍。
材料与方法
数据收集
本研究无需机构审查委员会批准。2020年初,我们与荷兰放射学会共同建立了一个 communication network,即所谓的AI网络。该AI网络在每个医院机构有一名放射科医生作为AI相关联系人。在一些医院机构中,我们被转介给放射科医生以外的医疗专业人员(例如临床物理师、技术医师、应用专家、团队经理),这些人是我们的额外联系人。荷兰有69个医院机构,其中7个学术中心、25个教学医院和37个综合医院[8]。我们能够收集到其中54个机构的联系方式。连续三年(2020–2022),我们在2月至3月使用Google Forms(Google LLC)向该群体发送问卷。
问卷
该调查的主要目的是询问AI产品在放射学中的临床使用情况。除了询问临床实践中使用的商业AI产品(开放式)外,我们还询问了他们实施AI软件的意向(分类变量)、来年是否为其预留了预算(分类变量),以及AI软件采购、验证和实施的障碍(开放式)。
在最后一次调查(2022年)中,我们增加了一个关于AI平台或所谓市场使用情况的问题(开放式),以及产品实施是否被终止的问题(开放式)。此外,我们还询问了受访者是否认为AI的临床使用能够增进健康和/或降低成本(分类变量)。
分析
由于AI产品的定义存在争议,仅纳入截至2022年7月列于www.AIforRadiology.com [2]的产品,该网站是获得CE认证的放射学AI软件列表。这共包括97家供应商提供的202个产品。
对障碍的开放式回答被标准化为一组出现不止一次的主题。这些主题基于2020年调查的回答确定,并在其他年份保持不变。一个回答可以涉及多个主题。主题包括“成本、缺乏预算”、“商业论证不明确”、“供应分散”、“IT与整合”、“缺乏验证”、“法律问题”、“缺乏愿景、政策、所有权”。所有其他评论被归为“其他”。
结果
受访者
2020年受访者人数为43人,2021年为36人,2022年为33人,学术医院、教学医院和综合医院的构成具有代表性,如表1所示。大多数受访者为放射科医生,如表2所示。
AI的临床使用
受访者报告的各自中心放射科采用AI的意愿从2020年的63%上升至2021年的86%和2022年的88%。
图1和表1展示了AI产品在临床实践中的使用情况。在临床实践中使用www.AIforRadiology.com所列AI产品之一的科室数量从14个(20%,2020年)稳步增长至19个(28%,2021年)再到23个(33%,2022年)。荷兰已实施产品的多样性从2020年的7个独特产品增长至2022年的34个,增长了五倍。AI实施的累计数量2020年为19次,2021年为38次,2022年为68次。换言之,使用AI的科室2020年平均运行1个AI产品,2021年为2个,2022年为3个。2022年,据报道有6个科室停用了共计7个产品。4家医院机构表示使用AI平台或市场来部署AI解决方案,其中3家目前使用该平台部署多个AI解决方案。
AI的应用及报告的价值
2022年,AI主要用于支持胸部CT分析(结节检测、肺栓塞检测、新冠严重程度)(n = 17)、神经CT分析(大血管闭塞检测、颅内出血检测、ASPECTS、CTP)(n = 17),其次是肌肉骨骼X线片分析(骨龄预测、骨折检测和自动肢体测量)(n = 12)。图2概述了根据最新调查(2022年)所采用的产品。
图3展示了2022年AI的临床价值考量。附加价值不一定经过研究或证实,而主要是受访者的主观判断。在所有在其科室临床使用AI的受访者中,28%表示所实施的AI产品实现了健康改善,32%认为同时实现了健康改善和成本节约。无人单独报告成本节约。32%的受访者认为价值不明确,8%表示未体验到附加价值。
实施的障碍与预算
在全部三版调查中,关于AI采购、验证和实施最常被提及的障碍是财务困难(高成本和缺乏预算)(2022年n = 15)以及IT和整合问题(缺乏内部资源或整合可能性不令人满意)(2022年n = 14)。法律问题似乎随着时间的推移有所减少(2020年n = 6 vs 2022年n = 3),而缺乏验证成为更重要的障碍(2020年n=6 vs 2022年n=9)。图4显示了2022年问卷中提及的障碍频率。
在2021年和2022年,均有13名受访者提到其中心在来年有预留用于放射学AI采购的预算(2021年为36%,2022年为39%)。其余受访者没有预算或不知道是否有预留预算。资金来源为机构层面、放射科层面或两者兼有。如图5所示,2022年资金来源略有向科室层面转移的趋势。
讨论
在过去三年中,荷兰放射科对商业AI产品的采用稳步增加,2022年至少每三个中心中有一个采用,而2020年为每五个中心中有一个。学术医院和教学医院处于领先地位。尤其是实施数量和AI软件产品的多样性迅速增加,表明采用AI的科室一直在扩大其使用规模。2022年,有几个中心停止了某些AI产品的使用;然而,大多数(60%)报告称AI正以健康获益的形式为其临床实践带来附加价值。最常采用的AI产品用于CT上的肺结节检测、卒中诊断和骨龄预测。采用AI的主要障碍仍然是财务和IT相关问题。
2020年,美国放射学会(ACR)数据科学研究所在美国开展了一项调查,以考察人工智能(AI)软件在临床实践中的使用情况[5]。他们发现约三分之一的放射科医生在使用AI,且大多来自规模较大的执业机构。尽管他们并未在单个执业机构层面确认这一点,但这些结果似乎与我们在荷兰的发现相一致。一个显著差异是最常见的AI使用场景。在美国,这是用于乳腺X线摄影分析的软件,这很可能受到本世纪初以来乳腺X线摄影计算机辅助检测(CAD)纳入报销的影响。这也直接证明了报销对AI采纳的影响[9]。预算缺乏以及高额的采购和实施成本仍是阻碍AI采纳的主要障碍,尤其是在综合医院中。有趣的是,没有任何一家中心报告其AI产品仅能降低成本,这表明在当前的产品供应和实施中,提升健康这一目标更为突出。这可能会阻碍采纳,因为将健康收益货币化并不像例如科室自身直接的效率提升那样简单直接。
考虑到当时可获得的CE标志产品,其中仅有17%(34/202)在荷兰得到部署。需要特别注意的是,68项实施中有18项(29%)是来自荷兰AI供应商的产品。荷兰拥有8家AI公司营销13款产品,是全球市场中高于平均水平的参与者。这些公司很可能促进了AI在临床实践中的采纳,并对我国所涉及的用例产生了相当大的影响。荷兰是高收入国家且拥有活跃的医疗(AI)技术市场,这一事实意味着结果可能无法直接外推到其他国家。AI的有利用例(例如低收入国家中更自主的AI)以及采纳程度(通过资源可及性和技术推动的存在)都可能有所不同。
在本研究中,未收录于www.AIforRadiology.com的报告产品被排除在分析之外。与ACR调查中的发现类似,对于什么被视为AI软件、什么不被视为AI软件,尚无共识。选择这种方法是为了建立共同基础并使研究具有可重复性,这可能导致了AI使用情况的轻微低估。为说明这一效应,若无此排除标准,2022年将有25家医院机构(而非23家)拥有45种不同工具(而非34种)的80项实施(而非68项)。被排除的产品大多是传统CAD工具、设备嵌入式软件以及后处理或工作流软件。
本研究的一个局限性是应答率和可能的偏倚。我们未能深入了解荷兰每家中心人工智能的使用情况。使用人工智能的中心表现出更高的参与度,而我们注意到尚未使用人工智能的中心在第一年后出现退出。此外,每中心单一代表可能未能掌握整个科室的全貌,影响了数据质量,且他们通常是最早采用者和项目负责人,可能对人工智能报告得更为积极。后者可能对人工智能在临床实践中附加价值的结果产生了较大影响。由于许多临床中心并未深入研究其人工智能实施的影响,这应被视为主观判断。结果确实说明了受访者对其人工智能体验的总体感受,而根据他们的回答,这种感受是积极的。
过去几年,荷兰放射学人工智能的采用一直在增长。但停滞的初步迹象也在显现,因为实施因缺乏预算或令人失望的体验而被中止。这不一定值得担忧:这些是新市场即将进入成熟状态的常见迹象[10]。随着真实世界证据的增加,人工智能工具的附加价值将变得更加明显,从而去芜存菁。这反过来应有助于克服采用障碍,使放射学人工智能成为主流。
补充信息
ESM 1(PNG 169 kb)
(PDF 163 kb)
引用
- van Leeuwen KG, de Rooij M, Schalekamp S, et al. Clinical use of artificial intelligence products for radiology in the Netherlands between 2020 and 2022. Eur Radiol. 2023. PMID: 37515632. doi:10.1007/s00330-023-09991-5
- 全文:PMC10791748(PMC 开放获取,CC BY)https://pmc.ncbi.nlm.nih.gov/articles/PMC10791748/
供执业医师工作参考,不替代临床判断;数值与分级以指南原文为准。