腹部放射学核心可信赖专业活动的开发与验证
本研究通过改良德尔菲法(3轮)开发并验证了欧洲肝胆胰和胃肠(HB/GI)亚专科诊断影像的EPAs。初步拟定15项,首轮后6项接受、6项需修订、3项被拒、新增1项,经第3轮最终13项EPAs获得验证,同意百分比为95-100%。
要点
- 最终验证13项肝胆胰和胃肠亚专科诊断影像EPAs,同意百分比95-100%。
- EPAs涵盖7个组件,包括适应范围、风险、能力域、所需经验及监督级别等。
- 该EPAs集可作为亚专科诊断影像EPAs开发的模板。
核心结论
- 本研究创建并验证了用于肝胆胰和胃肠亚专科诊断影像的13项EPAs,采用强方法学,作为亚专科诊断影像的首个示例集,为其他领域提供模板。
研究设计与样本
- 研究为改良德尔菲法验证研究,由4名来自两个欧洲国家的专家放射科医生组成试点组初步拟定EPAs。
- 初步EPAs基于对欧洲放射学会(ESR)及法国和爱尔兰的国家放射学学员课程全面审查后制定。
- 首轮德尔菲小组共37名成员,来自2个欧洲国家,背景经验覆盖10个不同国家。
- EPAs包含7个组件:适应范围与局限、失败潜在风险、相关能力域、所需经验知识技能态度行为、评估信息来源、需达到的监督级别、失效日期。
- 验证采用内容效度指数(CVI)和中位数,CVI≥0.8且中位数≥4为接受标准。
诊断标准与关键数值
- 首轮后6项EPAs被接受(CVI≥0.8,中位数≥4),6项需重大修订(CVI 0.7-0.79,中位数≥4),3项被拒(CVI<0.7),1项新增。
- 第二轮后6项修订EPAs和新增1项均达到验证标准(CVI≥0.8,中位数≥4)。
- 第三轮最终13项EPAs获得验证,同意百分比为95-100%。
- 将整套EPAs纳入医学影像课程的同意率为92%。
临床应用与阅片要点
- 原文未据此给出推荐。
局限性
- 德尔菲小组成员多数在大学医学中心工作,可能使部分结果产生偏倚。
- 尽管试图开发适用于欧洲学员课程的EPAs,德尔菲小组成员仅来自两个特定国家。
- 许多国家有自己的国家课程,可能与欧洲放射学会课程略有差异,因此在不同欧洲环境中实施这些EPAs可能具有挑战性。
- 进一步研究可在更多国家验证结果。
- 每个国家可能根据卫生系统结构和当地实践对某些特定主题有自己的指南。
全文中译12 节 · 点击展开
引言
卫生职业教育主要基于学习和知识课程。40年来,放射学领域的出版物数量呈指数级增长。随后,放射学受训者的知识课程范围不断扩大。然而,工作场所学习必须仍然是受训者课程的一部分。知识与能力之间的这种联系对于优化医学课程是必要的。
将基于能力的教育引入受训者课程可能会令人困惑,正确的定义对于将其转化为日常实践至关重要。为此,2005年Olle ten Cate在医学培训中引入了可信赖专业活动(EPAs)的概念,以帮助项目负责人和导师判断其受训者的能力[1]。
EPA是导师在受训者获得足够能力后,在没有监督的情况下委托和授权给受训者的一项任务和/或一组职责[1, 2]。EPA是一个完整的专业实践单元,包括若干项能力。不得将其与单一孤立的任务(例如“使用肝特异性对比剂进行MRI检查”)相混淆。一个完整的EPA需要7个组成部分[2–4]:规范与局限性
失败的可能风险
最相关的能力领域
所需的经验、知识、技能、态度和行为
用于评估进展并作为总结性委托决定依据的评估信息来源
在培训的哪个阶段应达到何种监督级别的委托
有效期
EPAs是一个新兴概念,最近已在麻醉学和重症监护等领域建立[5, 6],但在亚专科诊断影像学中很少见。这可能是由于在纯诊断工作中定义和评估能力这一任务较为困难。在本文中,我们开发并验证了一套用于肝胆和胃肠诊断影像学的EPAs,采用改良德尔菲研究法,该方法基于ten Cate和Hennus先前描述的EPA开发方法[6]。
材料与方法
初步EPAs的开发
由来自两个欧洲国家的4名专家放射科医师(2名教授和2名顾问医师,均专攻肝胆和胃肠放射学)组成的试点小组对ESR放射学受训者课程进行了广泛而彻底的审查。为补充这一详尽审查,还审查了两个不同欧洲国家(法国和爱尔兰)的国家放射学受训者课程。通过这些审查,他们确定了各项能力并创建了初步EPAs集合。为每个EPA定义了标题和规范/局限性,以及能力领域、知识、技能、态度和评估方法。创建了一份包含15个EPAs的初步清单,每个EPA均按照前述7个组成部分(见引言)进行了完整描述[4]。在适当情况下,EPA内容被分为住院医师和专科培训医师两个级别。正如ten Cate所解释的[4],委托决定的条件应指导培训活动。因此,每个EPA还必须明确预期经验。随后使用改良德尔菲法达成小组共识并收集专家意见[7]。
第一轮德尔菲
在第一轮德尔菲调查前一个月,联系了专家组所有潜在参与者,并向他们发送了项目介绍邀请。根据建立德尔菲专家组的建议[7–11],精心选择了参与德尔菲组的成员。联系了来自两个欧洲国家的广泛且有代表性的参与者加入德尔菲组,包括教授、顾问医师、专科培训医师和住院医师。向参与者发送了预备视频会议通知、说明性电子邮件和关于EPA的参考文献。选择这一个月的间隔是为了让所有参与者有足够时间在需要时联系试点组以获得更多解释。
为第一轮德尔菲调查开发了一项在线调查[12]。调查示例见附加文件1。该调查由来自两个国家的三名放射科医师(一名教授、一名顾问医师和一名住院医师)进行测试,以确保i.问题的清晰度和格式,以及ii.问题的全面性,从而能够给出适当的回答。这三名放射科医师未参与德尔菲调查流程。根据调查测试结果做了一些细微的文字修订。随后将电子调查发送给48名利益相关者,并附上第二封详细电子邮件,再次(重复)包含关于EPA的信息。
要求专家组成员对每个EPA的“不可或缺性”、“全面性/清晰度”和“完整性”进行评分,采用5点Likert量表如下:5,非常同意—4,同意—3,既不同意也不反对—2,不同意—1,非常不同意。选择这一5点Likert量表是为了使中点代表中性回答。为避免对词语的误解,还添加了1至5的数字[13]。在每个回答之后,提供一个开放式文本框用于任何额外建议,包括额外建议的EPA。此外,所有初步列出的知识、技能和态度均采用2点二分量表逐项批准:2,批准—1,不批准。同样,在每个部分之后提供开放式文本框用于自由文本补充建议。调查的最后部分询问成功完成委托所需检查的数量(数字开放框)、住院医师和专科培训医师级别预期的监督水平(1至5量表)以及有效期(数字开放框)。监督水平为:第1级:不允许实践EPA
第2级:仅允许在主动、全程监督下实践EPA
第3级:仅允许在被动/按需监督下实践EPA
第4级:允许在无监督下实践EPA
第5级:允许监督他人实践EPA
第一轮德尔菲调查的数据分析
第一轮德尔菲(Delphi)结束后,所有结果和意见均由试点组的4名成员进行分析。首先,针对每个EPA计算每个Likert量表的量表内容效度指数(CVI)[14]。对于每个条目,CVI按给予4分或5分评级的专家人数除以专家总数计算。CVI最初是在4点评级量表上描述的[14, 15]。由于本研究选用了5点Likert量表,CVI结果的处理方式与Hennus等[6]研究中先前描述的一致:CVI为0.8或更高表示内容效度充分,CVI在0.70至0.79范围内意味着该条目需要修订,CVI低于0.70则表示应删除相应的EPA。随后计算每个条目(不可或缺性、全面性/清晰度和完整性)的中位数评分,中位数<4被认为表示该EPA需要修订。对于涉及2点量表的问题,若CVI为0.8或更高则条目获通过,若低于0.8则删除。开放文本框中的意见和建议均由试点组4名成员审阅,并按以下方式处理:(a) 关于文字澄清和/或修改的建议:若试点组一致同意则建议被采纳;(b) 与现有EPA指南相矛盾的建议:建议被拒绝;(c) 由>5%的全部专家组成员提出的关于EPA内容的建议:建议被采纳;(d) 由<5%的全部专家组成员提出的关于EPA内容的建议:建议被拒绝。对于成功完成委托所需检查的次数,采用中位数;对于预期监督水平和有效期,采用均值。数据使用SPSS软件15.0版进行分析。
第二轮德尔菲
第一轮德尔菲的所有结果经汇总后发送给德尔菲专家组成员。重点在于使用对比表、图表和颜色使结果和修改内容清晰易览。被保留的补充建议附有提出该建议的专家组成员百分比。第二轮德尔菲的调查仅纳入根据CVI和中位数需要修订的EPA。再次要求专家组成员使用5点Likert量表对每个修订版EPA的“不可或缺性”、“全面性/清晰度”和“完整性”进行评分。知识、技能和态度以2点二分量表进行总体认可度评定。此外,调查中新增了一个EPA(EPA 16,见结果部分)。该EPA经历了与第一轮德尔菲相同的过程。
第二轮德尔菲的数据分析
计算每个量表的CVI和中位数。所有新的结果和意见再次由试点组4名成员分析。实施第一轮德尔菲中描述的先前数据分析,同时对修订版EPA和新EPA进行。数据使用SPSS软件15.0版进行分析。
第三轮德尔菲
在最后一轮中,每个EPA以卡片形式呈现,全部7个组成部分均以最终版本完成。要求专家组成员对每个EPA以2点二分量表“同意”或“不同意”进行总体认可度评定,并对整套EPA纳入医学影像课程的实施进行批准。
结果
第一轮德尔菲
在发送给专家组成员的48份调查问卷中,共收到来自两个不同国家的38份完整回复(79%)(图1)。最终专家组包括15名教授(39.5%)、15名顾问医师(39.5%,其中13名公立、2名私立)、5名专科培训医师(13%)和3名住院医师(8%)。所有参与者均专注于肝胆和胃肠影像亚专科。(3名住院医师具有肝胆和胃肠影像经验。)参与者中男性23名(60%),女性15名(40%)(表1)。在38名参与者中,13名曾在其他国家具有至少6个月的肝胆和胃肠影像亚专科经验(均值=2年±2.7)。总共代表了10个不同国家。
计算了必要性、全面性/清晰性和完整性的内容效度指数(CVI)和中位数(表2,图1、2和3)。所有中位值均≥4。6个EPA的CVI>0.8并被接受(图2a)。6个EPA(EPA 1、EPA 3、EPA 4、EPA 6、EPA 7和EPA 8)在“必要性”、“全面性/清晰性”和/或“完整性”方面未达到0.8的阈值,CVI范围为0.7至0.8。这些EPA根据与各项结果相关的意见进行了重大修订。3个EPA在必要性方面的CVI<0.7并被拒绝。被拒绝的3个EPA为:“执行和解读特定的结肠检查”、“执行和解读食管成像”和“有效为腹部/消化多学科团队(MDT)会议提供临床/影像学意见”(见讨论部分)。
此外,11%的专家组成员要求增加一个额外的EPA(“执行和解读腹部和胃肠系统的术后成像”),该EPA在第2轮中新增(EPA 16)。
第二轮德尔菲
在发送的38份调查问卷中,收到36份回复(95%),均完整填写。修订后的EPA在必要性、全面性/清晰性和完整性方面的CVI均提高至>0.8(图2b、图3、表2)。所有中位值均≥4。新增的EPA 16因必要性、全面性/清晰性和完整性的CVI均超过0.8而直接获批进入第3轮。该EPA的所有知识、技能和态度也以CVI>0.8获得批准。
第三轮德尔菲
在发出的38份调查问卷中,有38份(100%)完整回复。所有EPAs均经专家组验证(表2)。将整套EPA纳入医学影像课程的实施同意率为92%。根据专家组成员的意见,最终展示时调整了EPAs的顺序,使涵盖更多基础住院医师级能力的EPAs置于课程开头,而更高级的专科培训医师级EPAs置于课程末尾。对应关系表见补充材料2。最终确定13项用于肝胆和胃肠诊断影像学的EPAs,均在表3中总结。图4展示了一个完整EPA的示例。所有完整EPAs可在补充材料3中查阅。
讨论
亚专科诊断影像学缺乏基于能力的课程体系,这可能是因为与例如基于操作的活动相比,在纯粹的诊断性智力活动中界定能力是一项困难的任务。在本研究中,我们制定了13项用于肝胆和胃肠诊断影像学的EPAs清单。该研究通过一个国际专家组进行了验证,采用了严谨的方法学:改良德尔菲法。
除方法学外,本研究的主要优势之一是对每项EPA内容的广泛验证。不仅要求专家组成员评估必要性、全面性/清晰性和完整性,还要求验证每项EPA所需的知识、技能和态度,以及每项检查所需的经验、根据培训阶段(住院医师 vs. 专科培训医师)的监督级别和有效期。据我们所知,这种验证水平及其方法在文献中此前未见报道。
我们的研究比以往关于EPA的研究更进一步,将肝胆和胃肠诊断影像学课程细分为住院医师和专科培训医师两个级别。这种方法对试点小组而言难以考虑,对专家组成员也可能造成混淆。在研究前向每位专家组成员提供了仔细而精确的说明,以使每个人拥有相同的定义。在第一轮德尔菲过程中,当个别利益相关者提出问题时,额外回答了一些问题。此外,开放文本框中的许多评论涉及所归属的能力级别。住院医师/专科培训医师级别最初是根据欧洲/国家课程设置的。因此,当这些课程中明确指定时,这些级别未被更改,并在第二轮之前向建议更改的专家组成员进行了解释。然而,对于某些能力,培训学员的级别未被明确指定。在这种情况下,按照材料和方法中描述的规则对评论进行了考虑。
第一轮德尔福(Delphi)会议后,被否决的三项EPAs(可信赖专业活动)分别是:i. 执行并解读特定的结肠检查;ii. 执行并解读食管成像;iii. 在腹部/消化系统多学科团队(MDT)会议上有效贡献临床/影像学意见。前两项EPAs的必需性内容效度指数(CVI)分别为0.62和0.65,专家小组基于类似理由否决了它们,例如所需技能过于具体、检查数量少、因此在许多大学中心难以教授,故不应成为每位受训者系统课程的一部分(分别有16%和19%的专家组成员持此观点)。然而,作为受训者系统课程的一部分被否决,不应阻止各中心在条件允许且受训者有学习兴趣时尝试教授这些检查。第三项被否决的关于MDT胜任能力的EPA,其CVI最低,为0.57,且反对意见最多,认为该EPA既不属于住院医师级别,也不属于专科培训医师级别。试点小组最初对专家组的这一决定感到惊讶,因为参与MDTs是他们所审查的3个课程的一部分。然而,回到EPA的定义,专家组的评估实际上是正确的,因为EPA被定义为在获得足够胜任力后,由监督者委托受训者独立执行的任务[4]。然而,例如在ESR课程二级中,该胜任力/态度被定义为“参与并在监督下于多学科会议上执行”。事实上,22%的专家组成员澄清其反对意见时指出,受训者必须参与MDTs,但在成为顾问医师之前不应考虑委托。这个例子也显示了德尔福方法的强大方法论。
本研究存在若干局限性,主要与德尔福小组参与者有关。德尔福调查是一个旨在将意见转化为小组共识的专家组。德尔福小组的成员应是对所调查主题具备知识的个体,被定义为“知情人士专家组”或“专家”[9, 10]。我们的专家组成员因其对腹部放射学的知识和投入而被选定。他们大多数在大学医学中心工作。这可能使部分结果产生偏倚,但我们试图通过从不同背景和不同专业水平选择专家(包括教授、顾问医师、专科培训医师和住院医师)来平衡专家组。此外,尽管我们试图制定这些EPAs以纳入欧洲培训学员课程,但德尔福小组的成员仅来自两个特定国家。尽管欧洲放射学会课程倾向于在欧洲各国提供同质化建议,但许多国家也有自己的国家课程,各国之间可能略有差异。因此,这些EPAs在不同欧洲环境中的实施可能具有挑战性。进一步的研究可在更多国家验证这些结果。此外,每个国家很可能针对某些特定主题有自己的指南,取决于卫生系统结构和当地实践。在这些建议中纳入额外的指导和建议信息(例如EPAs的目的)也可能有助于其推广实施,增强使用EPAs能力的信心[16, 17]。
总之,本研究制定并验证了一套13个EPAs,可用作欧洲培训学员的肝胆和胃肠诊断影像学课程。稳健的方法学和欧洲验证使其具有广泛适用性,并为诊断影像学其他亚专科创建EPA提供了潜在模板。
补充信息
附加文件1:ESM 1:EPA 3调查示例。第一轮德尔福调查。ESM 2:3轮德尔福调查中的EPA编号与最终呈现的EPA对应表。ESM 3:亚专科HB/GI诊断影像学的13个EPAs。
引用
- Paisant A, Skehan S, Colombié M, et al. Development and validation of core entrustable professional activities for abdominal radiology. Insights Imaging. 2023. PMID: 37644337. doi:10.1186/s13244-023-01482-x
- 全文:PMC10465426(PMC 开放获取,CC BY)https://pmc.ncbi.nlm.nih.gov/articles/PMC10465426/
供执业医师工作参考,不替代临床判断;数值与分级以指南原文为准。