爱尔兰共和国紧急与急诊照护系统绩效指标的制定:系统评价与共识开发
本研究更新了截至2014年的系统评价,并开展在线调查与面对面名义小组共识会议,参与专家共17名,覆盖急诊护理、急诊医学、重症医学、全科等多个学科及患者倡导组织。系统评价最终纳入3篇文章,与既往系统评价合并后产生42项独特指标。共识会议后,17项指标的中位数大于7,达到预设的可接受共识标准,被共识专家组认为可能是爱尔兰紧急与急诊照护系统绩效的良好衡量指标,其中12项为过程指标、5项为结局指标。
要点
- 共识专家组由17名爱尔兰紧急与急诊照护领域专家组成,在线调查14人完成,面对面会议13人出席,第二轮排名13人全部完成。
- 系统评价初检2339篇文章标题,最终纳入3篇文章,产生4项新指标,与既往系统评价合并后共42项独特指标供共识评价。
- 共识会议后17项指标的中位数大于7,达到预设的可接受共识标准,被专家组认为可能是系统绩效的良好衡量指标。
- 17项指标由12项过程指标和5项结局指标组成,其中3项新指标来自本次系统评价:患者报告的全流程体验、院际转运患者死亡率、从决定收治到转入合适住院床位的时间。
- 作者指出该指标集由爱尔兰专家设计、适用于爱尔兰卫生系统,可能不适用于其他国家,且未考虑数据收集可行性,部分指标可能无法立即测量。
适用人群与场景
- 研究场景为爱尔兰共和国的紧急与急诊照护系统,涵盖药房、初级保健、轻伤单元、急性内科评估单元、急诊科、精神卫生服务及转诊与转运服务。
- 共识专家组纳入爱尔兰紧急护理、急诊医学、麻醉/重症医学、精神病学、公共卫生、儿科、院前急救、全科医学、药学、老年医学等临床学科专家,以及卫生服务执行局质量改进司、爱尔兰卫生部、卫生信息与质量管理局和两个患者倡导组织的代表。
诊断标准与关键阈值
- 共识评价采用9点李克特量表,成员对「该措施可能是紧急与急诊照护系统绩效的良好指标」这一陈述按1(强烈不同意)至9(强烈同意)评分。
- 共识会议后按中位数同意评分排序,中位数大于7的指标被归类为可能良好的绩效指标。
- 紧急与紧急情况定义采用谢菲尔德大学为英格兰NHS既往共识开发工作中使用的定义。
研究设计与关键结果
- 本研究为系统评价更新(检索2008年至2014年PubMed)加正式共识开发(在线调查与面对面名义小组会议),系统评价按PRISMA报告。
- 文献检索初检2339篇文章标题,标题筛选后降至150篇,摘要审阅后检索47篇全文,另从参考文献列表补充7篇、灰色文献补充6份文件,共60项全文审阅,排除57项后纳入3篇文章。
- 3篇纳入文章产生4项新指标:患者报告的全流程紧急与急诊照护体验、院际转运患者死亡率、院际转运时间、从决定收治到转入合适住院床位的时间。
- 与既往系统评价合并后共42项独特指标供共识评价,共识会议后17项指标中位数大于7,达到预设的可接受共识标准。
- 17项指标由12项过程指标和5项结局指标组成;其中4项曾进入英国既往共识开发前16项指标,3项为本次系统评价发现的新指标。
证据类型、等级与局限
- 证据类型:系统评价更新加名义小组共识开发;系统评价按PRISMA报告。
- 局限:系统评价仅覆盖至2014年,可能遗漏更近期文献;自2014年以来至少又发表了两项共识开发研究,但均未聚焦整个紧急与急诊照护系统。
- 局限:系统评价数据提取由两名评价者独立完成并达成共识,但未进行正式的评价者间信度评估。
- 局限:未试图达成一致意见,部分指标可能对某些利益相关群体存在争议。
- 局限:要求专家组成员不考虑计算指标所需数据的收集可行性,所选绩效指标可能无法立即测量。
- 局限:常规收集的二手数据仅可用于17项指标中的2项(严重紧急情况病死率和可门诊处理情况的入院率),时间类指标在爱尔兰公立医院卫生信息系统中几乎完全缺失。
对床旁实践的改变
- 作者指出该指标集由爱尔兰专家设计、适用于爱尔兰卫生系统,可能因术语和服务组织方式差异而不适用于其他国家卫生系统。
- 作者认为常规收集的二手数据很少能用于计算本文提出的指标,17项指标中仅2项可使用常规数据,通常需要原始数据收集。
- 作者指出基于人群、干预和结局难以定义的研究难以操作化,地理层面分析因地理单元与卫生系统干预不完全对应而存在边界泄漏问题。
- 作者认为传统研究设计是否适合比较整个照护系统值得商榷,系统层面分析可能掩盖特定照护路径患者亚组的真实差异。
- 作者指出每项指标针对异质性患者群体且为不同结局的复合,可能掩盖患者亚组和特定结局的有价值信息。
指南或共识出处
- 本研究为HRB Open Res发表的系统评价与共识开发研究,无指南或共识出处。
提炼说明
- 原文未涉及「处置流程与药物剂量」「红旗征与不能漏的情况」,故未列出这些栏目。
全文中译10 节 · 点击展开
引言
急诊和紧急护理包括所有在因健康问题寻求即时护理时为患者管理做出贡献的服务。当患者需要即时护理时,他们可以通过一系列服务进入卫生系统,并且通常会使用不止一种服务。这可能导致服务重复、患者对最合适的接入点产生困惑以及协调不良的护理风险,尤其是在患者从一个服务转移到另一个服务时。急诊和紧急护理服务包括药房、初级保健、轻伤单元、急性医学评估单元、急诊科、心理健康服务以及将患者转诊和转运至适当治疗机构所需的所有服务。
人们日益认识到,紧急和急诊护理服务应作为其所服务人群的整体护理系统来运作1。采用这种方法需要将各个服务提供者整合到更大的系统中,并相应地协调其活动。希望系统方法能够在不对就医公平性引入不平等的情况下,提供更高标准的质量、安全性、效率、及时性和整体患者体验。政策制定者在试图构建紧急和急诊护理的系统方法时,有多种工具可供使用。这些包括将高风险病例集中到高容量医院单元,以及使用转诊路径和轻伤单元等新设施将低风险病例引导至适合其病情的场所2。其他要素包括使用远程医疗为较小设施提供支持,以及为对门诊护理质量敏感的患者发展社区服务3。
健康服务执行局(HSE)负责爱尔兰共和国公共资助卫生服务的提供。HSE已尝试在全国范围内促进急诊和紧急护理服务的系统方法,但变革的速度和性质差异很大。在四个外围地区(南部、西部、中西部、东北部),重组过程已处于后期阶段,但都柏林、中部地区和国家东南部的进展要慢得多。这种差异代表了政策制定中的一项自然实验,也是一个在变革在全国推广之前观察其影响的机会。
现有的急诊和紧急护理绩效指标侧重于单个服务,未能反映系统的绩效4。此类指标的开发将使政策制定者能够比较不同的护理模式,并评估服务配置变化的纵向影响。鉴于这一点,并考虑到HSE引入基于系统的急诊和紧急护理方法,本研究的目的是制定一套绩效指标,以监测爱尔兰共和国急诊和紧急护理系统的绩效。
方法
系统综述
本研究包括对先前开展的一项系统评价的更新(该系统评价覆盖至2007年的文献5)以及一项正式的共识形成活动。系统评价更新于2014年8月由一人(RD)完成。通过使用AND运算符组合文本词“emergency”和“indicator”的各种变体,系统检索了2008年至2014年期间PubMed中引用的文章。我们对新指标的检索还通过审查入选文献的参考文献列表加以补充。我们还联系了从事紧急和急诊护理绩效评估的专家和组织,以识别相关灰色文献。这些包括美国学术急诊医学会、美国医疗保险和医疗服务中心、美国急诊科基准联盟、加拿大急诊医师协会、欧洲急诊医学会、英国皇家外科医师学会、爱尔兰院前急救护理委员会以及相关HSE临床规划部门。
文章由两人(RD和JB)选定进行审查,依据是其可能包含紧急和急诊护理绩效的系统层面指标定义。在审查全文版本后,如果文章所含指标已被先前的系统评价列出,或其侧重于紧急和急诊护理系统的个别组成部分(如急诊科等待时间或救护车响应时间),则予以排除。非英文文章也被排除。入选文章由RD和JB阅读和讨论,他们就文章是否包含至少一项衡量紧急和急诊护理系统层面绩效的指标达成共识。采取了保守的方法,仅当指标明确与特定服务相关且未反映系统功能要素时才予以排除。采用这一方法的理由是,随后的共识形成活动将对指标作为系统绩效有用信号的程度作出最终判断。
该系统评价已按照PRISMA进行报告(补充文件1)。
共识形成活动
共识形成活动包括一项在线调查和一次面对面名义小组会议。共识形成小组招募了广泛的爱尔兰专家。专家招募通过联系专业代表机构、政策制定组织、监管机构和患者倡导团体进行。以下临床学科被招募进入小组:急诊护理、急性医学、轻伤/急诊护理、麻醉/重症监护、急诊医学、精神病学、公共卫生、儿科、院前急救、全科医学、药学 and 老年医学。HSE质量改进部门、爱尔兰卫生部、爱尔兰医疗监管机构(健康信息与质量管理局)以及两个患者倡导团体也有代表参加。一旦个人被确定为潜在成员,即通过电子邮件和电话联系其加入小组。随后向有意愿者发送正式邀请函加入小组。小组总共由17名爱尔兰紧急和急诊护理领域的国家专家组成。
在更新的系统综述中确定的所有新指标与原始系统综述中确定的指标进行了合并,并在在线调查中按以下标题分组:基于结果的指标、基于过程的指标和结构性指标(见补充文件2)。紧急和急症情况的定义采用了谢菲尔德大学此前为英国国家医疗服务体系(NHS)开展的共识制定工作4中所使用的定义(见补充文件3)。该调查使用在线工具Survey Monkey设计并分发给共识制定小组。所有小组成员均收到在线调查链接并被要求完成调查。每位成员被要求对“该措施可能是紧急和急症护理系统绩效的良好指标”这一陈述的同意程度进行评分,采用以1(“强烈不同意”)和9(“强烈同意”)为锚点的Likert量表。此外还为成员留出了添加任何评论的空间。参与者被要求不要因感知到的收集或处理计算指标所需数据的困难而限制其对指标潜在有用性的看法。14名共识组成员完成了调查。
2014年10月举行了一次面对面会议,所有完成在线调查的共识组成员均被要求参加。14名受邀成员中有13人参加了会议。一名成员原计划参加,但因临近会议时出现了另行的工作安排而未能出席。每位参与者都获得了原始问卷,其中现在包括了其个人对在线调查的回答记录以及小组的中位数得分和四分位距。会议采用名义群体技术形式进行。一旦每位参与者有机会就某一指标发表意见,该指标即由小组成员再次排序。该程序对每个指标逐一进行,直至所有指标均被讨论完毕。会议结束后,绩效指标按其同意度中位数得分排序。中位数大于7的指标被归类为潜在良好的绩效指标。随后使用在线工具Survey Monkey创建了第二次在线调查。中位数得分大于7的指标被纳入其中,所有参与者被要求按偏好顺序对这些指标进行排序。较高的排序表示较大的偏好,并以较低的数字表示。该练习被发送给参加共识制定会议的13名小组成员,完成率为100%。
结果
文献检索策略识别出2339篇文章标题。通过标题检索将数量缩减至150篇,对这些论文摘要的审查促使检索47篇文章进行全文审查。从所审查的47篇全文文章的参考文献列表中又识别出7篇文章,并从灰色文献来源中选取了6份其他文件进行审查。两名研究人员(RD和JB)审查了选定进行全文审查的60个项目。经过此次审查,57篇被排除,原因如下:在全文阶段被排除的文章中有44篇聚焦于基于服务的指标,7篇报告了既往系统综述已描述的指标,6篇为描述性研究且未聚焦于特定指标(图1)。这一过程最终识别出3篇文章纳入综述4, 6, 7。
最终纳入综述的3篇文章产生了4个既往系统综述中未呈现的新指标。这些指标为:患者报告的整个急诊和紧急护理经历4;院际转运患者的死亡率6;院际转运时间6;以及从决定收治到转运至合适住院床位的时间7。将这些新指标与既往系统综述中已识别的指标相结合,共产生42个独特指标供共识发展小组审查。共识会议后,共有17个指标在Likert同意量表上的中位评分大于7(见补充文件4)。表1呈现了第二次在线调查产生的这17个指标排名的中位数、均值和范围。
讨论
通过系统综述和名义小组共识发展活动,我们识别出一组17个指标,一个由不同专家组成的共识小组认为这些指标可能是衡量爱尔兰紧急和急诊护理系统绩效的良好指标。据我们所知,这只是第二次尝试制定纯粹聚焦于紧急和急诊护理系统层面绩效的指标集,也是爱尔兰的首次尝试。该指标集由爱尔兰专家设计,适用于爱尔兰卫生系统。因此,由于术语和服务组织方式的差异,它未必适用于其他国家的卫生系统。
该列表由12个过程指标和5个结果指标组成。17个指标中有4个被纳入英国既往开展的共识发展活动所产生的前16个指标中4,另有3个是通过我们的系统综述识别的新指标。这3个新指标为:患者报告的整个急诊和紧急护理经历4;院际转运患者的死亡率6;以及从决定收治到转运至合适住院床位的时间7。
本研究采用标准的系统评价和共识制定方法开展。共识组成员是特意挑选的,因为他们被认定在紧急和急诊护理的各个方面具有广泛的专业知识和学识。在线调查使这些成员的意见得以收集和汇总,而面对面会议则为成员提供了在听取同事意见的基础上考虑指标的机会,同时也使专家小组成员能够就绩效指标的措辞和清晰度进行讨论。
研究局限性
我们的研究存在一些局限性。系统评价仅涵盖截至2014年的文献,因此可能遗漏了一些较近期的文献。自2014年以来,该领域至少又发表了两项共识制定研究。这些研究并非聚焦于整个紧急和急诊护理系统:一项仅涵盖院前护理 8,另一项仅聚焦于急诊科(ED)内的护理 9。尽管如此,值得注意的是,那项院前绩效研究发现,“将ST段抬高型心肌梗死患者直接转运至具备直接经皮冠状动脉介入治疗(PCI)能力的机构,以实现心电图至PCI时间<90分钟”是排名最高的指标。这与我们的发现一致,即针对指标性疾病的“从呼叫到护理的时间”被评为我们整个紧急和急诊护理系统的最佳绩效指标。这在一定程度上支持了我们共识制定工作的有效性。
系统评价中的数据提取由两名评价者独立进行,随后达成共识。然而,未进行正式的评分者间信度评估。
未尝试达成完全一致,因此部分指标可能对某些利益相关群体存在争议。我们还要求专家小组成员不考虑收集计算指标所需数据的可行性。这可能意味着所选绩效指标无法立即测量;然而,我们希望数据收集的进展能够使这些绩效指标在未来得以测量。
意义
本文的结果已被用于开展三项关于爱尔兰紧急和急诊护理的研究,每项研究均采用上述一项排名较高的指标。第一项研究测量了“本可由表现良好的紧急和急诊护理系统(EUCS)提高生存机会的严重急症的病例病死率”,以评估2002—2014年期间爱尔兰国家和区域人群结局是否与区域紧急和急诊护理系统的重构相关。与未经历实质性重构的地区相比,经历实质性重构的地区未发现明显不同的变化模式10。第二项研究测量了2014—2016年期间人口和卫生系统因素对爱尔兰县级“其病情加重可在院外或在急诊科处理而无需收治住院的情况”变异的影响11。该研究发现,可能可避免的急诊入院主要由社会经济状况、医院收治政策和私人医疗保险覆盖所驱动,而与初级保健资源无关。这对该领域政策是一项重要发现,因为它提示,仅通过增加相关初级保健资源的数量未必能减少可门诊处理情况的急诊入院。该研究还发现,在试图识别急诊入院率地区差异的原因时,“可能可避免”与所有其他急诊入院之间的区分可能并不像此前认为的那样有用。第三项研究使用“患者报告的整个紧急和急诊护理经历”来比较爱尔兰八个区域紧急和急诊护理系统的使用者体验12。该研究发现患者体验与不同地区紧急和急诊护理模式类型之间没有一致关系,并得出结论:复合问卷数据可能无法为探索系统层面服务变化的影响提供有用的指标。
我们的研究项目,包括本研究,产生了一些一致的学习要点,可能对该领域的研究人员有用。首先,由于不同服务之间的相互依赖性,区分单个服务绩效指标与整个系统绩效指标并不容易。例如,“呼叫至救护车到达现场时间”这一指标乍看似乎只涵盖一项服务,但在共识小组讨论期间,人们认为它反映了一些系统层面的问题,例如救护车站和急诊科位置的地理配置,以及由系统层面决策(例如需要将更多救护资源用于院际转运)所造成的救护服务容量压力。
其次,当人群、干预措施和结局难以界定时,研究难以操作化。例如,在上述三项研究中,所研究的人群都是在地理层面(如县、地区)进行比较的,但这些层面不可避免地是不完善的分析层面,因为地理单元并不能完美对应卫生系统干预措施,尤其是在人群同时暴露于旧和新照护模式的边界地区。这一问题并未致命性地损害我们病死率研究 10 的内部效度,因为所有地理单元都受到一定程度的人群“边界泄漏”影响,且受影响的总体研究人群比例较低。然而,一般而言,研究人员应警惕这种泄漏可能构成重大挑战的情况,例如当边界横穿城市地区且很大比例的人口能够方便地获得不止一种照护模式时。
第三个相关问题是系统评价的总体复杂性。传统研究设计是否是比较整个照护系统的有用方法值得商榷,因为在复杂系统内难以对因果关系作出强有力的推断。尽管越来越多的人呼吁在整体卫生系统层面评价复杂的组织干预措施,但由于难以处理复杂性 13,进展有限。在我们的两项研究中 10, 12,我们未发现不同照护模式所治疗人群之间的结局存在差异的证据。在特定背景下,特定照护路径上的患者亚组很可能确实存在真实差异,但这些差异的信号被针对整个人群的系统层面分析所掩盖。我们的研究提供了关于总体结局和时间趋势的有用信息,但需要更有针对性的研究来为政策制定者提供关于系统变革(如医院重新配置)影响的证据。这些研究应关注过程(如对新医院转诊指南的依从性)以及结局 13。复杂系统中干预措施的影响也可能在我们所用的时间框架内不明显,需要更长期的研究 13。
第四,每个指标针对的是一个异质性患者群体,并且是不同结局的复合指标。这可能掩盖关于患者亚组和特定结局的有价值信息。例如,病死率研究合并了 16 种不同疾病的结局 10。患者体验研究将多个问题合并为复合量表评分 12。这两项研究均未发现紧急和急诊照护模式之间结局差异的信号,这可能表明在使用绩效指标评价紧急和急诊照护系统时需要更精细的分析。
第五,常规收集的二手数据很少能用于计算本文提出的指标,通常需要收集原始数据。常规数据仅能用于17个指标中的两个(严重紧急情况的病死率和门诊情况的入院率)。患者体验研究是原创性的,因为在研究进行时没有此类数据可用。此后爱尔兰引入了一项每年进行的全国患者体验调查14。然而,该调查仍聚焦于单个急诊科,因此不适合分析全系统变化对患者体验的影响。基于时间的指标在爱尔兰公立医院的卫生信息系统中几乎完全缺失。
最后,我们的一项研究发现,指标“其急性加重可在院外或急诊科处理而无需入住住院床位的情况的急诊入院率”对护理环境变化的敏感性并不高于总急诊入院率。这强调了以批判性方法对待绩效指标的重要性,这些指标尽管表面上似乎具有明显的内容效度,但可能并不适用于其预期目的。
伦理声明
本研究获得科克教学医院临床研究伦理委员会批准[ECM 4 (q) 02/07/13]。参与者进入调查并完成调查的过程即构成知情同意。
数据可用性
数据可在开放科学框架获取:http://doi.org/10.17605/OSF.IO/3CW6F 8
数据依据知识共享署名4.0国际许可协议(CC-BY 4.0)的条款提供。
补充材料
补充文件1:PRISMA清单。
点击此处获取额外数据文件。
补充文件2:更新版系统综述中识别的所有新指标与原始系统综述中识别的指标之合并。
点击此处获取额外数据文件。
补充文件3:紧急护理敏感情况和紧急情况的定义。
点击此处获取额外数据文件。
补充文件4:共识发展小组会议后所有指标共识发展小组评分的中位数、范围和均值,采用9点李克特量表。较高分数代表对该指标是衡量系统性能的有用指标更高程度的认同。
点击此处获取额外数据文件。
利益冲突:未披露利益冲突。
摘要包含所有相关信息。结果部分对文献流程图的描述与文献综述的流程图不一致,详见下文。
引言部分对该主题进行了清晰的介绍。
系统评价的方法描述清晰。作者若能除Medline外再检索另一个数据库可能更有用,例如Embase、Cochrane Library、CINAHL或HMIC,但仅检索Medline的决定可能是由于时间、资源和获取途径的限制。以可重复的格式纳入PubMed检索策略本会更有用,如果文章中空间不足,可作为补充材料提供。联系灰色文献的来源是恰当的,检索并纳入灰色文献是本综述的一个优势。我不担心检索日期的问题,因为所检索到的文章被用于制定新型指标的清单,以供共识形成活动使用,该活动现已完成;文中也将系统评价仅涵盖至2014年、可能遗漏了更近期文献这一点作为局限性进行了讨论。
纳入PRISMA清单是有用的,但我认为关于检索策略的信息不足以使其可被重复。PRISMA清单要求“至少提供一个数据库的完整电子检索策略”,而本文仅包含了使用AND运算符组合文本词“emergency”和“indicator”变体的表述。
共识形成活动的方法同样描述清晰。文中提供了关于参与专家的广泛范围的详细信息。
结果部分首先描述了文献检索的结果,较为清晰,但与流程图对照阅读时难以理解。文献综述的流程图难以理解,也难以与摘要中的结果部分相对应。例如,流程图中显示文献检索得到2339篇文章,随后结果部分提到进一步检索,然后确定了60个项目进行全文审查,但流程图中为47个。在此处按PRISMA 2009流程图完成填写本会更合适,届时有望更加清晰。共识形成活动的结果是清晰的。
研究局限性部分恰当,所提及的所有局限性均相关且描述充分。
意义部分组织良好,首先讨论了利用本文结果已开展的三项研究,然后讨论了对其研究的意义。
总体而言,是一篇优秀且有趣的论文。
我确认我已阅读此投稿,并相信我具备适当的专业水平来确认其符合可接受的科学标准。
利益冲突:未披露任何利益冲突。
阅读审稿人报告后,我仍有一些顾虑。如果检索能涵盖更多新文章,对文章会更有益,2014年似乎已经很久远了。即使你们在后面对此进行了解释,读者看到的截止日期仍是2014年。
你们声称排除了单个组成部分,但指标中仍有一些单个组成部分,因此这对读者来说仍不清楚。你们从未真正解释另外6份灰色文献文件的情况。
图1应以不同的格式绘制,现在你们的图看起来像是流程从2339篇潜在相关文章开始,但实际情况显然并非如此,因此你们需要在图中绘制三个不同的流程。
表1中未说明EUCS是什么,请写出全称;此外,SIREN工作包对读者来说也不清楚。我不明白你们为什么纳入院际转运,其中大多数不属于急性或急诊医学范畴。
我确认已阅读本投稿,并相信本人具备适当的专业水平来确认其符合可接受的科学标准,但如上所述,我仍有重大保留意见。
利益冲突:未披露任何利益冲突。
我建议接受本文,尽管遗憾的是作者未采纳两位审稿人的建议延长文献检索时间,目前检索截止于2014年(已是5年前!)。
我确认已阅读本投稿,并相信本人具备适当的专业水平来确认其符合可接受的科学标准。
利益冲突:未披露任何利益冲突。
感谢提供审阅本文的机会。文章写得很好且简洁。研究问题重要且新颖;院前急救和急诊医学领域已有若干研究考察绩效指标,但通常聚焦于系统内的服务。寻找能反映整个系统绩效的指标这一思路很重要,可能有助于使目前爱尔兰及其他地区尚不存在的激励机制趋于一致。总体而言研究做得很好。我对其中几个代表(整个系统)的指标有一些顾虑(见后文),但总体而言,这些指标似乎代表了作者设定的目标,且许多指标此前未被强调过。
我有几点建议以增强本文。首先,系统综述仅检索至2014年。此后至少又发表了两项关于急诊医学指标的德尔菲研究1、2。如果仅评估这些综述中发现的指标(即没有专家提交的指标),这是一个局限。尽管我理解该研究基于当时可获得的资料,但如果作者能进行更新的文献检索,看看若有这些较新文章纳入系统综述是否还有其他指标可能被纳入,将提升本文的说服力。此外,如果作者能在附录中以列表形式总结新纳入的文章,包括文章、日期、作者、地点、涉及的服务等,将会很有帮助。
2)。文章和绩效指标最初是如何选取的,方法描述不够充分。有多少人参与了文章筛选,从文章中提取新指标的过程是如何进行的?研究者之间是否有交叉核对?我想在这里对于某指标是否为新指标或表述不同、以及是否适用于整个系统,会存在一些判断空间。是否评估了任何类型的评分者间信度?
3) 讨论部分应扩展,纳入本工作与急诊医学既往流程的比较,以确定关键绩效指标。你们简要提到了英国的演练,但这在讨论中出现得稍早,且缺乏细节。(你们还说有6项来自你们的系统综述,但与之前的综述相比,你们最初只识别出3项新的指标……)指出哪些指标是新出现的、它们来源于系统综述的哪个部分,以及你们为什么认为你们的指标有所不同,将会有所帮助。讨论本工作的实际意义也会有所帮助——这些绩效指标如何被用于评估照护系统,以及作者如何设想他们的指标在爱尔兰重组背景下的应用。
其他几点需要澄清的地方:
文章检索和筛选的描述与流程图不太吻合。例如,流程图没有显示阅读了摘要的150篇文章,以及随后审查的47篇文章。
灰色文献是如何识别的?
所有专家都来自爱尔兰吗?
整个专家组有17位专家,你们说13/14人参加了会议。另外3人怎么了?
能否更详细地解释一下会议的程序——13位参与者是否每个人都对每项指标发表了意见。(听起来是很漫长的一天!)"名义"小组技术是什么意思?
正文和附录中的指标列表都令人困惑。在表1中,你们有17项指标,你们说这些指标在会议中至少达到中位数评分7分,然后通过在线流程进行了排名。中位数为2和3的指标是如何纳入的,这一点不清楚。我也不确定读者是否需要看到"平均排名",而更需要看到基于所有回复的最终排名顺序。即使保留这些排名,按排名组织表格也会有所帮助。此外,可以标注哪些是过程指标和结局指标,以及哪些(如果有的话)来自更新的系统综述。在附录中,不清楚是否需要两份单独的所有指标列表。能否将它们合并,并按类型(过程、结构、结局)呈现。
我想知道作者是否也愿意讨论一些在本审稿人看来似乎不能代表"全系统"绩效的指标。例如,从呼叫救护车到到达现场的时间。虽然这被描述为有助于衡量变异,但它仍然非常针对"服务"——关于院前系统。对于"从严重紧急状况发生到到达接收医院的时间"也有类似的问题。
摘要——摘要的方法部分应扩展,多解释一些关于更新既往综述的内容,以及更多关于共识练习的内容,包括专家的多样性。对"名义"提供简要解释。
minor editorial issues:
第3页第三段——最后一句——"This variation represents……"可能没有必要,且使引言略微偏离主题。
第3页方法部分第一句——请在文中添加第一项系统综述的发表日期,以便读者不必去查找参考文献。
第4页第二段——应为indicators
第4页第三段末尾,"This review led to three articles being identified for inclusion in the review"——可改为:This process led to……
我确认我已阅读此投稿,并认为我具备适当的专业水平来确认其符合可接受的科学标准,然而,如上所述,我有重大保留意见。
利益冲突:未披露任何利益冲突。
请在副标题中注明这是对一项系统评价的更新。您是如何将您的结果与既往系统评价作者的结果进行核实的(例如,核实您排除该评价中7篇论文的决定)?您的更新已经略有陈旧,因为您是在2014年8月完成的。尽管您在2014年10月迅速召开了共识小组会议,紧接在您的系统评价更新之后,但现在已经过去了3年多。请在讨论部分对此进行反思,尤其是因为急诊领域正在快速发展。同时请讨论您的发现对爱尔兰(其急诊和急性照护体系与其他国家不同)推广至其他国家的可推广性。
您的共识小组中专家人数分两步从17人(第2页最后一行)降至14人,再降至13人。请更详细地解释分两步脱落的原因,以及对您的发现可能产生的影响。
在结果部分,您关于被排除文章的文本与图1中的半决赛框不一致,请予以同步。评分方式对我来说并不完全清楚。排名究竟是如何进行的?中位数得分以及各指标不同的得分范围又意味着什么?如果各指标的得分范围不同,您的阈值7就具有不同的含义,因此表中的排序并非那么不言自明。专家似乎对指标进行了两轮排名。在第一轮中,您选择了中位数高于7的指标,但表1关于第二轮排名又怎能包含两个中位数(远)低于7的指标?您在表1的某些条目上添加了*和**,但表下没有解释。
您的讨论部分相当简短且薄弱,请结合现有文献和专业指南,对您的发现内容进行更详细的阐述,不要仅限于(过于简短的)方法学讨论。例如,您关于测量方面未来步骤的建议相当肤浅。或许可以思考注册登记系统、具有反馈和改进周期的质量体系,或将绩效指标纳入急诊照护专业人员和管理者实际工作的其他方式。
我确认我已阅读此投稿,并认为我具备适当的专业水平来确认其符合可接受的科学标准,然而,如上所述,我有重大保留意见。
参考来源
- Boyle S, Dennehy R, Healy O, et al. Development of performance indicators for systems of urgent and emergency care in the Republic of Ireland: Systematic review and consensus development exercise. HRB Open Res. 2018. PMID: 32002501. doi:10.12688/hrbopenres.12805.2
- 全文:PMC6973523(PMC 开放获取,CC BY)https://pmc.ncbi.nlm.nih.gov/articles/PMC6973523/
供执业医师抢救与诊疗参考,不替代临床判断;剂量请结合体重、肝肾功能和本院药品规格复核,以指南原文为准。