系统评价去重工具在儿科神经影像检索中的可重复性与有效性评估
该研究以儿科亚急性硬化性全脑炎神经影像文献为语料,检索 PubMed 和 Embase 获得 603 条记录,由两名评价者分别使用 Zotero 8.0.4 与 Rayyan 进行独立去重,并与人工判定的参考标准比较。人工判定确认 120 条真实重复记录,最终唯一记录 483 条;Zotero 输出可重复但产生 16 例假阳性与 5 例假阴性,Rayyan 可识别更多真实重复但各次运行结果不完全一致。结论提示常用去重工具可能在筛选开始前引入确定性偏倚或非确定性记录丢失,应报告软件版本并实施可审计的复核。
要点
- 去重错误不会出现在 PRISMA 流程图中,却可传播至后续证据合成。
- Zotero 输出稳定但存在 DOI 冲突相关的假阳性与假阴性。
- Rayyan 可发现更多真实重复,但重复运行结果不完全一致。
核心结论
- 常用去重工具可能在筛选开始前引入确定性偏倚或非确定性记录丢失。
- 在儿科放射学证据合成中,应明确报告去重软件版本与核查策略。
- 在记录被移除前,应考虑实施可审计的二次核对。
研究设计与样本
- 研究类型为去重工具的有效性与可重复性评估,语料来自 PubMed 与 Embase 的同行评议文献。
- 检索主题为儿科亚急性硬化性全脑炎神经影像,合并后共纳入 603 条记录。
- 两名评价者分别使用 Zotero 8.0.4 和 Rayyan 进行独立去重。
- 参考标准由两名评价者依据标题、发表年份、作者列表及 DOI 对疑似重复记录进行人工判定。
诊断标准与关键数值
- 人工判定标准:依据标题、发表年份、作者列表及 DOI 判定疑似重复对。
- 人工判定确认 120 条真实重复记录,最终唯一记录数为 483 条。
- Zotero 在各评价者之间输出一致,表现为确定性行为,但产生 16 个假阳性与 5 个假阴性。
- Rayyan 每次运行产生 16 至 17 个假阳性与 1 个假阴性,不同独立运行之间输出不完全一致。
临床应用与阅片要点
- 报告系统评价去重步骤时,应写明所用软件名称、版本号与核查方法。
- 对去重软件标记移除的记录进行人工复核,避免未进入 PRISMA 流程图的记录丢失。
- 注意 DOI 冲突可能导致去重工具出现假阳性合并或假阴性漏并。
局限性
- 研究对象仅限儿科神经影像文献语料,结论向其他影像亚专业的推广性尚不明确。
以上解读依据论文摘要(全文未开放获取或许可不允许翻译转载)。
英文原文(摘要)· 点击展开
BACKGROUND: Deduplication is usually treated as a routine preprocessing step in systematic reviews, yet errors introduced at this stage are not visible in Preferred Reporting Items for Systematic reviews and Meta-Analyses (PRISMA) flow diagrams and can propagate through evidence synthesis.
OBJECTIVE: To evaluate the validity and reproducibility of commonly used deduplication tools in a paediatric neuroradiology systematic review.
MATERIALS AND METHODS: PubMed and Embase were searched for peer-reviewed literature on paediatric subacute sclerosing panencephalitis neuroimaging, yielding 603 records. Two reviewers independently deduplicated the combined corpus using Zotero (version 8.0.4) and Rayyan (updated 21 January 2026). A manual reference standard was established by dual-reviewer adjudication of potential duplicate pairs using title, publication year, author list, and Digital Object Identifier (DOI). Tool outputs were compared against this reference standard for false-positive and false-negative decisions and for reproducibility across runs.
RESULTS: Manual adjudication identified 120 true duplicate records, leaving 483 unique records. Zotero produced identical outputs across reviewers, indicating deterministic behaviour, but generated 16 false-positive duplicate decisions and 5 false negatives, predominantly related to DOI collision. Rayyan identified more true duplicates but produced non-identical outputs across independent runs, with 16-17 false positives and 1 false negative per run.
CONCLUSION: Commonly used deduplication tools can introduce either deterministic bias or non-deterministic record loss before screening begins. In paediatric radiology evidence synthesis, the deduplication software version and verification strategy should be explicitly reported. Auditable secondary checks should be considered before records are removed.
引用
- Kaza, S R, Naffa', et al. Reproducibility and validity failures in systematic review deduplication tools: evaluation on a paediatric neuroradiology corpus. Pediatr Radiol. 2026. PMID: 42720737. doi:10.1007/s00247-026-06775-z
供执业医师工作参考,不替代临床判断;数值与分级以指南原文为准。