文献速递眼底病与葡萄膜炎

严格筛选合成图像提升糖尿病视网膜病变分级模型性能

ENHANCING THE PERFORMANCE OF DIABETIC RETINOPATHY GRADING MODELS USING SYNTHETIC IMAGES.
PubMed 文献 · Retina · 2026-01-01

本研究评估严格筛选的合成图像在有限数据条件下能否提升糖尿病视网膜病变(DR)分级性能,并比较 StyleGAN3 与 Medfusion 两类生成架构的效用。结果显示,经筛选的合成图像数据增强可显著提高序数准确性和增殖性 DR 的敏感度,且 FID 等全局图像质量指标未必反映局部病理效用。

要点

  • 严格筛选的 StyleGAN3 数据 FID 为 24.25、padded SSIM 为 0.9037,优于 Medfusion 的 58.70 和 0.8852。
  • Medfusion 增强使二次加权 kappa 从 0.6350±0.0135 提升至 0.7695±0.0254,绝对提升 0.1345。
  • Medfusion 增强将增殖性 DR 的敏感度从 0.2615±0.1595 提高至 0.5385±0.0942。

核心结论

  • 使用严格筛选的合成图像进行数据增强可解决数据不平衡与稀缺问题,显著提升 DR 诊断模型的序数准确性和少数类敏感度。
  • FID 等标准全局图像质量指标可能无法完全反映局部病理效用,FID 更高的扩散模型最终提供了更优的结构多样性和下游临床性能。

研究设计与样本

  • 研究在辅助数据集上预训练 StyleGAN3 和 Medfusion 模型,并通过域匹配 Oracle 网络采用潜在空间拒绝采样和类别条件 SDEdit 升级对合成图像进行筛选。
  • 在独立的印度 DR 图像数据集下游分类任务上,使用 ConvNeXt、ResNet50、VGG16 三种架构和五个随机种子评估效能。

主要发现

  • 筛选后的 StyleGAN3 数据集 FID 为 24.25、padded SSIM 为 0.9037;Medfusion 的 FID 为 58.70、padded SSIM 为 0.8852,但 Medfusion 的 inception score 更高(2.35)。
  • 仅用真实印度 DR 图像数据集训练的基线 ConvNeXt 模型二次加权 kappa 为 0.6350±0.0135。
  • 筛选后的 StyleGAN3 增强将二次加权 kappa 提升至 0.7185±0.0309,Medfusion 增强达到 0.7695±0.0254,绝对提升 0.1345。
  • Medfusion 增强将增殖性 DR 的敏感度(Recall)从 0.2615±0.1595 提高至 0.5385±0.0942。

临床怎么用

  • 在 DR 分级数据有限且类别不平衡时,可考虑使用严格筛选的合成图像进行数据增强,以提升模型序数准确性和增殖性 DR 的检出敏感度。

以上解读依据论文摘要(全文未开放获取或许可不允许翻译转载)。

原文

PURPOSE: To determine whether strictly curated synthetic images can improve grading performance in diabetic retinopathy (DR) diagnosis within limited data regimes, and to compare the utility of representative generative adversarial network and diffusion architectures. METHOD: StyleGAN3 and Medfusion models were pretrained on an auxiliary data set. To prevent mode collapse and severity downshift, synthetic images were curated through a domain-matched Oracle network using Latent Space Rejection Sampling and Class-Conditioned SDEdit Escalation. Efficacy was evaluated on an isolated downstream DR classification task (Indian DR Image Dataset) across three architectures (ConvNeXt, ResNet50, VGG16) using five random seeds. RESULTS: Curated StyleGAN3 data set achieved better Fréchet inception distance (FID) (24.25) and padded structural similarity index measure (0.9037) compared with Medfusion (58.70 and 0.8852), although Medfusion yielded a higher inception score (2.35). In the isolated downstream classification task, baseline ConvNeXt models trained solely on real Indian DR Image Dataset data achieved a quadratic weighted kappa of 0.6350 ± 0.0135. Augmentation with curated StyleGAN3 improved the quadratic weighted kappa to 0.7185 ± 0.0309, while Medfusion augmentation achieved 0.7695 ± 0.0254 (an absolute improvement of 0.1345). Crucially, Medfusion augmentation successfully doubled the sensitivity (Recall) for proliferative DR from 0.2615 ± 0.1595 to 0.5385 ± 0.0942. CONCLUSION: Data augmentation using strictly curated synthetic images successfully addresses data imbalance and scarcity, significantly improving the ordinal accuracy and minority-class sensitivity of DR diagnosis models. Furthermore, standard global image quality metrics like FID may not fully capture localized pathological utility; diffusion models with higher FID scores ultimately provided superior structural diversity and downstream clinical performance.

来源:Retina,查看原文。版权归原作者所有。

引用

  1. Zhao J, Zhang Y, Miao Y, et al. ENHANCING THE PERFORMANCE OF DIABETIC RETINOPATHY GRADING MODELS USING SYNTHETIC IMAGES. Retina. 2026. PMID: 42479585. doi:10.1097/IAE.0000000000004919

供执业医师工作参考,不替代临床判断;数值与分级以指南原文为准。