文献速递骨肌儿科影像US

受训医师在新生儿髋关节超声角度测定中的准确性劣于深度学习算法

Accuracy of Trained Physicians is Inferior to Deep Learning-Based Algorithm for Determining Angles in Ultrasound of the Newborn Hip.
PubMed 文献 · Ultraschall Med · 2020-08-06

研究基于2009至2016年筛查中采集的303306张新生儿髋关节超声图像,比较受训医师与卷积神经网络测定Graf α角的准确性。医师与真实值的均方根误差为7.1°,最佳CNN架构(关键点检测)为3.9°,提示医师日常测量的准确性低于深度学习算法,类似方法或可用于辅助医师。

要点

  • 医师日常测量Graf α角与真实值的均方根误差为7.1°。
  • 最佳CNN架构为关键点检测,α角均方根误差为3.9°。
  • 深度学习算法测角准确性优于受训医师,或可辅助医师。

核心结论

  • 医师在日常工作中测定新生儿髋关节超声角度的准确性低于深度学习算法。
  • 类似方法或可用于支持医师。

研究设计与样本

  • 研究纳入2009至2016年筛查咨询中采集的303306张新生儿髋关节超声图像。
  • 受训医师在咨询期间每隔一张图像标注α角和β角,随机子集在实验室条件下标注时间和精度作为真实值。
  • 自动化采用卷积神经网络预测两个角度,分析聚焦于α角。

诊断标准与关键数值

  • 医师与真实值之间α角的均方根误差为7.1°。
  • 最佳CNN架构(关键点检测)与真实值之间α角的均方根误差为3.9°。

临床应用与阅片要点

  • 作者认为,类似方法或可用于支持医师。

局限性

  • 原文未报告局限性。

以上解读依据论文摘要(全文未开放获取或许可不允许翻译转载)。

英文原文(摘要)· 点击展开

PURPOSE: Sonographic diagnosis of developmental dysplasia of the hip allows treatment with a flexion-abduction orthosis preventing hip luxation. Accurate determination of alpha and beta angles according to Graf is crucial for correct diagnosis. It is unclear if algorithms could predict the angles. We aimed to compare the accuracy for users and automation reporting root mean squared errors (RMSE).

MATERIALS AND METHODS: We used 303 306 ultrasound images of newborn hips collected between 2009 and 2016 in screening consultations. Trained physicians labelled every second image with alpha and beta angles during the consultations. A random subset of images was labeled with time and precision under lab conditions as ground truth. Automation predicted the two angles using a convolutional neural network (CNN). The analysis was focused on the alpha angle.

RESULTS: Three methods were implemented, each with a different abstraction of the problem: (1) CNNs that directly learn the angles without any post-processing steps; (2) CNNs that return the relevant landmarks in the image to identify the angles; (3) CNNs that return the base line, bony roof line, and the cartilage roof line which are necessary to calculate the angles. The RMSE between physicians and ground truth were found to be 7.1° for alpha. The best CNN architecture was (2) landmark detection. The RMSE between landmark detection and ground truth was 3.9° for alpha.

CONCLUSION: The accuracy of physicians in their daily routine is inferior to deep learning-based algorithms for determining angles in ultrasound of the newborn hip. Similar methods could be used to support physicians.

UNLABELLED: ZIEL: Die Diagnose von Hüftdysplasie mittels Sonografie erlaubt das Behandeln mit Flexionsorthese, um einer Hüftluxation vorzubeugen. Genaue Bestimmungen der Winkel Alpha und Beta nach Graf sind essenziell für eine korrekte Diagnose. Es ist unklar, ob ein Algorithmus die Winkel vorhersagen könnte. Diese Arbeit vergleicht die Genauigkeit für Anwender und Automation mittels mittlerer quadratischer Fehler (MQF).

MATERIAL UND METHODE: Wir verwendeten 303 306 Ultraschallbilder von Neugeborenenhüften, die zwischen 2009 und 2016 in Screening-Untersuchungen akquiriert wurden. Ausgebildete Ärzte bestimmten während der Konsultation in jedem zweiten Bild die Winkel Alpha und Beta. Eine zufällige Teilmenge an Bildern wurde unter Laborbedingungen mit Zeit und Präzision als Ground Truth beschriftet. Die Automation sagte die beiden Winkel mittels convolutional neural network (CNN) voraus. Die Analyse war auf den Winkel Alpha fokussiert.

ERGEBNISSE: Drei Methoden wurden implementiert, jede davon mit einer anderen Abstraktion des Problems: (1) CNNs, die Winkel ohne post-processing direkt lernen; (2) CNNs, die Punkte im Bild bestimmen, die relevant sind, um die Winkel zu bestimmen; (3) CNNs, die Grundlinie, Pfannendachlinie und die Knorpeldachlinie in das Bild legen, um daraus die Winkel zu bestimmen. Der MQF zwischen Ärzten und der Ground Truth war 7,1° für Alpha. Die beste CNN-Architektur war (2) die Detektion der Punkte. Der MQF zwischen Punktedetektion und Ground Truth betrug 3,9° für Alpha.

SCHLUSSFOLGERUNG: Die Genauigkeit von Ärzten in ihrer täglichen Arbeit ist kleiner als diejenige eines Deep-Learning-basierten Algorithmus beim Bestimmen von Winkeln im Ultraschall der Säuglingshüfte. Ähnliche Methoden könnten verwendet werden, um Ärzte zu unterstützen.

来源:Ultraschall Med,查看原文。版权归原作者所有。

引用

  1. Oelen D, Kaiser P, Baumann T, et al. Accuracy of Trained Physicians is Inferior to Deep Learning-Based Algorithm for Determining Angles in Ultrasound of the Newborn Hip. Ultraschall Med. 2020. PMID: 32767299. doi:10.1055/a-1177-0480

供执业医师工作参考,不替代临床判断;数值与分级以指南原文为准。