Évaluer une IA de détection de fracture : les questions à poser
Études indépendantes, chiffres par région, âge des patients, autorisation, intégration, test sur vos cas : la grille pour comparer les logiciels de détection de fracture.
Relu par Dr Alexandre Parpaleix, MD-PhD, CEO et cofondateur de Milvue
Quelles études regarder en premier ?
Les études indépendantes, publiées dans une revue à comité de lecture, qui comparent plusieurs logiciels sur les mêmes images (études head-to-head). Préférez les séries consécutives de vrais patients, par exemple tous les passages aux urgences sur une période, aux jeux d'images enrichis en fractures. Regardez qui a financé l'étude et qui a établi la vérité de référence.
Sensibilité, spécificité, exactitude, AUC : que mesure chaque chiffre ?
La sensibilité est la part des fractures réelles que l'IA signale ; la spécificité, la part des examens sans fracture qu'elle laisse sans alerte ; l'exactitude, la part de réponses justes sur l'ensemble. L'AUC résume la performance sur tous les seuils possibles. Distinguez l'évaluation de l'IA seule de l'étude lecteurs, qui mesure ce que gagnent les radiologues quand ils lisent avec l'IA : c'est ce second chiffre qui décrit l'usage réel.
Pourquoi demander des résultats par région anatomique ?
Un chiffre global masque des écarts importants. Dans l'étude multi-fournisseurs de Zurich (Pediatric Radiology, 2025), la spécificité de Milvue va de 82,4 % au coude à 98,8 % à la jambe. Demandez la sensibilité et la spécificité pour les régions que vous lisez le plus : poignet, cheville, coude, hanche, côtes.
Et chez l'enfant ?
L'os en croissance, les cartilages et les variantes normales trompent les modèles entraînés sur l'adulte. Vérifiez la population couverte par l'autorisation (âge minimum, sur chaque territoire) et l'existence d'études pédiatriques indépendantes, avec leurs chiffres par région. La détection de fracture de Milvue est marquée CE sans limite d'âge, autorisée par la FDA dès la naissance et homologuée par Santé Canada sans limite d'âge.
Quelle autorisation réglementaire vérifier ?
En Europe, le marquage CE au titre du règlement MDR 2017/745, la classe du dispositif et l'organisme notifié. Aux États-Unis, le numéro 510(k), consultable dans la base publique de la FDA. Au Canada, l'homologation de Santé Canada. Au Royaume-Uni, la recommandation du NICE : en janvier 2025, l'évaluation HTG739 a retenu quatre technologies de détection de fracture utilisables dans le NHS pendant la période de production de preuves, dont TechCare Alert, de Milvue.
Comment l'outil s'insère-t-il dans le flux de lecture ?
Les résultats doivent arriver dans le PACS existant, sur l'image, sans changement de poste : DICOM en entrée et en sortie, profils IHE. Regardez le délai entre l'acquisition et le résultat, la remontée des examens suspects en tête de liste de travail, et la façon dont l'outil affiche un doute.
Comment tester avant de décider ?
Faites passer au logiciel une série rétrospective de vos propres examens consécutifs, avec une référence établie par vos radiologues. Comptez les fractures manquées, mais aussi les fausses alertes par journée de lecture : c'est la charge que vos équipes vivront.
Où se situe Milvue sur ces critères ?
Dans une étude indépendante aux urgences qui compare trois algorithmes commerciaux sur 1 210 patients (Bousson et al., Academic Radiology, 2023), Milvue obtient 90,1 % d'exactitude, contre 88,8 % et 71,0 % : la meilleure exactitude diagnostique en détection de fracture dans les études indépendantes head-to-head publiées. L'étude lecteurs du dossier FDA montre +22 % de sensibilité des lecteurs chez l'adulte et +20 % chez l'enfant. TechCare Alert est un dispositif médical de classe IIa en Europe, autorisé par la FDA (TechCare Trauma, K242171) et Santé Canada (SmartTrauma), et s'intègre nativement au RIS et au PACS.
Dictée vocale en radiologie : comment choisir sa reconnaissance vocale
Précision mesurée sur de vraies dictées, mots et commandes, compte rendu type, langues, essai : les critères qui comptent pour choisir une dictée vocale de radiologie.
LireComment évaluer un fournisseur d'IA en radiologie
Une grille de lecture pour juger n'importe quelle IA d'imagerie : preuve indépendante, métriques, déploiement réel, mesures, intégration, périmètre réglementaire.
LireVLM en radiologie : l'IA qui aide à rédiger le compte rendu
Ce que change un modèle vision-langage natif radiologie : du repérage d'anomalie au brouillon de compte rendu, relu par le radiologue. Et pourquoi réussir un examen ne suffit pas.
Lire