Diagnostic accuracy of artificial intelligence-assisted radiology assessment of cancer: a systematic review
Diagnostische Genauigkeit einer KI-gestützten radiologischen Krebsdiagnostik: systematische Übersicht
BJR|Artificial Intelligence · 03.01.2025 · 2 (1)
DOI: 10.1093/bjrai/ubaf016 ↗Auf einen Blick
Die Übersichtsarbeit zeigte: Mit KI-Unterstützung waren Sensitivität und Spezifität höher als ohne KI. Eingeschlossen waren 34 Studien, 23 davon in der Metaanalyse.
Fragestellung
Wie genau ist die KI-gestützte radiologische Krebsdiagnostik im Vergleich zur Beurteilung ohne KI-Unterstützung?
Methode
Systematische Übersichtsarbeit und Metaanalyse von MRMC-Studien; Suche in mehreren Datenbanken vom 1. Januar 2014 bis 28. Februar 2024; Bewertung mit QUADAS-C und CLAIM.
Ergebnisse
34 Studien, 23 in der Metaanalyse. Gepoolte Sensitivität/Spezifität: 0,67 (95 %-KI 0,58–0,74) und 0,82 (95 %-KI 0,75–0,88) ohne KI; 0,79 (95 %-KI 0,71–0,88) und 0,87 (95 %-KI 0,82–0,91) mit KI.
Einschränkungen
17 von 34 Studien hatten laut QUADAS-C ein Bias-Risiko; CLAIM zeigte Berichtsprobleme in mehreren Methodikdomänen.
Schlussfolgerung der Autor:innen
KI-Unterstützung kann die diagnostische Leistung von Kliniker:innen in der Krebsdiagnostik verbessern. Aktualisierte Berichtsleitlinien könnten methodische Limitationen adressieren und den Nutzen von KI klären.
Kernaussagen
- Mit KI-Unterstützung höhere Sensitivität und Spezifität
- 34 Studien, davon 23 metaanalysiert
- Bias-Risiko und Berichtsprobleme in mehreren Studien
Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.
Kurz gefasst
Systematische Übersicht in der Zeitschrift BJR|Artificial Intelligence, online erschienen am 13.11.2025. Verfasst von Dylan Zhao und 5 weiteren Autor:innen. Beteiligte Einrichtung: University of Oxford Medical Science Division, John Radcliffe Hospital, Oxford, OX3 9DU, United Kingdom. Die Arbeit wurde bisher 4-mal zitiert (Crossref) und nennt 54 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0).
Abstract (Originalsprache)
Objective
Perform a systematic review and meta-analysis of studies using multi-reader multi-case (MRMC) study designs for cancer diagnosis with artificial intelligence (AI). Review diagnostic accuracy, study design and reporting.
Methods
A search of several databases between January 1, 2014 and February 28, 2024 was performed. Diagnostic accuracy studies that compared radiologists with and without AI-assistance in cancer diagnostic tasks over all imaging modalities were included. Meta-analysis using Summary Receiver Operating Characteristics (SROC) curves were plotted for pooled sensitivity and specificity. Risk of bias was assessed by using the Quality Assessment of Diagnostic Accuracy Studies-Comparative (QUADAS-C) and the Checklist for Artificial intelligence in Medical Imaging (CLAIM).
Results
Thirty-four studies were included of which 23 were included in meta-analysis. Eight identified cancers on Chest X-rays, 17 on CT, 9 on MRI. Pooled sensitivity and specificity were 0.67 (95%CI 0.58-0.74) and 0.82 (95%CI 0.75-0.88), respectively, for clinicians and 0.79 (95%CI 0.71-0.88) and 0.87 (95%CI 0.82-0.91) for AI-assistance. 17 of 34 studies (50%) had concern of bias with QUADAS-C. CLAIM assessment highlighted reporting issues in several domains of methodology in a proportion of studies.
Conclusion
Artificial intelligence assistance tools may benefit clinician diagnostic performance in cancer diagnosis. Updated reporting guidelines may help to overcome potential methodological limitations to clarify AI’s value in healthcare. Advances in knowledge Previous reviews compare AI accuracy alone against a clinician. We focus on MRMC study designs to ass AI use in a clinical environment.
Schlagwörter
Stichwörter der Autor:innen
Autor:innen und Institutionen
- University of Oxford Medical Science Division, John Radcliffe Hospital, Oxford, OX3 9DU, United Kingdom.
- Abbott Diabetes Care Ltd, Witney, OX29 0YL, United Kingdom.
- Nuffield Department of Primary Care Health Sciences, University of Oxford, Radcliffe Observatory Quarter, Oxford, OX2 6GG, United Kingdom.
ORCID-Profile: Dylan Zhao
Zitieren
APA
Zhao, D., Packer, T., Jie, X., Shahid, M., Oke, J., & Plüddemann, A. (2025). Diagnostic accuracy of artificial intelligence-assisted radiology assessment of cancer: a systematic review. BJR|Artificial Intelligence, 2(1). https://doi.org/10.1093/bjrai/ubaf016
Vancouver
Zhao D, Packer T, Jie X, Shahid M, Oke J, Plüddemann A. Diagnostic accuracy of artificial intelligence-assisted radiology assessment of cancer: a systematic review. BJR|Artificial Intelligence. 2025;2(1). doi:10.1093/bjrai/ubaf016
BibTeX
@article{Zhao2025,
author = {Zhao, Dylan and Packer, Thomas and Jie, Xiaobo and Shahid, Muhammad and Oke, Jason and Plüddemann, Annette},
title = {Diagnostic accuracy of artificial intelligence-assisted radiology assessment of cancer: a systematic review},
journal = {BJR|Artificial Intelligence},
year = {2025},
volume = {2},
number = {1},
doi = {10.1093/bjrai/ubaf016}
}
EUVIMED