Classification of posttransfusion adverse events using a publicly available artificial intelligence system
Klassifikation posttransfusioneller unerwünschter Ereignisse mit einem öffentlich verfügbaren KI-System
Transfusion · 2024-04 · 64 (4) · 590-596
DOI: 10.1111/trf.17702 ↗Auf einen Blick
Ein generatives KI-System klassifizierte hypothetische Transfusionsreaktionen unterschiedlich gut. Insgesamt lag die Genauigkeit unter der von Transfusionsmediziner:innen.
Fragestellung
Wie genau klassifiziert ein generatives KI-System hypothetische klinische Szenarien als Transfusionsreaktionen im Vergleich zu früheren Bewertungen von Transfusionsmediziner:innen?
Methode
Vergleich von 36 Fallszenarien mit den Klassifikationen eines Expertengremiums und publizierten Antworten von Transfusionsmediziner:innen; Nutzung der CDC NHSN-Kriterien.
Ergebnisse
Die Genauigkeit variierte je nach NHSN-Kategorie. TACO- und TRALI-Fälle wurden korrekt erkannt. Insgesamt: KI 48,7 % vs. TM-Spezialist:innen 72,1 % (p = 0,005).
Einschränkungen
Nur hypothetische Fälle; keine Imputabilitätsbestimmung durch die KI; unstandardisierte Terminologie und begrenzte Schweregradbewertung.
Schlussfolgerung der Autor:innen
Ein generatives KI-System könnte helfen, übersehene Transfusionsreaktionskategorien zu bedenken, doch die Anwendung der aktuellen Ausgaben zur Klassifikation sollte vorsichtig erfolgen.
Kernaussagen
- KI erkannte TACO- und TRALI-Fälle korrekt
- Gesamtgenauigkeit: 48,7 % vs. 72,1 %
- Keine Imputabilitätsbestimmung durch die KI
Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.
Kurz gefasst
Fachartikel in der Zeitschrift Transfusion, online erschienen am 24.02.2024. Verfasst von Mark K Fung und 2 weiteren Autor:innen. Beteiligte Einrichtung: Department of Pathology and Laboratory Medicine, University of Vermont Larner College of Medicine, Burlington, Vermont, USA. Hauptthemen laut MEDLINE: Artificial Intelligence, Transfusion Reaction. Die Arbeit wurde bisher 19-mal zitiert (Crossref) und nennt 14 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY-NC-ND 4.0).
Themen: Künstliche Intelligenz in der Pflege, Patientensicherheit
Abstract (Originalsprache)
Background
Correct classification of transfusion reactions is important not only for effective patient care and donor management but also for accurate tracking of events in hemovigilance systems. We compared the ability of a generative artificial intelligence (AI) system to correctly diagnose hypothetical clinical situations as transfusion reactions in comparison to previous studies reporting the accuracy of transfusion medicine (TM) specialists in assessing these cases.
Methods
An AI system was requested to assess 36 case scenarios to provide a diagnosis, severity, and imputability of the transfusion reactions using the CDC National Healthcare Safety Network (NHSN) criteria. Responses were compared to an expert panel's classifications and to the published responses of a panel of TM specialists. Additionally, the AI's responses were compared to the TM specialists' prior attempts to use the TrDDx web‐based algorithm for the five most challenging cases.
Results
The AI's classification accuracy varied widely depending on the NHSN category. The AI accurately classified all transfusion‐associated circulatory overload and transfusion‐related acute lung injury cases, exceeding TM specialists' assessments. Conversely, it did not correctly identify any cases in select NHSN categories such as DSTR. Overall accuracy among all diagnostic categories was 48.7% for AI responses versus 72.1% for prior TM specialist responses (p = 0.005). AI‐generated responses included non‐standard terminology, limited severity assessments, and no imputability determinations.
Discussion
A generative AI system may have a role in helping healthcare providers to consider transfusion reaction categories that might be missed, but caution is advised in applying the AI's output to transfusion reaction classification at present.
Schlagwörter
MeSH-Schlagwörter (MEDLINE)
Stichwörter der Autor:innen
Autor:innen und Institutionen
- Department of Pathology and Laboratory Medicine, University of Vermont Larner College of Medicine, Burlington, Vermont, USA.
- Department of Laboratory Medicine and Pathology, University of Washington, Seattle, Washington, USA.
- Department of Pathology, University of California San Diego, San Diego, California, USA.
ORCID-Profile: Mark K Fung, Laura D Stephens
Zitieren
APA
Fung, M. K., AuBuchon, J. P., & Stephens, L. D. (2024). Classification of posttransfusion adverse events using a publicly available artificial intelligence system. Transfusion, 64(4), 590-596. https://doi.org/10.1111/trf.17702
Vancouver
Fung MK, AuBuchon JP, Stephens LD. Classification of posttransfusion adverse events using a publicly available artificial intelligence system. Transfusion. 2024;64(4):590-596. doi:10.1111/trf.17702
BibTeX
@article{Fung2024,
author = {Fung, Mark K and AuBuchon, James P and Stephens, Laura D},
title = {Classification of posttransfusion adverse events using a publicly available artificial intelligence system},
journal = {Transfusion},
year = {2024},
volume = {64},
number = {4},
pages = {590--596},
doi = {10.1111/trf.17702}
}
EUVIMED