Service-Specific Heterogeneity in Sepsis Variable Significance and Machine Learning Model Performance: A Stratified Analysis of the BIAlert Cohort
Service-spezifische Heterogenität der Signifikanz von Sepsis-Variablen und der Leistung von Machine-Learning-Modellen: stratifizierte Analyse der BIAlert-Kohorte
Journal of Clinical Medicine · 24.06.2026 · 15 (13) · 4904
DOI: 10.3390/jcm15134904 ↗Auf einen Blick
In der BIAlert-Sepsis-Kohorte variierten die trennenden Eigenschaften klinischer Variablen je nach Krankenhausbereich deutlich. BIAlert erzielte dabei durchgehend die höchste AUC, während feste Scores in der Intensivmedizin versagten.
Fragestellung
Unterscheiden sich die diskriminierenden Eigenschaften klinischer Variablen zur Sepsis-Erkennung je nach Krankenhausservice, und ist die Leistung von Machine-Learning-Modellen dort besser als die klinischer Scores?
Methode
Stratifizierte Subanalyse der BIAlert-Sepsis-Kohorte; 61 strukturierte quantitative Variablen in 9 Services; Vergleich septischer und nicht-septischer Episoden mit Mann–Whitney–Wilcoxon-Test; Bewertung von 5 ML-Modellen und 3 klinischen Regeln.
Ergebnisse
203.755 Patient:innen, 11.864 Sepsis-Episoden. Signifikante Variablen: 95,1 % in der Notaufnahme (58/61) bis 37,7 % auf der Intensivstation (23/61). Laktat war in 9/9 Services signifikant. BIAlert AUC 0,975–0,857; qSOFA/NEWS auf der Intensivstation AUC 0,459.
Schlussfolgerung der Autor:innen
Die diskriminierende Kapazität klinischer Variablen für die Sepsis-Erkennung war zwischen den Krankenhausbereichen nicht uniform. ML-Modelle, besonders BIAlert, blieben dort robust, wo regelbasierte Scores versagten.
Kernaussagen
- Signifikante Variablen reichten von 95,1 % bis 37,7 % je Service
- Laktat war die einzige in allen 9 Services signifikante Variable
- BIAlert hielt die höchste AUC, qSOFA/NEWS fielen in Critical Care ab
Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.
Kurz gefasst
Fachartikel in der Zeitschrift Journal of Clinical Medicine, online erschienen am 24.06.2026. Verfasst von Marcio Borges-Sa und 7 weiteren Autor:innen. Beteiligte Einrichtung: Multidisciplinary Sepsis Unit, Son Llatzer University Hospital, 07198 Palma de Mallorca, Spain. Die Arbeit wurde bisher 3-mal zitiert (Crossref) und nennt 25 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0).
Abstract (Originalsprache)
Background/Objectives: Sepsis detection relies on clinical variables and scoring systems assumed to perform uniformly across hospital settings. However, sepsis phenotype distributions shift between clinical environments, suggesting that variable importance may be setting dependent. This study aimed to quantify service-specific variability in the discriminatory capacity of clinical variables for sepsis detection and to evaluate whether this heterogeneity translates into differential performance of machine learning models compared to traditional clinical scoring systems.
Methods
This stratified sub-analysis of the BIAlert Sepsis cohort (203,755 patients; 11,864 sepsis episodes, 2014–2018) evaluated 61 structured quantitative variables across nine hospital services (≥90 sepsis episodes each). Within each service, the Mann–Whitney–Wilcoxon test (p < 0.01, Holm-corrected) assessed differences between septic and non-septic episodes. Five machine learning models (Random Forest/BIAlert, XGBoost, CatBoost, SVM, Neural Network) and three clinical rules (NEWS, SIRS, qSOFA) were evaluated globally and stratified across four clinical environments.
Results
The proportion of significant variables ranged from 95.1% in the Emergency Department (58/61) to 37.7% in the Intensive Care Unit (23/61). Lactate was the only universally significant variable (9/9 services). Clinical scoring systems collapsed in Critical Care (qSOFA and NEWS AUC 0.459). BIAlert maintained the highest AUC across all environments (0.975–0.857). The Friedman test confirmed significant differences (χ2 = 28.00, p < 0.001), with BIAlert achieving a mean rank of 1.0.
Conclusions
The discriminatory capacity of clinical variables for sepsis detection is not uniform across hospital services. ML models, particularly BIAlert, maintained robust performance where fixed-rule scoring systems failed.
Schlagwörter
Stichwörter der Autor:innen
Autor:innen und Institutionen
- Multidisciplinary Sepsis Unit, Son Llatzer University Hospital, 07198 Palma de Mallorca, Spain.
- Multidisciplinary Sepsis Group, Health Research Institute of the Balearic Islands (IdISBa), 07120 Palma de Mallorca, Spain.
- Balearic Islands University, 07122 Palma de Mallorca, Spain.
- Fundación Código Sepsis, 46003 Valencia, Spain.
- Instituto de Ingeniería del Conocimiento (IIC), 28049 Madrid, Spain.
- BiometricsAI, Universidad Autónoma de Madrid, 28049 Madrid, Spain.
ORCID-Profile: Marcio Borges-Sa, Eric Macias-Fassio, Alejandro Delgado
Zitieren
APA
Borges-Sa, M., Macias-Fassio, E., Delgado, A., Salas-Sosa, S., Aranda, M., Socias, A., Del Castillo, A., & Giglio, A. (2026). Service-Specific Heterogeneity in Sepsis Variable Significance and Machine Learning Model Performance: A Stratified Analysis of the BIAlert Cohort. Journal of Clinical Medicine, 15(13), 4904. https://doi.org/10.3390/jcm15134904
Vancouver
Borges-Sa M, Macias-Fassio E, Delgado A, Salas-Sosa S, Aranda M, Socias A, et al. Service-Specific Heterogeneity in Sepsis Variable Significance and Machine Learning Model Performance: A Stratified Analysis of the BIAlert Cohort. Journal of Clinical Medicine. 2026;15(13):4904. doi:10.3390/jcm15134904
BibTeX
@article{BorgesSa2026,
author = {Borges-Sa, Marcio and Macias-Fassio, Eric and Delgado, Alejandro and Salas-Sosa, Santiago and Aranda, María and Socias, Antonia and Del Castillo, Alberto and Giglio, Andres},
title = {Service-Specific Heterogeneity in Sepsis Variable Significance and Machine Learning Model Performance: A Stratified Analysis of the BIAlert Cohort},
journal = {Journal of Clinical Medicine},
year = {2026},
volume = {15},
number = {13},
pages = {4904},
doi = {10.3390/jcm15134904}
}
EUVIMED