EUVIMEDEUVIMED entdecken
Open Access · CC BY 4.0

Service-Specific Heterogeneity in Sepsis Variable Significance and Machine Learning Model Performance: A Stratified Analysis of the BIAlert Cohort

Service-spezifische Heterogenität der Signifikanz von Sepsis-Variablen und der Leistung von Machine-Learning-Modellen: stratifizierte Analyse der BIAlert-Kohorte

Marcio Borges-Sa iD, Eric Macias-Fassio iD, Alejandro Delgado iD, Santiago Salas-Sosa, María Aranda, Antonia Socias, Alberto Del Castillo, Andres Giglio

Journal of Clinical Medicine · 24.06.2026 · 15 (13) · 4904

DOI: 10.3390/jcm15134904 ↗

Auf einen Blick

In der BIAlert-Sepsis-Kohorte variierten die trennenden Eigenschaften klinischer Variablen je nach Krankenhausbereich deutlich. BIAlert erzielte dabei durchgehend die höchste AUC, während feste Scores in der Intensivmedizin versagten.

Fragestellung

Unterscheiden sich die diskriminierenden Eigenschaften klinischer Variablen zur Sepsis-Erkennung je nach Krankenhausservice, und ist die Leistung von Machine-Learning-Modellen dort besser als die klinischer Scores?

Methode

Stratifizierte Subanalyse der BIAlert-Sepsis-Kohorte; 61 strukturierte quantitative Variablen in 9 Services; Vergleich septischer und nicht-septischer Episoden mit Mann–Whitney–Wilcoxon-Test; Bewertung von 5 ML-Modellen und 3 klinischen Regeln.

Ergebnisse

203.755 Patient:innen, 11.864 Sepsis-Episoden. Signifikante Variablen: 95,1 % in der Notaufnahme (58/61) bis 37,7 % auf der Intensivstation (23/61). Laktat war in 9/9 Services signifikant. BIAlert AUC 0,975–0,857; qSOFA/NEWS auf der Intensivstation AUC 0,459.

Schlussfolgerung der Autor:innen

Die diskriminierende Kapazität klinischer Variablen für die Sepsis-Erkennung war zwischen den Krankenhausbereichen nicht uniform. ML-Modelle, besonders BIAlert, blieben dort robust, wo regelbasierte Scores versagten.

Kernaussagen

  • Signifikante Variablen reichten von 95,1 % bis 37,7 % je Service
  • Laktat war die einzige in allen 9 Services signifikante Variable
  • BIAlert hielt die höchste AUC, qSOFA/NEWS fielen in Critical Care ab

Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.

Kurz gefasst

Fachartikel in der Zeitschrift Journal of Clinical Medicine, online erschienen am 24.06.2026. Verfasst von Marcio Borges-Sa und 7 weiteren Autor:innen. Beteiligte Einrichtung: Multidisciplinary Sepsis Unit, Son Llatzer University Hospital, 07198 Palma de Mallorca, Spain. Die Arbeit wurde bisher 3-mal zitiert (Crossref) und nennt 25 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0).

Auf einen BlickAbstractSchlagwörterBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

Background/Objectives: Sepsis detection relies on clinical variables and scoring systems assumed to perform uniformly across hospital settings. However, sepsis phenotype distributions shift between clinical environments, suggesting that variable importance may be setting dependent. This study aimed to quantify service-specific variability in the discriminatory capacity of clinical variables for sepsis detection and to evaluate whether this heterogeneity translates into differential performance of machine learning models compared to traditional clinical scoring systems.

Methods

This stratified sub-analysis of the BIAlert Sepsis cohort (203,755 patients; 11,864 sepsis episodes, 2014–2018) evaluated 61 structured quantitative variables across nine hospital services (≥90 sepsis episodes each). Within each service, the Mann–Whitney–Wilcoxon test (p < 0.01, Holm-corrected) assessed differences between septic and non-septic episodes. Five machine learning models (Random Forest/BIAlert, XGBoost, CatBoost, SVM, Neural Network) and three clinical rules (NEWS, SIRS, qSOFA) were evaluated globally and stratified across four clinical environments.

Results

The proportion of significant variables ranged from 95.1% in the Emergency Department (58/61) to 37.7% in the Intensive Care Unit (23/61). Lactate was the only universally significant variable (9/9 services). Clinical scoring systems collapsed in Critical Care (qSOFA and NEWS AUC 0.459). BIAlert maintained the highest AUC across all environments (0.975–0.857). The Friedman test confirmed significant differences (χ2 = 28.00, p < 0.001), with BIAlert achieving a mean rank of 1.0.

Conclusions

The discriminatory capacity of clinical variables for sepsis detection is not uniform across hospital services. ML models, particularly BIAlert, maintained robust performance where fixed-rule scoring systems failed.

Schlagwörter

Stichwörter der Autor:innen

Random Forestartificial intelligencebiomarkersclinical decision supportclinical heterogeneityhospital departmentmachine learningscoring systemssepsissepsis phenotypes

Autor:innen und Institutionen

  • Multidisciplinary Sepsis Unit, Son Llatzer University Hospital, 07198 Palma de Mallorca, Spain.
  • Multidisciplinary Sepsis Group, Health Research Institute of the Balearic Islands (IdISBa), 07120 Palma de Mallorca, Spain.
  • Balearic Islands University, 07122 Palma de Mallorca, Spain.
  • Fundación Código Sepsis, 46003 Valencia, Spain.
  • Instituto de Ingeniería del Conocimiento (IIC), 28049 Madrid, Spain.
  • BiometricsAI, Universidad Autónoma de Madrid, 28049 Madrid, Spain.

ORCID-Profile: Marcio Borges-Sa, Eric Macias-Fassio, Alejandro Delgado

Zitieren

APA

Borges-Sa, M., Macias-Fassio, E., Delgado, A., Salas-Sosa, S., Aranda, M., Socias, A., Del Castillo, A., & Giglio, A. (2026). Service-Specific Heterogeneity in Sepsis Variable Significance and Machine Learning Model Performance: A Stratified Analysis of the BIAlert Cohort. Journal of Clinical Medicine, 15(13), 4904. https://doi.org/10.3390/jcm15134904

Vancouver

Borges-Sa M, Macias-Fassio E, Delgado A, Salas-Sosa S, Aranda M, Socias A, et al. Service-Specific Heterogeneity in Sepsis Variable Significance and Machine Learning Model Performance: A Stratified Analysis of the BIAlert Cohort. Journal of Clinical Medicine. 2026;15(13):4904. doi:10.3390/jcm15134904

BibTeX
@article{BorgesSa2026,
  author = {Borges-Sa, Marcio and Macias-Fassio, Eric and Delgado, Alejandro and Salas-Sosa, Santiago and Aranda, María and Socias, Antonia and Del Castillo, Alberto and Giglio, Andres},
  title = {Service-Specific Heterogeneity in Sepsis Variable Significance and Machine Learning Model Performance: A Stratified Analysis of the BIAlert Cohort},
  journal = {Journal of Clinical Medicine},
  year = {2026},
  volume = {15},
  number = {13},
  pages = {4904},
  doi = {10.3390/jcm15134904}
}
Kostenlos starten →