Realistic Performance Estimation in Small-Cohort Deep Learning and Machine Learning: A Leakage-Controlled Codebase Applied to Meningioma Response Prediction After Gamma Knife Radiosurgery
Realistische Leistungsabschätzung in kleinen Kohorten mit Deep Learning und Machine Learning: eine leakagesichere Codebasis angewendet auf die Vorhersage des Meningiom-Ansprechens nach Gamma-Knife-Radiochirurgie
Cancers · 09.11.2026 · 18 (21) · 3590
DOI: 10.3390/cancers18213590 ↗Auf einen Blick
An 190 Patient:innen wurde die Vorhersage des Meningiom-Ansprechens nach GKRS mit Deep Learning und Machine Learning geprüft. Die Leistung schwankte je nach Split und Architektur deutlich.
Fragestellung
Wie realistisch ist die Vorhersage des Meningiom-Ansprechens nach Gamma-Knife-Radiochirurgie in kleinen Kohorten mit Deep Learning und Machine Learning?
Methode
Analyse von prätherapeutischen kontrastmittelverstärkten T1-MRT von 190 Patient:innen mit einem tumornahen axialen Slice pro Person. Verglichen wurden drei Workflows mit ResNet-10t, ResNet-18, ResNet-50 und DenseNet-121; Daten-fitting blieb auf Entwicklungsdaten beschränkt.
Ergebnisse
Der kleinste RadImageNet-ResNet-10t-CNN erzielte beim Fine-tuning die beste Leistung (Peak-AUCs 0,953 und 1,000), zeigte aber die größte Split-zu-Split-Variation (0,738–1,000). Mit Naive Bayes und logistischer Regression waren die AUCs niedriger, aber enger verteilt.
Schlussfolgerung der Autor:innen
Nach Ansicht der Autor:innen ist dies die erste Deep-Learning-Studie zur Vorhersage des volumetrischen Meningiom-Ansprechens nach GKRS. Fine-tuning und RadImageNet-Pretraining waren architekturabhängig; wichtig ist die Konsistenz über chronologische Splits.
Kernaussagen
- 190 Patient:innen, prätherapeutische T1-MRT vor GKRS
- Beste Peak-AUC: 0,953 und 1,000 beim feinjustierten RadImageNet-ResNet-10t
- Leistung hing nicht konsistent von der CNN-Größe ab
Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.
Kurz gefasst
Fachartikel in der Zeitschrift Cancers, online erschienen am 09.11.2026. Verfasst von Herwin Speckter und 13 weiteren Autor:innen. Beteiligte Einrichtung: Centro Gamma Knife Dominicano, Centro de Diagnóstico y Medicina Avanzada y de Conferencias Médicas y Telemedicina, Plaza de la Salud, Santo Domingo 1…. Die Arbeit nennt 53 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0). Gefördert von: Santo Domingo Institute of Technology, University Instituto Tecnológico de Santo Domingo (INTEC), Dominican Republic.
Abstract (Originalsprache)
Background/Objectives: Deep learning may support the prediction of meningioma response after Gamma Knife radiosurgery (GKRS), but small clinical cohorts increase the risk of overfitting and unstable performance. We developed leakage-controlled code adjusted for small clinical datasets.
Methods
Pretreatment contrast-enhanced T1 MRI from 190 patients was analysed using one tumour-centred axial slice per patient. Response was defined as a tumour volume decrease ≥ 30% per log10 (months). ResNet-10t, ResNet-18, ResNet-50 and DenseNet-121 with ImageNet or RadImageNet pretraining were evaluated in three workflows: (1) frozen backbone CNN, head-only training; (2) logistic regression or naive Bayes classification of features extracted from frozen CNNs; and (3) restricted CNN fine-tuning. Five partially overlapping chronological development/test splits were assessed, with all data-dependent fitting, feature selection and model optimisation restricted to development data.
Results
The smallest RadImageNet ResNet-10t CNN performed best when fine-tuned (peak AUCs 0.953 and 1.000) but showed the widest split-to-split variation (range 0.738–1.000). When RadImageNet features extracted from ResNet-10t were classified by naive Bayes and logistic regression, they reached lower median and peak AUCs but within narrower ranges. Predictive performance did not consistently depend on CNN size.
Conclusions
To our knowledge, this is the first deep learning study predicting volumetric meningioma response after GKRS. We provide openly available, ready-to-use code for three major workflows in small clinical datasets, with safeguards against information leakage. The benefit of fine-tuning and of RadImageNet pretraining depended on architecture. Robust small-cohort modelling requires attention to performance consistency across chronological splits, not only to the highest AUC in a single split.
Schlagwörter
Stichwörter der Autor:innen
Autor:innen und Institutionen
- Centro Gamma Knife Dominicano, Centro de Diagnóstico y Medicina Avanzada y de Conferencias Médicas y Telemedicina, Plaza de la Salud, Santo Domingo 10514, Dominican Republic.
- Department of Radiology, CEDIMAT, Plaza de la Salud, Santo Domingo 10511, Dominican Republic.
- Department of Basic and Environmental Science, Instituto Tecnológico de Santo Domingo (INTEC), Santo Domingo 10602, Dominican Republic.
- Department of Experimental Oncology, Institute for Oncology & Radiology of Serbia, 11000 Belgrade, Serbia.
ORCID-Profile: Herwin Speckter, Marko Radulovic, Ivan Gonzalez, Diones Rivera, Ismael Peralta, Issael Ramirez, Velicko Vranes
Förderung
- Santo Domingo Institute of Technology
- University Instituto Tecnológico de Santo Domingo (INTEC), Dominican Republic
Zitieren
APA
Speckter, H., Radulovic, M., Gonzalez, I., Hernandez, G., Bido, J., Rivera, D., Suazo, L., Valenzuela, S., Peralta, I., Paulino, J., Bernard, T., Ramirez, I., Stoeter, P., & Vranes, V. (2026). Realistic Performance Estimation in Small-Cohort Deep Learning and Machine Learning: A Leakage-Controlled Codebase Applied to Meningioma Response Prediction After Gamma Knife Radiosurgery. Cancers, 18(21), 3590. https://doi.org/10.3390/cancers18213590
Vancouver
Speckter H, Radulovic M, Gonzalez I, Hernandez G, Bido J, Rivera D, et al. Realistic Performance Estimation in Small-Cohort Deep Learning and Machine Learning: A Leakage-Controlled Codebase Applied to Meningioma Response Prediction After Gamma Knife Radiosurgery. Cancers. 2026;18(21):3590. doi:10.3390/cancers18213590
BibTeX
@article{Speckter2026,
author = {Speckter, Herwin and Radulovic, Marko and Gonzalez, Ivan and Hernandez, Giancarlo and Bido, Jose and Rivera, Diones and Suazo, Luis and Valenzuela, Santiago and Peralta, Ismael and Paulino, Jeffrey and Bernard, Teuddis and Ramirez, Issael and Stoeter, Peter and Vranes, Velicko},
title = {Realistic Performance Estimation in Small-Cohort Deep Learning and Machine Learning: A Leakage-Controlled Codebase Applied to Meningioma Response Prediction After Gamma Knife Radiosurgery},
journal = {Cancers},
year = {2026},
volume = {18},
number = {21},
pages = {3590},
doi = {10.3390/cancers18213590}
}
EUVIMED