EUVIMEDEUVIMED entdecken
Open Access · CC BY 4.0

Implementation of an opioid use disorder (OUD) machine-learning phenotype in real-time for the ADAPT clinical trial

Implementierung eines Machine-Learning-Phänotyps für Opioid Use Disorder (OUD) in Echtzeit für die ADAPT-Studie

Huan Li iD, Mark Iscoe, John Lutz, Carolina Diniz Hopper, Sabrina Fried, Josue Minaya, Caroline Raymond King, Olga Reykhart, Hyung Paek, Daniella Meeker, Edward R Melnick iD, R Andrew Taylor

PLOS Digital Health · 03.09.2026 · 5 (9) · e0001140

DOI: 10.1371/journal.pdig.0001140 ↗

Auf einen Blick

In 3 Notaufnahmen wurde ein in die elektronische Patientenakte integrierter Machine-Learning-Phänotyp für OUD entwickelt und eingesetzt. Die retrospektive Trennschärfe war hoch; prospektiv zeigte das Modell gute Übereinstimmung mit der ärztlichen Beurteilung.

Fragestellung

Kann ein in die elektronische Patientenakte eingebettetes Machine-Learning-Modell Patient:innen mit OUD in der Notaufnahme in Echtzeit für Screening und Buprenorphin-Start identifizieren?

Methode

Multiphase-Studie in 3 Notaufnahmen eines US-Gesundheitssystems von 2014 bis 2025; Random-Forest-Klassifikator mit Daten bis Triage; retrospektive und prospektive Validierung gegen ärztlichen Goldstandard.

Ergebnisse

Retrospektiv AUC 0,99 (95 %-KI 0,98–0,99) und AUPRC 0,92 (95 %-KI 0,90–0,94). Prospektiv (n = 217) stimmten 89,3 % der positiven und 95,7 % der negativen Vorhersagen mit der ärztlichen Adjudikation überein; design-gewichtete Sensitivität 0,40 (95 %-KI 0,24–0,64), Spezifität 0,996.

Einschränkungen

Prospektive Stichprobe war nach Modellvorhersage geschichtet; weitere operative Kennzahlen und Driftanalysen stehen aus.

Schlussfolgerung der Autor:innen

Ein in die elektronische Patientenakte eingebetteter Machine-Learning-Phänotyp kann Patient:innen mit OUD in der Notaufnahme in Echtzeit genau und praktikabel identifizieren.

Kernaussagen

  • Retrospektiv hohe Diskrimination: AUC 0,99
  • Prospektiv 89,3 % Übereinstimmung bei positiven Fällen
  • Design-gewichtete Sensitivität 0,40, Spezifität 0,996

Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.

Kurz gefasst

Fachartikel in der Zeitschrift PLOS Digital Health, online erschienen am 03.09.2026. Verfasst von Huan Li und 11 weiteren Autor:innen. Beteiligte Einrichtung: Department of Emergency Medicine, Yale University School of Medicine, New Haven, Connecticut, United States of America. Die Arbeit nennt 40 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0). Gefördert von: NCATS NIH HHS, NIDA NIH HHS, National Institute of Health.

Auf einen BlickAbstractBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

We developed and deploy a real‑time, electronic health record‑integrated machine learning phenotype to identify emergency department patients with opioid use disorder for prospective clinical trial screening and buprenorphine initiation. We conducted a multi‑phase study across three emergency departments in a single United States health system from 2014 to 2025. Using visit‑level data available at or before triage, we trained a random‑forest classifier to estimate opioid use disorder risk and embedded scoring in the electronic health record to trigger point‑of‑care alerts for trial eligibility review. A high-specificity computable training label supported retrospective development, and a clinician gold-standard reference was established through structured chart review. Performance was summarized using discrimination, calibration, and threshold-based classification metrics; prospective validation used a stratified random sample of flagged and unflagged encounters. Retrospective discrimination compared to the high-specificity computable training label was high (area under the receiver operating characteristic curve, 0.99; 95% CI, 0.98–0.99; area under the precision-recall curve, 0.92; 95% CI, 0.90–0.94), and calibration plots informed operating‑point selection for real‑time use. In prospective gold‑standard validation (n = 217), 89.3% of model-positive encounters and 95.7% of model-negative encounters agreed with physician adjudication at the prespecified threshold. Because the sample was stratified on model prediction, these are within-stratum agreement estimates; weighting them by the source-population flag rate (28,284 of 866,569 eligible encounters, 3.26%) yields design-weighted estimates of population-level prevalence (7.1%), sensitivity (0.40, 95% CI 0.24-0.64), and specificity (0.996). An electronic health record‑embedded, machine learning phenotype can accurately and feasibly identify emergency department patients with opioid use disorder in real time, streamlining clinical trial enrollment and treatment initiation. Ongoing work will report operational metrics (e.g., alert volume and latency), monitor performance drift and equity across subgroups, and evaluate downstream clinical and trial outcomes.

Autor:innen und Institutionen

  • Department of Emergency Medicine, Yale University School of Medicine, New Haven, Connecticut, United States of America.
  • Biomedical Informatics and Data Science, Yale University School of Medicine, New Haven, Connecticut, United States of America.
  • Department of Biostatistics, Yale School of Public Health, New Haven, Connecticut, United States of America.
  • Department of Emergency Medicine, University of Virginia, Charlottesville, Virginia, United States of America.

ORCID-Profile: Huan Li, Edward R Melnick

Förderung

  • NCATS NIH HHS
  • NIDA NIH HHS
  • National Institute of Health

Zitieren

APA

Li, H., Iscoe, M., Lutz, J., Hopper, C. D., Fried, S., Minaya, J., King, C. R., Reykhart, O., Paek, H., Meeker, D., Melnick, E. R., & Taylor, R. A. (2026). Implementation of an opioid use disorder (OUD) machine-learning phenotype in real-time for the ADAPT clinical trial. PLOS Digital Health, 5(9), e0001140. https://doi.org/10.1371/journal.pdig.0001140

Vancouver

Li H, Iscoe M, Lutz J, Hopper CD, Fried S, Minaya J, et al. Implementation of an opioid use disorder (OUD) machine-learning phenotype in real-time for the ADAPT clinical trial. PLOS Digital Health. 2026;5(9):e0001140. doi:10.1371/journal.pdig.0001140

BibTeX
@article{Li2026,
  author = {Li, Huan and Iscoe, Mark and Lutz, John and Hopper, Carolina Diniz and Fried, Sabrina and Minaya, Josue and King, Caroline Raymond and Reykhart, Olga and Paek, Hyung and Meeker, Daniella and Melnick, Edward R and Taylor, R Andrew},
  title = {Implementation of an opioid use disorder (OUD) machine-learning phenotype in real-time for the ADAPT clinical trial},
  journal = {PLOS Digital Health},
  year = {2026},
  volume = {5},
  number = {9},
  pages = {e0001140},
  doi = {10.1371/journal.pdig.0001140}
}
Kostenlos starten →