EUVIMEDEUVIMED entdecken
Open Access · CC BY 4.0

Utilization of a HIPAA-compliant large language model chatbot in an academic pediatric medical center

Nutzung eines HIPAA-konformen Large-Language-Model-Chatbots in einem universitären pädiatrischen medizinischen Zentrum

Benjamin Rader iD, Dinesh K Rai, Melissa L Stewart, Sarah Lejfer, Sampath Chennuri, James Hartwell, Victor Moyano, Max H Witwer iD, Peter C Laussen, Heather L Nelson, John S Brownstein

PLOS Digital Health · 17.09.2026 · 5 (9) · e0001684

DOI: 10.1371/journal.pdig.0001684 ↗

Auf einen Blick

In einer Mixed-Methods-Fallstudie nutzte nur ein kleiner Teil der Beschäftigten InternalGPT. Regelmäßige Nutzer:innen berichteten eine höhere Produktivität; die meisten Beschäftigten verwendeten das Tool nie.

Fragestellung

Wie wurde der HIPAA-konforme LLM-Chatbot InternalGPT in einem akademischen pädiatrischen Zentrum genutzt und welche Barrieren gab es?

Methode

Mixed-Methods-Fallstudie mit Umfrage und 14 Monaten Nutzungsdaten unter Beschäftigten des Zentrums.

Ergebnisse

Von ca. 15.800 Beschäftigten beantragten 2.149 (13,6 %) Zugriff. 52,8 % der Nutzer:innen hatten mindestens 1 Token-Nutzung; 33,6 % loggten sich nie ein, 13,7 % loggten sich ein, nutzten das Tool aber nie. Die oberen 20 % verbrauchten 69,4 % der Tokens.

Einschränkungen

Selbstberichtete Produktivität nur bei 92 von 461 Personen; explorative Wertschätzung der Produktivität unter Annahmen.

Schlussfolgerung der Autor:innen

Obwohl die meisten Beschäftigten den Chatbot nie nutzten, berichtete eine kleine Minderheit regelmäßiger Nutzer:innen deutliche Produktivitätsgewinne. Für erfolgreiche Implementierung sind neben KI auch Schulung und technische Integration wichtig.

Kernaussagen

  • 2.149 von ca. 15.800 Beschäftigten beantragten Zugriff
  • 52,8 % der Nutzer:innen hatten mindestens 1 Token-Nutzung
  • Häufigste Barriere: wenig Zeit für Exploration (51,4 %)

Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.

Kurz gefasst

Fachartikel in der Zeitschrift PLOS Digital Health, online erschienen am 17.09.2026. Verfasst von Benjamin Rader und 10 weiteren Autor:innen. Beteiligte Einrichtung: Innovation & Digital Health Accelerator, Boston Children's Hospital, Boston, Massachusetts, United States of America. Die Arbeit nennt 9 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0).

Auf einen BlickAbstractBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

Despite growing interest in LLM chatbots, little evidence exists on usage patterns in hospital systems. This paper presents a mixed-methods case study of “InternalGPT,” a HIPAA-compliant LLM chatbot made available to employees of the institution. Survey responses and 14 months of system utilization data were analyzed across diverse professional roles in the institution. Of approximately 15,800 hospital employees, 2,149 (13.6%) requested InternalGPT access. Motivations for sign-up aligned with professional roles: operations professionals prioritized administrative automation, clinicians focused on clinical augmentation, and scientists on research and coding. Among InternalGPT users, 52.8% recorded at least one token use; 33.6% never logged-in, and 13.7% logged-in but never used the tool. The top 20% of users consumed 69.4% of tokens. Key barriers to engagement among non-users included limited time for exploration (51.4%) and difficulty using (21.8%), integrating (15.5%), or accessing (9.2%) InternalGPT. Among a small group of employees with sustained InternalGPT use (n = 461), a subset who responded to a self-report survey (n = 92) indicated a mean productivity gain of 30%, corresponding to an exploratory perceived productivity value of $6.3M to $18.9M under varying extrapolation assumptions. Although most hospital employees never used the HIPAA-compliant LLM chatbot, a small minority who utilized it regularly reported substantial productivity improvements, highlighting both the value proposition of LLMs in healthcare and potential for increased engagement. Implementation and knowledge challenges were more frequently cited than AI-feature and performance concerns as key barriers to adoption. These findings underscore that successful LLM implementation in healthcare hinges not only on advanced AI technology, but also on robust system capacity building including investments in user education and technical integration.

Autor:innen und Institutionen

  • Innovation & Digital Health Accelerator, Boston Children's Hospital, Boston, Massachusetts, United States of America.
  • Department of Anesthesiology, Critical Care and Pain Medicine, Boston Children's Hospital, Boston, Massachusetts, United States of America.
  • Department of Anesthesia, Harvard Medical School, Boston, Massachusetts, United States of America.
  • Executive Vice President of Health Affairs, Boston Children's Hospital, Boston, Massachusetts, United States of America.
  • Chief Information Officer, Boston Children's Hospital, Boston, Massachusetts, United States of America.
  • Department of Pediatrics, Harvard Medical School, Boston, Massachusetts, United States of America.

ORCID-Profile: Benjamin Rader, Max H Witwer

Zitieren

APA

Rader, B., Rai, D. K., Stewart, M. L., Lejfer, S., Chennuri, S., Hartwell, J., Moyano, V., Witwer, M. H., Laussen, P. C., Nelson, H. L., & Brownstein, J. S. (2026). Utilization of a HIPAA-compliant large language model chatbot in an academic pediatric medical center. PLOS Digital Health, 5(9), e0001684. https://doi.org/10.1371/journal.pdig.0001684

Vancouver

Rader B, Rai DK, Stewart ML, Lejfer S, Chennuri S, Hartwell J, et al. Utilization of a HIPAA-compliant large language model chatbot in an academic pediatric medical center. PLOS Digital Health. 2026;5(9):e0001684. doi:10.1371/journal.pdig.0001684

BibTeX
@article{Rader2026,
  author = {Rader, Benjamin and Rai, Dinesh K and Stewart, Melissa L and Lejfer, Sarah and Chennuri, Sampath and Hartwell, James and Moyano, Victor and Witwer, Max H and Laussen, Peter C and Nelson, Heather L and Brownstein, John S},
  title = {Utilization of a HIPAA-compliant large language model chatbot in an academic pediatric medical center},
  journal = {PLOS Digital Health},
  year = {2026},
  volume = {5},
  number = {9},
  pages = {e0001684},
  doi = {10.1371/journal.pdig.0001684}
}
Kostenlos starten →