Comparing the Readability and Content Quality of Online Patient Education Materials and ChatGPT-Generated Patient Education Materials for Breast Cancer Surgery and Reconstruction
Vergleich der Lesbarkeit und Inhaltsqualität von Online-Patientenaufklärungsmaterialien und von ChatGPT erzeugten Patientenaufklärungsmaterialien zu Brustkrebschirurgie und Rekonstruktion
Archives of Plastic Surgery · 01.03.2026 · 53 (02) · 191-198
DOI: 10.1055/a-2794-9984 ↗Auf einen Blick
Online-Patientenaufklärungsmaterialien waren schwerer lesbar als empfohlen. Mit vereinfachtem Prompt erzeugte ChatGPT Materialien auf Sechstklässler-Niveau bei vergleichbarer Inhaltsqualität.
Fragestellung
Wie unterscheiden sich Lesbarkeit und Inhaltsqualität von Online-Patientenaufklärungsmaterialien zu Brustkrebschirurgie und Rekonstruktion von ChatGPT-generierten Materialien?
Methode
Google-Suchen im Januar 2025 nach relevanten OPEMs; ChatGPT 4.0 erzeugte Materialien mit Standard- und vereinfachtem Prompt. Lesbarkeit und Inhaltsqualität wurden verglichen.
Ergebnisse
99 OPEMs und 60 ChatGPT-Antworten (30 Standard, 30 vereinfacht) wurden analysiert. Medianes FKGL: 10,8 für OPEMs, 10,0 für Standard-ChatGPT und 5,8 für vereinfachtes ChatGPT. DISCERN unterschied sich nicht signifikant.
Schlussfolgerung der Autor:innen
OPEMs zu Brustkrebschirurgie und Rekonstruktion überschreiten die empfohlene Lesbarkeit. Vereinfachtes ChatGPT lieferte Materialien im Einklang mit NIH/AMA-Guidelines bei erhaltener Inhaltsqualität.
Kernaussagen
- Medianes FKGL: 10,8 bei OPEMs und 5,8 bei vereinfachtem ChatGPT
- Standard-ChatGPT und OPEMs lagen über der empfohlenen Lesestufe
- DISCERN-Scores unterschieden sich nicht signifikant
Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.
Kurz gefasst
Fachartikel in der Zeitschrift Archives of Plastic Surgery, erschienen am 01.03.2026. Verfasst von Nikhil Sriram und 6 weiteren Autor:innen. Beteiligte Einrichtung: Division of Plastic and Reconstructive Surgery, Northwestern University Feinberg School of Medicine, Chicago, Illinois, United States. Der Volltext ist frei in PubMed Central verfügbar.
Themen: Selbstmanagement bei chronischen Erkrankungen, Künstliche Intelligenz in der Pflege
Abstract (Originalsprache)
Background
Patients undergoing breast cancer surgery and reconstruction seek information using online patient education materials (OPEMs). The National Institutes of Health (NIH) and American Medical Association (AMA) recommend a sixth-grade reading level for OPEMs. In recent years, Chat Generative Pre-Trained Transformer (ChatGPT), a large language model (LLM), has shown potential utility in patient education. This study compares the readability and content quality of OPEMs on breast cancer surgery and reconstruction with ChatGPT-generated materials.
Methods
Google searches were conducted in January 2025 to identify relevant OPEMs for breast cancer surgery and reconstruction. For each search term, ChatGPT 4.0 was prompted to generate patient education guides using two approaches: (1) Standard prompting and (2) simplified prompting to align with NIH/AHA recommendations (“write the guide like I am in sixth grade”). Readability and content quality metrics were assessed.
Results
Ninety-nine OPEMs and 60 ChatGPT responses (30 standard, 30 simplified) were analyzed. Median Flesch–Kincaid Grade Level (FKGL) was 10.8 for OPEMs, 10.0 for standard ChatGPT responses, and 5.8 for simplified ChatGPT responses. OPEMs and standard ChatGPT responses significantly exceeded NIH/AMA recommendations (p < 0.001). Simplified ChatGPT responses aligned with the sixth-grade level and were significantly easier to read than OPEMs and standard ChatGPT responses (p < 0.001). DISCERN scores did not significantly differ between OPEMs and standard/simplified ChatGPT responses.
Conclusion
OPEMs on breast cancer surgery and reconstruction exceed recommended readability levels. ChatGPT, when prompted to simplify, produced materials consistent with NIH/AMA guidelines while maintaining content quality. Using ChatGPT for patient education may enhance accessibility and patient comprehension of health information.
Schlagwörter
Stichwörter der Autor:innen
Autor:innen und Institutionen
- Division of Plastic and Reconstructive Surgery, Northwestern University Feinberg School of Medicine, Chicago, Illinois, United States.
- Department of Surgery, University of Rochester School of Medicine and Dentistry, Rochester, Illinois, United States.
- Department of Surgery, Loyola University Chicago Stritch School of Medicine, Maywood, Illinois, United States.
ORCID-Profile: Nikhil Sriram, Anitesh Bajaj, May Li, Tarifa Adam, Antoinette Nguyen, Jeewon Chon, Robert D Galiano
Zitieren
APA
Sriram, N., Bajaj, A., Li, M., Adam, T., Nguyen, A., Chon, J., & Galiano, R. D. (2026). Comparing the Readability and Content Quality of Online Patient Education Materials and ChatGPT-Generated Patient Education Materials for Breast Cancer Surgery and Reconstruction. Archives of Plastic Surgery, 53(02), 191-198. https://doi.org/10.1055/a-2794-9984
Vancouver
Sriram N, Bajaj A, Li M, Adam T, Nguyen A, Chon J, et al. Comparing the Readability and Content Quality of Online Patient Education Materials and ChatGPT-Generated Patient Education Materials for Breast Cancer Surgery and Reconstruction. Archives of Plastic Surgery. 2026;53(02):191-198. doi:10.1055/a-2794-9984
BibTeX
@article{Sriram2026,
author = {Sriram, Nikhil and Bajaj, Anitesh and Li, May and Adam, Tarifa and Nguyen, Antoinette and Chon, Jeewon and Galiano, Robert D},
title = {Comparing the Readability and Content Quality of Online Patient Education Materials and ChatGPT-Generated Patient Education Materials for Breast Cancer Surgery and Reconstruction},
journal = {Archives of Plastic Surgery},
year = {2026},
volume = {53},
number = {02},
pages = {191--198},
doi = {10.1055/a-2794-9984}
}
EUVIMED