EUVIMEDEUVIMED entdecken
Open Access

Comparing the Readability and Content Quality of Online Patient Education Materials and ChatGPT-Generated Patient Education Materials for Breast Cancer Surgery and Reconstruction

Vergleich der Lesbarkeit und Inhaltsqualität von Online-Patientenaufklärungsmaterialien und von ChatGPT erzeugten Patientenaufklärungsmaterialien zu Brustkrebschirurgie und Rekonstruktion

Nikhil Sriram iD, Anitesh Bajaj iD, May Li iD, Tarifa Adam iD, Antoinette Nguyen iD, Jeewon Chon iD, Robert D Galiano iD

Archives of Plastic Surgery · 01.03.2026 · 53 (02) · 191-198

DOI: 10.1055/a-2794-9984 ↗

Auf einen Blick

Online-Patientenaufklärungsmaterialien waren schwerer lesbar als empfohlen. Mit vereinfachtem Prompt erzeugte ChatGPT Materialien auf Sechstklässler-Niveau bei vergleichbarer Inhaltsqualität.

Fragestellung

Wie unterscheiden sich Lesbarkeit und Inhaltsqualität von Online-Patientenaufklärungsmaterialien zu Brustkrebschirurgie und Rekonstruktion von ChatGPT-generierten Materialien?

Methode

Google-Suchen im Januar 2025 nach relevanten OPEMs; ChatGPT 4.0 erzeugte Materialien mit Standard- und vereinfachtem Prompt. Lesbarkeit und Inhaltsqualität wurden verglichen.

Ergebnisse

99 OPEMs und 60 ChatGPT-Antworten (30 Standard, 30 vereinfacht) wurden analysiert. Medianes FKGL: 10,8 für OPEMs, 10,0 für Standard-ChatGPT und 5,8 für vereinfachtes ChatGPT. DISCERN unterschied sich nicht signifikant.

Schlussfolgerung der Autor:innen

OPEMs zu Brustkrebschirurgie und Rekonstruktion überschreiten die empfohlene Lesbarkeit. Vereinfachtes ChatGPT lieferte Materialien im Einklang mit NIH/AMA-Guidelines bei erhaltener Inhaltsqualität.

Kernaussagen

  • Medianes FKGL: 10,8 bei OPEMs und 5,8 bei vereinfachtem ChatGPT
  • Standard-ChatGPT und OPEMs lagen über der empfohlenen Lesestufe
  • DISCERN-Scores unterschieden sich nicht signifikant

Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.

Kurz gefasst

Fachartikel in der Zeitschrift Archives of Plastic Surgery, erschienen am 01.03.2026. Verfasst von Nikhil Sriram und 6 weiteren Autor:innen. Beteiligte Einrichtung: Division of Plastic and Reconstructive Surgery, Northwestern University Feinberg School of Medicine, Chicago, Illinois, United States. Der Volltext ist frei in PubMed Central verfügbar.

Auf einen BlickAbstractSchlagwörterBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

Background

Patients undergoing breast cancer surgery and reconstruction seek information using online patient education materials (OPEMs). The National Institutes of Health (NIH) and American Medical Association (AMA) recommend a sixth-grade reading level for OPEMs. In recent years, Chat Generative Pre-Trained Transformer (ChatGPT), a large language model (LLM), has shown potential utility in patient education. This study compares the readability and content quality of OPEMs on breast cancer surgery and reconstruction with ChatGPT-generated materials.

Methods

Google searches were conducted in January 2025 to identify relevant OPEMs for breast cancer surgery and reconstruction. For each search term, ChatGPT 4.0 was prompted to generate patient education guides using two approaches: (1) Standard prompting and (2) simplified prompting to align with NIH/AHA recommendations (“write the guide like I am in sixth grade”). Readability and content quality metrics were assessed.

Results

Ninety-nine OPEMs and 60 ChatGPT responses (30 standard, 30 simplified) were analyzed. Median Flesch–Kincaid Grade Level (FKGL) was 10.8 for OPEMs, 10.0 for standard ChatGPT responses, and 5.8 for simplified ChatGPT responses. OPEMs and standard ChatGPT responses significantly exceeded NIH/AMA recommendations (p < 0.001). Simplified ChatGPT responses aligned with the sixth-grade level and were significantly easier to read than OPEMs and standard ChatGPT responses (p < 0.001). DISCERN scores did not significantly differ between OPEMs and standard/simplified ChatGPT responses.

Conclusion

OPEMs on breast cancer surgery and reconstruction exceed recommended readability levels. ChatGPT, when prompted to simplify, produced materials consistent with NIH/AMA guidelines while maintaining content quality. Using ChatGPT for patient education may enhance accessibility and patient comprehension of health information.

Schlagwörter

Stichwörter der Autor:innen

artificial intelligencebreast cancer surgerybreast reconstructionbreast reconstruction-oncoplastic surgerybreast/trunkclinical practice and educationhospital managementpatient education materialsreadability

Autor:innen und Institutionen

  • Division of Plastic and Reconstructive Surgery, Northwestern University Feinberg School of Medicine, Chicago, Illinois, United States.
  • Department of Surgery, University of Rochester School of Medicine and Dentistry, Rochester, Illinois, United States.
  • Department of Surgery, Loyola University Chicago Stritch School of Medicine, Maywood, Illinois, United States.

ORCID-Profile: Nikhil Sriram, Anitesh Bajaj, May Li, Tarifa Adam, Antoinette Nguyen, Jeewon Chon, Robert D Galiano

Zitieren

APA

Sriram, N., Bajaj, A., Li, M., Adam, T., Nguyen, A., Chon, J., & Galiano, R. D. (2026). Comparing the Readability and Content Quality of Online Patient Education Materials and ChatGPT-Generated Patient Education Materials for Breast Cancer Surgery and Reconstruction. Archives of Plastic Surgery, 53(02), 191-198. https://doi.org/10.1055/a-2794-9984

Vancouver

Sriram N, Bajaj A, Li M, Adam T, Nguyen A, Chon J, et al. Comparing the Readability and Content Quality of Online Patient Education Materials and ChatGPT-Generated Patient Education Materials for Breast Cancer Surgery and Reconstruction. Archives of Plastic Surgery. 2026;53(02):191-198. doi:10.1055/a-2794-9984

BibTeX
@article{Sriram2026,
  author = {Sriram, Nikhil and Bajaj, Anitesh and Li, May and Adam, Tarifa and Nguyen, Antoinette and Chon, Jeewon and Galiano, Robert D},
  title = {Comparing the Readability and Content Quality of Online Patient Education Materials and ChatGPT-Generated Patient Education Materials for Breast Cancer Surgery and Reconstruction},
  journal = {Archives of Plastic Surgery},
  year = {2026},
  volume = {53},
  number = {02},
  pages = {191--198},
  doi = {10.1055/a-2794-9984}
}
Kostenlos starten →