Comparative evaluation of ChatGPT and Gemini artificial intelligence in patient education on clear aligner therapy
Vergleichende Bewertung von ChatGPT und Gemini künstlicher Intelligenz in der Patientenedukation zur Clear Aligner Therapy
The Angle Orthodontist · 2026-11 · 96 (6) · 667-674
DOI: 10.2319/082825-727.1 ↗Auf einen Blick
Verglichen wurden ChatGPT-4 Turbo und Gemini 1.5 Pro mit 36 standardisierten Fragen zur Clear Aligner Therapy. Zwischen den Modellen fanden sich keine signifikanten Unterschiede in Genauigkeit, Vollständigkeit oder Lesbarkeit.
Fragestellung
Wie unterscheiden sich ChatGPT-4 Turbo und Gemini 1.5 Pro bei Genauigkeit, Vollständigkeit und Lesbarkeit von Antworten zur Clear Aligner Therapy?
Methode
36 standardisierte Fragen; Antworten von ChatGPT-4 Turbo und Gemini 1.5 Pro; Bewertung durch 2 Kieferorthopädieprofessoren; Analyse mit FKGL, SMOG, t-Tests, Mann-Whitney-U-Test und ICC.
Ergebnisse
Interrater-Reliabilität hoch. ChatGPT: Genauigkeit ICC = 0,91, Vollständigkeit ICC = 0,89. Gemini: Genauigkeit ICC = 0,93, Vollständigkeit ICC = 0,78. Keine signifikanten Unterschiede in Genauigkeit, Vollständigkeit oder Lesbarkeit.
Schlussfolgerung der Autor:innen
Die Lesbarkeit der Inhalte kann für allgemeine Zielgruppen wegen der Komplexität problematisch sein. Die Modelle können die Patientenedukation unterstützen; professionelle Beratung und sorgfältige Interpretation bleiben wichtig.
Kernaussagen
- Keine signifikanten Unterschiede zwischen ChatGPT-4 Turbo und Gemini 1.5 Pro
- Beide Modelle lieferten Inhalte auf hohem Leselevel
- Professionelle Beratung bleibt laut Autor:innen wichtig
Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.
Kurz gefasst
Fachartikel in der Zeitschrift The Angle Orthodontist, 2026-11. Verfasst von Merve Kurnaz und 4 weiteren Autor:innen. Die Arbeit wurde bisher 1-mal zitiert (Crossref) und nennt 28 Literaturangaben. Der Volltext ist frei in PubMed Central verfügbar.
Themen: Künstliche Intelligenz in der Pflege, Selbstmanagement bei chronischen Erkrankungen
Abstract (Originalsprache)
Objectives
To compare the performance of ChatGPT-4 Turbo and Gemini 1.5 Pro in the domain of Clear Aligner Therapy (CAT). Materials and Methods A total of 36 standardized questions on CAT were created based on consent forms from aligner companies and frequently asked patient questions. Responses were generated by ChatGPT-4 Turbo and Gemini 1.5 Pro. A reference answer key was developed from current literature. Two orthodontic professors independently evaluated the responses using a six-point accuracy scale and a three-point completeness scale. Questions were also categorized by topic. Readability was assessed using Flesch-Kincaid Grade Level (FKGL) and Simplified Measure of Gobbledygook (SMOG) scores. Independent samples t -tests were used to compare readability, whereas the Mann-Whitney U test was used for accuracy and completeness. Interrater reliability was assessed with intraclass correlation coefficient (ICC). Significance was set at P < .05.
Results
Interrater reliability was high for both models. ChatGPT showed excellent agreement for accuracy (ICC = 0.91) and good for completeness (ICC = 0.89). Gemini also showed excellent accuracy (ICC = 0.93) and moderate-to-good completeness (ICC = 0.78). No significant differences were found between models in accuracy, completeness, or readability. Both produced content with FKGL scores indicating university-level reading and SMOG scores suggesting high school-level comprehension.
Conclusions
The readability of the content may present challenges for general audiences due to its complexity. The models used in this study may assist in patient education; however, the results implied the importance of professional consultation and careful interpretation of artificial intelligence-generated information.
Schlagwörter
Stichwörter der Autor:innen
Zitieren
APA
Kurnaz, M., Tortop, T., Kan, H., Ocakoğlu, G., & Kaygısız, E. (2026). Comparative evaluation of ChatGPT and Gemini artificial intelligence in patient education on clear aligner therapy. The Angle Orthodontist, 96(6), 667-674. https://doi.org/10.2319/082825-727.1
Vancouver
Kurnaz M, Tortop T, Kan H, Ocakoğlu G, Kaygısız E. Comparative evaluation of ChatGPT and Gemini artificial intelligence in patient education on clear aligner therapy. The Angle Orthodontist. 2026;96(6):667-674. doi:10.2319/082825-727.1
BibTeX
@article{Kurnaz2026,
author = {Kurnaz, Merve and Tortop, Tuba and Kan, Hilal and Ocakoğlu, Gökhan and Kaygısız, Emine},
title = {Comparative evaluation of ChatGPT and Gemini artificial intelligence in patient education on clear aligner therapy},
journal = {The Angle Orthodontist},
year = {2026},
volume = {96},
number = {6},
pages = {667--674},
doi = {10.2319/082825-727.1}
}
EUVIMED