ChatGPT: poderá orientar pais e cuidadores em questões acerca de amigdalectomia em idade pediátrica?
Revista Portuguesa de Otorrinolaringologia e Cirurgia de Cabeça e Pescoço · 25.04.2024
DOI: 10.34631/sporl.2209 ↗Kurz gefasst
Fachartikel in der Zeitschrift Revista Portuguesa de Otorrinolaringologia e Cirurgia de Cabeça e Pescoço, erschienen am 25.04.2024. Verfasst von Lucas dos Santos und 5 weiteren Autor:innen.
Abstract (Originalsprache)
Aim
To assess the accuracy of ChatGPT in answering parents and caregivers’ questions about pediatric tonsillectomy, comparing its versions 3.5 and 4.0. Study Design Instrument validation study of ChatGPT in answering questions about pediatric tonsillectomy. Material & Methods We prompted ChatGPT versions 3.5 and 4.0 with 21 questions. The answers were assessed in accordance with the latest American Academy of Otolaryngology’s guideline on Tonsillectomy in Children. The assessment of the responses generated by the two versions were compared using McNemar's test (exact version).
Results
Of the 21 ChatGPT-generated answers, 13 (61.9%) were deemed accurate using version 3.5, and 19 (90.5%) using version 4.0 (p=0.031). The inter-rater agreement was very good - Cohen’s Kappa=0.97 (v3.5) and 0.83 (v4.0).
Conclusion
ChatGPT version 3.5 should not be regarded as a sufficiently accurate tool for guiding caregivers on pediatric tonsillectomy-related questions. Version 4.0 seems to be a significantly more reliable tool.
Schlagwörter
Zitieren
APA
Santos, L. D., José, M., Carvalho, Tomás, Eça, T., & Luís, L. (2024). ChatGPT: poderá orientar pais e cuidadores em questões acerca de amigdalectomia em idade pediátrica?. Revista Portuguesa de Otorrinolaringologia e Cirurgia de Cabeça e Pescoço. https://doi.org/10.34631/sporl.2209
Vancouver
Santos LD, José M, Carvalho, Tomás, Eça T, Luís L. ChatGPT: poderá orientar pais e cuidadores em questões acerca de amigdalectomia em idade pediátrica?. Revista Portuguesa de Otorrinolaringologia e Cirurgia de Cabeça e Pescoço. 2024. doi:10.34631/sporl.2209
BibTeX
@article{Santos2024,
author = {Santos, Lucas dos and José, Maria and Carvalho and Tomás and Eça, Tiago and Luís, Leonel},
title = {ChatGPT: poderá orientar pais e cuidadores em questões acerca de amigdalectomia em idade pediátrica?},
journal = {Revista Portuguesa de Otorrinolaringologia e Cirurgia de Cabeça e Pescoço},
year = {2024},
doi = {10.34631/sporl.2209}
}
EUVIMED