Feasibility and user evaluation of HopeBot: An LLM-powered conversational chatbot for depression screening
Machbarkeit und Nutzerevaluation von HopeBot: ein LLM-gestützter Gesprächsbot zum Depressionsscreening
PLOS Digital Health · 25.06.2026 · 5 (6) · e0001446
DOI: 10.1371/journal.pdig.0001446 ↗Auf einen Blick
In einer Machbarkeitsstudie mit 132 Erwachsenen zeigte HopeBot eine hohe Übereinstimmung mit der Selbstbeurteilung des PHQ-9. Viele Teilnehmende bewerteten die chatbotgestützte Version als hilfreicher und vertrauenswürdiger.
Fragestellung
Kann ein LLM-gestützter Chatbot den PHQ-9 zur Depressionsscreening strukturiert und mit hoher Übereinstimmung zur Selbstbeurteilung durchführen?
Methode
Within-subject-Machbarkeitsstudie mit 132 Erwachsenen aus 2 Ländern; Vergleich von Selbstbeurteilung und chatbot-gestütztem PHQ-9, danach 25-Item-Befragung.
Ergebnisse
Hohe Übereinstimmung zwischen Chatbot und Selbstbericht: ICC 0,92; mediane absolute Differenz 1 Punkt. Von 75 mit Feedback-Modul gaben 71 % (n = 53) mehr Vertrauen in die Chatbot-Version an.
Einschränkungen
Die Vergleichsgruppe war die Selbstbeurteilung; eine Validierung gegen klinikergeführte Interviews in realen Abläufen steht aus.
Schlussfolgerung der Autor:innen
Die Autor:innen schließen, dass ein LLM-gestützter Agent mit RAG den PHQ-9 machbar und akzeptabel durchführen kann und als skalierbare Ergänzung für frühes, niedrigschwelliges Screening infrage kommt.
Kernaussagen
- ICC 0,92 und mediane Differenz von 1 Punkt zwischen beiden PHQ-9-Versionen
- 71 % (n = 53) berichteten mehr Vertrauen in die Chatbot-Version
- Usability-Werte: Komfort 8,4; Sprachklarheit 7,7; sensible Themen 7,6
Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.
Kurz gefasst
Fachartikel in der Zeitschrift PLOS Digital Health, online erschienen am 25.06.2026. Verfasst von Zhijun Guo und 7 weiteren Autor:innen. Beteiligte Einrichtung: Institute of Health Informatics University College, London, London, United Kingdom. Die Arbeit wurde bisher 1-mal zitiert (Crossref) und nennt 75 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0). Gefördert von: Â UKRI Centre for Doctoral Training in AI-enabled healthcare systemsÂ, National Institute for Health Research Biomedical Research Centre at Moorfields Eye Hospital NHS Foundation Trust and UCL Institute of Ophthalmology.
Themen: Depression
Abstract (Originalsprache)
Clinician-administered Patient Health Questionnaire-9 (PHQ-9) interviews allow clarification of ambiguous responses but are resource-intensive and difficult to scale for routine use. Self-administered versions are widely adopted for depression screening yet offer little opportunity for interaction or clarification, which may limit engagement and scoring accuracy. We developed HopeBot, a conversational chatbot powered by a large language model (LLM) that delivers the PHQ-9 via text or voice, providing real-time clarification and safety guidance through a retrieval-augmented generation (RAG) layer drawing on validated psychological and helpline resources. The system aims to extend access to structured screening rather than replace clinician judgment. In a within-subject feasibility study, 132 adults from two countries completed both self-administered and chatbot-assisted PHQ-9 assessments followed by a 25-item evaluation survey. Chatbot and self-report scores showed high concordance (intraclass correlation coefficient = 0.92; median absolute difference = 1 point), indicating faithful replication of scoring. Of these participants, 75 completed a comparative feedback module (most with identical scores were not prompted for comparison); 71% (n = 53) reported greater confidence in chatbot-assisted scores, citing clearer structure, interpretive guidance, and a supportive tone. Mean usability ratings (0–10) were 8.4 for comfort, 7.7 for voice clarity, 7.6 for handling sensitive topics, and 7.4 for recommendation helpfulness; the latter varied significantly by employment status and prior experience with mental-health services. The self-administered PHQ-9 served as a pragmatic comparator reflecting real-world digital screening, allowing evaluation of whether the chatbot could faithfully reproduce the questionnaire’s structure and scoring accuracy rather than diagnostic validity. These findings indicate that an LLM-powered conversational agent with RAG-based grounding can feasibly and acceptably administer the PHQ-9 with strong score concordance relative to self-report, suggesting potential as a scalable adjunct for early, low-burden depression screening. Further validation against clinician-administered assessments in real-world workflows is warranted. Trial registration ClinicalTrials.gov Identifier NCT06801925
Autor:innen und Institutionen
- Institute of Health Informatics University College, London, London, United Kingdom.
- Lancashire & South Cumbria NHS Foundation Trust, Bamber Bridge, United Kingdom.
- University College London Hospital NHS Foundation Trust, London, United Kingdom.
ORCID-Profile: Zhijun Guo, Kezhi Li
Förderung
- Â UKRI Centre for Doctoral Training in AI-enabled healthcare systemsÂ
- National Institute for Health Research Biomedical Research Centre at Moorfields Eye Hospital NHS Foundation Trust and UCL Institute of Ophthalmology
Zitieren
APA
Guo, Z., Lai, A., Ive, J., Petcu, A., Wang, Y., Qi, L., Thygesen, J. H., & Li, K. (2026). Feasibility and user evaluation of HopeBot: An LLM-powered conversational chatbot for depression screening. PLOS Digital Health, 5(6), e0001446. https://doi.org/10.1371/journal.pdig.0001446
Vancouver
Guo Z, Lai A, Ive J, Petcu A, Wang Y, Qi L, et al. Feasibility and user evaluation of HopeBot: An LLM-powered conversational chatbot for depression screening. PLOS Digital Health. 2026;5(6):e0001446. doi:10.1371/journal.pdig.0001446
BibTeX
@article{Guo2026,
author = {Guo, Zhijun and Lai, Alvina and Ive, Julia and Petcu, Alexandru and Wang, Yutong and Qi, Luyuan and Thygesen, Johan H and Li, Kezhi},
title = {Feasibility and user evaluation of HopeBot: An LLM-powered conversational chatbot for depression screening},
journal = {PLOS Digital Health},
year = {2026},
volume = {5},
number = {6},
pages = {e0001446},
doi = {10.1371/journal.pdig.0001446}
}
EUVIMED