EUVIMEDEUVIMED entdecken
Open Access · CC BY 4.0

Feasibility and user evaluation of HopeBot: An LLM-powered conversational chatbot for depression screening

Machbarkeit und Nutzerevaluation von HopeBot: ein LLM-gestützter Gesprächsbot zum Depressionsscreening

Zhijun Guo iD, Alvina Lai, Julia Ive, Alexandru Petcu, Yutong Wang, Luyuan Qi, Johan H Thygesen, Kezhi Li iD

PLOS Digital Health · 25.06.2026 · 5 (6) · e0001446

DOI: 10.1371/journal.pdig.0001446 ↗

Auf einen Blick

In einer Machbarkeitsstudie mit 132 Erwachsenen zeigte HopeBot eine hohe Übereinstimmung mit der Selbstbeurteilung des PHQ-9. Viele Teilnehmende bewerteten die chatbotgestützte Version als hilfreicher und vertrauenswürdiger.

Fragestellung

Kann ein LLM-gestützter Chatbot den PHQ-9 zur Depressionsscreening strukturiert und mit hoher Übereinstimmung zur Selbstbeurteilung durchführen?

Methode

Within-subject-Machbarkeitsstudie mit 132 Erwachsenen aus 2 Ländern; Vergleich von Selbstbeurteilung und chatbot-gestütztem PHQ-9, danach 25-Item-Befragung.

Ergebnisse

Hohe Übereinstimmung zwischen Chatbot und Selbstbericht: ICC 0,92; mediane absolute Differenz 1 Punkt. Von 75 mit Feedback-Modul gaben 71 % (n = 53) mehr Vertrauen in die Chatbot-Version an.

Einschränkungen

Die Vergleichsgruppe war die Selbstbeurteilung; eine Validierung gegen klinikergeführte Interviews in realen Abläufen steht aus.

Schlussfolgerung der Autor:innen

Die Autor:innen schließen, dass ein LLM-gestützter Agent mit RAG den PHQ-9 machbar und akzeptabel durchführen kann und als skalierbare Ergänzung für frühes, niedrigschwelliges Screening infrage kommt.

Kernaussagen

  • ICC 0,92 und mediane Differenz von 1 Punkt zwischen beiden PHQ-9-Versionen
  • 71 % (n = 53) berichteten mehr Vertrauen in die Chatbot-Version
  • Usability-Werte: Komfort 8,4; Sprachklarheit 7,7; sensible Themen 7,6

Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.

Kurz gefasst

Fachartikel in der Zeitschrift PLOS Digital Health, online erschienen am 25.06.2026. Verfasst von Zhijun Guo und 7 weiteren Autor:innen. Beteiligte Einrichtung: Institute of Health Informatics University College, London, London, United Kingdom. Die Arbeit wurde bisher 1-mal zitiert (Crossref) und nennt 75 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY 4.0). Gefördert von: Â UKRI Centre for Doctoral Training in AI-enabled healthcare systemsÂ, National Institute for Health Research Biomedical Research Centre at Moorfields Eye Hospital NHS Foundation Trust and UCL Institute of Ophthalmology.

Auf einen BlickAbstractBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

Clinician-administered Patient Health Questionnaire-9 (PHQ-9) interviews allow clarification of ambiguous responses but are resource-intensive and difficult to scale for routine use. Self-administered versions are widely adopted for depression screening yet offer little opportunity for interaction or clarification, which may limit engagement and scoring accuracy. We developed HopeBot, a conversational chatbot powered by a large language model (LLM) that delivers the PHQ-9 via text or voice, providing real-time clarification and safety guidance through a retrieval-augmented generation (RAG) layer drawing on validated psychological and helpline resources. The system aims to extend access to structured screening rather than replace clinician judgment. In a within-subject feasibility study, 132 adults from two countries completed both self-administered and chatbot-assisted PHQ-9 assessments followed by a 25-item evaluation survey. Chatbot and self-report scores showed high concordance (intraclass correlation coefficient = 0.92; median absolute difference = 1 point), indicating faithful replication of scoring. Of these participants, 75 completed a comparative feedback module (most with identical scores were not prompted for comparison); 71% (n = 53) reported greater confidence in chatbot-assisted scores, citing clearer structure, interpretive guidance, and a supportive tone. Mean usability ratings (0–10) were 8.4 for comfort, 7.7 for voice clarity, 7.6 for handling sensitive topics, and 7.4 for recommendation helpfulness; the latter varied significantly by employment status and prior experience with mental-health services. The self-administered PHQ-9 served as a pragmatic comparator reflecting real-world digital screening, allowing evaluation of whether the chatbot could faithfully reproduce the questionnaire’s structure and scoring accuracy rather than diagnostic validity. These findings indicate that an LLM-powered conversational agent with RAG-based grounding can feasibly and acceptably administer the PHQ-9 with strong score concordance relative to self-report, suggesting potential as a scalable adjunct for early, low-burden depression screening. Further validation against clinician-administered assessments in real-world workflows is warranted. Trial registration ClinicalTrials.gov Identifier NCT06801925

Autor:innen und Institutionen

  • Institute of Health Informatics University College, London, London, United Kingdom.
  • Lancashire & South Cumbria NHS Foundation Trust, Bamber Bridge, ‌United Kingdom.
  • University College London Hospital NHS Foundation Trust, London, United Kingdom.

ORCID-Profile: Zhijun Guo, Kezhi Li

Förderung

  • Â UKRI Centre for Doctoral Training in AI-enabled healthcare systemsÂ
  • National Institute for Health Research Biomedical Research Centre at Moorfields Eye Hospital NHS Foundation Trust and UCL Institute of Ophthalmology

Zitieren

APA

Guo, Z., Lai, A., Ive, J., Petcu, A., Wang, Y., Qi, L., Thygesen, J. H., & Li, K. (2026). Feasibility and user evaluation of HopeBot: An LLM-powered conversational chatbot for depression screening. PLOS Digital Health, 5(6), e0001446. https://doi.org/10.1371/journal.pdig.0001446

Vancouver

Guo Z, Lai A, Ive J, Petcu A, Wang Y, Qi L, et al. Feasibility and user evaluation of HopeBot: An LLM-powered conversational chatbot for depression screening. PLOS Digital Health. 2026;5(6):e0001446. doi:10.1371/journal.pdig.0001446

BibTeX
@article{Guo2026,
  author = {Guo, Zhijun and Lai, Alvina and Ive, Julia and Petcu, Alexandru and Wang, Yutong and Qi, Luyuan and Thygesen, Johan H and Li, Kezhi},
  title = {Feasibility and user evaluation of HopeBot: An LLM-powered conversational chatbot for depression screening},
  journal = {PLOS Digital Health},
  year = {2026},
  volume = {5},
  number = {6},
  pages = {e0001446},
  doi = {10.1371/journal.pdig.0001446}
}
Kostenlos starten →