EUVIMEDEUVIMED entdecken
ValidierungsstudieOpen Access · CC BY-NC 4.0

Serious Adverse Events: A Replicability and Validation Study of Naranjo Causality Assessment Tool in a Canadian Clinical Setting

Schwerwiegende unerwünschte Ereignisse: Studie zur Replizierbarkeit und Validierung des Naranjo-Kausalitätsbewertungsinstruments in einem kanadischen klinischen Setting

Pallavi Pradhan iD, Sonia Corbin iD, Shweta Todkar iD, Maude Lavallée iD, Isabelle Cloutier, Rosalie Darveau, Julie Méthot, Anick Bérard iD, Marie-Eve Piché iD, Jacinthe Leclerc iD

Journal of Evaluation in Clinical Practice · 2025-04 · 31 (3)

DOI: 10.1111/jep.70110 ↗

Auf einen Blick

In 12 zufällig ausgewählten SAE zeigte das Naranjo-Instrument eine gute Übereinstimmung zwischen zwei Prüfer:innen. Eine durch HCP dokumentierte Kausalitätsbewertung lag nicht vor.

Fragestellung

Ist die von HCP durchgeführte Kausalitätsbewertung mit dem Naranjo-Instrument replizierbar und im kanadischen klinischen Kontext valide?

Methode

Pilot-Retrospektivkohortenstudie mit Patient:innen mit SAE in einem Krankenhaus in Quebec 2021; 2 unabhängige Reviewer beurteilten 12 SAE mit dem Naranjo-Instrument.

Ergebnisse

Gewichtetes Kappa 0,92; Kappa 0,84. Keine durch HCP dokumentierte Kausalitätsbewertung, daher keine Replizierbarkeit berechenbar. Sensitivität 1,00, Spezifität 0,31; r s = 0,208 (p < 0,001).

Einschränkungen

12 SAE; keine dokumentierte Kausalitätsbewertung durch HCP, daher Replizierbarkeit nicht berechenbar.

Schlussfolgerung der Autor:innen

Die Autor:innen schließen, dass das Naranjo-Instrument im klinischen Setting zuverlässig und valide eingesetzt werden kann und alle an SAE beteiligten Arzneimittelprodukte klassifizieren konnte.

Kernaussagen

  • Gute Interrater-Reliabilität: gewichtetes Kappa 0,92
  • Sensitivität 1,00, Spezifität 0,31
  • Keine dokumentierte HCP-Bewertung, daher keine Replizierbarkeit berechenbar

Deutsche Zusammenfassung: KI-gestützt aus dem Original-Abstract erstellt; alle Zahlen wurden automatisch mit dem Original abgeglichen. Maßgeblich ist der Original-Abstract.

Kurz gefasst

Validierungsstudie in der Zeitschrift Journal of Evaluation in Clinical Practice, online erschienen am 24.04.2025. Verfasst von Pallavi Pradhan und 9 weiteren Autor:innen. Beteiligte Einrichtung: Departement of Anatomy, University of Quebec at Trois-Rivieres, Trois-Rivieres, Quebec, Canada. Hauptthemen laut MEDLINE: Patient Safety, Drug-Related Side Effects and Adverse Reactions. Die Arbeit wurde bisher 3-mal zitiert (Crossref) und nennt 48 Literaturangaben. Der Volltext ist frei zugänglich (Open Access, CC BY-NC 4.0). Gefördert von: This research was funded by Université du Québec à Trois-Rivières, Fondation de l'Institut universitaire de cardiologie et de pneumologie de Québec-Université Laval..

Auf einen BlickAbstractSchlagwörterBibliografische AngabenZitierenVerwandte Studien

Abstract (Originalsprache)

Rationale

Patient safety has become a major concern in healthcare today as 5%–10% of patients experience serious adverse events (SAE) during their hospital stay. The causal assessment of SAE is the responsibility of healthcare professionals (HCP), who use their judgment or a standardize tool. Whether those two methods are replicable to provide similar results remains unclear.

Objective

Our aim was to evaluate if causality assessment performed by HCP is replicable when systematically assessed with the Naranjo tool and to validate its performance in Canadian clinical context.

Methods

We performed pilot retrospective cohort study which included patients with SAE admitted to a Quebec hospital in 2021. Twelve SAE were randomly selected, and two reviewers independently assessed their causality using Naranjo tool. Inter‐rater reliability among two reviewers and between HCP was evaluated. Along with criterion validity, sensitivity and specificity were calculated for validation study.

Results

Weighted kappa was 0.92 (good inter‐rater reliability) where kappa was 0.84 (good agreement between reviewers). No causality assessment by HCP was documented leading to impossibility in computing replicability. The Naranjo tool showed positive monotonic correlation with expert opinion resulting in r s = 0.208 ( p < 0.001). Classification of Naranjo scores to binary variables resulted in sensitivity of 1.00 and specificity of 0.31.

Conclusion

Our study suggested that Naranjo tool is reliable and valid to be used in a clinical setting and was able to classify all drug products involved in the occurrence of SAE. Larger scale studies need to be conducted in real‐time clinical settings to investigate its performance and utility.

Schlagwörter

MeSH-Schlagwörter (MEDLINE)

Patient SafetyDrug-Related Side Effects and Adverse ReactionsHumansRetrospective StudiesFemaleReproducibility of ResultsMalePilot ProjectsQuebecMiddle AgedAgedAdultRisk Assessment

Stichwörter der Autor:innen

Canadian clinical settingNaranjo algorithmcausality assessmenthealthcare professionalsreplicability studyserious adverse eventsvalidity

Autor:innen und Institutionen

  • Departement of Anatomy, University of Quebec at Trois-Rivieres, Trois-Rivieres, Quebec, Canada.
  • Research center, Institut universitaire de cardiologie et de pneumologie de Québec-Université Laval, Quebec city, Quebec, Canada.
  • Department of Pharmacy, University Laval, Quebec City, Quebec, Canada.
  • Department of Pharmacy, Institut universitaire de cardiologie et de pneumologie de Québec-Université Laval, Quebec City, Quebec, Canada.
  • Research center, C.H.U. Ste-Justine, Montreal, Quebec, Canada.
  • Department of Pharmacy, University of Montreal, Montreal, Quebec, Canada.

ORCID-Profile: Pallavi Pradhan, Sonia Corbin, Shweta Todkar, Maude Lavallée, Anick Bérard, Marie-Eve Piché, Jacinthe Leclerc

Förderung

  • This research was funded by Université du Québec à Trois-Rivières
  • Fondation de l'Institut universitaire de cardiologie et de pneumologie de Québec-Université Laval.

Zitieren

APA

Pradhan, P., Corbin, S., Todkar, S., Lavallée, M., Cloutier, I., Darveau, R., Méthot, J., Bérard, A., Piché, M. E., & Leclerc, J. (2025). Serious Adverse Events: A Replicability and Validation Study of Naranjo Causality Assessment Tool in a Canadian Clinical Setting. Journal of Evaluation in Clinical Practice, 31(3). https://doi.org/10.1111/jep.70110

Vancouver

Pradhan P, Corbin S, Todkar S, Lavallée M, Cloutier I, Darveau R, et al. Serious Adverse Events: A Replicability and Validation Study of Naranjo Causality Assessment Tool in a Canadian Clinical Setting. Journal of Evaluation in Clinical Practice. 2025;31(3). doi:10.1111/jep.70110

BibTeX
@article{Pradhan2025,
  author = {Pradhan, Pallavi and Corbin, Sonia and Todkar, Shweta and Lavallée, Maude and Cloutier, Isabelle and Darveau, Rosalie and Méthot, Julie and Bérard, Anick and Piché, Marie-Eve and Leclerc, Jacinthe},
  title = {Serious Adverse Events: A Replicability and Validation Study of Naranjo Causality Assessment Tool in a Canadian Clinical Setting},
  journal = {Journal of Evaluation in Clinical Practice},
  year = {2025},
  volume = {31},
  number = {3},
  doi = {10.1111/jep.70110}
}
Kostenlos starten →