Cent Eur J Nurs Midw 2016, 7(2):412-419 | DOI: 10.15452/CEJNM.2016.07.0009
Inter-rater agreement of the Brief Bedside Dysphagia Screening Test-Revised in patients with stroke
- 1 Department of Nursing, Faculty of Health Studies, University of Pardubice, Czech Republic
- 2 Department of Neurology, Pardubice Hospital, Hospitals of the Pardubice Region, Czech Republic
- 3 Department of Clinical Subspecialties, Faculty of Health Studies, University of Pardubice, Czech Republic
Aim: The aim of the study was to investigate the inter-rater agreement (IRA) of the 8-item Brief Bedside Dysphagia Screening Test-Revised (BBDST-R).
Design: An observational IRA study was conducted.
Methods: Forty-six patients with stroke were independently assessed by two nurse raters using the BBDST-R. Rater agreement was described and analysed using descriptive statistics, Cohen's kappa (κ), the proportion of observed agreement (Po), the prevalence index (pindex), and the bias index (bindex).
Results: Kappa ranged from -0.046 (p = 0.641; 95% CI = -0.126-0.034) for item "ability to clench the teeth" to 0.784 (p < 0.001; 95% CI = 0.377-1.000) for "thick liquid: cough". For the overall BBDST-R result, κ was 0.241 (p = 0.114; 95% CI = 0.000-0.558). The Po was ≥ 0.80 for five items; the pindex was ≥ 0.80 for three items. The bindex ranged from 0.03-0.31.
Conclusion: The IRA, as expressed by κ, was low for the overall result and variable for the individual items. However, for some items, κ may have misrepresented the IRA due to the high pindex and bindex. Several strategies are recommended to improve the IRA of the instrument. This should enhance the instrument's capacity to produce consistent results across raters.
Klíčová slova: Brief Bedside Dysphagia Screening Test-Revised, inter-rater agreement, dysphagia screening, nurse, stroke
Vloženo: 17. říjen 2015; Přijato: 18. listopad 2015; Zveřejněno: 30. září 2016 Zobrazit citaci
ACS | AIP | APA | ASA | Harvard | Chicago | Chicago Notes | IEEE | ISO690 | MLA | NLM | Turabian | Vancouver |
Reference
- Cicchetti DV. On the reliability and accuracy of the evaluative method for identifying evidence-based practices in autism. In: Reichow B, Doehring P, Cicchetti DV, Volkmar FR, editors. Evidence-based practices and treatments for children with autism. New York: Springer; 2011. p. 41-51.
Přejít k původnímu zdroji...
- Cichero JA, Heaton S, Bassett L. Triaging dysphagia: nurse screening for dysphagia in an acute hospital. Journal of Clinical Nursing. 2009;18(11):1649-1659.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Gisev N, Bell JS, Chen TF. Interrater agreement and interrater reliability: key concepts, approaches, and applications. Research in Social & Administrative Pharmacy. 2013;9(3):330-338.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Hripcsak G, Heitjan DF. Measuring agreement in medical informatics reliability studies. Journal of Biomedical Informatics. 2002;35(2):99-110.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Kottner J, Audige L, Brorson S, Donner A, Gajewski BJ, Hróbjartsson A, Roberts C, Shoukri M, Streiner DL. Guidelines for Reporting Reliability and Agreement Studies (GRRAS) were proposed. International Journal of Nursing Studies. 2011;48(6):661-671.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Lowry R. Kappa as a measure of concordance in categorical sorting; 2001-2013 [cited 2013 Dec 31]. Available from: http://vassarstats.net/kappa.html
- Mandysova P. A vision for dysphagia screening by nurses. Ošetrovateľstvo: teória, výskum, vzdelávanie. 2014;4(1):37-41.
- Mandysova P, Ehler E, Škvrňáková J, Černý M, Bártová I, Pellant A. Development of the Brief Bedside Dysphagia screening Test - Revised: a cross-sectional Czech study. Acta Medica. 2015;58(2):49-55.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Mandysova P, Škvrňáková J, Ehler E, Černý M. Development of the Brief Bedside Dysphagia Screening Test in the Czech Republic. Nursing & Health Sciences. 2011;13(4):388-395.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Martin P, Bateson P. Measuring behaviour: An introductory guide. 3 rd ed. Cambridge: Cambridge University Press; 2007.
Přejít k původnímu zdroji...
- Martino R, Martin RE, Black S. Dysphagia after stroke and its management. Canadian Medical Association Journal. 2012;184(10):1127-1128.
Přejít k původnímu zdroji...
Přejít na PubMed...
- McHugh ML. Interrater reliability: the kappa statistic. Biochemia Medica. 2012;22(3):276-282.
Přejít k původnímu zdroji...
- Middleton S, Grimley R, Alexandrov AW. Triage, treatment, and transfer: evidence-based clinical practice recommendations and models of nursing care for the first 72 hours of admission to hospital for acute stroke. Stroke. 2015;46(2):e18-25.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Nelson KP, Edwards D. Improving the reliability of diagnostic tests in population-based agreement studies. Statistics in Medicine. 2010;29(6):617- 626.
Přejít k původnímu zdroji...
Přejít na PubMed...
- O'Horo JC, Rogus-Pulia N, Garcia-Arguello L, Robbins J, Safdar N. Bedside diagnosis of dysphagia: a systematic review. Journal of Hospital Medicine. 2015;10(4):256- 265.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Shankar V, Bangdiwala SI. Observer agreement paradoxes in 2x2 tables: comparison of agreement measures. BMC Medical Research Methodology. 2014;14:100.
Přejít k původnímu zdroji...
Přejít na PubMed...
- Sim J, Wright CC. The kappa statistic in reliability studies: use, interpretation, and sample size requirements. Physical Therapy. 2005;85(3):257-268.
Přejít k původnímu zdroji...
- Trapl M, Enderle P, Nowotny M, Teuschl Y, Matz K, Dachenhausen A, Brainin M. Dysphagia bedside screening for acute-stroke patients: the Gugging Swallowing Screen. Stroke. 2007;38(11):2948-2952.
Přejít k původnímu zdroji...
Přejít na PubMed...
Tento článek je publikován v režimu tzv. otevřeného přístupu k vědeckým informacím (Open Access), který je distribuován pod licencí Creative Commons Attribution-NonCommercial 4.0 International License (CC BY-NC 4.0), která umožňuje nekomerční distribuci, reprodukci a změny, pokud je původní dílo řádně ocitováno. Není povolena distribuce, reprodukce nebo změna, která není v souladu s podmínkami této licence.