Assessment of concordance between physicians, interns and students on COVID-19 severity using Fleiss Kappa
Keywords:
COVID-19, Fleiss' Kappa, inter-rater agreement, medical students, resident internsAbstract
Introduction: The use of Fleiss' Kappa coefficient is applied in the evaluation of inter-rater concordance, which presents certain challenges within the medical practice setting.
Objective: The objective of this study was to evaluate the concordance between physicians, interns and medical students on the severity of patients with COVID-19 in a hospital in Ambato, Ecuador, using Fleiss' Kappa coefficient.
Methods: Inter-rater concordance was evaluated using Fleiss' Kappa statistical test. This was an analytical, observational, cross-sectional and prospective study. The study population consisted of two physicians, two interns and two final year medical students working in a hospital in Ambato, Ecuador.
Results: An overall Kappa value of 0.593 with an asymptotic standard error of 0.012, a Z value of 50.952, and a p-value of 0.000 were obtained. The asymptotic 95 % confidence intervals indicated that the Kappa value ranged from 0.571 to 0.616, which suggested that the overall agreement was in the moderate-considerable range. The results of Kappa coefficients for individual categories reflected different levels of agreement between raters.
Conclusions: Although a moderate-considerable level of overall agreement is observed among the evaluators, when analyzing individual categories, almost perfect agreement is evident for patients classified as Mild, but moderate and considerable levels of agreement for the Moderate and Severe categories, respectively.
Downloads
Downloads
Published
How to Cite
Issue
Section
License
Aquellos autores/as que tengan publicaciones con esta revista, aceptan los términos siguientes: Los autores/as conservarán sus derechos de autor y garantizarán a la revista el derecho de primera publicación de su obra, el cuál estará simultáneamente sujeto a la Licencia de reconocimiento de Creative Commons (CC-BY-NC 4.0) que permite a terceros compartir la obra siempre que se indique su autor y su primera publicación esta revista. Los autores/as podrán adoptar otros acuerdos de licencia no exclusiva de distribución de la versión de la obra publicada (p. ej.: depositarla en un archivo telemático institucional o publicarla en un volumen monográfico) siempre que se indique la publicación inicial en esta revista. Se permite y recomienda a los autores/as difundir su obra a través de Internet (p. ej.: en archivos telemáticos institucionales o en su página web) antes y durante el proceso de envío, lo cual puede producir intercambios interesantes y aumentar las citas de la obra publicada. (Véase El efecto del acceso abierto).
Como Revista Cubana de Investigaciones Biomédicas forma parte de la red SciELO, una vez los artículos sean aceptados para entrar al proceso editorial (revisión), estos pueden ser depositados por parte de los autores, si estan de acuerdo, en SciELO preprints, siendo actualizados por los autores al concluir el proceso de revisión y las pruebas de maquetación.
