Evaluation of concordance among physicians on medical emergency priorities using fleiss kappa coefficient

Authors

  • Icler Sisalema Aguilar
  • Marcia Alexandra Silva Mata
  • Miguel Ramos Argilagos

Keywords:

COVID-19, Fleiss Kappa, Manchester Triage System, concordance, medical emergencies

Abstract

Introduction: The Fleiss Kappa coefficient is used to assess inter-rater concordance, posing challenges in medical practice.

Objective: The objective of the study was to assess inter-physician agreement on emergency medical priorities using the Fleiss Kappa coefficient in a hospital in Ecuador, during the COVID-19 pandemic.

Methods: Inter-rater concordance was determined using the Fleiss Kappa statistic. The study was observational, cross-sectional, and prospective. Pre-established criteria for assessing inter-observer concordance were followed. The study population consisted of eight physicians belonging to the staff of the Intensive Care Unit (ICU) of a hospital of Ecuador.

Results: An overall Kappa value of 0.606 with an asymptotic standard error of 0.034, a Z-value of 17.816, and a P-value of 0.000 were obtained. The 95 % asymptotic confidence intervals indicated that the Kappa value ranged from 0.539 to 0.673, which suggested that the overall agreement was in the moderate-considerable range. The results of the Kappa coefficients for individual categories indicated a high level of concordance in most categories, except Category 5, where a significant lack of concordance among physicians was observed.

Conclusions: There was significant agreement among physicians in their ratings. These findings provided valuable information to improve consistency in classifying patients in emergency situations during the COVID-19 pandemic.

Downloads

Download data is not yet available.

Downloads

Published

2023-10-16

How to Cite

1.
Sisalema Aguilar I, Silva Mata MA, Ramos Argilagos M. Evaluation of concordance among physicians on medical emergency priorities using fleiss kappa coefficient. Rev Cubana Inv Bioméd [Internet]. 2023 Oct. 16 [cited 2025 Aug. 2];42(2). Available from: https://revibiomedica.sld.cu/index.php/ibi/article/view/3029

Issue

Vol. 42 (2023): Suplemento especial: Congreso Científico Internacional de Investigación y Desarrollo UNIANDES 2023

Section

ARTÍCULOS ORIGINALES

License

Aquellos autores/as que tengan publicaciones con esta revista, aceptan los términos siguientes: Los autores/as conservarán sus derechos de autor y garantizarán a la revista el derecho de primera publicación de su obra, el cuál estará simultáneamente sujeto a la Licencia de reconocimiento de Creative Commons (CC-BY-NC 4.0) que permite a terceros compartir la obra siempre que se indique su autor y su primera publicación esta revista. Los autores/as podrán adoptar otros acuerdos de licencia no exclusiva de distribución de la versión de la obra publicada (p. ej.: depositarla en un archivo telemático institucional o publicarla en un volumen monográfico) siempre que se indique la publicación inicial en esta revista. Se permite y recomienda a los autores/as difundir su obra a través de Internet (p. ej.: en archivos telemáticos institucionales o en su página web) antes y durante el proceso de envío, lo cual puede producir intercambios interesantes y aumentar las citas de la obra publicada. (Véase El efecto del acceso abierto).

Como Revista Cubana de Investigaciones Biomédicas forma parte de la red SciELO, una vez los artículos sean aceptados para entrar al proceso editorial (revisión), estos pueden ser depositados por parte de los autores, si estan de acuerdo, en SciELO preprints, siendo actualizados por los autores al concluir el proceso de revisión y las pruebas de maquetación.