Interrater reliability of Nursing Activities Score among Intensive Care Unit health professionals

Stuedahl, Marit; Vold, Sidsel; Klepstad, Pål; Stafseth, Siv Karlsson

ABSTRACT Objective To analyze the interrater reliability of NAS among critical care nurses and managers in an ICU. Method This was a methodological study performed in an adult, general ICU in Norway. In a random selection of patients, the NAS was scored on 101 patients by three raters: a critical care nurse, an ICU physician and a nurse manager. Interrater reliability was analyzed by agreement between groups and kappa statistics. Results The mean NAS were 88.4 (SD=16.2) and 88.7 (SD=24.5) respectively for the critical care nurses and nurse managers. A lower mean of 83.7 (SD=21.1) was found for physicians. The 18 medical interventions showed higher agreement between critical care nurses and physicians (85.6%), than between critical care nurses and nurse managers (78.7). In the five nursing activities the Kappa-coefficients were low for all activities in all compared groups. Conclusion The study indicated a satisfactory agreement of nursing workload between critical care nurses and managers.

RESUMO Objetivo Analisar a confiabilidade interobservadores do NAS entre enfermeiros intensivistas e administradores em UTI. Método Estudo metodológico desenvolvido em UTI geral, de adultos, na Noruega. Em uma amostra selecionada, o NAS foi aplicado em 101 pacientes por três avaliadores: enfermeira assistencial, médico intensivista e enfermeira gestora. A confiabilidade interobservadores foi analisada por meio do teste Kappa. Resultados As médias NAS foram 88,4(SD=16,2) e 88,7(SD=24,5) respectivamente para enfermeiros assistenciais e gestores. Os médicos obtiveram média NAS inferior (83,7; SD=21,1). As 18 intervenções médicas tiveram maior concordância entre enfermeiros assistenciais e médicos (85,6), comparativamente aos enfermeiros assistenciais e gestores (78,7). Nas cinco atividades de enfermagem, os coeficientes Kappa foram baixos em todas as atividades e entre todos os grupos. Conclusão O estudo mostrou confiabilidade interobservadores satisfatória para o NAS entre enfermeiros assistenciais e gestores.

RESUMEN Objetivo :

Analizar la confiabilidad inter-observador del NAS entre administradores y enfermeras clínicas en la UCI.

Método :

Estudio metodológico desarrollado en una UCI general en Noruega.

En una muestra seleccionada el NAS fue aplicado en 101 pacientes críticos por tres clases de evaluadores:

Enfermeras asistenciales, médicos intensivistas y enfermeras gestoras. La confiabilidad inter-observador fue analizada mediante el test de Kappa.

Resultados :

Los promedios del NAS fueron 88,4(DE=16,2) y 88,7(DE=24,5) respectivamente para las enfermeras asistenciales y gestoras. Los médicos obtuvieron un promedio NAS inferior 83,7;DE=21,1). Las 18 intervenciones médicas tuvierón mayor concordancia entre las enfermeras asistenciales y los médicos (85,6), en comparación con las enfermeras asistenciales y gestoras (78,7). En las cinco actividades de enfermería, los coeficientes Kappa fueron bajos entodas las actividades y entre todos los grupos.

Conclusión :

El estudio mostró confiabilidad inter-observador satisfactorias para el NAS entre las enfermeras asistenciales y gestoras.