Tabla 1. Índice de Validez de Contenido, alfa de Cronbach, coeficiente de variación y desviación...

Tabla 2. Correlación del índice de acuerdo Kappa del instrumento entre los jueces.

Introducción

La competencia profesional en enfermería es un tema de relevancia creciente en el ámbito hospitalario debido a las exigencias cada vez más complejas del cuidado de la salud. El término competencia ha evolucionado significativamente desde la década de 1960, especialmente en el ámbito laboral y organizacional. Según Fleury y Fleury, la competencia se define como un saber actuar responsable y reconocido, que implica movilizar, integrar conocimientos, recursos y habilidades que agreguen valor tanto económico a la organización como social al individuo1. Este concepto subraya la importancia de una fundamentación científica para el mejor desempeño de las actividades de los enfermeros2-4. Las competencias profesionales en enfermería se ven influenciadas por el ambiente organizacional, que determina el nivel de exigencia y la capacidad de los profesionales para analizar y responder adecuadamente a su entorno. Estas competencias incluyen una combinación de experiencias, actitudes y valores personales utilizados de manera efectiva en situaciones prácticas5-7. Asimismo, Sastre-Fullana y cols. identificaron un conjunto mínimo de dominios de competencias en la enfermería avanzada, que pueden aplicarse a roles, funciones y evaluaciones, comparando el nivel de desempeño8. Al definirse las competencias en el área de trabajo de enfermería, tórnase posible comparar los atributos necesarios del sector y de los profesionales9.

Las Directrices Curriculares Nacionales (DCNs) en Brasil establecen seis competencias y habilidades generales para los profesionales de la salud: atención a la salud, toma de decisiones, comunicación, liderazgo, administración y gestión, y educación permanente10,11. Peres y Ciampone relacionan estas competencias con la formación de los enfermeros, enfatizando que cinco de ellas pertenecen a las competencias gerenciales12. Asimismo, los atributos necesarios para los enfermeros incluyen liderazgo, alineamiento de propósitos, comunicación afectiva, visión común del futuro, enfoque en el cliente, motivación del equipo, relaciones interpersonales, gestión de recursos humanos, y competencias compartidas13,14. Estos atributos son esenciales en cualquier organización, independientemente de su estructura o estrategia.

Marx y cols. afirman que, para alcanzar la competencia en la toma de decisiones, es fundamental que los enfermeros conozcan la misión de su institución, evalúen las necesidades de los usuarios y realicen su trabajo basándose en un planeamiento detallado15. Peres y Ciampone señalan que las habilidades para la toma de decisiones incluyen el pensamiento crítico, el juicio analítico y la evaluación de las propuestas de acción12.

La gestión de recursos humanos por competencias es esencial debido a las rápidas alteraciones en los contextos productivos y la velocidad de los cambios tecnológicos. Aragão y cols. describen a los gestores como personas con mayores capacidades para adquirir nuevas competencias14.

El modelo de desarrollo de competencias de Benner, basado en el Modelo de Adquisición de Competencias de Dreyfus, describe cómo los profesionales progresan desde principiantes hasta expertos mediante la práctica y la experiencia16. Benner argumenta que la presencia de enfermeros especialistas es fundamental en contextos hospitalarios debido a la complejidad de las situaciones de salud, y define competencia como la habilidad de realizar tareas con resultados deseados en circunstancias variadas del mundo real. Subraya la dificultad de desarrollar herramientas de medidas válidas y confiables para evaluar las competencias de los enfermeros17,18.

Freitas y Odelius enfatizan la importancia de líderes con competencias bien desarrolladas para garantizar el buen desempeño organizacional19.

Contar con instrumentos de evaluación de competencias que confiables y válidos para proporcionar evidencia científica en el contexto académico y profesional podría colaborar para el desarrollo del talento humano en enfermería. Elaborar instrumentos de investigación científica implica seguir directrices y procedimientos rigurosos para alcanzar fines específicos20,21. Alexandre y Coluci remarcan que la validación de estos instrumentos es un proceso primordial que, aunque subjetivo, requiere medidas cualitativas para evaluar la validez de contenido22. En base a lo anterior, este estudio fue elaborado con el objetivo de construir y validar el contenido de un instrumento para evaluar las competencias de los enfermeros en el ámbito hospitalario.

Materiales y métodos

Diseño: estudio observacional de corte transversal.

Población de estudio: enfermeros, docentes en universidades públicas brasileñas, líderes o miembros de grupos de investigación en el área de gestión, certificados por el Consejo Nacional de Desarrollo Científico y Tecnológico (CNPq). Estos fueron identificados a través de los sitios web de la Plataforma CNPq Lattes y de las Instituciones de Educación Superior (IES). La elegibilidad del experto se basó en el supuesto de que el conocimiento del investigador sobre un tema determinado puede usarse para identificar proposiciones que se excluirán de un instrumento de investigación, según su criterio23.

Ámbito del estudio: Hospital de Clínicas de la Facultad de Medicina de Botucatu (HCFMB), asociado a la Facultad de Medicina de Botucatu de la Universidad Estadual “Júlio de Mesquita Filho” (UNESP).

Abordaje metodológico: la primera fase comprendió la construcción del instrumento (ver Anexo), basado en los resultados de la revisión integradora para las definiciones de atributos de competencia del enfermero24. La pregunta guía fue: ¿Qué evidencias aportan los estudios publicados sobre las competencias profesionales del enfermero? Se realizó un relevamiento bibliográfico en la Biblioteca Virtual de Salud (BVS), incluyendo fuentes como PMC®, PubMed Central® (PMC), PubMed, EBSCOhost, ERIC y BVS – BIREME, limitando el marco temporal a los últimos diez años. A partir de la versión preliminar del instrumento, se prosiguió con la fase de validación de apariencia y de contenido, realizada a partir de panel de expertos, quienes podrían sugerir, mantener, agregar o eliminar ítems del instrumento. Se trata de un análisis exhaustivo de la apariencia y contenido del instrumento, con el objetivo de verificar si los ítems propuestos constituyen un conjunto representativo del tema a medir. Revela si los ítems del instrumento son apropiados para medir el constructo específico y cubrir adecuadamente su dominio, necesariamente basado en un juicio24. Para ello se utilizó la técnica Delphi, que permite construir consensos de opiniones sobre un tema específico, en este caso, favoreciendo la discusión de aspectos relevantes para el futuro de la enfermería25,26. Los expertos juzgaron la información contenida en el instrumento ICEH preliminar en rondas de evaluación para responder preguntas específicas sobre el instrumento, hasta obtener un acuerdo preestablecido entre los expertos respecto la apariencia y el contenido del instrumento. Se calculó el Índice de Validez de Contenido (IVC), que permite medir la proporción o porcentaje de jueces que están de acuerdo en determinados aspectos del instrumento y sus ítems. Analiza cada ítem individualmente y el instrumento en su conjunto. Consiste en la asociación de conceptos abstractos con indicadores medibles obtenidos del análisis y juicio de los jueces sobre la adecuación o no del contenido abordado, cuya finalidad es proporcionar información sobre la representatividad y claridad de cada ítem juzgado27. Complementariamente, se analizó la confiabilidad de la concordancia entre la evaluación de los ítems en la evaluación de los jueces mediante el coeficiente Kappa (k). Como criterio de aceptación, en este estudio se estableció una concordancia mayor a 0.61 para el coeficiente Kappa (k) y mayor o igual a 0.75 para el Índice de Validez de Contenido, tanto para la evaluación de cada ítem como para la evaluación general del mismo instrumento28. Para analizar la concordancia y confiabilidad de los ítems del instrumento se utilizó el coeficiente alfa de Cronbach, que permite identificar la consistencia interna de la prueba (especificidad y heterogeneidad de los ítems), cuyos valores varían entre 0.00 (falta de confiabilidad) y 1.00 (confiabilidad perfecta), con valores considerados aceptables, dentro del rango de 0.70 a 0.90. Para este estudio se consideró aceptable un valor alfa ≥ 0.80 para la evaluación del constructo29. Se utilizó el paquete estadístico SPSS v.22.2® para todos los análisis.

Aprobación ética: CAAE 56825416.5.0000.5411.

Resultados

El instrumento construido constó de dos partes, elaborado con preguntas abiertas, semi-abiertas, cerradas y una escala de evaluación (Anexo 1). La primera parte, compuesta por 20 preguntas de carácter sociodemográfico y laboral; y la segunda con 69 proposiciones (ítems) sobre los atributos de competencia de los enfermeros seleccionados a través de la revisión integradora, que se distribuyeron en seis dimensiones competenciales con su respectiva significancia estratégica y atributos:

Gestión de Recursos Humanos (22 ítems): contribuir y brindar al equipo un ambiente en condiciones de seguridad favorables para atender las demandas locales, utilizar el criterio clínico para tomar decisiones y brindar asistencia al cliente de manera oportuna y bajo supervisión, además de tener la capacidad de resolver conflictos manteniendo la ética y secreto profesional.

Gestión del Cuidado (16 ítems): identificar y resolver las necesidades de los pacientes, el personal y las familias de forma hábil, adecuada, flexible y eficaz.

Comunicación/Relaciones Interpersonales (10 ítems): comunicar con claridad, facilitar, mediar y actuar en colaboración con equipos y unidades interhospitalarias.

Gestión Educativa y Calidad Asistencial (7 ítems): identificar necesidades educativas y brindar propuestas educativas para el equipo, además de incentivar y orientar al equipo respecto de los procedimientos, protocolos y rutinas institucionales, identificando posibles riesgos. Realizar el dimensionamiento del equipo con base en la planificación para brindar una atención segura, considerando el proceso de enfermería como indicador predictivo de la calidad de la atención en el momento de la hospitalización y el alta del paciente.

Gestión de Riesgos y Seguridad (7 ítems): Utilizar protocolos, indicadores, evidencia para sustentar e implementar procedimientos asistenciales y administrativos buscando resultados de calidad relacionados con la gestión y el proceso de enfermería.

Gestión de Recursos Materiales (7 ítems): participar efectivamente en el proceso de elección, compra, capacitación para el manejo y uso en favor del proceso de trabajo de calidad, además de emitir opiniones sobre la tecnología adquirida en el lugar de su responsabilidad.

Las respuestas a las proposiciones fueron tipo Likert y variaron de 1 a 5 (1 para completamente en desacuerdo, 2 para parcialmente en desacuerdo, 3 para ni en desacuerdo ni de acuerdo, 4 para parcialmente de acuerdo y 5 para completamente de acuerdo).

Un total de nueve expertos participaron en el tiempo estipulado para cada ronda, totalizando 60 días hasta la finalización del consenso.

Según las evaluaciones de los jueces, los 69 ítems del instrumento, distribuidos en seis dimensiones, resultaron en un IVC y un alfa de Cronbach globales satisfactorios, como se muestra en la Tabla 1.

Los análisis de los jueces totalizaron 621 respuestas, de las cuales el porcentaje de acuerdo en cuanto a la clasificación de cada uno de los ítems del instrumento y sus respectivas frecuencias absolutas fue del 66.70% mantiene; 28.60% modifica y el 4.70% elimina.

De todas las proposiciones evaluadas no hubo desacuerdo entre los jueces en cuanto a la representatividad del conjunto de enunciados del instrumento en relación con el universo teórico en cuanto a las competencias del enfermero y al número de intervalos y puntuaciones atribuidas a las respuestas. Las sugerencias consideradas relevantes incluyeron correcciones semánticas y gramaticales y la exclusión de dos ítems por presentar similitudes de contenido en las dimensiones de gestión del cuidado y gestión de recursos materiales, resultando en un instrumento con 67 ítems en las seis dimensiones propuestas, que en una próxima etapa será aplicado para dar seguimiento a la evaluación de las medidas psicométricas del ICEH para ayudar a reducir el número de ítems de un instrumento sin comprometer su fiabilidad y validez.

Discusión

El diseño del instrumento de evaluación de las competencias del enfermero que trabaja en el área hospitalaria estuvo respaldado por la evidencia. La revisión integradora fue sumamente necesaria e importante para una comprensión detallada del marco conceptual para el desarrollo del constructo. La revisión integradora permite sintetizar el estado del conocimiento sobre un tema determinado, además de señalar lagunas de conocimiento que deben llenarse mediante la realización de nuevos estudios30. Por lo tanto, ofrece a los profesionales de diferentes áreas de la salud, un acceso rápido a resultados de investigación relevantes que apoyan la conducta o la toma de decisiones, proporcionando conocimiento crítico31.

El proceso de construcción del instrumento fue complejo, pero muy necesario, ya que contar con instrumentos adecuadamente desarrollados colabora para la validez de los resultados que se obtendrán con su utilización. Desarrollar instrumentos basados en la metodología científica significa seguir caminos, formas, modos, pautas y procedimientos para alcanzar un determinado fin21.

A través de la validación de la apariencia y de contenido por parte del panel de expertos, se mantuvo la “multidimensionalidad” del instrumento. El constructo del instrumento propuesto estuvo compuesto por seis dimensiones de competencias agrupadas por sus respectivos atributos sinérgicos, lo que verificó la representatividad del propuesto conjunto de elementos.

Respecto de los 69 ítems del instrumento evaluados, no hubo desacuerdo entre los jueces en cuanto a la representatividad del conjunto de afirmaciones del instrumento con relación al universo teórico en cuanto a las competencias del enfermero y al número de intervalos y puntuaciones atribuidas a las respuestas. El IVC es una medida robusta y se utiliza con mucha frecuencia en estudios de validación de instrumentos, indicando el acuerdo de los jueces con los parámetros evaluados de los ítems, excluyendo el azar. Sin embargo, ante la recomendación de no considerar el IVC como única prueba para determinar la validez de contenido, el análisis también se basó en índices de correlación entre jueces, que representan la tendencia a emitir los mismos juicios sobre otros ítems del instrumento32-34.

Así, también se analizó el coeficiente Kappa (k) para verificar la relación entre la proporción de veces que los jueces estuvieron de acuerdo con la proporción máxima de veces que los jueces pudieron estar de acuerdo con el ítem del instrumento, siendo este coeficiente satisfactorio en el estudio35.

En el análisis de confiabilidad, el coeficiente alfa de Cronbach mostró que la eliminación de ninguno de los ítems resultaría en un cambio positivo en este valor. Los valores de alfa de Cronbach varían de 0 a 1 y se consideran aceptables cuando se encuentran en el rango de 0.70 a 0.9029,32,34, como se encontró en el presente estudio.

A pesar de que el porcentaje de desacuerdo entre los jueces respecto a la exclusión de ítems del instrumento fue del 4.7%, se consideró necesario excluir el 0.3% de las sugerencias, por ser ítems de contenido similar y cumplir con los criterios de exclusión establecidos36. Por lo tanto, el instrumento se redujo a 67 ítems conservando confiabilidad y validez para evaluar las competencias del profesional de enfermería en el ámbito hospitalario, permitiendo de esa manera avanzar a la parte 2, que es someter el ICEH a un análisis de las medidas psicométricas y validación de constructo.

A modo de cierre, podemos decir que el enfoque en las competencias profesionales permite mejorar la calidad y reducir el costo de la asistencia, que los instrumentos para evaluar las competencias de los profesionales de enfermería en el ámbito hospitalario son una necesidad y que la construcción de instrumentos y validación de contenido debe ser realizada en base a una metodología sólida.

Anexo

Instrumento de validación semántica y de contenido

1. Fleury A, Fleury MTL. Estratégias empresariais e formação de competências: um quebra-cabeça caleidoscópico da indústria brasileira. São Paulo: Atlas; 2001.

2. Fernandes LCL, Machado RZ, Anschau GO. Gestão de serviços de saúde: competências desenvolvidas e dificuldades encontradas na atenção básica. Ciênc Saúde Coletiva 2009;14:1541-52.

3. Hausmann M, Peduzzi M. Articulação entre as dimensões gerenciais e assistenciais do processo de trabalho da enfermagem. Doença Contexto Texto 2009;18:258-65.

4. Almeida ML, Hexsel Segui ML, Alves Maftum M, Labronici LM, Peres AM. Instrumentos gerenciais utilizados na tomada de decisão de enfermagem em contexto hospitalar. Doença Contexto Texto 2011;20:131-7.

5. Meghnagi S. The contexts of training. In: Working time, training time. Agora VII. Luxembourg: European Communities; 2003:59-66. (Cedefop Panorama Series 67).

6. Camelo SHH, Angerami ELS. Competência profissional: a construção de conceitos, estratégias desenvolvidas pelos serviços de saúde e implicações para a enfermagem. Texto Contexto Enferm 2013;22:552-60.

7. Oliveira DA, Gonçalves RS, Barbosa ACQ. Percepção dos gestores de recursos humanos em relação ao modelo de gestão por competências. Rev FSA 2014;11:1-26.

8. Sastre-Fullana P, De Pedro-Gómez JE, Bennasar-Veny M, Serrano-Gallardo P, Morales-Asencio JM. Competency frameworks for advanced practice nursing: a literature review. Int Nurs Rev 2014;61:534-42.

9. Miranda da Costa N, Valéria da Silva E, Barros LM, Miyahara Kobayashi R. Construção e validação das competências profissionais do enfermeiro atuante em hemodinâmica. Rev. Latino-Am. Enfermagem 2018;26:e3061.

10. Brasil. Ministério da Educação. Resolução CNE/CES nº 3, de 7 de novembro de 2001. Institui Diretrizes Curriculares Nacionais do Curso de Graduação em Enfermagem. Disponible en: http://portal.mec.gov.br/cne/arquivos/pdf/CES03.pdf; (consultado el 11/05/24).

11. Brasil. Ministério da Saúde. Resolução nº 466, de 12 de dezembro de 2012. Aprova as diretrizes e normas regulamentadoras de pesquisas envolvendo seres humanos. Diário Oficial da União 2012;12:59.

12. Peres AM, Ciampone MHT. Gerência e competências gerais do enfermeiro. Texto Contexto Enferm 2006;15:492-9.

13. Ruthes RM, Cunha ICKO. Competências do enfermeiro na gestão do conhecimento e capital intelectual. Rev Bras Enferm 2009;62:901-5.

14. Aragão OC, Silvino ZR, Campos LF, Moraes MA. Competências do enfermeiro na gestão hospitalar. Espaço Saúde Rev Saúde Pública Paraná 2016;17:66-74.

15. Marx LC, Morita LC. Competências gerenciais na enfermagem: a prática do Sistema Primary Nursing como parâmetro qualitativo na assistência. São Paulo: BH Comunicação; 2000. São Paulo; BH Comunicação; 2000. 130 p. tab. Monography em Pt | LILACS | ID: lil-441587.

16. Benner P. Using the Dreyfus Model of Skill Acquisition to describe and interpret skill acquisition and clinical judgment in nursing practice and education. Bull Sci Technol Soc 2004;24:188-99.

17. Benner P. De principiante a perito. Servir 1996;44:148-54.

18. Benner P. Issues in competency-based testing. Nurs Outlook 1982;30:303-9.

19. Freitas PF, Odelius CC. Competências gerenciais: uma análise de classificações em estudos empíricos. Cad EBAPE.BR 2018;16:35-49. 

20. Pessoa Júnior JM, Nóbrega VK, Miranda FA. O cuidado de enfermagem na pós-modernidade: um diálogo necessário. Esc Anna Nery 2012;16:603-6.

21. Henriques SH, Soares MI, Leal LA. Avaliação da aplicabilidade da versão portuguesa de um questionário de competências para enfermeiros hospitalares. Texto Contexto Enferm 2018;27. 

22. Alexandre NM, Coluci MZ. Validade de conteúdo nos processos de construção e adaptação de instrumentos de medidas. Ciênc Saúde Coletiva 2011;17:3061-8.

23. Polit DF, Beck CT; Hungler BP. Fundamentos de pesquisa em enfermagem: avaliação de evidências para a prática da enfermagem. 5. ed. Porto Alegre: Artmed, 2004.

24. Polit DF, Beck CT, Owen SV. Is the CVI an acceptable indicator of content validity? Appraisal and recommendations. Res Nurs Health 2007; 30:459-67.

25. Hasson F, Keeney S, McKenna H. Research guidelines for the Delphi survey technique. J Adv Nurs 2000;32:1008-15.

26. Gonçalves Menegueti M, NicolussiII AC, Scarparo AF, et al. Reflexões sobre o uso da Técnica Delphi em pesquisas de enfermagem. Rev Rene 2012;13:242-51.

27. Medeiros RK, Ferreira Júnior MM, de Souza Rêgo DP, et al. Modelo de validação de conteúdo de Pasquali nas pesquisas em Enfermagem. Rev Enferm Ref 2015;4:127-35.

28. Landis JR, Koch GG. The measurement of observer agreement for categorical data. Biometrics 1977;33:159-75.

29. Bittencourt HR, Creutzberg M, de Morais Rodrigues AC, de Oliveira Casartelli A, Souza de Freitas, et al. Desenvolvimento e validação de um instrumento para avaliação de disciplinas na educação superior. Est Aval Educ 2011;22:91-114.

30. Polit DF, Beck CT. Using research in evidence-based nursing practice. In: Polit DF, Beck CT, editors. Essentials of nursing research: methods, appraisal and utilization. Philadelphia: Lippincott Williams & Wilkins; 2006:457-94.

31. Mendes KDS, Silveira RC, Galvão CM. Revisão integrativa: método de pesquisa para a incorporação de evidências na saúde e na enfermagem. Texto Contexto Enferm 2008;17:758-64.

32. Borges JWP, Moreira TMM, Rodrigues MTP, Souza ACC, Silva DB. Validação de conteúdo das dimensões constitutivas da não adesão ao tratamento da hipertensão arterial. Rev Esc Enferm USP 2013;47:1076-82. 

33. Abdollahpour I, Nedjat S, Noroozian M, Majdzadeh R. Performing Content Validation Process in Development of Questionnaires. Iran J Epidemiol 2011;6:66-74. 

34. Silva RF, Tanaka OY. Técnica Delphi: identificando as competências gerais do médico e do enfermeiro que atuam em atenção primária de saúde. Rev Esc Enferm USP 1999;33:207-16. 

35. Galindo Neto NM, Caetano JA, Barros LM, Silva TM, Vasconcelos EMR. Primeiros socorros na escola: construção e validação de cartilha educativa para professores. Acta Paul Enferm 2017;30:87-93. 

36. Santos EC, Oliveira ICM, Feijão AR. Validação de protocolo assistencial de enfermagem para pacientes em cuidados paliativos. Acta Paul Enferm 2016; 29:363-73.

Para descargar el PDF del artículo
Instrumento para Evaluar Competencias de Enfermería en el Ámbito Hospitalario: el proceso de construcción y validación de contenido

Haga click aquí