Acta Paul. Enferm. (Online); 33 (), 2020
Publication year: 2020
Resumo Objetivo:
Validar construto e avaliar a confiabilidade do Instrumento Creighton para Avaliação de Competências Clínicas, versão português, Brasil. Métodos:
Estudo metodológico, realizado com 30 docentes/enfermeiros que utilizavam a metodologia de simulação. Foram elaborados dois cenários com temas iguais e atuações divergentes das estudantes com o objetivo de testar a capacidade do instrumento de diferenciá-los. Os cenários foram gravados e disponibilizados para os especialistas por um website que viabilizou a coleta. Para a validação de construto, utilizou-se as técnicas de experimentação e da correlação phi. Para a confiabilidade, analisou-se a equivalência, com coeficiente Fleiss Kappa, e a consistência interna, com coeficiente Kuder-Richardson (KR20). Resultados:
Ao analisar a validade, 20 dos 23 itens apresentaram resultados significativos. Na análise, os domínios apresentaram correlações, classificadas de baixa a alta. Quando comparados os cenários, as correlações foram baixas, muito baixas ou negativas. Quanto à confiabilidade, o coeficiente Fleiss Kappa encontrado foi razoável (0,282) para o cenário 1 e moderado para o cenário 2 (0,408). A consistência interna medida com o KR20 foi de 0,717 para o cenário 1 e 0,805 para o cenário 2, classificadas como moderada e alta. Conclusão:
O Instrumento Creighton para Avaliação de Competências Clínicas versão português, Brasil, foi considerado válido e confiável para uso em todo o território nacional.
Resumen Objetivo:
Validar el constructo y analizar la confiabilidad del instrumento Creighton para Evaluación de Competencias Clínicas, versión en portugués, Brasil. Métodos:
Estudio metodológico, realizado con 30 docentes/enfermeros que utilizaban la metodología de simulacro. Se elaboraron dos situaciones con temas iguales y actuaciones divergentes de las estudiantes, con el objetivo de probar la capacidad del instrumento de diferenciarlas. Las situaciones fueron grabadas y se pusieron a disposición de los especialistas mediante un sitio web que viabilizó la recolección. Para la validación del constructo se utilizaron las técnicas de experimentación y del coeficiente de correlación phi. Para la confiabilidad, se analizó la equivalencia con coeficiente Fleiss Kappa y la consistencia interna con coeficiente Kuder-Richardson (KR20). Resultados:
Al analizar la validez, 20 de los 23 ítems presentaron resultados significativos. En el análisis, los dominios presentaron correlaciones, clasificadas de baja a alta. Al comparar las situaciones, las correlaciones fueron bajas, muy bajas o negativas. Respecto a la confiabilidad, el coeficiente Fleiss Kappa encontrado fue razonable (0,282) en la situación 1 y moderado en la situación 2 (0,408). La consistencia interna medida con el KR20 fue de 0,717 en la situación 1 y 0,805 en la situación 2, clasificada como moderada y alta. Conclusión:
El instrumento Creighton para Evaluación de Competencias Clínicas, versión en portugués, Brasil, fue considerado válido y confiable para su uso en todo el territorio nacional.
Abstract Objective:
To validate and assess the Creighton Competency Evaluation Instrument reliability, Brazilian Portuguese version. Methods:
This is a methodological study conducted with 30 professors/nurses who used the simulation methodology. Two scenarios were elaborated with equal themes and divergent performances of students in order to test the ability of the instrument to differentiate them. The scenarios were recorded and made available to the experts by a website that enabled the collection. For construct validation, the experimentation and phi correlation techniques were used. For reliability, equivalence with the Fleiss Kappa coefficient and internal consistency with Kuder-Richardson coefficient (KR20) were analyzed. Results:
When analyzing validity, 20 of the 23 items showed significant results. In analysis, the domains presented correlations, classified from slight to substantial. When the scenarios were compared, the correlations were low, poor or negative. Regarding reliability, the Fleiss Kappa coefficient found was fair (0.282) for scenario 1 and moderate for scenario 2 (0.408). The internal consistency measured with KR20 was 0.717 for scenario 1 and 0.805 for scenario 2, classified as moderate and substantial. Conclusion:
The Creighton Competency Evaluation Instrument, Brazilian Portuguese version, was considered valid and reliable for use nationally.
