Hola a todos,
Soy un estudiante universitario de cuarto año trabajando en mi tesis de honores y me he encontrado con un problema al calcular una estadística kappa combinada en JMP.
Si bien entiendo que el kappa de Cohen normalmente se calcula entre dos evaluadores que proporcionan calificaciones en un formato de tabla de acuerdo 2x2, lo que quiero hacer es calcular una medida de acuerdo entre dos grupos de evaluadores. El primer grupo, resaltado aquí, proporcionó calificaciones de una escala similar 1-3 (0-3 para el último criterio) a 11 criterios "C Attn R, tCLOppR ..." como se indica a lo largo de los encabezados de las columnas. Esta escala corresponde a la frecuencia de un comportamiento, con 0 = No disponible, 1 = no se usa constantemente, 3 = se usa consistentemente durante la sesión.
Group 1Grupo 1
El segundo grupo diferente de evaluadores también proporcionó sus calificaciones para los mismos 11 criterios no dicotómicos en escalas de calificación equivalentes.
Group 2Grupo 2Hay 117 evaluadores tanto en el primer grupo como en el segundo grupo de evaluadores. Es lo suficientemente simple como usar la plataforma Fit Y by X para calcular 11 kappas por pares y promediarlos, pero dudo que este sea el procedimiento adecuado para determinar el acuerdo general entre dos grupos de evaluadores (además de los múltiples criterios / categorías de calificación). Agradecería cualquier consejo o sugerencia sobre el uso de JMP para este tipo de análisis.
¡Gracias!
Hay otras plataformas en JMP que puede utilizar para el análisis de acuerdo. Por favor revisa el ejemplo. http://www.jmp.com/support/help/13/Example_of_an_Attribute_Gauge_Chart.shtml#304555
que involucra a varios evaluadores y elementos múltiples (es decir, partes). Parece que a partir de los datos que demostró tendrían que convertir sus datos en uno en el que las preguntas formen filas y las clasificaciones como columnas.
En cuanto a evaluar una acuerdo general entre dos grupos de evaluadores: le sugiero que resuma las calificaciones entre evaluadores en cada grupo y luego calcule el Kappa en las calificaciones de grupo.