Cómo calcular el acuerdo usando el indicador de atributos cuando hay dos conjuntos de calificadoresRealizamos un estudio con 20 casos de una enfermedad rara y los expertos calificaron si pensaban que la enfermedad estaba presente o no (S/N). Debido a que los casos eran largos, tuvimos un grupo de calificadores (6 personas) que calificaron los primeros 10 casos y un grupo de calificadores (7 personas) que calificaron los últimos 10 casos. Queremos evaluar el acuerdo de diagnóstico general entre todos los revisores en todos los casos en lugar de analizar por separado los primeros 10 y los últimos 10 casos, ya que solo queremos saber el grado de acuerdo entre los expertos al hacer el diagnóstico. ¿Hay alguna manera de ejecutar un informe de medición de atributos para calcular el porcentaje de concordancia y kappa en todos los casos aunque haya dos conjuntos diferentes de revisores, es decir, para los casos que un evaluador no revisó, tienen "datos faltantes"? Gracias
AnalíticaGráficosMac OSRe: Cómo calcular el acuerdo usando un indicador de atributos cuando hay dos conjuntos de evaluadoresPrimero, bienvenido a la comunidad. Hay un par de problemas con la información que presentas:
1. No tiene una estimación de la variación dentro del evaluador, intraevaluador fiabilidad (por ejemplo, ¿qué pasaría si le diera el mismo caso al mismo calificador? sin su conocimiento y les pidió que calificaran el caso nuevamente. ¿Lo calificarían igual?)
2 La variación entre evaluadores, i nterater fiabilidad.Dado que los casos son diferentes para los diferentes evaluadores, no podrá discriminar si su acuerdo (o falta de acuerdo) se debió al evaluador o al caso. La variación debida al evaluador y al caso se confunden.
Usted puede encontrar esto una lectura interesante:
https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3900052/
