Comment calculer l'accord à l'aide de la jauge d'attribut lorsqu'il y a deux ensembles d'évaluateursNous avons mené une étude avec 20 cas d'une maladie rare et demandé à des experts d'évaluer s'ils pensaient que la maladie était présente ou non (O/N). Étant donné que les cas étaient longs, nous avions un ensemble d'évaluateurs (6 personnes) pour évaluer les 10 premiers cas et un ensemble d'évaluateurs (7 personnes) pour évaluer les 10 derniers cas. Nous voulons évaluer l'accord diagnostique global entre tous les examinateurs dans tous les cas plutôt que d'analyser séparément les 10 premiers et les 10 derniers cas, puisque nous voulons simplement connaître l'étendue de l'accord entre les experts pour établir le diagnostic. Existe-t-il un moyen d'exécuter un rapport de jauge d'attribut pour calculer le pourcentage de concordance et le kappa dans tous les cas, même s'il y avait deux ensembles différents d'examinateurs, c'est-à-dire que pour les cas qu'un évaluateur n'a pas examinés, ils ont des "données manquantes". Merci
AnalytiqueGraphiquemacOSRe : Comment calculer l'accord à l'aide de la jauge d'attribut lorsqu'il y a deux ensembles d'évaluateursTout d'abord, bienvenue dans la communauté. Il y a quelques problèmes avec les informations que vous présentez :
1. Vous n'avez pas d'estimation de la variation intra-évaluateur, intra-évaluateur fiabilité (par exemple, que se passerait-il si vous deviez confier le même cas au même évaluateur ? à leur insu et leur a demandé d'évaluer à nouveau le cas. L'évalueraient-ils de la même manière ?)
2 La variation entre les évaluateurs, i nterter fiabilité.Étant donné que les cas sont différents pour les différents évaluateurs, vous ne pourrez pas déterminer si leur accord (ou leur absence) était dû à l'évaluateur ou au cas. La variation due à l'évaluateur et au cas est confondue.
Vous pourriez trouver ceci une lecture intéressante:
https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3900052/