Salut à tous,
Je suis un étudiant de quatrième année au baccalauréat travaillant sur ma thèse avec spécialisation et j’ai eu du mal à calculer une statistique kappa en pool dans JMP.
Bien que je comprenne que le kappa de Cohen est normalement calculé entre deux évaluateurs qui fournissent des notations dans un format de tableau d’accord 2x2, ce que je veux faire est de calculer une mesure d’accord entre deux groupes d’évaluateurs. Le premier groupe, mis en évidence ici, a attribué une cote allant de 1-3 (0-3 pour le dernier critère) à 11 critères "C Attn R, tCLOppR ..." comme indiqué le long des en-têtes de colonne. Cette échelle correspond à la fréquence d'un comportement, avec 0 = Non disponible, 1 = non utilisé systématiquement, 3 = utilisé systématiquement tout au long de la session.
Group 1Groupe 1
Le second groupe d’évaluateurs a également fourni ses notations pour les mêmes 11 critères non dichotomiques sur des échelles d’évaluation équivalentes.
Group 2Groupe 2Il y a 117 évaluateurs à la fois dans le premier groupe et dans le deuxième groupe. Il est assez simple d'utiliser la plate-forme Fit Y by X pour calculer 11 kappas par paires et les moyen mais je doute que ce soit la procédure appropriée pour déterminer l'accord global entre deux groupes d'évaluateurs (en plus de plusieurs critères / catégories de notation). J'apprécierais tout conseil ou suggestion concernant l'utilisation de JMP pour ce type d'analyse.
Je vous remercie!
Vous pouvez utiliser d'autres plates-formes dans JMP pour analyser l'accord. S'il vous plaît consulter l'exemple http://www.jmp.com/support/help/13/Example_of_an_Attribute_Gauge_Chart.shtml#304555
qui implique plusieurs évaluateurs et plusieurs éléments (c.-à-d. des pièces). D'après les données que vous avez montrées, il semblerait que vous deviez transformer vos données en une seule où les questions seraient des lignes et les notes des colonnes.
Quant à l'évaluation d'un accord global entre deux groupes d’évaluateurs Je vous suggère de résumer les évaluations des évaluateurs de chaque groupe, puis de calculer le Kappa des évaluations de groupe.