Kappa ScoreBonjour,
Malgrès mes recherches je n'ai pas trouver réponse à mon problème donc le voici:
Il me faut calculer un kappa score sur une table de contingence. J'ai bien les mêmes catégories pour les 2 valeurs mais JMP 15 ne veut pas me calculer le Kappa. Pourtant la formule de Kappa n'a pas de restriction étant donné qui s'agit du ratio de la différence de probabilité entre réelle et attendue sur l'inverse de la probabilité attendue.
Pourriez-vous m'aider svp?
Merci d'avance
Quality and Process EngineeringRe : Score KappaJe n’interpréterais pas vraiment kappa dans ce cas. Le problème est que la valeur 1 est TOUJOURS 3. Il n’y a aucune variabilité avec cette valeur 1. Plusieurs raisons peuvent arriver, mais c’est le problème. Les statistiques fonctionnent avec la variabilité et il n’y a pas de variabilité là-bas.
Re : Score KappaEn fait, JMP a calculé Kappa pour vous : il est de 0.
Pour voir cela, passons en revue le calcul.
Pr(a) = Probabilité d'accord = D'accord sur la valeur 1 + D'accord sur la valeur 2 + D'accord sur la valeur 3 = 0/30 + 0/30 + 29/30 = 0,967.
Pr(e) = Probabilité attendue (vous utilisez ici les totaux marginaux) = Valeur attendue 1 + Valeur attendue 2 + Valeur attendue 3 = 0/30 * 1/30 + 0/30 * 0/30 + 29/30 * 30/ 30 = 0,967.
kappa = 0 / (1-.967) = 0.
Re: Kappa ScoreBonjour,
Merci pour cette réponse. Oui en effet en regardant mieux le Kappa est bien de 0.
Mais alors je trouve ca étrange. Cela veut dire que mes 97% de concordance sont juste dû au hasard?
De premier abord je dirai que d'avoir 29 fois la même réponse sur 30 est plutôt supérieur au hasard non?
Y'a t-il alors un meilleur test de concordance à faire pour ces données?
Merci encore pour votre aide.
Marie
Ré: Score KappaUne réflexion supplémentaire : on pourrait dire que la valeur 2 donnera un résultat de 3, 29/30 fois. Ignorez simplement la valeur 1, car elle est toujours égale à 3.
Ré: Score KappaMerci beaucoup Dan,
Habituellement, les scores sont répartis de 0 à 3, c'est pourquoi j'ai décidé d'appliquer Kappa, mais dans ce cas, je suppose que je ferai comme vous l'avez dit et que je parlerai simplement de concordance globale car Kappa n'est pas applicable ici.
Meilleur
