Come calcolare l'accordo utilizzando il misuratore di attributi quando ci sono due gruppi di valutatoriAbbiamo condotto uno studio con 20 casi di una malattia rara e gli esperti hanno valutato se pensavano che la malattia fosse o meno presente (S/N). Poiché i casi erano lunghi, avevamo un gruppo di valutatori (6 individui) che valutava i primi 10 casi e un gruppo di valutatori (7 individui) che valutava gli ultimi 10 casi. Vogliamo valutare l'accordo diagnostico complessivo tra tutti i revisori in tutti i casi piuttosto che analizzare separatamente i primi 10 e gli ultimi 10 casi, poiché vogliamo solo conoscere il grado di accordo tra gli esperti nel fare la diagnosi. C'è un modo per eseguire un rapporto sull'indicatore degli attributi per calcolare la percentuale di accordo e il kappa in tutti i casi anche se c'erano due diversi gruppi di revisori, ad esempio per i casi che un valutatore non ha esaminato, hanno "dati mancanti". Grazie
AnaliticaGraficaMac OSRi: Come calcolare l'accordo utilizzando il misuratore di attributi quando ci sono due gruppi di valutatoriInnanzitutto, benvenuto nella community. Ci sono un paio di problemi con le informazioni che presenti:
1. Non hai una stima della variazione all'interno del valutatore, intrarater affidabilità (ad esempio, e se dovessi dare lo stesso caso allo stesso valutatore a loro insaputa e li ha fatti valutare di nuovo il caso. Lo valuterebbero allo stesso modo?)
2 La variazione tra valutatori, i narratore affidabilità.Poiché i casi sono diversi per i diversi valutatori, non sarai in grado di discriminare se il loro accordo (o la loro mancanza) sia dovuto al valutatore o al caso. Le variazioni dovute al valutatore e al caso sono confuse.
Potresti trovare interessante questa lettura:
https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3900052/