JMP中1的類內相關性?<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />你好。 我試圖計算組內相關性來估計一些連續變量的評估者間可靠性。 我有兩位評論員在20份相同的調查論文中編寫了不同類型評論的數量。 在Measurement Systems Analysis(JMP 11.0.0 Mac)下,我在Y,Response下輸入了連續變量(註釋數)。 我將Reviewer Name放在X,Grouping下,並將Survey Number放在Part,Sample ID下。
當我點擊“確定”時,我收到一條消息“沒有足夠的數據來計算過程標準偏差。禁用需要標準偏差的選項“當我檢查EMP結果時,我看到ICC(無偏差)為1,ICC(偏差)為0.9958,ICC(偏差和相互作用)為0.8539。 我無法弄清楚為什麼第一個ICC值為1。 我唯一推斷的可能是,ICC實際上可能告訴我內部可靠性,並且由於每個評估者只對一次評論每篇論文,因此每個評估者對每篇論文進行編碼的方式沒有變化。 但是,從我讀到的內容來看,我沒有看到任何明確解釋第一個ICC值的內容,嚴格意義上是一個內部/內部操作符值。
感謝有關如何解釋這些數字的任何提示,以及哪些(如果有的話)適合我的interrater可靠性問題!
Re:JMP中1的類內相關性?嗨jsjmp,
讓我稍微談談peter.bartell所說的話。interrater可靠性的內部相關性是一個棘手的主題 - 根據您願意做出的假設,有幾種不同的模型。關鍵參考是Shrout和Fliess(1979) - 組內相關性:用於評估率... [心理公牛。1979] - PubMed - NCBI 。
基本思想是在Fit Model平台中構建適當的ANOVA模型,必要時具有固定和/或隨機效果。根據您提供的信息,聽起來您可能希望將N個評論作為Y,並將評判和論文建模為隨機效果。可以從方差分量輸出容易地計算出類內相關係數。
Re:JMP中1的類內相關性?由於每位評論者只對每篇論文進行一次評估,因此MSA平台可能不是嘗試評估評審者之間一致性的最佳場所。我建議使用多變量平台,並對每篇論文的“代碼”進行成對比較。也許使用Kendall的tau作為非參數熱點中兩位評論者的關聯度量?