如何执行简单的类内相关性以确定区间可靠性?我正在尝试找出完成相对简单的类内相关性(ICC)分析的最佳方法。 在我的研究中,三个评估者针对绩效的各个组成部分,以1-10的标准对100个绩效评估进行了评分。
每个评估者对每个绩效评估评分一次。 我运行了“评估系统”分析平台,评分器为“ X”,评估(1-100)为“零件”,得分为“ Y”。 我收到警告“没有足够的数据来计算过程标准偏差。 禁用需要标准偏差的选项”,并且EMP结果的类内相关值(无偏差)为1,这是不可行的。
然后,我运行了Measurement Systems Analysis平台,其中“评估”(1-100)为“部分”,得分为“ Y”(不包括“评估者”为“ X”),并且似乎获得了跟踪不同组件变化的合理相关值。 我本身并不是在进行可靠性研究,我只是将所有三个评估者的平均绩效得分用于我的实质性分析,因此我不必担心评估者之间的特定趋势。 我的问题是:
1)报告结果时,我可以使用ICC输出进行第二次分析吗(没有评估人)?
2)如果不是,用JMP计算ICC的最佳方法是什么?
感谢您提供的任何指导!
分析工具回复:如何执行简单的类内相关性以确定区间可靠性?我认为第一个设置是正确的,但是如果没有复制,就无法估计可重复性。 这种情况会导致您收到警告消息。 您的EMP结果是否类似于以下示例:

如果是这样,请注意ICC被报告了三次。 它们都是正确的,但是代表对不同问题的不同答案。 您是否可能同时存在评估者偏见和与组件的交互? 如果是这样,请使用第二个或第三个ICC,而不要使用第一个。