当有两组评分者时如何使用属性量规计算一致性我们对 20 例罕见病进行了一项研究，并让专家评估他们是否认为这种疾病存在或不存在 (Y/N)。 因为案例很长，我们让一组评估者（6 个人）对前 10 个案例进行评估，并让一组评估者（7 个人）对最后 10 个案例进行评估。 我们想要评估所有审阅者之间对所有病例的整体诊断一致性，而不是分别分析前 10 个和最后 10 个病例，因为我们只想知道专家之间在做出诊断时的一致性程度。 有没有一种方法可以运行属性量表报告来计算所有案例的一致性百分比和 kappa，即使有两组不同的审阅者，即对于评分者没有审阅的案例，他们有“缺失数据”。 谢谢
分析图形苹果系统回复：当有两组评分者时如何使用属性量规计算一致性首先，欢迎来到社区。 您提供的信息存在几个问题：
1. 你没有评估者内部变异的估计，内部评估者可靠性（例如，如果您将同一个案例交给同一个评分者怎么办？在他们不知情的情况下并让他们再次评价案件。 他们会给它同样的评价吗？）
2 评分者之间的差异，i评价者可靠性。由于不同评分者的案例不同，您将无法区分他们的同意（或不同意）是由于评分者还是案例。 由于评分者和个案的变化是混淆的。
您可能会发现这是一篇有趣的读物：
https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3900052/
