卡帕系数:
Kappa 系数计算器是一个用于各个领域的有价值的工具,包括 统计、评估者间可靠性研究和研究方法。该计算器有助于确定两个或多个评估者之间超出偶然预期的协议。本质上,它衡量观察者或评估者在评估分类项目时的一致性程度。
Kappa系数计算器公式
Kappa 系数 (κ) 使用以下公式计算:
地点:
- Po:代表评估者之间观察到的相对一致性。
- Pe:表示假设的机会一致概率。
计算 Po:
- 确定评估者之间观察到的一致性的比例。
计算 Pe:
- 根据每个评估者类别的边际概率,偶然计算预期一致性。
一旦你有了价值观 Po 和 Pe,将它们代入公式即可求出 Cohen 的 kappa。
一般术语表
遵守的协议 (Po) | 预期协议 (Pe) | 卡帕系数 (κ) |
---|---|---|
0.1 | 0.1 | 0.000 |
0.2 | 0.1 | 0.167 |
0.3 | 0.1 | 0.333 |
0.4 | 0.1 | 0.500 |
0.5 | 0.1 | 0.667 |
0.6 | 0.1 | 0.800 |
0.7 | 0.1 | 0.857 |
0.8 | 0.1 | 0.889 |
0.9 | 0.1 | 0.909 |
0.1 | 0.2 | -0.111 |
0.2 | 0.2 | 0.000 |
0.3 | 0.2 | 0.125 |
0.4 | 0.2 | 0.250 |
0.5 | 0.2 | 0.375 |
0.6 | 0.2 | 0.500 |
0.7 | 0.2 | 0.571 |
0.8 | 0.2 | 0.600 |
0.9 | 0.2 | 0.625 |
Kappa 系数计算器示例
史密斯博士和约翰逊博士独立诊断患者的疾病。在 100 名患者中,他们对 80 项诊断达成一致。
- 遵守的协议 (Po):80/100 = 0.8
- 预期协议 (Pe):假设基于疾病患病率的机会协议,假设 30/100 = 0.3
使用 Kappa 系数公式:κ = (0.8 – 0.3) / (1 – 0.3) ≈ 0.7143
结果:Kappa 系数 (κ) 表明两位医生之间的一致性程度非常高,这表明诊断的一致性可靠。
最常见的常见问题解答
1. Kappa 系数衡量什么?
Kappa 系数衡量两个或多个评估者之间超出偶然预期的一致程度。它通常用于评估者间的可靠性研究,以评估分类判断的一致性或 测量.
2. Kappa 系数如何解释?
Kappa 系数的解释因其值而异。值 1 表示完全一致,0 表示一致性相当于偶然性,负值表示一致性比偶然性差。一般来说,高于 0.75 的值表明一致性很好,而低于 0.4 的值表明一致性较差。
3. Kappa系数受哪些因素影响?
有几个因素会影响 Kappa 系数,包括评级任务的复杂性、评级者的数量以及评级类别的普遍程度。此外,评级员培训或对评级标准理解的差异可能会影响协议水平。