The kappa statistic is the most widely used measure of inter-rater agreement for categorical data. Despite its popularity, applied researchers often encounter two major hurdles: (i) determining the sample size required to achieve a desired level of agreement with given power, and (ii) computing appropriate kappa coefficients with proper interpretation. Existing R packages such as irr and kappaSize provide these functionalities but require programming skills and lack an integrated, user-friendly interface. We present CATEKAPPA, an R package that bridges this gap by combining sample size planning (via kappaSize) and agreement analysis (via irr) into a single Shiny-based web application. The package supports Cohen's kappa for two raters, Fleiss' kappa for three or more raters, and Light's kappa, and provides automatic interpretation using the Landis & Koch scale. Users can either launch an interactive graphical interface or use command-line functions for scripting. The package is freely available on CRAN.


翻译:Kappa统计量是分类数据中最广泛使用的一致性度量指标。尽管其应用普遍,但实际研究者常面临两大障碍:(i)确定在给定统计功效下达到期望一致性水平所需的样本量;(ii)计算合适的Kappa系数并进行准确解读。现有R包如irr和kappaSize虽能提供这些功能,但要求用户具备编程技能,且缺乏集成化的用户友好界面。我们提出CATEKAPPA这一R包,通过将样本量规划(经由kappaSize包)与一致性分析(经由irr包)整合至基于Shiny的单一网络应用程序,填补了这一空白。该包支持两位评估者的Cohen's Kappa、三位及以上评估者的Fleiss' Kappa及Light's Kappa,并依据Landis & Koch分级标准提供自动解读。用户可通过交互式图形界面启动程序,也可使用命令行函数进行脚本化操作。该R包已在CRAN上免费发布。

0
下载
关闭预览

相关内容

【干货书】统计基础、推理与推断,361页pdf
专知会员服务
86+阅读 · 2022年1月25日
【AAAI 2022】一致性信息瓶颈在域泛化中的应用
专知会员服务
26+阅读 · 2022年1月15日
【干货书】R语言书: 编程和统计的第一课程,
专知会员服务
118+阅读 · 2020年5月9日
【干货书】统计基础、推理与推断,361页pdf
浅谈最广泛应用的金融风控算法-评分卡
凡人机器学习
10+阅读 · 2020年8月3日
【资源】kaggle数据科学竞赛方案集锦
专知
27+阅读 · 2019年9月4日
统计学常用数据类型
论智
19+阅读 · 2018年7月6日
PCA的基本数学原理
算法与数学之美
11+阅读 · 2017年8月8日
各种相似性度量及Python实现
机器学习算法与Python学习
11+阅读 · 2017年7月6日
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
VIP会员
最新内容
边缘计算的军事应用
专知会员服务
3+阅读 · 8月9日
一种考虑资源机动性的武器目标分配混合算法
专知会员服务
8+阅读 · 8月8日
《多域冲突比较支持模型》60页
专知会员服务
13+阅读 · 8月7日
相关资讯
【干货书】统计基础、推理与推断,361页pdf
浅谈最广泛应用的金融风控算法-评分卡
凡人机器学习
10+阅读 · 2020年8月3日
【资源】kaggle数据科学竞赛方案集锦
专知
27+阅读 · 2019年9月4日
统计学常用数据类型
论智
19+阅读 · 2018年7月6日
PCA的基本数学原理
算法与数学之美
11+阅读 · 2017年8月8日
各种相似性度量及Python实现
机器学习算法与Python学习
11+阅读 · 2017年7月6日
相关基金
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员