The kappa statistic is the most widely used measure of inter-rater agreement for categorical data. Despite its popularity, applied researchers often encounter two major hurdles: (i) determining the sample size required to achieve a desired level of agreement with given power, and (ii) computing appropriate kappa coefficients with proper interpretation. Existing R packages such as irr and kappaSize provide these functionalities but require programming skills and lack an integrated, user-friendly interface. We present CATEKAPPA, an R package that bridges this gap by combining sample size planning (via kappaSize) and agreement analysis (via irr) into a single Shiny-based web application. The package supports Cohen's kappa for two raters, Fleiss' kappa for three or more raters, and Light's kappa, and provides automatic interpretation using the Landis & Koch scale. Users can either launch an interactive graphical interface or use command-line functions for scripting. The package is freely available on CRAN.


翻译:Kappa统计量是分类数据中最广泛使用的一致性度量指标。尽管其应用普遍,但实际研究者常面临两大障碍:(i)确定在给定统计功效下达到期望一致性水平所需的样本量;(ii)计算合适的Kappa系数并进行准确解读。现有R包如irr和kappaSize虽能提供这些功能,但要求用户具备编程技能,且缺乏集成化的用户友好界面。我们提出CATEKAPPA这一R包,通过将样本量规划(经由kappaSize包)与一致性分析(经由irr包)整合至基于Shiny的单一网络应用程序,填补了这一空白。该包支持两位评估者的Cohen's Kappa、三位及以上评估者的Fleiss' Kappa及Light's Kappa,并依据Landis & Koch分级标准提供自动解读。用户可通过交互式图形界面启动程序,也可使用命令行函数进行脚本化操作。该R包已在CRAN上免费发布。

0
下载
关闭预览

相关内容

【干货书】统计基础、推理与推断,361页pdf
专知会员服务
86+阅读 · 2022年1月25日
【AAAI 2022】一致性信息瓶颈在域泛化中的应用
专知会员服务
26+阅读 · 2022年1月15日
【干货书】R语言书: 编程和统计的第一课程,
专知会员服务
118+阅读 · 2020年5月9日
【干货书】统计基础、推理与推断,361页pdf
浅谈最广泛应用的金融风控算法-评分卡
凡人机器学习
10+阅读 · 2020年8月3日
【资源】kaggle数据科学竞赛方案集锦
专知
27+阅读 · 2019年9月4日
统计学常用数据类型
论智
19+阅读 · 2018年7月6日
PCA的基本数学原理
算法与数学之美
11+阅读 · 2017年8月8日
各种相似性度量及Python实现
机器学习算法与Python学习
11+阅读 · 2017年7月6日
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
VIP会员
最新内容
美国从乌克兰无人机战争中学习经验
专知会员服务
1+阅读 · 今天15:03
ICML 2026 | 面向视觉语言模型的语义鲁棒性认证
专知会员服务
0+阅读 · 今天14:31
学习数据的几何:形状空间分析数学综述
专知会员服务
8+阅读 · 6月17日
定向能反无人机系统最新发展动态
专知会员服务
10+阅读 · 6月17日
相关资讯
【干货书】统计基础、推理与推断,361页pdf
浅谈最广泛应用的金融风控算法-评分卡
凡人机器学习
10+阅读 · 2020年8月3日
【资源】kaggle数据科学竞赛方案集锦
专知
27+阅读 · 2019年9月4日
统计学常用数据类型
论智
19+阅读 · 2018年7月6日
PCA的基本数学原理
算法与数学之美
11+阅读 · 2017年8月8日
各种相似性度量及Python实现
机器学习算法与Python学习
11+阅读 · 2017年7月6日
相关基金
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员