This paper presents a methodological analysis of the gesture-recognition approach proposed by Liu and Szirányi, with a particular focus on the validity of their evaluation protocol. We show that the reported near-perfect accuracy metrics result from a frame-level random train-test split that inevitably mixes samples from the same subjects across both sets, causing severe data leakage. By examining the published confusion matrix, learning curves, and dataset construction, we demonstrate that the evaluation does not measure generalization to unseen individuals. Our findings underscore the importance of subject-independent data partitioning in vision-based gesture-recognition research, especially for applications - such as UAV-human interaction - that require reliable recognition of gestures performed by previously unseen people.


翻译:本文对Liu和Szirányi提出的手势识别方法进行了方法论分析,特别关注其评估协议的有效性。研究表明,其报道的近乎完美的准确度指标源于帧级随机训练-测试划分,这种划分方式不可避免地混合了来自相同主体的样本,导致严重的数据泄露。通过分析已发布的混淆矩阵、学习曲线及数据集构建方式,我们证明该评估方法无法衡量模型对未见个体的泛化能力。我们的发现强调了在基于视觉的手势识别研究中主体独立性数据划分的重要性,尤其对于无人机-人机交互等需要对未见人员手势进行可靠识别的应用场景。

0
下载
关闭预览

相关内容

《运用人工神经网络的防空系统威胁评估模型》
专知会员服务
15+阅读 · 2月21日
基于深度学习的伪装目标检测研究进展
专知会员服务
30+阅读 · 2025年4月12日
基于深度学习的空中目标威胁评估技术研究
专知会员服务
41+阅读 · 2025年3月25日
基于深度学习的无人机检测和识别研究综述
专知会员服务
44+阅读 · 2024年8月19日
基于深度学习的物体姿态估计综述
专知会员服务
26+阅读 · 2024年5月15日
《利用深度学习进行目标姿态估计》2023最新63页论文
专知会员服务
47+阅读 · 2023年8月29日
基于深度学习的手语识别综述
专知会员服务
47+阅读 · 2020年5月18日
深度学习人体姿态估计算法综述
AI前线
25+阅读 · 2019年5月19日
半监督深度学习小结:类协同训练和一致性正则化
读论文Discriminative Deep Metric Learning for Face and KV
统计学习与视觉计算组
12+阅读 · 2018年4月6日
AAAI 2018 行为识别论文概览
极市平台
18+阅读 · 2018年3月20日
【前沿】凌空手势识别综述
科技导报
12+阅读 · 2017年8月17日
国家自然科学基金
337+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
55+阅读 · 2011年12月31日
VIP会员
最新内容
BES:让语言模型通过双向进化搜索自我改进
专知会员服务
3+阅读 · 5月30日
以色列-美国-伊朗战争中的无人机:关键要点
专知会员服务
4+阅读 · 5月30日
《Palantir任务保障性软件安全标准(MA-S2)》
专知会员服务
10+阅读 · 5月30日
基于声学的无人机检测技术综述
专知会员服务
7+阅读 · 5月30日
《当代混合战争分析框架:俄乌战争经验教训》
战略前沿人工智能的再思考(中文)
专知会员服务
8+阅读 · 5月29日
《量化地基防空系统间接效应的博弈论方法》
专知会员服务
6+阅读 · 5月29日
相关VIP内容
《运用人工神经网络的防空系统威胁评估模型》
专知会员服务
15+阅读 · 2月21日
基于深度学习的伪装目标检测研究进展
专知会员服务
30+阅读 · 2025年4月12日
基于深度学习的空中目标威胁评估技术研究
专知会员服务
41+阅读 · 2025年3月25日
基于深度学习的无人机检测和识别研究综述
专知会员服务
44+阅读 · 2024年8月19日
基于深度学习的物体姿态估计综述
专知会员服务
26+阅读 · 2024年5月15日
《利用深度学习进行目标姿态估计》2023最新63页论文
专知会员服务
47+阅读 · 2023年8月29日
基于深度学习的手语识别综述
专知会员服务
47+阅读 · 2020年5月18日
相关基金
国家自然科学基金
337+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
9+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
6+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
55+阅读 · 2011年12月31日
Top
微信扫码咨询专知VIP会员