In temporal action localization methods, temporal downsampling operations are widely used to extract proposal features, but they often lead to the aliasing problem, due to lacking consideration of sampling rates. This paper aims to verify the existence of aliasing in TAL methods and investigate utilizing low pass filters to solve this problem by inhibiting the high-frequency band. However, the high-frequency band usually contains large amounts of specific information, which is important for model inference. Therefore, it is necessary to make a tradeoff between anti-aliasing and reserving high-frequency information. To acquire optimal performance, this paper learns different cutoff frequencies for different instances dynamically. This design can be plugged into most existing temporal modeling programs requiring only one additional cutoff frequency parameter. Integrating low pass filters to the downsampling operations significantly improves the detection performance and achieves comparable results on THUMOS'14, ActivityNet~1.3, and Charades datasets. Experiments demonstrate that anti-aliasing with low pass filters in TAL is advantageous and efficient.


翻译:在时间行动本地化方法中,时间下游抽样作业被广泛用于提取建议特性,但由于对抽样率的考虑不够,往往会导致别名问题。本文旨在核实TAL方法中的别名存在,并调查使用低传过滤器通过抑制高频带来解决这一问题。然而,高频频带通常包含大量具体信息,这对模型推断很重要。因此,有必要对反传和保留高频信息进行权衡。为了取得最佳性能,本文以动态方式学习不同情况的不同截断频率。这一设计可以插进大多数现有的仅需要额外截断频率参数的时间模型程序。将低传过滤器并入下游作业可大大改进探测性,并在THUMOOS'14、ActionNet~1.3和Charades数据集中取得可比结果。实验表明,在TAL低传过滤器中反传是有利和有效的。

0
下载
关闭预览

相关内容

专知会员服务
51+阅读 · 2021年5月19日
专知会员服务
57+阅读 · 2021年1月26日
已删除
将门创投
3+阅读 · 2019年1月8日
Unsupervised Learning via Meta-Learning
CreateAMind
44+阅读 · 2019年1月3日
Single-frame Regularization for Temporally Stable CNNs
Arxiv
5+阅读 · 2016年12月29日
VIP会员
最新内容
人工智能赋能无人机:俄乌战争(万字长文)
专知会员服务
5+阅读 · 今天6:56
国外海军作战管理系统与作战训练系统
专知会员服务
2+阅读 · 今天4:16
美军条令《海军陆战队规划流程(2026版)》
专知会员服务
10+阅读 · 今天3:36
《压缩式分布式交互仿真标准》120页
专知会员服务
4+阅读 · 今天3:21
《电子战数据交换模型研究报告》
专知会员服务
6+阅读 · 今天3:13
《基于Transformer的异常舰船导航识别与跟踪》80页
《低数据领域军事目标检测模型研究》
专知会员服务
6+阅读 · 今天2:37
【CMU博士论文】物理世界的视觉感知与深度理解
专知会员服务
10+阅读 · 4月22日
相关VIP内容
专知会员服务
51+阅读 · 2021年5月19日
专知会员服务
57+阅读 · 2021年1月26日
相关资讯
已删除
将门创投
3+阅读 · 2019年1月8日
Unsupervised Learning via Meta-Learning
CreateAMind
44+阅读 · 2019年1月3日
Top
微信扫码咨询专知VIP会员