基于相关滤波器的追踪(Correlation Filter-based Tracking)原理

举报
风吹稻花香 发表于 2021/06/05 02:09:27 2021/06/05
【摘要】 基于相关滤波器的追踪(Correlation Filter-based Tracking)原理 基于相关滤波器的追踪算法,典型的算法有KCF,DSST,STC,SAMF等。这些算法的大致框架都是差不多的。 介绍 在视频的第一帧给定目标的初始位置,追踪的目标就是预测目标之后的位置。追踪受到很多因素影响,比如光照变化(illumination variations),...

基于相关滤波器的追踪(Correlation Filter-based Tracking)原理


基于相关滤波器的追踪算法,典型的算法有KCF,DSST,STC,SAMF等。这些算法的大致框架都是差不多的。

介绍

在视频的第一帧给定目标的初始位置,追踪的目标就是预测目标之后的位置。追踪受到很多因素影响,比如光照变化(illumination variations),遮挡,形变,旋转等。在过去对于追踪的研究之中,主要分为2中方法:生成型模型(generative model)和判别式模型(discriminative models)。前者的主要思想就是通过寻找最佳匹配的窗口,而后者的主要思想就是学习从背景中区分目标。

在判别式模型中,基于相关滤波器的追踪算法(Correlation Filter-based Tracking)表现比较好。一般的,相关滤波器的原理就是在场景中,对每个感兴趣的目标产生高响应(相关峰(correlation peak)),对于背景则产生低的响应。

Correlationfilter-based tracking(CFTs)主要可以通过以下几个方面提高:

1)引入更好的训练方案(introducing better training schemes)

2)提取更强大的特征(extracting powerful features)

3)减轻尺度变化的影响(relieving scaling issue)

4)结合基于部分的追踪策略(applying part-based tracking strategy),即相对于对目标整体识别,可以将目标分成好几个部分,对各个部分进行识别

5)结合long-term的追踪(cooperating with long-term tracking)。


CFT整体框架介绍

          对于输入的第一帧,将给定的要追踪的区域提取出特征,然后进行训练,得到相关滤波器。

          对于之后的每一帧,先裁剪下之前预测的区域(由于是对前一帧区域做相关,所以对于物体快速移动处理的不好),然后进行特征提取,这些特征经过cos窗函数之后,做FFT变换,然后与相关滤波器相乘,将结果做IFFT之后,最大响应点所在的区域即为要追踪目标的新位置,然后再用新位置区域训练更新得到新的相关滤波器,用于之后的预测。


         详细的框架如下图:



用数学的方式描述工作流程如下:

         x:检测器的输入。要么是rawimage patch,要么是提取的特征;

         h:相关滤波器。

         根据卷积理论,时域上的卷积相当于频域上的乘积,可以得到如下式子:


符号‘^’表示傅里叶变换,⊙表示element-wise相乘,*表示复共轭,F-1表示反傅里叶变换。(1)的结果就是x与h的相关输出,也就是之前提到的confidence map,根据最大的响应位置,可以得到目标新预测的位置。

         对于训练滤波器,我们首先定义一个期望的相关输出y(可以是任意形状,比如MOSSE算法就是将y定义为2D峰值在中心的高斯分布的函数,UMACE算法就是目标中心点为1,其余位置为0的Kronecker delta函数)。使用目标的新实例x’,相关滤波器h应该满足:


因此:



其中, 表示y的DFT,除法的计算也是element-wise的。

 

对于一幅n x n大小的图片进行循环卷积的计算复杂度是O(n4),而使用FFT之后,计算复杂度变为O(n2logn),因此使用FFT的加速作用很明显。

文章来源: blog.csdn.net,作者:网奇,版权归原作者所有,如需转载,请联系作者。

原文链接:blog.csdn.net/jacke121/article/details/55805508

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。