Opencv基于CamShift算法实现目标跟踪

 更新时间:2018年01月09日 10:58:29   作者:-牧野-  
这篇文章主要为大家详细介绍了Opencv基于CamShift算法实现目标跟踪,具有一定的参考价值,感兴趣的小伙伴们可以参考一下

CamShift算法全称是“Continuously Adaptive Mean-Shift”(连续的自适应MeanShift算法),是对MeanShift算法的改进算法,可以在跟踪的过程中随着目标大小的变化实时调整搜索窗口大小,对于视频序列中的每一帧还是采用MeanShift来寻找最优迭代结果,至于如何实现自动调整窗口大小的,可以查到的论述较少,我的理解是通过对MeanShift算法中零阶矩的判断实现的。
在MeanShift算法中寻找搜索窗口的质心用到窗口的零阶矩M00和一阶矩M10,M01:

零阶矩是搜索窗口内所有像素的积分,即所有像素值之和,物理上的意义是计算搜索窗口的尺寸。经过目标的H分量直方图反向投影后,目标区域的搜索窗口大部分像素值归一化后应该是最大值255,如果计算出来零阶矩大于某一阈值,可以认为此时目标铺满了整个搜索窗口,有理由认为在搜索窗口之外的区域还存在目标区域,需要增大搜索窗口的尺寸;相应的,如果零阶矩小于某一阈值,则需要缩小搜索窗口的尺寸,如此一来,当目标的大小发生变化的时候,CamShift算法就可以自适应的调整目标区域进行跟踪。

以上过程中涉及到一个关键的概念——反向投影,CamShift和MeanShift的运算都是在反向投影图像上进行的,反向投影的实现过程如下:计算并生成目标区域的H分量的直方图,反向投影其实就是把目标图像上每一个像素点的像素值替换为当前像素值所在bin对应的直方图bin的数值。

Opencv中CamShfit在使用上跟MeanShift一致:

CamShift( InputArray probImage, CV_OUT CV_IN_OUT Rect& window, 
         TermCriteria criteria ); 

第一个参数probImage是反向投影图像
第二个参数window是输入和输出的搜索窗口/目标窗口,window的尺寸会自动调整
第三个参数criteria是迭代收敛终止条件

#include "core/core.hpp"  
#include "highgui/highgui.hpp"  
#include "imgproc/imgproc.hpp" 
#include "video/tracking.hpp" 
#include<iostream>  
 
using namespace cv;  
using namespace std;  
 
Mat image;  
Mat rectImage; 
Mat imageCopy; //绘制矩形框时用来拷贝原图的图像  
bool leftButtonDownFlag=false; //左键单击后视频暂停播放的标志位  
Point originalPoint; //矩形框起点  
Point processPoint; //矩形框终点  
 
Mat targetImageHSV; 
int histSize=200;  
float histR[]={0,255};  
const float *histRange=histR;  
int channels[]={0,1};  
Mat dstHist; 
Rect rect; 
vector<Point> pt; //保存目标轨迹 
void onMouse(int event,int x,int y,int flags ,void* ustc); //鼠标回调函数  
 
int main(int argc,char*argv[])  
{  
 VideoCapture video(argv[1]);  
 double fps=video.get(CV_CAP_PROP_FPS); //获取视频帧率  
 double pauseTime=1000/fps; //两幅画面中间间隔  
 namedWindow("跟踪木头人",0);  
 setMouseCallback("跟踪木头人",onMouse);  
 while(true)  
 {  
  if(!leftButtonDownFlag) //判定鼠标左键没有按下,采取播放视频,否则暂停  
  {  
   video>>image;  
  }  
  if(!image.data||waitKey(pauseTime)==27) //图像为空或Esc键按下退出播放  
  {  
   break;  
  }  
  if(originalPoint!=processPoint&&!leftButtonDownFlag)  
  {  
   Mat imageHSV; 
   Mat calcBackImage; 
   cvtColor(image,imageHSV,CV_RGB2HSV); 
   calcBackProject(&imageHSV,2,channels,dstHist,calcBackImage,&histRange); //反向投影 
   TermCriteria criteria(TermCriteria::MAX_ITER + TermCriteria::EPS, 1000, 0.001);  
   CamShift(calcBackImage, rect, criteria);  
   Mat imageROI=imageHSV(rect); //更新模板    
   targetImageHSV=imageHSV(rect); 
   calcHist(&imageROI, 2, channels, Mat(), dstHist, 1, &histSize, &histRange);  
   normalize(dstHist, dstHist, 0.0, 1.0, NORM_MINMAX); //归一化 
   rectangle(image, rect, Scalar(255, 0, 0),3); //目标绘制  
   pt.push_back(Point(rect.x+rect.width/2,rect.y+rect.height/2)); 
   for(int i=0;i<pt.size()-1;i++) 
   { 
    line(image,pt[i],pt[i+1],Scalar(0,255,0),2.5); 
   } 
  }  
  imshow("跟踪木头人",image);  
  waitKey(100); 
 } 
 return 0;  
}  
 
//*******************************************************************//  
//鼠标回调函数  
void onMouse(int event,int x,int y,int flags,void *ustc)  
{  
 if(event==CV_EVENT_LBUTTONDOWN)  
 {  
  leftButtonDownFlag=true; //标志位  
  originalPoint=Point(x,y); //设置左键按下点的矩形起点  
  processPoint=originalPoint;  
 }  
 if(event==CV_EVENT_MOUSEMOVE&&leftButtonDownFlag)  
 {  
  imageCopy=image.clone();  
  processPoint=Point(x,y);  
  if(originalPoint!=processPoint)  
  {  
   //在复制的图像上绘制矩形  
   rectangle(imageCopy,originalPoint,processPoint,Scalar(255,0,0),2);  
  }  
  imshow("跟踪木头人",imageCopy);  
 }  
 if(event==CV_EVENT_LBUTTONUP)  
 {  
  leftButtonDownFlag=false;  
  rect=Rect(originalPoint,processPoint);   
  rectImage=image(rect); //子图像显示  
  imshow("Sub Image",rectImage);   
  cvtColor(rectImage,targetImageHSV,CV_RGB2HSV); 
  imshow("targetImageHSV",targetImageHSV); 
  calcHist(&targetImageHSV,2,channels,Mat(),dstHist,1,&histSize,&histRange,true,false);   
  normalize(dstHist,dstHist,0,255,CV_MINMAX); 
  imshow("dstHist",dstHist); 
 }   
}  

蓝色窗口是跟踪的目标,绿色线条是目标走过的轨迹。

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持脚本之家。

相关文章

  • 基于指针的数据类型与指针运算小结

    基于指针的数据类型与指针运算小结

    以下是对指针的数据类型与指针运算进行了详细的总结介绍,需要的朋友可以过来参考下
    2013-09-09
  • Windows下搭建FFmpeg开发调试环境的详细步骤

    Windows下搭建FFmpeg开发调试环境的详细步骤

    这篇文章主要介绍了Windows下搭建FFmpeg开发调试环境,本文以VS2017为例一步步介绍怎么搭建一个可供单步调试的FFmpeg项目,需要的朋友可以参考下
    2022-07-07
  • C语言实现时区转换函数的实例

    C语言实现时区转换函数的实例

    这篇文章主要介绍了C语言实现时区转换函数的实例的相关资料,这里分析需求并提供实现代码,需要的朋友可以参考下
    2017-08-08
  • C++编写非侵入式接口

    C++编写非侵入式接口

    这篇文章主要介绍了C++编写非侵入式接口的相关资料,需要的朋友可以参考下
    2017-07-07
  • C语言实现军旗游戏的示例代码

    C语言实现军旗游戏的示例代码

    这篇文章主要为大家详细介绍了如何利用C语言实现军旗游戏,文中的示例代码讲解详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2022-11-11
  • C++ namespace命名空间解析

    C++ namespace命名空间解析

    考虑一种情况,当我们有两个同名的人,Zara,在同一个班里。当我们需要对它们进行区分我们必须使用一些额外的信息和它们的名字,比如它们生活在不同的区域或者兴趣爱好什么的,在C++程序中也会遇到同样的情况,所以命名空间就此产生
    2021-11-11
  • 手拉手教你如何理解c/c++中的指针

    手拉手教你如何理解c/c++中的指针

    当你对C越来越熟悉时,你会发现把与指针搅和在一起的"类型"这个概念分成"指针的类型"和"指针所指向的类型"两个概念,是精通指针的关键点之一,这篇文章主要给大家介绍了关于c/c++中指针的相关资料,需要的朋友可以参考下
    2021-10-10
  • C++ RAII在HotSpot VM中的重要应用解析

    C++ RAII在HotSpot VM中的重要应用解析

    RAII技术被认为是C++中管理资源的最佳方法,进一步引申,使用RAII技术也可以实现安全、简洁的状态管理,编写出优雅的异常安全的代码,这篇文章主要介绍了C++ RAII在HotSpot VM中的重要应用,需要的朋友可以参考下
    2023-09-09
  • 基于C语言实现高级通讯录的示例代码

    基于C语言实现高级通讯录的示例代码

    这篇文章主要为大家详细介绍了如何利用C语言实现一个高级通讯录的功能,文中的示例代码讲解详细,具有一定的借鉴价值,需要的小伙伴可以参考一下
    2023-01-01
  • C语言对对碰游戏源码分享

    C语言对对碰游戏源码分享

    这篇文章主要为大家分享了C语言对对碰游戏源码,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2018-02-02

最新评论