SIFT的视频跟踪

直接上代码,要注意有一个模板图片才行

#include <iostream>
#include <opencv2\core\core.hpp>
#include <opencv2\imgproc\imgproc.hpp>
#include <opencv2\nonfree\features2d.hpp>
#include <opencv2\highgui\highgui.hpp>
#include <opencv2\calib3d\calib3d.hpp>

using namespace cv;

int _sift(Mat &img_object, Mat &img_scene);

int main(int argc, char *argv[])
{
	//读取视频
	VideoCapture vc;
	vc.open(0);
	double rate = vc.get(CV_CAP_PROP_FPS);//帧率
	int delay = 1000 / rate;
	Mat img = imread("C:\\Users\\billlab\\Desktop\\template.png", CV_LOAD_IMAGE_COLOR);//模版图像

	//待写入的视频
//	VideoWriter vw;
// 	vw.open("C:\\Users\\billlab\\Desktop\\sift.avi",
// 		(int)vc.get(CV_CAP_PROP_FOURCC), // 也可设为CV_FOURCC_PROMPT,在运行时选取
// 		(double)vc.get(CV_CAP_PROP_FPS), // 视频帧率
// 		cv::Size((int)vc.get(CV_CAP_PROP_FRAME_WIDTH), (int)vc.get(CV_CAP_PROP_FRAME_HEIGHT)), // 视频大小
// 		true); // 是否输出彩色视频  

	namedWindow("1");
	if (vc.isOpened())
	{

		while (1)
		{
			Mat frame;
			//原始图像每5帧图像取1帧进行处理
			for (int i = 0; i < 5; i++)
			{
				vc.read(frame);
			}

			if (frame.empty())
			{
				break;
			}
			_sift(img, frame);
			imshow("1", frame);
			//vw << frame;
			waitKey(1);
		}
	}
	vc.release();
	return 0;
}

int _sift(Mat &img_object, Mat &img_scene)
{
	//Mat img_object = imread("1.jpg", CV_LOAD_IMAGE_COLOR);
	//Mat img_scene = imread("2.jpg", CV_LOAD_IMAGE_COLOR);
	double t = (double)getTickCount();
	if (!img_object.data || !img_scene.data)
	{
		std::cout << "Error reading images!" << std::endl;
		return -1;
	}

	//检测SIFT特征点
	int minHeassian = 400;
	SiftFeatureDetector detector(minHeassian);

	std::vector<KeyPoint> keypoints_object, keypoints_scene;

	detector.detect(img_object, keypoints_object);
	detector.detect(img_scene, keypoints_scene);

	//计算特征向量
	SiftDescriptorExtractor extractor;

	Mat descriptors_object, descriptors_scene;

	extractor.compute(img_object, keypoints_object, descriptors_object);
	extractor.compute(img_scene, keypoints_scene, descriptors_scene);

	//利用FLANN匹配算法匹配特征描述向量
	FlannBasedMatcher matcher;
	std::vector<DMatch> matches;
	matcher.match(descriptors_object, descriptors_scene, matches);

	double max_dist = 0; double min_dist = 100;

	//快速计算特征点之间的最大和最小距离
	for (int i = 0; i < descriptors_object.rows; i++)
	{
		double dist = matches[i].distance;
		if (dist < min_dist) min_dist = dist;
		if (dist > max_dist) max_dist = dist;
	}

	printf("---Max dist: %f \n", max_dist);
	printf("---Min dist: %f \n", min_dist);

	//只画出好的匹配点(匹配特征点之间距离小于3*min_dist)
	std::vector<DMatch> good_matches;

	for (int i = 0; i < descriptors_object.rows; i++)
	{
		if (matches[i].distance < 3 * min_dist)
			good_matches.push_back(matches[i]);
	}

	Mat img_matches;
	drawMatches(img_object, keypoints_object, img_scene, keypoints_scene,
		good_matches, img_matches, Scalar::all(-1), Scalar::all(-1),
		vector<char>(), DrawMatchesFlags::NOT_DRAW_SINGLE_POINTS);

	//定位物体/
	std::vector<Point2f> obj;
	std::vector<Point2f> scene;

	for (int i = 0; i < good_matches.size(); i++)
	{
		//从好的匹配中获取特征点
		obj.push_back(keypoints_object[good_matches[i].queryIdx].pt);
		scene.push_back(keypoints_scene[good_matches[i].trainIdx].pt);
	}

	//找出匹配特征点之间的变换
	Mat H = findHomography(obj, scene, CV_RANSAC);

	//得到image_1的角点(需要寻找的物体)
	std::vector<Point2f> obj_corners(4);
	obj_corners[0] = cvPoint(0, 0);
	obj_corners[1] = cvPoint(img_object.cols, 0);
	obj_corners[2] = cvPoint(img_object.cols, img_object.rows);
	obj_corners[3] = cvPoint(0, img_object.rows);
	std::vector<Point2f> scene_corners(4);

	//匹配四个角点
	perspectiveTransform(obj_corners, scene_corners, H);

	//画出匹配的物体两个匹配的图片
	//line(img_matches, scene_corners[0] + Point2f(img_object.cols, 0), scene_corners[1] + Point2f(img_object.cols, 0), Scalar(0,255,0), 4);
	//line(img_matches, scene_corners[1] + Point2f(img_object.cols, 0), scene_corners[2] + Point2f(img_object.cols, 0), Scalar(0,255,0), 4);
	//line(img_matches, scene_corners[2] + Point2f(img_object.cols, 0), scene_corners[3] + Point2f(img_object.cols, 0), Scalar(0,255,0), 4);
	//line(img_matches, scene_corners[3] + Point2f(img_object.cols, 0), scene_corners[0] + Point2f(img_object.cols, 0), Scalar(0,255,0), 4);

	//匹配之后画出匹配图形的轮廓
	line(img_scene, scene_corners[0], scene_corners[1], Scalar(0, 255, 0), 4);
	line(img_scene, scene_corners[1], scene_corners[2], Scalar(0, 255, 0), 4);
	line(img_scene, scene_corners[2], scene_corners[3], Scalar(0, 255, 0), 4);
	line(img_scene, scene_corners[3], scene_corners[0], Scalar(0, 255, 0), 4);

	//imshow("Good Matches & Object detection", img_matches);
	//imshow("识别图像", img_scene);
	t = 1000 * ((double)getTickCount() - t) / getTickFrequency();
	std::cout << "the time is :" << t << std::endl;

	//waitKey(0);
}
时间: 2024-08-08 06:59:36

SIFT的视频跟踪的相关文章

基于SIFT的视频跟踪

有些事现在不做 一辈子都不会做了 1 YEAR AGO 本文中采用的SIFT提取视频中的和待检测图像特征点,并利用特征点之间的映射关系找到视频中待检测物体的位置,绘制出绿色的边界并显示出来. 检测视频视频地址 图片:待检测的图片(仙剑奇侠传5的游戏盒子) 程序源代码 #include <iostream> #include <opencv2\core\core.hpp> #include <opencv2\imgproc\imgproc.hpp> #include &l

互联网应用周刊:好奇看点、米派、车蚂蚁、石山视频等

好奇看点是一款国内首创.创新型的互动视频服务平台,依靠公司创新的视频跟踪算法.好奇看点实现了对视频中的兴趣点,如人.物品或者场景等进行动态跟踪锁定,并在视屏区域内对兴趣点的相关信息进行展示互动.基于好奇看点平台,可以轻松将"社会化","电子商务"等现代互联网的核心元素和视频内容无缝结合,全面提升视频本身的信息量及商业价值. 链接:http://www.videoclick.cn/ 米派是一款国内首创.创新型的交互式图片工具栏.网站主通过在网站上添加一行javascr

Python 高级图像处理

构建图像搜索引擎并不是一件容易的任务.这里有几个概念.工具.想法和技术需要实现.主要的图像处理概念之一是逆图像查询reverse image querying(RIQ).Google.Cloudera.Sumo Logic 和 Birst 等公司在使用逆图像搜索中名列前茅.通过分析图像和使用数据挖掘 RIQ 提供了很好的洞察分析能力. 顶级公司与逆图像搜索 有很多顶级的技术公司使用 RIQ 来取得了不错的收益.例如:在 2014 年 Pinterest 第一次带来了视觉搜索.随后在 2015 年

Python的高级图像处理

构建图像搜索引擎并不是一件容易的任务.这里有几个概念.工具.想法和技术需要实现.主要的图像处理概念之一是逆图像查询reverse image querying(RIQ).Google.Cloudera.Sumo Logic 和 Birst 等公司在使用逆图像搜索中名列前茅.通过分析图像和使用数据挖掘 RIQ 提供了很好的洞察分析能力. 顶级公司与逆图像搜索 有很多顶级的技术公司使用 RIQ 来取得了不错的收益.例如:在 2014 年 Pinterest 第一次带来了视觉搜索.随后在 2015 年

错过CVPR 2017?绝对不能错过GAIR大讲堂——上海交大专场开启报名

CVPR(国际计算机视觉与模式识别会议)是IEEE 举办的年度学术性会议,会议主要关注计算机视觉与模式识别等方面的技术内容.在各种学术会议统计中,CVPR 有着非常强的影响力和高排名.在美国夏威夷刚刚结束的CVPR 2017大会上,学术界和工业界都给予了极高的关注度,无论是收录的论文数和参会人数都刷新了CVPR 的历史纪录. 对于这样一场顶尖学术会议,广大没有机会出席活动现场的同学们除了阅读相关文章之外,还能如何更深度地了解CVPR 2017的学术成果呢? 8月12日下午,由雷锋网(公众号:雷锋

opencv笔记6:角点检测

time:2015年10月09日 星期五 23时11分58秒 # opencv笔记6:角点检测 update:从角点检测,学习图像的特征,这是后续图像跟踪.图像匹配的基础. 角点检测是什么鬼?前面一篇学习笔记是各种模板操作,是图像增强技术. 那么我节写来应该继续找下有没有别的图像增强技术. 但是,我对增强还不是特别理解.图像增强:划定ROI区域,然后想方设法将感兴趣的特征有选择的突出.注意,这可是不去考虑图像质量下降的原因的.图像恢复:针对图像降质的原因,设法去补偿降质因素,从而使改善后的图像尽

史上最全的iOS开源项目分类汇总

楼主转载的,并未亲自测试 Category/Util  sstoolkit 一套Category类型的库,附带很多自定义控件 功能不错-        BFKit 又一套Category类型的 Kit,还有几个工具类        APUtils 又一套Category类型的 Kit        QSKit 又一套Category类型的 Kit        iOS-Categories 又一套Category类型的 Kit        BlocksKit 将Block风格带入UIKit和F

iOS开发-常用第三方开源框架介绍(你了解的ios只是冰山一角)

图像: 1.图片浏览控件MWPhotoBrowser        实现了一个照片浏览器类似 iOS 自带的相册应用,可显示来自手机的图片或者是网络图片,可自动从网络下载图片并进行缓存.可对图片进行缩放等操作.       下载:https://github.com/mwaterfall/MWPhotoBrowser   目前比较活跃的社区仍旧是Github,除此以外也有一些不错的库散落在Google Code.SourceForge等地方.由于Github社区太过主流,这里主要介绍一下Gith

常用iOS的第三方框架

图像:1.图片浏览控件MWPhotoBrowser       实现了一个照片浏览器类似 iOS 自带的相册应用,可显示来自手机的图片或者是网络图片,可自动从网络下载图片并进行缓存.可对图片进行缩放等操作.      下载:https://github.com/mwaterfall/MWPhotoBrowser 目前比较活跃的社区仍旧是Github,除此以外也有一些不错的库散落在Google Code.SourceForge等地方.由于Github社区太过主流,这里主要介绍一下Github里面流