角点检测

我们想要做图像匹配,比如拍了两张照片,怎样确定它们中的某些其实是一个东西,这对定位啊拼接啥的很有帮助

Paste_Image.png
Paste_Image.png

为了匹配我们最好不要用全局特征,显然用局部特征能更好地完成这一目标,因为这可以提高诸如遮挡啊、角度方向变化等的鲁棒性

Paste_Image.png

一个大致的方法如下:
(1)首先找一些独特的点(特征点)
(2)在上述关键点附近定义一个区域
(3)从这个区域提起并归一化信息
(4)从这个归一化的区域中计算局部特征
(5)匹配这个局部特征

Paste_Image.png

那么问题来了:
我们怎样在两幅不同的图上找到相同的点?

Paste_Image.png

所以我们需要一个“可重复”的检测器
假设我们解决了这个问题,即在两幅不同的图上我们找到了同样的点,那么我们怎么将它们一一对应?

Paste_Image.png

所以我们需要一个点区别度高的检测器。
再然后,我们对特征点周围的区域特征提取,要求准确、可重复,对下面的一些情况要有较好的应对能力:
旋转、相似、仿射变换、光照、噪声等等
特征因为是局部的,所以对一些遮挡啊、聚群有很好的应对能力,同时我们要求这个特征要多,要有足够的区分度(来标识这是个啥),要高效(最好达到实时性)。


比较著名的几种特征点检测


Paste_Image.png

Harris角点检测
显然角点(类似桌子的角那种点)满足可重复、足够区分度的特征,所以这解决我们的问题一。
所以我们怎样找到角点呢
其实很简单,我们弄一个小框框,往各个方向移动,如果怎样移动框框里的光强都不变,那么显然这是在一个区域里,如果只在某一个方向上动框框光强不变,那么这就是一个边,如果任意方向移动都变,那就是角点啦。

Paste_Image.png
Paste_Image.png

这里我们可以做一个差分近似

Paste_Image.png
Paste_Image.png

窗函数我们可以选

Paste_Image.png

窗函数是左边的时候,M可以简化为

Paste_Image.png

如果采用矩形框滤波器的情形,对旋转的鲁棒性不好,而如果用高斯滤波器框,则解决这一问题。

我们来理解一下这个M矩阵啊,挺重要的

Paste_Image.png

如果是角点,那么要求x、y方向的梯度都很大,也即对角线上的值都很大于0。
然而这是两条边都在x、y轴上的情况。对于一般情况,我们这样处理
显然M是一个对称矩阵,所以我们可以对其进行特征值分解

Paste_Image.png

则我们得到两个特征值和两个向量(在M里),特征值大的变化快,小的变化慢

Paste_Image.png

所以转化为上述对齐的情况我们可以有以下结论

Paste_Image.png

我们定义角点相应函数

Paste_Image.png


显然行列式可以直接求而不用特征值分解了

Paste_Image.png

最终Harris角点方法总结如下:

Paste_Image.png

哈里斯角点实测结果——Perfect!

Paste_Image.png

然后我们就可以利用Harris角点做全景图拼接了!
找到特征点
把特征点配对
用配对的特征点进行对齐操作

Paste_Image.png
Paste_Image.png

重要——Harris角点的特征##

对于平移、旋转有很好的鲁棒性
但是!对大小缩放不具有鲁棒性!角放大后而选的框框不变则有可能变成边!

Paste_Image.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 200,302评论 5 470
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 84,232评论 2 377
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 147,337评论 0 332
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,977评论 1 272
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,920评论 5 360
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,194评论 1 277
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,638评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,319评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,455评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,379评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,426评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,106评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,696评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,786评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,996评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,467评论 2 346
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,043评论 2 341

推荐阅读更多精彩内容