基于图像分块的Harris?SIFT特征匹配算法

时间:2022-02-18 03:06:44

基于图像分块的Harris?SIFT特征匹配算法

摘 要: 应用Harris角点和SIFT图像局部特征定量化数据描述的互补优势,提出了图像分块Harris?SIFT特征匹配方法。将原图像分割成子图像块,根据子块的可变阈值检测多尺度Harris角点,并对其进行迭代精化,使其收敛到真值,然后生成定量化的特征矢量。匹配应用双向最近邻算法并用RANSAC去除误匹配。通过仿真验证,这种方法增强了角点提取的鲁棒性,提高了匹配速度和精度。

关键词: 图像分块; Harris?SIFT; 迭代精化; 特征匹配

中图分类号: TN919?34; TP391 文献标识码: A 文章编号: 1004?373X(2013)22?0073?03

0 引 言

在图像局部区域提取出的特征如边缘线、角点等称为局部特征。其对仿射、旋转、光照等变化具有不变性。将局部特征应用于图像配准,具有广泛的应用领域,例如图像拼接、运动目标检测、模式识别等。Harris角点作为当前效果最好应且应用最多的角点[1?2],具有局部特征的若干不变性。利用高斯滤波,Mikolajczyk实现了Harris角点的尺度不变性[3?4]。Lowe于2004年提出完善的SIFT算法[5?6],为了能够使特征点的匹配测度更准确,对其进行定量化的描述从而生成特征矢量[5?6]。其作为特征点与匹配的桥梁,实现了图像的精确匹配。本文先将原图像分割成子图像块,利用分块阈值避免因图像灰度不均匀造成的角点漏检;结合Harris角点和SIFT定量化数据描述,获得稳定的特征矢量,保证了特征匹配的速度、精度和鲁棒性。仿真验证,这种特征匹配方法能够取得很好的仿真效果。

1 角点检测

1.1 图像分块

图像分块是本文在角点检测前的第一步,目的是为改变整幅图像角点响应单一阈值的影响,在各图像子块中设定分块阈值,使提取的角点分布均匀合理,充分反应图像整体结构[7]。可以选择图像块大小固定和块数固定的方法对图像进行分块。采用子块大小固定的方法,可以按照图像的灰度纹理分布,合理选择子块的大小,保证灰度不同的各子块根据不同阈值合理提取角点。但是,这种方法容易造成越界分块。本文用固定块数的方法,去除上述的越界分块[7]。完成图像分块后,每一个子图像块都有独自的灰度分布和纹理。在1.2节中进行角点响应阈值选择时,采用最大响应值的比例,这样[i]子块的阈值定义为[βRimax]。在每一子图像块中有不同阈值,可以检测出各子块征相对显著的角点,保证了检测的角点充分反应图像整体结构。

1.2 角点提取

高斯尺度空间是应用不同尺度的高斯滤波器对图像进行滤波,获得相应的尺度高斯图像[3]。

高斯核[4]:

判断R在角点邻域内是否为极大值并进行筛选,提取Harris位置空间角点[3]。式(4),式(5)中[TR]为角点响应阈值,本文用自适应阈值[TR=βRmax],[β]为可以设定的常数,本文仿真取[β=0.2。]在整幅图像中,[Rmax]固定,而图像灰度纹理不同,要使提取的角点分布均匀且合理,必须采用变化的阈值。为此,本文首先对图像进行分块,则第[i]块图像阈值为[TiR=βRimax],这样就可以应用子块的阈值。最后,进行拉普拉斯响应值[4]计算,判断Harris位置空间角点:

1.3 迭代精化

数字化的图像是作为离散数据来处理的,这样在对响应R判断时[Rmax]可能被拒绝,为使提取的角点收敛到其真值,采用迭代的方法进行处理,由上文得到初始点集[(x,σI)],进行精化迭代运算[4]:

用上式进行筛选,拒绝不满足式(10)的点;最后若[σ(k+1)I≠σ(k)I],并且[σ(k+1)I≠σ(k)I],转到(1)。对于数字化的图像来说,在不同的尺度上进行检测,可能会得到不同的角点位置。通过迭代精化运算,这些不同的位置将逐渐收敛一致。

2 特征矢量及匹配

2.1 角点定量化描述

为了使生成的特征矢量具有旋转不变性,首先要确定角点主方向和辅助方向[8]。计算角点邻域的梯度幅值和方向。

根据幅值统计梯度方向的直方图。在这个局部区域内,距离角点更近的点更能反应图像的结构,因此,在直方图统计时,对其进行高斯加权,使角点附近的点的幅值和方向有较大比例,消除仿射造成的角点不稳定[8]问题。根据划分的区域和方向范围,生成128维的特征向量[5?6,8]。根据区域的不同用高斯函数加权处理,保证角点附近的区域方向具有更大的比重。为增强特征矢量对光照、仿射等变化适应性,对其进行归一化。为增强特征矢量的鉴别性[5?6,8],截断其中值大于0.2的,重新进行归一化。

2.2 匹配策略

对已有的角点特征矢量,采用双向匹配策略,以欧式距离作为特征向量的相似性测度,对已生成的两个角点特征向量进行匹配。最后,应用RANSAC方法[9?10]去除误匹配,保证角点特征匹配的精度。

3 实验结果与分析

采用256×320实验图像,在Intel Core i5,3.1 GHz CPU,4.0 Gb RAM的PC机上用MATLAB语言程序实现本文方法。对分块阈值在本文方法中对角点检测的影响进行了实验分析,同时对本文提出的分块阈值Harris?SIFT与SIFT算法的匹配性能进行了仿真比较分析。

3.1 分块阈值对角点的影响

无分块阈值的Harris?SIFT算法、本文提出的算法和SIFT算法检测图像特征点分别如图1~图3所示。

图1,图2比较,图1检测到的角点较少,分布不均匀,图2角点均匀合理。可以得出,加入分块阈值,改变了整幅图像的单一阈值[Rmax],增加子图像块阈值[Rimax],使角点检测更准确,充分反应图像整体结构。

图2,3比较,图2Harris角点均匀合理,充分反应图像结构。图3特征点随图像灰度纹理变化较大,分布不均,且大都不是角点。

3.2 本文算法与SIFT算法性能比较

通过特征匹配和去除误匹配得到匹配结果如图4,比较本文算法与SIFT算法的配准效果见表1。

由实验结果可见,SIFT算法中DOG算子和卷积用时间长。本文算法先检测多尺度Harris角点,计算量小,提取特征点数相对较少,减少了描述角点消耗的时间,图像配准速度提高了19.2%。加入分块阈值,使本文提出的角点均匀合理,配准精度比SIFT算法提高了1.4%。

4 结 语

经过Matlab仿真验证,分块阈值改变了图像角点响应单一阈值的影响,使本文算法中的角点检测在图像中分布合理,充分反应图像的整体结构。并且本文算法结合了Harris角点和SIFT对图像局部结构特征定量化数据描述的互补优势,既减少了配准时间,又提高了配准的精度。但是本文算法比较SIFT,也没有解决角点受仿射变化的影响,下一步需要研究Harris角点的仿射不变性。

参考文献

[1] SCHIMID C, MOHR R, BAUCKHAGE C. Evaluation of interest point detectors [J] International Journal on Computer Vision, 2004, 37(2): 151?172.

[2] HARRIS C, STEPHENS M. A combined corner and edge detector [C]// Proceedings of 4th Alvey Vision Conference. UK: University of Manchester, 1988: 147?151.

[3] MIKOLAJCZYK K. Scale & affine invariant interest point detectors [J]. International Journal on Computer Vision, 2004, 60(1): 63?86.

[4] LINDEBERG T. Scale?space theory in computer vision [M]. Stockholm, Sweden: Kluwer Aademic Publishers, 1994.

[5] LOWE D G. Distinctive image features from scale?invariant keypoints [J]. International Journal of Computer Vision, 2004, 60(2): 91?110.

[6] LOWE D G. Object recognition from local scale?invariant features [C]// Proceedings of the International Conference on Computer Vision. Kerkyra; ICCV, 1999, 2: 1150?1157.

[7] 张登荣,刘辅兵,俞乐.基于Harris操作数的遥感影像自适应特征提取方法[J].国土资源遥感,2006(2):60?63.

[8] LI Can?lin, MA Li?zhuang. A new framework for feature descriptor based on SIFT [J]. Patter Recognition Letters, 2009, 30(1): 544?557.

[9] YANG Shao?wen, WANG Chieh?Chih, CHANG Chun?hua. RANSAC matching: simultaneous registration and segmentation [C]// 2010 IEEE International Conference on Robotics and Automation. Anchorage, AK: IEEE, 2010: 1905?1912.

[10] 王永明,王贵锦.图像局部不变性特征与描述[M].北京:国防工业出版社,2010.

上一篇:一种多方法融合的软件成本估算改进方法 下一篇:部分遮挡目标的稳健局部特征点提取方法