CN106683040B - 一种基于ncc算法的红外全景图像拼接方法 - Google Patents
一种基于ncc算法的红外全景图像拼接方法 Download PDFInfo
- Publication number
- CN106683040B CN106683040B CN201611052420.XA CN201611052420A CN106683040B CN 106683040 B CN106683040 B CN 106683040B CN 201611052420 A CN201611052420 A CN 201611052420A CN 106683040 B CN106683040 B CN 106683040B
- Authority
- CN
- China
- Prior art keywords
- image
- template
- similarity metric
- metric value
- clustered
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000010586 diagram Methods 0.000 claims description 7
- 241001235534 Graphis <ascomycete fungus> Species 0.000 claims 1
- 238000004364 calculation method Methods 0.000 abstract description 8
- 230000007547 defect Effects 0.000 abstract description 2
- 238000003384 imaging method Methods 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 238000012544 monitoring process Methods 0.000 description 4
- 238000009529 body temperature measurement Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 102100029469 WD repeat and HMG-box DNA-binding protein 1 Human genes 0.000 description 1
- 101710097421 WD repeat and HMG-box DNA-binding protein 1 Proteins 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000013021 overheating Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/14—Transformations for image registration, e.g. adjusting or mapping for alignment of images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- Studio Devices (AREA)
Abstract
本发明提供一种基于NCC算法的红外全景图像拼接方法,该方法是对现有NCC方法的改进,改进后的方法通过对模板图像进行灰度聚类,使得图像特征弱化,进而大幅减少运算量;使用差分求和法确定聚类图像在检索范围内的最大相似性度量值能够使得计算量大幅度下降,从而提高运算速度;在进行模板匹配时,只需检索原始图像的部分区域就可计算出图像的大致重叠区域,消除NCC算法进行模板匹配的过程中需要对每次模板移动进行相似性计算,从而克服出现模板移动过程中重叠区域的重复计算和模板像素特征数过多造成匹配过程的冗余计算的缺点,进而提高红外全景图像的拼接速度。
Description
技术领域
本发明涉及图像拼接技术领域,尤其涉及一种基于NCC算法的红外全景图像拼接方法。
背景技术
在生活中时常发生停电事故,而在众多的停电事故中,电力设备局部过热引起的故障时有发生,为防止故障时常发生,需要对电力设备温度进行监测管理。近年来,随着大面阵红外焦平面技术的发展,国内外很多电力系统均配备了红外热像仪,通过对红外热像仪的检测能够测量电力设备的温度。由于红外热像仪只能通过人工方式对电力设备进行逐点温度测量,操作冗长,且测量数据存储在测温仪的存储卡里,对设备的工作状况依靠人为判断,甚至两次巡检之间的时间段则是完全的监测真空,因而采用红外热像仪进行温度检测具有很大局限性。
红外全景式成像是指采用特殊的成像装置获得周围360度全景视场,是建立在立体的多角度、全方位场景中的成像信息组织模式。红外全景式成像能够应用于红外探测器件和图像处理技术,进而能够应用于电力设备的测温。在使用红外全景式成像测量电力设备温度时,采用旋转拼接优化设计红外全景成像系统,进而提高红外全景监测的范围及温度测量精度,实现对电网设备的实时、在线监测及故障预警,保证电力设备的安全运行,减少停电检修时间、次数。
红外全景式成像对周围360度全景视场,形成多张红外全景图片。为实现对电力设备周围的全局连续检测,需要对红外全景图片进行拼接。现有的红外全景图片拼接方法通常需要对两幅图片全部像素进行特征提取和匹配,在匹配的过程中通常会产生无法匹配的现象,且拼接时间耗时较长,大大降低检测效率。
发明内容
本发明提供一种基于NCC算法的红外全景图像拼接方法,以解决现有的红外全景图片拼接方法拼接时间耗时较长的问题。
本发明提供一种基于NCC算法的红外全景图像拼接方法,所述方法包括:
设定相似度阈值和模板N×N,检索区域为矩形;
在第一图中以模板坐标建立模板图像,对所述模板图像进行灰度聚类,得到聚类图像;
所述聚类图像在第二图中的所述检索区域内移动,以进行模板匹配;
根据差分求和确定所述多值域模板匹配的最大相似性度量值及相应的所述聚类图像位置;
根据差分求和确定所述聚类图像在横向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的横坐标;
根据差分求和确定所述聚类图像在纵向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的纵坐标;
根据所述横坐标、所述纵坐标和所述模板坐标确定图像重叠区域;
将所述图像重叠区域进行拼接。
优选地,在第一图中以模板坐标建立模板图像,对所述模板图像进行灰度聚类得到聚类图像包括:
根据多值域模板匹配算法对所述模板图像进行灰度聚类得到聚类图像。
优选地,所述聚类图像在第二图中的所述检索区域内移动,以进行模板匹配包括:
优选地,根据差分求和确定所述多值域模板匹配的最大相似性度量值及相应的所述聚类图像位置包括:
根据差分求和计算所述模板匹配的相似性度量值;
记录所述模板匹配的相似性度量值及相应的所述聚类图像位置;
判断所述相似性度量值是否大于所述相似度阈值;
若所述相似性度量值小于或等于所述相似度阈值,则更改所述聚类图像在第二图中的所述检索区域,直到所述相似性度量值大于所述相似度阈值;
若所述相似性度量值大于所述相似度阈值,则确定最大相似性度量值及其相应的所述聚类图像位置。
本发明的实施例提供的技术方案可以包括以下有益效果:
本发明提供一种基于NCC算法的红外全景图像拼接方法,所述方法包括:设定相似度阈值和模板N×N,检索区域为矩形;在第一图中以模板坐标建立模板图像,对所述模板图像进行灰度聚类,得到聚类图像;所述聚类图像在第二图中的所述检索区域内移动,以进行模板匹配;根据差分求和确定所述多值域模板匹配的最大相似性度量值及相应的所述聚类图像位置;所述聚类图像以与所述最大相似性度量值相应的所述聚类图像位置为中心在范围内进行横向移动,以进行模板匹配;根据差分求和确定所述聚类图像在横向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的横坐标;所述聚类图像以在所述横向移动范围内确定的所述最大相似性度量值相应的所述聚类图像位置为中心在范围内进行纵向移动,以进行模板匹配;根据差分求和确定所述聚类图像在纵向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的纵坐标;根据所述横坐标、所述纵坐标和所述模板坐标确定图像重叠区域;将所述图像重叠区域进行拼接。本发明提供的基于NCC算法的红外全景图像拼接方法是对现有NCC 方法的改进,改进后的方法通过对模板图像进行灰度聚类,使得图像特征弱化,进而大幅减少运算量;使用差分求和法确定聚类图像在检索范围内的最大相似性度量值能够使得计算量大幅度下降,从而提高运算速度;在进行模板匹配时,只需检索原始图像的部分区域就可计算出图像的大致重叠区域,进而提高红外全景图像的拼接速度。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的基于NCC算法的红外全景图像拼接方法流程示意图;
图2为本发明实施例提供的基于NCC算法的红外全景图像拼接方法中重叠区域示意图;
图3为本发明实施例提供的基于NCC算法的红外全景图像拼接方法中检索区域示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
请参考附图1,附图1示出了本发明实施例提供的基于NCC(Normalized CrossCorrelation method,归一化互相关算法)算法的红外全景图像拼接方法流程示意图,下述具体实施例的描述均以附图1为基础。
本发明实施例提供了一种基于NCC算法的红外全景图像拼接方法,该方法包括:
S01:设定相似度阈值和模板N×N,检索区域为矩形;
S02:在第一图中以模板坐标建立,对所述模板图像进行灰度聚类,得到聚类图像;
S03:所述聚类图像在第二图中的所述检索区域内移动,以进行模板匹配;
S04:根据差分求和确定所述多值域模板匹配的最大相似性度量值及相应的所述聚类图像位置;
S06:根据差分求和确定所述聚类图像在横向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的横坐标;
S08:根据差分求和确定所述聚类图像在纵向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的纵坐标;
S09:根据所述横坐标、所述纵坐标和所述模板坐标确定图像重叠区域;
S10:将所述图像重叠区域进行拼接。
具体的:
S01:设定相似度阈值和模板N×N,检索区域为矩形;
请参考附图2,附图2示出了本发明实施例提供的基于NCC算法的红外全景图像拼接方法中重叠区域示意图。在附图2中,左图为第一图,右图为第二图,两图像具有相同的高度及宽度,其中,第一图和第二图中均有灰度的区域为重叠区域。
S02:在第一图中以模板坐标建立模板图像,对所述模板图像进行灰度聚类,得到聚类图像;
S03:灰度聚类后的所述聚类图像在第二图中的所述检索区域内移动,以进行模板匹配;
S04:根据差分求和确定所述多值域模板匹配的最大相似性度量值及相应的所述聚类图像位置;
根据差分求和计算模板匹配的相似性度量值,其中,差分求和的计算公式为:
F1(x)=f1(x)-f1(x+1)
F2(x)=F2(x-1)+f2(x)
F2(0)=0f1(K+1)=0
其中,表示原图像的卷积运 算,表示差分运算,x表示
像素索引,k表示像素总数,K表示运算次数。由于聚类图像的邻域像素值相差不大,差分后
会出现大量的0、1、-1现象,乘积运算量会大幅下降,进而提高运算速度。
记录模板匹配的相似性度量值及相应的聚类图像所处的位置。判断相似性度量值是否大于相似度阈值threshold;若相似性度量值小于或等于相似度阈值threshold,则更改聚类图像在第二图中的检索区域为其中,i表示更改检索区域的次数,直到相似性度量值大于相似度阈值threshold;若相似性度量值大于相似度阈值threshold,则选取相似性度量值中的最大值为最大相似性度量值,并记录与最大相似性度量值相应的聚类图像位置。
S06:根据差分求和确定所述聚类图像在横向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的横坐标;
S08:根据差分求和确定所述聚类图像在纵向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的纵坐标;
根据差分求和计算聚类图像在纵向移动范围内的相似性度量值,并确定相似性度量值中的最大值为最大相似性度量值,记录此时聚类图像中心的纵坐标为ybest。
S09:根据所述横坐标、所述纵坐标和所述模板坐标确定图像重叠区域;
S10:将所述图像重叠区域进行拼接。
本发明提供的基于NCC算法的红外全景图像拼接方法是对现有NCC方法的改进,改进后的方法通过对模板图像进行灰度聚类,使得图像特征弱化,进而大幅减少运算量;使用差分求和法确定聚类图像在检索范围内的最大相似性度量值能够使得计算量大幅度下降,从而提高运算速度;在进行模板匹配时,只需检索原始图像的部分区域就可计算出图像的大致重叠区域,消除传统的NCC算法进行模板匹配的过程中需要对每次模板移动进行相似性计算,从而克服出现模板移动过程中重叠区域的重复计算和模板像素特征数过多造成匹配过程的冗余计算的缺点,进而提高红外全景图像的拼接速度。在重叠区域查找的过程中仅对相近区域进行查找,提高重叠区域的查找实时性,进而提高两幅红外全景图像的拼接速度。
本领域技术人员在考虑说明书及实践这里发明的公开后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。
Claims (3)
1.一种基于NCC算法的红外全景图像拼接方法,其特征在于,所述方法包括:
设定相似度阈值和模板N×N,检索区域为矩形;
在第一图中以模板坐标建立模板图像,对所述模板图像进行灰度聚类,得到聚类图像;
所述聚类图像在第二图中的所述检索区域内移动,以进行模板匹配;
根据差分求和确定多值域模板匹配的最大相似性度量值及相应的所述聚类图像位置;
根据差分求和确定所述聚类图像在横向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的横坐标;
根据差分求和确定所述聚类图像在纵向移动范围内的最大相似性度量值,记录相应的所述聚类图像中心的纵坐标;
根据所述横坐标、所述纵坐标和所述模板坐标确定图像重叠区域;
将所述图像重叠区域进行拼接;
其中,N分别表示模板的长度和宽度,imgheight表示图像高度,imgwidth表示图像宽度。
3.根据权利要求1所述的基于NCC算法的红外全景图像拼接方法,其特征在于,根据差分求和确定所述多值域模板匹配的最大相似性度量值及相应的所述聚类图像位置包括:
根据差分求和计算所述模板匹配的相似性度量值;
记录所述模板匹配的相似性度量值及相应的所述聚类图像位置;
判断所述相似性度量值是否大于所述相似度阈值;
若所述相似性度量值小于或等于所述相似度阈值,则更改所述聚类图像在第二图中的所述检索区域,直到所述相似性度量值大于所述相似度阈值;
若所述相似性度量值大于所述相似度阈值,则确定最大相似性度量值及其相应的所述聚类图像位置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611052420.XA CN106683040B (zh) | 2016-11-21 | 2016-11-21 | 一种基于ncc算法的红外全景图像拼接方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611052420.XA CN106683040B (zh) | 2016-11-21 | 2016-11-21 | 一种基于ncc算法的红外全景图像拼接方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106683040A CN106683040A (zh) | 2017-05-17 |
CN106683040B true CN106683040B (zh) | 2020-02-14 |
Family
ID=58865755
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611052420.XA Active CN106683040B (zh) | 2016-11-21 | 2016-11-21 | 一种基于ncc算法的红外全景图像拼接方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106683040B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108717684B (zh) * | 2018-04-20 | 2022-05-27 | 中南大学 | 基于阵列相机的高速水平运动物体图像序列拼接方法及系统 |
CN112529028B (zh) * | 2019-09-19 | 2022-12-02 | 北京声迅电子股份有限公司 | 一种用于安检机图像的联网接入方法及装置 |
CN112360699A (zh) * | 2020-10-22 | 2021-02-12 | 华能大理风力发电有限公司 | 一种全自动风力发电机组叶片智能巡视及诊断分析方法 |
CN113643370B (zh) * | 2021-08-24 | 2024-01-23 | 凌云光技术股份有限公司 | 一种基于ncc算法的图像定位方法与装置 |
CN115375549A (zh) * | 2022-08-30 | 2022-11-22 | 金锋馥(滁州)科技股份有限公司 | 一种多包裹分离系统多相机图像拼接算法设计 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105869120A (zh) * | 2016-06-16 | 2016-08-17 | 哈尔滨工程大学 | 一种图像拼接的实时性优化方法 |
-
2016
- 2016-11-21 CN CN201611052420.XA patent/CN106683040B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105869120A (zh) * | 2016-06-16 | 2016-08-17 | 哈尔滨工程大学 | 一种图像拼接的实时性优化方法 |
Non-Patent Citations (4)
Title |
---|
Fast Image Stitching Based on Improved SURF;Chengtao Cai等;《Proceedings of the 2016 IEEE 20th International Conference on Computer Supported Cooperative Work in Design》;20160915;第411-416页 * |
图像匹配中NCC算法的一种快速实现方法;黄真宝等;《信息化研究》;20110430;第37卷(第2期);第48-52页 * |
基于NCC的图像匹配快速算法;杨通钰等;《现代电子技术》;20101115(第22期);第107-109页 * |
基于图像点特征的拼接技术研究;周美丽等;《电子设计工程》;20150630;第23卷(第12期);第98-100页 * |
Also Published As
Publication number | Publication date |
---|---|
CN106683040A (zh) | 2017-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106683040B (zh) | 一种基于ncc算法的红外全景图像拼接方法 | |
Du et al. | Car detection for autonomous vehicle: LIDAR and vision fusion approach through deep learning framework | |
US10424075B2 (en) | Depth/disparity map post-processing method and device | |
CN111222395B (zh) | 目标检测方法、装置与电子设备 | |
US10929998B2 (en) | Method and apparatus for estimating disparity | |
CN111784633B (zh) | 一种面向电力巡检视频的绝缘子缺损自动检测算法 | |
EP3530935B1 (en) | Method and equipment for monitoring vortex-induced vibration for wind turbine generator set | |
CN110232655B (zh) | 一种用于煤场的红外-可见光双光图像拼接与融合方法 | |
CN108682039B (zh) | 一种双目立体视觉测量方法 | |
CN105631418A (zh) | 一种人数统计的方法和装置 | |
CN110853033A (zh) | 基于帧间相似度的视频检测方法和装置 | |
CN111091023B (zh) | 一种车辆检测方法、装置及电子设备 | |
CN101630407B (zh) | 基于两视几何和图分割的伪造区域定位方法 | |
CN109919247B (zh) | 危化品堆垛双目测距中特征点匹配方法、系统和设备 | |
CN115809982B (zh) | 电芯压伤检测方法、装置及系统 | |
CN111046950A (zh) | 一种图像处理方法、装置、存储介质和电子装置 | |
Buza et al. | Unsupervised method for detection of high severity distresses on asphalt pavements | |
CN110120012B (zh) | 基于双目摄像头的同步关键帧提取的视频拼接方法 | |
Li et al. | Symmnet: A symmetric convolutional neural network for occlusion detection | |
WO2022045877A1 (en) | A system and method for identifying occupancy of parking lots | |
CN117115412A (zh) | 一种基于加权得分标签分配的小目标检测方法 | |
CN110135382B (zh) | 一种人体检测方法和装置 | |
CN110896469B (zh) | 用于三摄的解像力测试方法及其应用 | |
CN116310899A (zh) | 基于YOLOv5改进的目标检测方法及装置、训练方法 | |
CN114283081B (zh) | 基于金字塔加速的深度恢复方法、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20191105 Address after: Yunda economic and Technological Development Zone in Yunnan province Kunming city 650217 West Road No. 105 Applicant after: Electric Power Research Institute of Yunnan Power System Ltd Address before: Yunda economic and Technological Development Zone in Yunnan province Kunming city 650217 West Road No. 105 Applicant before: Electric Power Research Institute of Yunnan Power System Ltd Applicant before: Harbin Engineering Univ. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |