CN103065291A - 基于提升小波变换和像素区域相关性的图像融合方法 - Google Patents
基于提升小波变换和像素区域相关性的图像融合方法 Download PDFInfo
- Publication number
- CN103065291A CN103065291A CN2012105737814A CN201210573781A CN103065291A CN 103065291 A CN103065291 A CN 103065291A CN 2012105737814 A CN2012105737814 A CN 2012105737814A CN 201210573781 A CN201210573781 A CN 201210573781A CN 103065291 A CN103065291 A CN 103065291A
- Authority
- CN
- China
- Prior art keywords
- band
- coefficient
- fusion
- frequency sub
- fusion coefficients
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Image Analysis (AREA)
- Image Processing (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
本发明公开了一种基于提升小波变换和像素区域相关性的图像融合方法,包括以下步骤:提升小波变换;低频子带融合系数的计算;高频子带融合系数的计算;低频、高频子带的系数融合;小波逆变换。本发明对于低频子带的每个系数,根据其自相关特征,通过比较其协方差相关系数来确定融合系数。对于高频子带的每个系数,根据其所在子带内系数分布的方向特征,以及其所在同一方向子带间的系数分布的四叉树结构特征,通过比较其子带内方向邻域的匹配度和子带间四叉树结构的匹配度,从而确定其融合系数。测试结果表明本发明的融合方法适用于多聚焦图像和医学图像的融合。
Description
技术领域
本发明属于数字图像处理方法,尤其涉及一种可提高多聚焦图像和医学图像融合质量的基于提升小波变换和像素区域相关性的图像融合方法。
背景技术
图像融合是以图像为研究对象的信息融合,它是把对同一目标或场景经不同传感器获得的不同图像,或者经同一传感器通过不同的成像方式或在不同时间获得的不同图像,融合成一幅图像的过程。与原图像相比,新的图像能反映多重原始图像的信息,是对目标和场景的综合描述,进而更适合视觉感知或计算机处理。图像融合作为一门综合了传感器、信号处理、图像处理和人工智能等技术的新兴学科,其应用领域遍及机场导航、对地观测、智能交通、地理信息系统、安全监控、医疗诊断等众多领域。
图像融合通常可分为三种类型,即像素级图像融合、特征级图像融合和决策级图像融合。像素级融合是直接作用于图像像素点的最底层融合,它不仅有简单快速的特点,也是特征级图像融合和决策级图像融合的基础。因此,对于像素级图像融合的研究具有很好的应用价值和理论意义。
自上世纪90年代以来,由于小波变换在图像处理领域的广泛应用,众多学者对基于小波的像素级图像融合算法展开了广泛的研究。小波变换是一种多分辨率、多尺度的时频局部化分析工具,符合人眼视觉系统处理图像信号的特点,它不仅可以提取不同尺度上的显著特征,而且能够利用人眼对不同方向的高频分量具有不同分辨率这一特性,获得视觉效果更佳的融合图像。因此,小波变换用于图像融合的可行性得到了广泛的认同,并且被成功地应用于图像融合领域。
对于图像融合方法,融合规则和融合算子的选择是当前研究的热点和难点。按照融合规则和融合算子的不同,现有多种基于小波的图像融合方法,如加权平均的图像融合方法和区域图像融合方法等。前者通过对小波变换后的低频子带系数和高频子带系数进行加权得出融合系数,简单直观、适合实时处理。但是,其不足之处在于:只是将待融合系数进行孤立的加权处理,却忽略了相邻小波系数间的区域相关性,进而导致融合精度的降低;后者对于待融合图像的低频子带小波系数采用加权平均的融合规则,而对于高频子带系数则通过对系数区域特征的比较和判断,进而确定高频融合系数。这类方法有效地利用了同一子带内小波系数的局部相关性,相比于加权平均的图像融合方法具有较强的捕捉高频子带边缘系数的能力,取得了较好的融合效果。但是还存在着以下不足:第一,图像经小波变换后的低频系数集中了原图像的大部分能量,对低频系数采用加权平均融合规则会影响融合图像的质量;第二,所有高频子带的待融合系数均通过比较高频系数的区域特征来确定融合系数,然而各个高频子带内的相邻系数分布呈现出明显的方向特征,若融合过程中对八邻域系数同等对待,难免也会降低融合精度。
发明内容
本发明是为了解决现有技术所存在的上述技术问题,提供一种可提高多聚焦图像和医学图像融合质量的基于提升小波变换和像素区域相关性的图像融合方法。
本发明的技术解决方案是:一种基于提升小波变换和像素区域相关性的图像融合方法,其特征在于按如下步骤进行:
a. 将待融合的两幅图像分别进行相同级数的提升方案小波变换;
b. 获得低频子带的所有融合系数:
,
b.7遍历所有低频子带系数,重复执行b.1~b.6,最终获得低频子带的所有融合系数;
c. 获得高频子带的所有融合系数:
c.1对于高频子带的每一个系数,按照方向模板,用下述公式计算待融合系数的方向邻域匹配度:
c.2对于高频子带的每一个系数,利用如下公式计算待融合系数所在四叉树结构的匹配度:
c.3对于待融合图像高频子带的同一位置的系数,比较其方向邻域匹配度和四叉树结构的匹配度的大小,进而确定融合算子,即若方向邻域的匹配度大,则转入c.4;若四叉树结构的匹配度大,则执行转入c.5;
c.6按照上述步骤,重复执行b.1~b.5,最终获得高频子带的所有融合系数f(x,y);
d.按低频子带融合规则对b步骤所获得的低频子带的所有融合系数进行融合,进而获得低频子带融合系数;按高频子带融合规则对c步骤所获得的高频子带的所有融合系数进行融合,获得高频子带融合系数;
e. 对所得到的低频子带融合系数和高频子带融合系数进行提升方案小波的逆变换,进而获得融合图像。
本发明首先对于每个低频系数,通过比较其协方差相关系数,进而确定融合系数;其次,对于每个高频系数,根据其所在子带内系数分布的方向特征,以及其所在同一方向子带间的系数分布的四叉树结构特征,通过比较其子带内方向邻域的匹配度和子带间树型结构的匹配度,进而自适应地选取融合规则确定融合系数。实验结果表明,用信息熵、平均梯度、峰值信噪比和均方根误差等标准来评价,本发明对于多聚焦图像和医学图像可获得比现有方法更高的融合质量。
与现有技术相比,本发明具有以下有益效果:第一,由于利用了待融合低频系数的自相关特性,与加权平均融合规则相比,本发明的融合规则能更准确、有效地确定低频融合系数;第二,通过结合高频系数的方向特征和树型结构特征,本发明的高频系数融合规则比传统融合规则获得更丰富、视觉质量更高的纹理细节。
附图说明
图2为本发明实施例的总体过程图。
图3为本发明实施例与现有技术多聚焦图像融合结果比较示意图。
图4为本发明实施例与现有技术医学图像融合结果比较示意图。
具体实施方式
如图2所示:
a. 将待融合的两幅图像(原始图像1和原始图像2)分别进行相同级数的提升方案小波变换;
b. 获得低频子带的所有融合系数:
b.1对于每个待融合的低频系数,计算每幅待融合图像对应位置上低频系数的八邻域方差:
b.7遍历所有低频子带系数,重复执行重复执行b.1~b.6,最终获得低频子带的所有融合系数;
c. 获得低频子带的所有融合系数:
c.1对于高频子带的每一个系数,按照附图1所示的方向模板,用下述公式计算待融合系数的方向邻域匹配度:
,
c.2对于高频子带的每一个系数,利用如下公式计算待融合系数所在四叉树结构的匹配度:
c.3对于待融合图像高频子带的同一位置的系数,比较其方向邻域匹配度和四叉树结构的匹配度的大小,进而确定融合算子,即若方向邻域的匹配度大,则转入c.4;若四叉树结构的匹配度大,则执行转入c.5;
c.6按照上述步骤,重复执行b.1~b.5,最终获得高频子带融合系数f(x,y);
d.按低频子带融合规则对b步骤所获得的低频子带的所有融合系数进行融合,进而获得低频子带融合系数低频子带的融合);按高频子带融合规则对c步骤所获得的高频子带的所有融合系数进行融合,获得高频子带融合系数(对各方向高频子带的融合);
e. 对所得到的低频子带融合系数和高频子带融合系数进行提升方案小波的逆变换,进而获得融合图像。
本发明系统测试参数设置和测试结果:
本发明选取了Daubechies 9/7双正交小波的低通滤波器,设置=0.95。测试图像包括聚焦点不同的两幅Lena标准图像(256×256像素)、Clock标准图像(512×512像素)和Pepsi标准图像(512×512像素)。对测试结果用信息熵、清晰度、峰值信噪比(PSNR)和均方根误差(RMSE)对融合结果加以定量评价,并与基于加权平均的图像融合方法和基于区域能量的图像融合方法的结果进行比较。图3和图5为多聚焦图像和医学图像的融合结果图像。
本发明实施例与现有技术的多聚焦图像融合结果的定量分析如表1。
表1
本发明实施例与现有技术的医学图像融合结果的定量分析如表2。
表2
Claims (1)
1.一种基于提升小波变换和像素区域相关性的图像融合方法,其特征在于按如下步骤进行:
a. 将待融合的两幅图像分别进行相同级数的提升方案小波变换;
b. 获得低频子带的所有融合系数:
,
b.7遍历所有低频子带系数,重复执行b.1~b.6,最终获得低频子带的所有融合系数;
c. 获得高频子带的所有融合系数:
c.1对于高频子带的每一个系数,按照方向模板,用下述公式计算待融合系数的方向邻域匹配度:
c.2对于高频子带的每一个系数,利用如下公式计算待融合系数所在四叉树结构的匹配度:
c.3对于待融合图像高频子带的同一位置的系数,比较其方向邻域匹配度和四叉树结构的匹配度的大小,进而确定融合算子,即若方向邻域的匹配度大,则转入c.4;若四叉树结构的匹配度大,则执行转入c.5;
c.6按照上述步骤,重复执行b.1~b.5,最终获得高频子带的所有融合系数f(x,y);
d.按低频子带融合规则对b步骤所获得的低频子带的所有融合系数进行融合,进而获得低频子带融合系数;按高频子带融合规则对c步骤所获得的高频子带的所有融合系数进行融合,获得高频子带融合系数;
e. 对所得到的低频子带融合系数和高频子带融合系数进行提升方案小波的逆变换,进而获得融合图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012105737814A CN103065291A (zh) | 2012-12-26 | 2012-12-26 | 基于提升小波变换和像素区域相关性的图像融合方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012105737814A CN103065291A (zh) | 2012-12-26 | 2012-12-26 | 基于提升小波变换和像素区域相关性的图像融合方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103065291A true CN103065291A (zh) | 2013-04-24 |
Family
ID=48107908
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012105737814A Pending CN103065291A (zh) | 2012-12-26 | 2012-12-26 | 基于提升小波变换和像素区域相关性的图像融合方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103065291A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104077762A (zh) * | 2014-06-26 | 2014-10-01 | 桂林电子科技大学 | 一种基于nsst与聚焦区域检测的多聚焦图像融合方法 |
CN105894483A (zh) * | 2016-03-30 | 2016-08-24 | 昆明理工大学 | 一种基于多尺度图像分析和块一致性验证的多聚焦图像融合方法 |
CN107507121A (zh) * | 2017-07-25 | 2017-12-22 | 天津大学 | 基于变分图像分解的数字图像加密及隐藏方法 |
CN109726748A (zh) * | 2018-12-21 | 2019-05-07 | 长沙理工大学 | 一种基于频带特征融合的gl-cnn遥感图像场景分类方法 |
CN109816618A (zh) * | 2019-01-25 | 2019-05-28 | 山东理工大学 | 一种基于自适应阈值的区域能量光子计数图像融合算法 |
CN111583167A (zh) * | 2020-05-14 | 2020-08-25 | 山东大学第二医院 | 用于钬激光的碎石的图像融合方法 |
CN112866722A (zh) * | 2021-01-06 | 2021-05-28 | 湖南遥昇通信技术有限公司 | 一种基于加权滤波函数的小波变换和逆变换方法及设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006017233A1 (en) * | 2004-07-12 | 2006-02-16 | Lehigh University | Image fusion methods and apparatus |
CN1822046A (zh) * | 2006-03-30 | 2006-08-23 | 上海电力学院 | 基于区域特征模糊的红外与可见光图像融合方法 |
CN102063713A (zh) * | 2010-11-11 | 2011-05-18 | 西北工业大学 | 基于邻域归一化梯度和邻域标准差的多聚焦图像融合方法 |
CN102637297A (zh) * | 2012-03-21 | 2012-08-15 | 武汉大学 | 一种基于Curvelet变换的可见光与红外图像融合方法 |
-
2012
- 2012-12-26 CN CN2012105737814A patent/CN103065291A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006017233A1 (en) * | 2004-07-12 | 2006-02-16 | Lehigh University | Image fusion methods and apparatus |
CN1822046A (zh) * | 2006-03-30 | 2006-08-23 | 上海电力学院 | 基于区域特征模糊的红外与可见光图像融合方法 |
CN102063713A (zh) * | 2010-11-11 | 2011-05-18 | 西北工业大学 | 基于邻域归一化梯度和邻域标准差的多聚焦图像融合方法 |
CN102637297A (zh) * | 2012-03-21 | 2012-08-15 | 武汉大学 | 一种基于Curvelet变换的可见光与红外图像融合方法 |
Non-Patent Citations (2)
Title |
---|
周志光等: ""一种基于小波系数区域特征的图像融合算法"", 《计算机科学》 * |
王相海等: ""基于小波系数方向特性的图像融合新算法"", 《吉林师范大学学报(自然科学版)》 * |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104077762A (zh) * | 2014-06-26 | 2014-10-01 | 桂林电子科技大学 | 一种基于nsst与聚焦区域检测的多聚焦图像融合方法 |
CN105894483A (zh) * | 2016-03-30 | 2016-08-24 | 昆明理工大学 | 一种基于多尺度图像分析和块一致性验证的多聚焦图像融合方法 |
CN105894483B (zh) * | 2016-03-30 | 2018-08-31 | 昆明理工大学 | 一种基于多尺度图像分析和块一致性验证的多聚焦图像融合方法 |
CN107507121A (zh) * | 2017-07-25 | 2017-12-22 | 天津大学 | 基于变分图像分解的数字图像加密及隐藏方法 |
CN109726748A (zh) * | 2018-12-21 | 2019-05-07 | 长沙理工大学 | 一种基于频带特征融合的gl-cnn遥感图像场景分类方法 |
CN109726748B (zh) * | 2018-12-21 | 2020-10-09 | 长沙理工大学 | 一种基于频带特征融合的gl-cnn遥感图像场景分类方法 |
CN109816618A (zh) * | 2019-01-25 | 2019-05-28 | 山东理工大学 | 一种基于自适应阈值的区域能量光子计数图像融合算法 |
CN111583167A (zh) * | 2020-05-14 | 2020-08-25 | 山东大学第二医院 | 用于钬激光的碎石的图像融合方法 |
CN111583167B (zh) * | 2020-05-14 | 2022-06-07 | 山东大学第二医院 | 用于钬激光的碎石的图像融合方法 |
CN112866722A (zh) * | 2021-01-06 | 2021-05-28 | 湖南遥昇通信技术有限公司 | 一种基于加权滤波函数的小波变换和逆变换方法及设备 |
CN112866722B (zh) * | 2021-01-06 | 2024-03-22 | 湖南遥昇通信技术有限公司 | 一种基于加权滤波函数的小波变换和逆变换方法及设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103065291A (zh) | 基于提升小波变换和像素区域相关性的图像融合方法 | |
CN106504222B (zh) | 一种基于仿生视觉机理的水下偏振图像融合系统 | |
Yin et al. | A novel image fusion algorithm based on nonsubsampled shearlet transform | |
CN107369159B (zh) | 基于多因素二维灰度直方图的阈值分割方法 | |
CN107292851B (zh) | 一种基于伪3d变换的bm3d图像降噪方法 | |
CN101777181B (zh) | 基于脊波双框架系统的sar图像机场跑道提取方法 | |
CN101873440B (zh) | 基于Surfacelet变换的红外与可见光视频图像融合方法 | |
CN104994375A (zh) | 一种基于立体视觉显著性的立体图像质量客观评价方法 | |
CN104268833B (zh) | 基于平移不变剪切波变换的图像融合方法 | |
CN102063715A (zh) | 基于nsct和粒子群优化算法的台风云图融合方法 | |
CN109191416A (zh) | 基于稀疏字典学习和剪切波的图像融合方法 | |
CN111145134A (zh) | 基于块效应的微透镜光场相机全聚焦图像生成算法 | |
CN102750705A (zh) | 基于图像融合的光学遥感图像变化检测 | |
CN102096913B (zh) | 压缩感知框架下的多策略图像融合方法 | |
CN109509163A (zh) | 一种基于fgf的多聚焦图像融合方法及系统 | |
CN105550981A (zh) | 一种基于Lucas-Kanade算法的图像配准和拼接方法 | |
CN101216936A (zh) | 基于成像机理与非采样Contourlet变换多聚焦图像融合方法 | |
Zhang et al. | Single image dehazing based on fast wavelet transform with weighted image fusion | |
Junwu et al. | An infrared and visible image fusion algorithm based on LSWT-NSST | |
CN106530277B (zh) | 一种基于小波方向相关系数的图像融合方法 | |
Lijun et al. | Geo‐information mapping improves Canny edge detection method | |
CN103310482B (zh) | 一种三维重建方法及系统 | |
CN102663749A (zh) | 基于相位信息的超声图像病灶分割技术 | |
Selvaraj et al. | Infrared and visible image fusion using multi‐scale NSCT and rolling‐guidance filter | |
Li et al. | A novel medical image fusion approach based on nonsubsampled shearlet transform |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20130424 |