CN106934398A - 基于超像素聚类和稀疏表示的图像去噪方法 - Google Patents
基于超像素聚类和稀疏表示的图像去噪方法 Download PDFInfo
- Publication number
- CN106934398A CN106934398A CN201710138742.4A CN201710138742A CN106934398A CN 106934398 A CN106934398 A CN 106934398A CN 201710138742 A CN201710138742 A CN 201710138742A CN 106934398 A CN106934398 A CN 106934398A
- Authority
- CN
- China
- Prior art keywords
- pixel
- super
- image block
- image
- matrix
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000000354 decomposition reaction Methods 0.000 claims abstract description 14
- 238000000605 extraction Methods 0.000 claims abstract description 10
- 238000012549 training Methods 0.000 claims abstract description 9
- 230000011218 segmentation Effects 0.000 claims abstract description 8
- 239000011159 matrix material Substances 0.000 claims description 112
- 239000013598 vector Substances 0.000 claims description 55
- 238000004422 calculation algorithm Methods 0.000 claims description 34
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 4
- 230000003595 spectral effect Effects 0.000 claims description 4
- 102000002274 Matrix Metalloproteinases Human genes 0.000 claims description 2
- 108010000684 Matrix Metalloproteinases Proteins 0.000 claims description 2
- 238000000513 principal component analysis Methods 0.000 claims description 2
- 230000000694 effects Effects 0.000 description 23
- 238000002474 experimental method Methods 0.000 description 7
- 238000012360 testing method Methods 0.000 description 7
- 241000721047 Danaus plexippus Species 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 235000002566 Capsicum Nutrition 0.000 description 1
- 239000006002 Pepper Substances 0.000 description 1
- 235000016761 Piper aduncum Nutrition 0.000 description 1
- 235000017804 Piper guineense Nutrition 0.000 description 1
- 244000203593 Piper nigrum Species 0.000 description 1
- 235000008184 Piper nigrum Nutrition 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Classifications
-
- G06T5/70—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/217—Validation; Performance evaluation; Active pattern learning techniques
- G06F18/2193—Validation; Performance evaluation; Active pattern learning techniques based on specific statistical tests
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/30—Noise filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/513—Sparse representations
Abstract
本发明提出了一种基于超像素聚类和稀疏表示的图像去噪方法,用于解决现有图像去噪方法中存在的去噪图像峰值信噪比低和细节信息丢失的技术问题,实现步骤:1.输入一幅待去噪图像;2.对图像进行超像素分割和超像素聚类,得到多簇相似超像素;3.对每簇相似超像素分别进行图像块提取和字典训练;4.计算每个图像块在对应的字典下的稀疏系数;5.寻找每个图像块的相似图像块,并计算相似图像块的稀疏系数加权和;6.利用相似图像块的稀疏系数加权和,对每个图像块的稀疏分解过程进行约束,得到新稀疏系数;7.判断当前迭代次数是否大于最大迭代次数Λ,若是,执行步骤8,否则,迭代次数加1,执行步骤5;8.重构待去噪图像,得到去噪图像。
Description
技术领域
本发明属于数字图像处理技术领域,涉及一种图像去噪方法,特别涉及一种基于超像素聚类和稀疏表示的图像去噪方法,可应用于图像分类、目标识别、边缘检测等要求对图像进行去噪预处理的场合。
背景技术
由于受到成像设备和成像环境的限制,数字图像在采集、转换或传输的过程中不可避免地受到噪声的污染。噪声的存在使得图像质量下降,并影响到后续图像处理。为了获得高质量的图像,就必须对图像进行去噪处理。因此,图像去噪在图像处理领域占据着重要的地位。
随着国内外图像去噪技术不断发展,研究人员相继提出了许多图像去噪方法。目前图像去噪方法主要分为三类:空间域去噪方法,频率域去噪方法,稀疏变换域去噪方法。空间域去噪方法主要是利用局部窗口内像素灰度值的连续性来对当前像素点的灰度值进行调整,达到去噪的目的。该类去噪方法主要包括均值滤波,中值滤波、非局部均值滤波(non-local means,NLM)等,其中最经典的是NLM算法。NLM算法通过对相似图像块做加权平均来估计参考块的中心点,从而降低噪声,虽然NLM算法相比其它空间域去噪方法,取得了较好的去噪效果,但是峰值信噪比仍然较低,同时去噪后的图像边缘、纹理区域模糊。
频率域去噪方法主要是将图像从空间域变换到频率域,再对频率域系数进行处理,最后将频率域系数反变换到空间域,得到去噪后的图像,该类去噪方法主要包括小波变换去噪方法和多尺度几何分析。小波变换去噪方法缺少方向选择性,不适宜表示图像边缘、轮廓等线性奇异性的结构特征,且过于依赖阈值的选择,导致其去噪效果差。多尺度几何分析缺乏灵活性,对不同的结构特征需要选择不同的变换,而一幅图像含有多种不同的结构。
稀疏变换域去噪方法主要通过对含噪图像进行学习,得到能够反映图像特征的字典,然后利用得到的字典对图像进行重构,从而达到去噪的目的。这类去噪方法中比较经典的方法有K-SVD算法。K-SVD算法在提取的图像块中随机选取若干图像块作为训练样本,训练得到具有数据自适应性的字典,但由于随机选取若干图像块作为训练样本的操作忽视了图像的结构特征、边缘特征和纹理特征,导致得到的字典不能对图像的这些特征进行很好地描述,并且由于训练得到的字典存在噪声,导致稀疏分解得到的稀疏系数图像信息的描述不准确,最终导致去噪图像峰值信噪比较低,边缘、纹理等细节信息丢失,图像去噪效果差。
发明内容
本发明的目的在于克服上述现有技术存在的缺陷,提出了一种基于超像素聚类和稀疏表示的图像去噪方法,用以解决现有图像去噪方法中存在的去噪图像峰值信噪比低和细节信息丢失的技术问题。
为实现上述目的,本发明采取的技术方案包括如下步骤:
步骤1,输入一幅含有标准方差为δ的高斯白噪声的图像In;
步骤2,首先设定图像In的超像素数目为R,并对图像In进行超像素分割,得到超像素集合{SPi|i=1,2,...,R},其次定义一个空的相似矩阵S,计算超像素集合{SPi|i=1,2,...,R}中每两个超像素之间的相似度,并将计算结果存储到相似矩阵S中,其中,i是超像素集合{SPi|i=1,2,...,R}中超像素的序号,SPi是超像素集合{SPi|i=1,2,...,R}中第i个超像素,i1和i2是超像素集合{SPi|i=1,2,...,R}中任意两个超像素的序号,且i1=1,2,...,R,i2=1,2,...,R,i1≠i2,是超像素集合{SPi|i=1,2,...,R}中第i1个超像素,是超像素集合{SPi|i=1,2,...,R}中第i2个超像素;
步骤3,设定类的个数为K,并利用相似矩阵S,对超像素集合{SPi|i=1,2,...,R}中的超像素进行聚类,得到相似超像素集合{Crk|k=1,2,...,K},其中k是相似超像素集合{Crk|k=1,2,...,K}中相似超像素的序号,Crk是相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素;
步骤4,对相似超像素集合{Crk|k=1,2,...,K}中每簇相似超像素分别进行重叠取块,得到K个图像块子集合,再以该K个图像块子集合中的每个图像块子集合为元素组成图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K},并将该K个图像块子集合进行合并,得到图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk},其中,{Blkt|t=1,2,...,Tk}是图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中第k个图像块子集合,t是从相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的图像块的序号,Blkt是从相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的第t个图像块,Tk是相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的图像块的数目;
步骤5,对图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合分别进行字典训练,得到字典集合{Dk|k=1,2,...,K},其中,Dk是字典集合{Dk|k=1,2,...,K}中第k个字典;
步骤6,设迭代变量为且初始化迭代变量为0,并利用字典集合{Dk|k=1,2,...,K},对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中所有图像块进行稀疏分解,得到稀疏系数集合其中,表示第次迭代时图像块Blkt的稀疏系数;
步骤7,设定选取相似图像块的数目L,为图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中的每个图像块选取L个相似图像块,并计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的L个相似图像块的稀疏系数加权和,得到加权稀疏系数集合其中,表示第次迭代时图像块Blkt的L个相似图像块的稀疏系数加权和,选取相似图像块和计算图像块对应的稀疏系数加权和的实现步骤如下:
步骤7a,计算图像块子集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中图像块Blkt与图像块子集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的其它图像块之间的相似度,再对得到的相似度按从大到小的顺序进行排序,从图像块子集合{Blkt|t=1,2,...,Tk}中选取前L个相似度对应的图像块作为图像块Blkt的相似图像块,并对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中除图像块Blkt以外的其它图像块进行相同的操作,得到相似度集合和相似图像块集合其中,l表示与图像块Blkt相似的L个图像块中任意图像块的序号,表示与图像块Blkt第l相似的图像块,表示图像块Blkt和图像块之间的相似度;
步骤7b,利用相似度集合和稀疏系数集合计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的相似图像块的稀疏系数加权和,得到加权稀疏系数集合
步骤8,利用加权稀疏系数集合对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的稀疏分解过程进行约束,得到每个图像块的新稀疏系数,并利用得到的新稀疏系数对稀疏系数集合进行更新,得到新稀疏系数集合其中,对图像块的稀疏分解过程进行约束的公式为:
其中,ykt表示将图像块Blkt的灰度值矩阵进行列化得到的灰度值向量,γ是用以平衡图像块Blkt重构误差和稀疏度的归一化参数;
步骤9,设定迭代变量阈值Λ,并判断迭代变量是否大于迭代变量阈值Λ,若是,停止更新稀疏系数集合,并将第Λ次迭代得到的稀疏系数集合作为最终的稀疏系数集合,否则迭代变量自增1,并执行步骤7,其中,表示第Λ次迭代时图像块Blkt的稀疏系数;
步骤10,利用字典集合{Dk|k=1,2...,K}和稀疏系数集合对图像In进行重构,得到去噪后的图像Ic。
本发明与现有的技术相比,具有以下优点:
1.本发明由于在获取字典的过程中,通过对超像素进行聚类,并对相似超像素进行字典学习,有效地学习并利用了图像的结构特征、边缘特征、纹理特征以及非局部相似性,能够得到对图像的结构特征、边缘特征和纹理特征描述更加有效的字典,与现有技术相比,有效地提高了去噪图像的峰值信噪比,同时更好地保留了去噪图像的边缘、纹理等细节信息。
2.本发明由于利用相似图像块的加权稀疏系数对图像块稀疏分解过程进行约束,降低了字典中噪声对稀疏系数的影响,能够得到对图像信息描述更加准确的稀疏系数,与现有技术相比,进一步提高去噪图像的峰值信噪比,同时更加完整地保留了去噪图像的边缘、纹理等细节信息。
附图说明
图1是本发明的实现流程图;
图2是本发明仿真实验使用的十幅标准测试图像;
图3是本发明与现有技术对Monarch图像的去噪效果对比图;
图4是本发明与现有技术对House图像的去噪效果对比图。
具体实施方式:
以下结合附图和具体实施例,对本发明作进一步详细说明:
参照图1,一种基于超像素聚类和稀疏表示的图像去噪方法,包括如下步骤:
步骤1,输入一幅含有标准方差为δ的高斯白噪声的图像In。
在本实施例中,采用的是分辨率为的512×512灰度图像。
步骤2,首先设定图像In的超像素数目为R,并对图像In进行超像素分割,得到超像素集合{SPi|i=1,2,...,R},其次定义一个空的相似矩阵S,计算超像素集合{SPi|i=1,2,...,R}中每两个超像素之间的相似度,并将计算结果存储到相似矩阵S中,其中,i是超像素集合{SPi|i=1,2,...,R}中超像素的序号,SPi是超像素集合{SPi|i=1,2,...,R}中第i个超像素,i1和i2是超像素集合{SPi|i=1,2,...,R}中任意两个超像素的序号,且i1=1,2,...,R,i2=1,2,...,R,i1≠i2,是超像素集合{SPi|i=1,2,...,R}中第i1个超像素,是超像素集合{SPi|i=1,2,...,R}中第i2个超像素,其中对图像In进行超像素分割和计算超像素集合{SPi|i=1,2,...,R}中每两个超像素之间的相似度的步骤,并将计算结果存储到相似矩阵S中如下:
步骤2a,超像素的个数R的设置不是固定的值,在本实施例中,超像素的个数设置为R=500,且对图像In进行超像素分割,可采用多种算法如简单线性迭代聚类算法(SimpleLiner Iterator Clustering,SLIC)算法,Normalized Cut算法,Mean-shift算法,Quick-shift算法。本实例采用简单线性迭代聚类算法,相比其它超像素分割算法,该算法在运行速度、生成超像素的紧凑度、轮廓保持方面都比较理想,其实现步骤为:
步骤2a1,计算分割完成以后的每一个超像素的像素点数目估计值Pn与边长估计值St,其中,N为图像In中含有像素点的数目,
步骤2a2,在图像In平面内,以像素点为基本单位,以Step为垂直方向和水平方向的步长,从第Rw行像素点开始,均匀地选取R个聚类中心,得到聚类中心集合{Cq|q=1,2,...,R},其中,Step=St,q是聚类中心集合{Cq|q=1,2,...,R}中聚类中心的序号,Cq是聚类中心集合{Cq|q=1,2,...,R}中第q个聚类中心;
步骤2a3,在聚类中心集合{Cq|q=1,2,...,R}中的聚类中心Cq的Ns×Ns邻域内,计算每个像素点的梯度值,选取梯度值最小的像素点替换聚类中心集合{Cq|q=1,2,...,R}中的聚类中心Cq,对聚类中心集合{Cq|q=1,2,...,R}中除聚类中心Cq以外的其它聚类中心进行相同的操作,得到新的聚类中心集合{Cq|q=1,2,...,R};
步骤2a4,设定迭代变量θ,并初始化为0,并在2St×2St的搜索窗口内,将像素点分配给与其距离最小的聚类中心,得到R簇相似像素点,其中计算任意像素点Px=[g,x,y]T到任意聚类中心Cx=[gc,xc,yc]的距离Ds的公式为:
其中,g是像素点Px的灰度值,x是像素点Px在X轴方向的位置坐标值,y是像素点Px在Y轴方向的位置坐标值,gc是聚类中心Cx的灰度值,xc是聚类中心Cx在X轴方向的位置坐标值,yc是聚类中心Cx在Y轴方向的位置坐标值, κ是用于控制超像素的紧凑度和规则度的参数,通常取值范围在[5,40],本在本实施例中取值为5;
步骤2a5,分别计算每簇相似像素点的均值,作为每簇相似像素点的新的聚类中心,并更新聚类中心集合{Cq|q=1,2,...,R};
步骤2a6,设定迭代变量阈值Ω,并判断迭代变量是否大于迭代变量阈值Λ,若是则算法,且得到R个超像素(每簇相似像素点即为一个超像素),否则迭代变量自增1,执行步骤2a4;
经验数据表明,只需迭代10次即可实现连续两次的聚类中心误差不超过5%,因此,本实例将迭代次数设置为10次。
步骤2b,上述的计算超像素集合{SPi|i=1,2,...,R}中每两个超像素之间的相似度并将计算结果存储到相似矩阵S中,实现步骤为:
步骤2b1,计算超像素集合{SPi|i=1,2,...,R}中每个超像素的特征向量,得到超像素特征向量集合{ui|i=1,2,...,R},计算公式为:
其中,ui是超像素特征向量集合{ui|i=1,2,...,R}中的第i个特征向量,Γi是超像素SPi中包含的像素点的数目,j表示超像素SPi中像素点的序号,且j=1,2,...,Γi,fj表示超像素SPi中第j个像素点的特征向量,且fj=[g,IX,IY,IXX,IYY,β×x,β×y]T,g表示超像素SPi中第j个像素点的灰度值,IX,IY,IXX,IYY分别表示超像素SPi中第j个像素点在X轴方向和Y轴方向的一阶导数与二阶导数;x和y分别表示超像素SPi中第j个像素点在X轴方向的坐标值与Y轴方向的坐标值,β是位置特征与其它特征之间的平衡因子,其取值范围是(0,1];
本实例将β设置为0.5,且在求取位置坐标值时,在图像In平面上以中心像素点为原点,水平方向为X轴方向,垂直方向为Y轴方向,建立坐标系。
步骤2b2,计算超像素集合{SPi|i=1,2,...,R}中每个超像素的协方差矩阵,得到协方差矩阵集合{Mi|i=1,2,...,R},计算公式为:
其中,Mi是超像素SPi的协方差矩阵,a和b分别是协方差矩阵Mi中元素的行号和列序号,Mi(a,b)是矩阵Mi中第a行第b列的元素,且a=1,2,...,7,b=1,2,...,7,a′和b′是超像素SPi中第j个像素点的特征向量fj中两个元素的序号,且a′=a,b′=b,fj(a′)是超像素SPi中第j个像素点的特征向量fj中序号为a′的元素,fj(b′)是超像素SPi中第j个像素点的特征向量fj中序号为b′的元素,a″和b″是超像素特征向量集合{ui|i=1,2,...,R}中的第i个特征向量中两个元素的序号,且a″=a′=a,b″=b′=b,ui(a″)是超像素特征向量集合{ui|i=1,2,...,R}中的第i个特征向量中序号为a″的元素,ui(b″)是超像素特征向量集合{ui|i=1,2,...,R}中的第i个特征向量中序号为b″的元素;
步骤2b3,计算超像素集合{SPi|i=1,2,...,R}中任意两个超像素之间的相似度得到超像素相似度集合计算公式为:
其中,i1和i2是超像素集合{SPi|i=1,2,...,R}中任意两个超像素的序号,且i1=1,2,...,R,i2=1,2,...,R,i1≠i2,是超像素集合{SPi|i=1,2,...,R}中序号等于i1的超像素,是超像素集合{SPi|i=1,2,...,R}中序号等于i2的超像素,i1和i2共同构成超像素相似度集合中相似度的序号,是超像素相似度集合中序为i1i2的相似度,且表示超像素和超像素之间的相似度,是协方差矩阵集合{Mi,i=1,2,...,R}中序号等于i1协方差矩阵,是协方差矩阵集合{Mi,i=1,2,...,R}中序号等于i2协方差矩阵,λΘ是协方差矩阵的广义特征值,且
步骤2b4,将超像素相似度集合中的相似度存储到相似矩阵S中,存储公式为:
其中,r1和r2是相似矩阵S中元素的行序号和列序号,r1=1,2,...,R,r2=1,2,...,R,S(r1,r2)是相似矩阵S中第r1行第r2列元素,是超像素相似度集合中序号为i1i2的相似度,且i1=r1,i2=r2。
步骤3,设定类的个数为K,并利用相似矩阵S,对超像素集合{SPi|i=1,2,...,R}中的超像素进行聚类,得到相似超像素集合{Crk|k=1,2,...,K},其中k是相似超像素集合{Crk|k=1,2,...,K}中相似超像素的序号,Crk是相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素。
类的个数K的设置不是固定的值,在本实施例中,类的个数为K=40,且上述的对超像素进行聚类,可采用多种算法如近邻传播算法,k-means算法,谱聚类,稀疏子空间聚类算法,拉普拉斯稀疏子空间聚类算法,本实例采用拉普拉斯稀疏子空间聚类算法,该算法具有对噪声具有鲁棒性,对含噪数据聚类效果好的优点,实现步骤为:
步骤3a,利用相似矩阵S,计算对角矩阵E:
其中,r1′是对角矩阵E中对角元素的行序号和列序号,r1′=1,2,...,R,E(r1′,r1′)是对角矩阵E中第r1′行第r1′列的元素,r1和r2是相似矩阵S中元素的行序号和列序号,且r1=r1′,r2=1,2,...,R,S(r1,r2)是相似矩阵S中第r1行第r2列的元素;
步骤3b,利用相似矩阵S和对角矩阵E,计算拉普拉斯矩阵L,计算公式为:
L=E-S;
步骤3c,利用超像素特征向量集合{ui|i=1,2,...,R}和拉普拉斯矩阵L,计算超像素集合{SPi|i=1,2,...,R}中每个超像素的稀疏系数,得到稀疏系数矩阵C,计算超像素稀疏系数的公式为:
其中,矩阵U={u1,u2,...,uR},矩阵是从矩阵U中除去ui后的得到矩阵,且矩阵作为稀疏分解过程的字典,是超像素SPi的特征向量ui在字典下的稀疏系数,是从稀疏系数中除去第i行元素后得到的向量,稀疏系数矩阵e为与维数相同的单位列向量,i′是超像素集合{SPi|i=1,2,...,R}中除超像素SPi以外的超像素的序号,且i′=1,2,...,R,i′≠i,SPi′是超像素集合{SPi|i=1,2,...,R}中第i′个超像素,S(i,i′)是超像素SPi与超像素SPi′之间的相似度,是超像素SPi′的特征向量ui′在字典下的稀疏系数,ui′是超像素特征向量集合{ui|i=1,2,...,R}中序号等于i′的特征向量;
上述计算超像素稀疏系数的公式将拉普拉斯矩阵L引入到稀疏子空间聚类公式中,是为了使相似的超像素具有相似的稀疏系数,利用稀疏域的非局部相似性来提高稀疏系数的准确性,以达到更好的超像素聚类效果。
在本实施例中,λ=0.01,η=0.2。
步骤3d,对稀疏系数矩阵C进行更新,得到对称矩阵更新公式为:
其中,k1′和k2′是对称矩阵中元素的行序号和列序号,且k1′=1,2,...,R,k2′=1,2,...,R,是对称矩阵中第k1′行第k2′列的元素,k1和k2是稀疏系数矩阵C中元素的行序号和列序号,C(k1,k2)是稀疏系数矩阵C中第k1行第k2列的元素,C(k2,k1)是稀疏系数矩阵C中第k2行第k1列的元素,且k1=1,2,...,R,k2=1,2,...,R,k1=k1′,k2=k2′;
步骤3e,建立无向图G,将超像素特征向量集合{ui|i=1,2,...,R}中的每个超像素特征向量作为无向图G的顶点,得到顶点集合{vi|i=1,2,...,R},且将对称矩阵中的元素作为顶点集合{vi|i=1,2,...,R}中序号等于k1′的顶点与序号等于k2′的顶点之间的边的权值,并使用谱聚类算法对无向图G进行划分,得到相似超像素集合{Crk|k=1,2,...,K}。
谱聚类算法对无向图G进行划分时,无向图G的邻接矩阵是对称矩阵拉普拉斯矩阵其中,是对角矩阵B的第k1′行第k1′列的元素,并使用k-means算法对拉普拉斯矩阵A的特征向量进行聚类,以达到对无向图G的划分,则得到对超像素特征向量集合{ui|i=1,2,...,R}的划分结果,即为对超像素的结果聚类。
步骤4,对相似超像素集合{Crk|k=1,2,...,K}中每簇相似超像素分别进行重叠取块,得到K个图像块子集合,再以该K个图像块子集合中的每个图像块子集合为元素组成图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K},并将该K个图像块子集合进行合并,得到图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk},其中,{Blkt|t=1,2,...,Tk}是图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中第k个图像块子集合,t是从相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的图像块的序号,Blkt是从相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的第t个图像块,Tk是相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的图像块的数目。
图像块的边长p的设置不是固定的值,但是p应该是奇数,在本实施例中,图像块的边长p设置为7,且上述的对相似超像素集合{Crk|k=1,2,...,K}中每簇相似超像素分别进行重叠取块,实现步骤为:
步骤4a,设定图像块边长p,在图像In平面内,以图像In的边界像素点为中心,镜像复制p′个像素点,得到图像I'n,其中,
步骤4b,在图像I'n平面内,以相似超像素集合{Crk|k=1,2,...,K}中每簇相似超像中的像素点为中心,提取p×p大小的图像块,得到K个图像块子集合。
步骤5,对图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合分别进行字典训练,得到字典集合{Dk|k=1,2,...,K},其中,Dk是字典集合{Dk|k=1,2,...,K}中第k个字典。
上述的对图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合分别进行字典训练,可采用多种字典学习算法,如小波基字典,K-SVD算法,主成分分析算法等,本实例采用主成分分析算法,具有计算速度快,得到字典对数据具有自适应性的优点,实现步骤为:
步骤5a,计算图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合{Blkt|t=1,2,...,Tk}的特征矩阵Pk,计算公式为:
其中,Bk是相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk对应的图像块子集合{Blkt|t=1,2,...,Tk}的灰度值矩阵,ykt是将图像块Blkt的灰度值矩阵列化得到的灰度值列向量,Δk是灰度值矩阵Bk的特征值构成的对角矩阵,特征矩阵Pk是灰度值矩阵Bk的特征向量构成的矩阵,灰度值矩阵Bk的秩记为rk;
步骤5b,计算图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合{Blkt|t=1,2,...,Tk}对应的字典,得到字典集合{Dk|k=1,2,...,K},计算公式为:
其中,是从特征矩阵Pk中选取列的数目, 是Pk的前列组成的矩阵,是Bk在下的稀疏系数矩阵,且将使得上述公式达到最小值的对应的矩阵作为图像块集合{Blkt|t=1,2,...,Tk}对应的字典Dk,得到字典集合{Dk,k=1,2,...,K}。
步骤6,设迭代变量为且初始化迭代变量为0,并利用字典集合{Dk|k=1,2,...,K},对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中所有图像块进行稀疏分解,得到稀疏系数集合其中,表示第次迭代时图像块Blkt的稀疏系数。
对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中所有图像块进行稀疏分解,采用广义正交匹配追踪算法。
步骤7,设定选取相似图像块的数目L,为图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中的每个图像块选取L个相似图像块,并计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的L个相似图像块的稀疏系数加权和,得到加权稀疏系数集合其中,表示第次迭代时图像块Blkt的L个相似图像块的稀疏系数加权和,选取相似图像块和计算图像块对应的稀疏系数加权和的实现步骤如下:
步骤7a,计算图像块子集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中图像块Blkt与图像块子集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的其它图像块之间的相似度,再对得到的相似度按从大到小的顺序进行排序,从图像块子集合{Blkt|t=1,2,...,Tk}中选取前L个相似度对应的图像块作为图像块Blkt的相似图像块,并对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中除图像块Blkt以外的其它图像块进行相同的操作,得到相似度集合和相似图像块集合其中,l表示与图像块Blkt相似的L个图像块中任意图像块的序号,表示与图像块Blkt第l相似的图像块,表示图像块Blkt和图像块之间的相似度。
相似图像块的数目L的设置不是固定的值,在本实施例中,相似图像块的数目L=10,过多的相似图像块的数目可能导致去噪后的图像边缘模糊,过少的相似图像块的数目导致相似图像块的稀疏系数加权和对图像块的稀疏分解过程影响小,且上述的计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中图像块Blkt与图像块子集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的其它图像块之间的相似度,计算公式为:
其中,τ是图像块集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的任意图像块的序号,且τ=1,2,...,Tk,τ≠t,Blkτ是图像块集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的任意图像块,ykt与ykτ分别是图像块Blkτ与图像块Blkτ对应的灰度值列向量,是图像块Blkt与图像块Blkτ的加权欧式距离,为高斯核的标准方差,h是滤波因子且h=10×δ;
步骤7b,利用相似度集合和稀疏系数集合计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的相似图像块的稀疏系数加权和,得到加权稀疏系数集合
上述的计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的L个相似图像块的稀疏系数加权和,计算公式为:
其中,为第次迭代时图像块Bkt的稀疏系数,是图像块的加权值,且 是第次迭代时图像块的稀疏系数。
步骤8,利用加权稀疏系数集合对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的稀疏分解过程进行约束,得到每个图像块的新稀疏系数,并利用得到的新稀疏系数对稀疏系数集合进行更新,得到新稀疏系数集合其中,对图像块的稀疏分解过程进行约束的公式为:
其中,ykt表示将图像块Blkt的灰度值矩阵进行列化得到的灰度值向量,γ是用以平衡图像块Blkt重构误差和稀疏度的归一化参数。
在本实施例中,h=10×δ,γ=0.05。
步骤9,设定迭代变量阈值Λ,并判断迭代变量是否大于迭代变量阈值Λ,若是,停止更新稀疏系数集合,并将第Λ次迭代得到的稀疏系数集合作为最终的稀疏系数集合,否则迭代变量自增1,并执行步骤7,其中,表示第Λ次迭代时图像块Blkt的稀疏系数。
最大迭代次数T的设置不是固定的值,在本实施例中,最大迭代次数Λ=10。
步骤10,利用字典集合{Dk|k=1,2...,K}和稀疏系数集合对图像In进行重构,得到去噪后的图像Ic,其中,重构公式为:
其中,是用于提取图像块Blkt的二值矩阵,是图像块Blkt第Λ次迭代的稀疏系数。步骤4中将图像In镜像扩展为图像I'n后,再提取图像块得到图像块集合,所以在对图像In进行重构时,只选取图像I'n内除去镜像扩展的像素点后剩余的图像块用来重构图像In。
以下结合仿真实验,对本发明的技术效果作进一步描述:
1.仿真条件和内容:
采用Matlab R2010a软件在配置为core i3-21203.30GHZ,内存4G,WINDOWS 764位操作系统的计算机上,使用本发明和现有技术对十幅标准测试图像进行去噪仿真实验,其中,本发明与现有技术对Monarch图像和House图像的去噪效果对比结果如图3和图4所示。
2.仿真结果分析:
图2是本发明仿真实验的十幅标准测试图像,从左至右,从上到下,图像的名字依次Lena,Monarch,House,Parrot,Barbara,Pepper,Couple,Cameraman,Straw,Man。本发明仿真实验分别对十幅标准测试图像添加高斯白噪声,得到人工合成的待去噪图像,并且使用峰值信噪比(Peak Signal to Noise Ratio,PSNR)以及图像细节保留程度作为衡量去噪效果的指标。
参照图3,图3(a)是原始Monarch图像,图3(b)是含有标准方差为20的高斯白噪声的待去噪Monarch图像,图3(c)是NLM方法的去噪效果图,图3(d)是K-SVD方法的去噪效果图,图3(e)是BM3D方法的去噪效果图,图3(f)是本发明的去噪效果图,且图3中每个图像的矩形框区域是图像的局部放大图。
由图3可以看出:与其它对比方法相比,本发明对图像的细节信息保留地更加完整,如局部放大图所示,本发明对蝴蝶的触角和蝴蝶翅膀上纹络的边缘保留地更加完整,更加清晰,证明了本发明方法可以实现更好的去噪效果。
参照图4,图4(a)是原始House图像,图4(b)含有标准方差为20的高斯白噪声的待去噪House图像,4(c)是NLM方法的去噪效果图,4(d)是K-SVD方法的去噪效果图,图4(e)是BM3D方法的去噪效果图,图4(f)是本发明的去噪效果图,且图4中每个图像的矩形框区域是图像的局部放大图。
由图4可以看出:与其它对比方法相比,本发明对图像的细节信息保留地更加完整,如局部放大图所示,本发明对烟囱的边缘和排气管与房顶交界处细节信息保留地更加完整,更加清晰,证明了本发明方法可以实现更好的去噪效果。
为了进一步分析本发明与其它对比方法的去噪效果,表1给出了本发明方法与其它对比方法的对含有不同标准方差的高斯白噪声的标准测试图像进行去噪的PSNR值的对比。表1中,第一行单元格中的数值是仿真实验添加的高斯白噪声的标准方差δ,第一列单元格中的内容是仿真实验的图像名称,且含有四个数值的单元格中,左上角的数值是NLM方法的PSNR值,右上角的数值是K-SVD方法的PSNR值,左下角的数值是BM3D方法的PSNR值,右下角的数值是本发明的PSNR值。
表1本发明与现有技术对含有不同标准方差的高斯白噪声的标准测试图像进行去噪的PSNR值
从表1可以看出对于含有不同标准方差的高斯白噪声的不同的标准测试图像进行去噪时,与其它对比算法相比,本发明的PSNR值明显高于NLM算法和K-SVD算法,且高于或者接近于BM3D算法。
从图3、图4以及表1可以看出证明了本发明方法可以实现比NLM算法和K-SVD算法更好的去噪效果,且比BM3D算法更好或者相近的去噪效果。
Claims (10)
1.一种基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,包括如下步骤:
(1)输入一幅含有标准方差为δ的高斯白噪声的图像In;
(2)首先设定图像In的超像素数目为R,并对图像In进行超像素分割,得到超像素集合{SPi|i=1,2,...,R},其次定义一个空的相似矩阵S,计算超像素集合{SPi|i=1,2,...,R}中每两个超像素之间的相似度,并将计算结果存储到相似矩阵S中,其中,i是超像素集合{SPi|i=1,2,...,R}中超像素的序号,SPi是超像素集合{SPi|i=1,2,...,R}中第i个超像素,i1和i2是超像素集合{SPi|i=1,2,...,R}中任意两个超像素的序号,且i1=1,2,...,R,i2=1,2,...,R,i1≠i2,是超像素集合{SPi|i=1,2,...,R}中第i1个超像素,是超像素集合{SPi|i=1,2,...,R}中第i2个超像素;
(3)设定类的个数为K,并利用相似矩阵S,对超像素集合{SPi|i=1,2,...,R}中的超像素进行聚类,得到相似超像素集合{Crk|k=1,2,...,K},其中k是相似超像素集合{Crk|k=1,2,...,K}中相似超像素的序号,Crk是相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素;
(4)对相似超像素集合{Crk|k=1,2,...,K}中每簇相似超像素分别进行重叠取块,得到K个图像块子集合,再以该K个图像块子集合中的每个图像块子集合为元素组成图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K},并将该K个图像块子集合进行合并,得到图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk},其中,{Blkt|t=1,2,...,Tk}是图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中第k个图像块子集合,t是从相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的图像块的序号,Blkt是从相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的第t个图像块,Tk是相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk中提取的图像块的数目;
(5)对图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合分别进行字典训练,得到字典集合{Dk|k=1,2,...,K},其中,Dk是字典集合{Dk|k=1,2,...,K}中第k个字典;
(6)设迭代变量为且初始化迭代变量为0,并利用字典集合{Dk|k=1,2,...,K},对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中所有图像块进行稀疏分解,得到稀疏系数集合其中,表示第次迭代时图像块Blkt的稀疏系数;
(7)设定选取相似图像块的数目L,为图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中的每个图像块选取L个相似图像块,并计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的L个相似图像块的稀疏系数加权和,得到加权稀疏系数集合其中,表示第次迭代时图像块Blkt的L个相似图像块的稀疏系数加权和,选取相似图像块和计算图像块对应的稀疏系数加权和的实现步骤如下:
(7a)计算图像块子集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中图像块Blkt与图像块子集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的其它图像块之间的相似度,再对得到的相似度按从大到小的顺序进行排序,从图像块子集合{Blkt|t=1,2,...,Tk}中选取前L个相似度对应的图像块作为图像块Blkt的相似图像块,并对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中除图像块Blkt以外的其它图像块进行相同的操作,得到相似度集合和相似图像块集合其中,l表示与图像块Blkt相似的L个图像块中任意图像块的序号,表示与图像块Blkt第l相似的图像块,表示图像块Blkt和图像块之间的相似度;
(7b)利用相似度集合和稀疏系数集合计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的相似图像块的稀疏系数加权和,得到加权稀疏系数集合
(8)利用加权稀疏系数集合对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的稀疏分解过程进行约束,得到每个图像块的新稀疏系数,并利用得到的新稀疏系数对稀疏系数集合进行更新,得到新稀疏系数集合其中,对图像块的稀疏分解过程进行约束的公式为:
其中,ykt表示将图像块Blkt的灰度值矩阵进行列化得到的灰度值向量,γ是用以平衡图像块Blkt重构误差和稀疏度的归一化参数;
(9)设定迭代变量阈值Λ,并判断迭代变量是否大于迭代变量阈值Λ,若是,停止更新稀疏系数集合,并将第Λ次迭代得到的稀疏系数集合作为最终的稀疏系数集合,否则迭代变量自增1,并执行步骤(7),其中,表示第Λ次迭代时图像块Blkt的稀疏系数;
(10)利用字典集合{Dk|k=1,2...,K}和稀疏系数集合对图像In进行重构,得到去噪后的图像Ic。
2.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(2)中所述的对图像In进行超像素分割,采用简单线性迭代聚类算法。
3.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(2)中所述的计算超像素集合{SPi|i=1,2,...,R}中每两个超像素之间的相似度并将计算结果存储到相似矩阵S中,实现步骤为:
(2a)计算超像素集合{SPi|i=1,2,...,R}中每个超像素的特征向量,得到超像素特征向量集合{ui|i=1,2,...,R},计算公式为:
其中,ui是超像素特征向量集合{ui|i=1,2,...,R}中的第i个特征向量,Γi是超像素SPi中包含的像素点的数目,j表示超像素SPi中像素点的序号,且j=1,2,...,Γi,fj表示超像素SPi中第j个像素点的特征向量,且fj=[g,IX,IY,IXX,IYY,β×x,β×y]T,g表示超像素SPi中第j个像素点的灰度值,IX,IY,IXX,IYY分别表示超像素SPi中第j个像素点在X轴方向和Y轴方向的一阶导数与二阶导数;x和y分别表示超像素SPi中第j个像素点在X轴方向的坐标值与Y轴方向的坐标值,β是位置特征与其它特征之间的平衡因子,其取值范围是(0,1];
(2b)计算超像素集合{SPi|i=1,2,...,R}中每个超像素的协方差矩阵,得到协方差矩阵集合{Mi|i=1,2,...,R},计算公式为:
其中,Mi是超像素SPi的协方差矩阵,a和b分别是协方差矩阵Mi中元素的行号和列序号,Mi(a,b)是矩阵Mi中第a行第b列的元素,且a=1,2,...,7,b=1,2,...,7,a′和b′是超像素SPi中第j个像素点的特征向量fj中两个元素的序号,且a′=a,b′=b,fj(a′)是超像素SPi中第j个像素点的特征向量fj中序号为a′的元素,fj(b′)是超像素SPi中第j个像素点的特征向量fj中序号为b′的元素,a″和b″是超像素特征向量集合{ui|i=1,2,...,R}中的第i个特征向量中两个元素的序号,且a″=a′=a,b″=b′=b,ui(a″)是超像素特征向量集合{ui|i=1,2,...,R}中的第i个特征向量中序号为a″的元素,ui(b″)是超像素特征向量集合{ui|i=1,2,...,R}中的第i个特征向量中序号为b″的元素;
(2c)计算超像素集合{SPi|i=1,2,...,R}中任意两个超像素之间的相似度得到超像素相似度集合计算公式为:
其中,i1和i2是超像素集合{SPi|i=1,2,...,R}中任意两个超像素的序号,且i1=1,2,...,R,i2=1,2,...,R,i1≠i2,是超像素集合{SPi|i=1,2,...,R}中序号等于i1的超像素,是超像素集合{SPi|i=1,2,...,R}中序号等于i2的超像素,i1和i2共同构成超像素相似度集合中相似度的序号,是超像素相似度集合中序为i1i2的相似度,且表示超像素和超像素之间的相似度,是协方差矩阵集合{Mi,i=1,2,...,R}中序号等于i1的协方差矩阵,是协方差矩阵集合{Mi,i=1,2,...,R}中序号等于i2的协方差矩阵,λΘ是协方差矩阵的广义特征值,且
(2d)将超像素相似度集合中的相似度存储到相似矩阵S中,存储公式为:
其中,r1和r2是相似矩阵S中元素的行序号和列序号,r1=1,2,...,R,r2=1,2,...,R,S(r1,r2)是相似矩阵S中第r1行第r2列元素,是超像素相似度集合中序号为i1i2的相似度,且i1=r1,i2=r2。
4.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(3)中所述的对超像素集合{SPi|i=1,2,...,R}中超像素进行聚类,采用拉普拉斯稀疏子空间聚类算法,实现步骤为:
(3a)利用相似矩阵S,计算对角矩阵E:
其中,r1′是对角矩阵E中对角元素的行序号和列序号,r1′=1,2,...,R,E(r1′,r1′)是对角矩阵E中第r1′行第r1′列的元素,r1和r2是相似矩阵S中元素的行序号和列序号,且r1=r1′,r2=1,2,...,R,S(r1,r2)是相似矩阵S中第r1行第r2列的元素;
(3b)利用相似矩阵S和对角矩阵E,计算拉普拉斯矩阵L,计算公式为:
L=E-S;
(3c)利用超像素特征向量集合{ui|i=1,2,...,R}和拉普拉斯矩阵L,计算超像素集合{SPi|i=1,2,...,R}中每个超像素的稀疏系数,得到稀疏系数矩阵C,计算超像素稀疏系数的公式为:
其中,矩阵U={u1,u2,...,uR},矩阵是从矩阵U中除去ui后的得到矩阵,且矩阵作为稀疏分解的字典,是超像素SPi的特征向量ui在字典下的稀疏系数,是从稀疏系数中除去第i行元素后得到的向量,稀疏系数矩阵e为与维数相同的单位列向量,i′是超像素集合{SPi|i=1,2,...,R}中除超像素SPi以外的超像素的序号,且i′=1,2,...,R,i′≠i,SPi′是超像素集合{SPi|i=1,2,...,R}中第i′个超像素,S(i,i′)是超像素SPi与超像素SPi′之间的相似度,是超像素SPi′的特征向量ui′在字典下的稀疏系数,ui′是超像素特征向量集合{ui|i=1,2,...,R}中序号等于i′的特征向量;
(3d)对稀疏系数矩阵C进行更新,得到对称矩阵更新公式为:
其中,k1′和k2′是对称矩阵中元素的行序号和列序号,且k1′=1,2,...,R,k2′=1,2,...,R,是对称矩阵中第k1′行第k2′列的元素,k1和k2是稀疏系数矩阵C中元素的行序号和列序号,C(k1,k2)是稀疏系数矩阵C中第k1行第k2列的元素,C(k2,k1)是稀疏系数矩阵C中第k2行第k1列的元素,且k1=1,2,...,R,k2=1,2,...,R,k1=k1′,k2=k2′;
(3e)建立无向图G,将超像素特征向量集合{ui|i=1,2,...,R}中的每个超像素特征向量作为无向图G的顶点,得到顶点集合{vi|i=1,2,...,R},且将对称矩阵中的元素作为顶点集合{vi|i=1,2,...,R}中序号等于k1′的顶点与序号等于k2′的顶点之间的边的权值,并使用谱聚类算法对无向图G进行划分,得到相似超像素集合{Crk|k=1,2,...,K}。
5.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(4)中所述的对相似超像素集合{Crk|k=1,2,...,K}中每簇相似超像素分别进行重叠取块,得到K个图像块子集合,实现步骤为:
(4a)设定图像块边长p,在图像In平面内,以图像In的边界像素点为中心,镜像复制p′个像素点,得到图像I'n,其中,
(4b)在图像I'n平面内,以相似超像素集合{Crk|k=1,2,...,K}中每簇相似超像中的像素点为中心,提取p×p大小的图像块,得到K个图像块子集合。
6.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(5)中所述的对图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合分别进行字典训练,得到字典集合{Dk|k=1,2,...,K},采用主成分分析算法,实现步骤为:
(5a)计算图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合{Blkt|t=1,2,...,Tk}的特征矩阵Pk,计算公式为:
其中,Bk是相似超像素集合{Crk|k=1,2,...,K}中第k簇相似超像素Crk对应的图像块子集合{Blkt|t=1,2,...,Tk}的灰度值矩阵,ykt是将图像块Blkt的灰度值矩阵列化得到的灰度值列向量,Δk是灰度值矩阵Bk的特征值构成的对角矩阵,特征矩阵Pk是灰度值矩阵Bk的特征向量构成的矩阵,灰度值矩阵Bk的秩记为rk;
(5b)计算图像块子集集合{{Blkt|t=1,2,...,Tk}|k=1,2,...,K}中的每个图像块子集合{Blkt|t=1,2,...,Tk}对应的字典,得到字典集合{Dk|k=1,2,...,K},计算公式为:
其中,是从特征矩阵Pk中选取列的数目, 是Pk的前列组成的矩阵,是Bk在下的稀疏系数矩阵,且将使得上述公式达到最小值的对应的矩阵作为图像块集合{Blkt|t=1,2,...,Tk}对应的字典Dk,得到字典集合{Dk,k=1,2,...,K}。
7.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(6)中所述的对图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中所有图像块进行稀疏分解,采用广义正交匹配追踪算法。
8.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(7a)中所述的计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中图像块Blkt与图像块子集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的其它图像块之间的相似度,计算公式为:
其中,τ是图像块集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的任意图像块的序号,且τ=1,2,...,Tk,τ≠t,Blkτ是图像块集合{Blkt|t=1,2,...,Tk}中除图像块Blkt以外的任意图像块,ykt与ykτ分别是图像块Blkτ与图像块Blkτ对应的灰度值列向量,是图像块Blkt与图像块Blkτ的加权欧式距离,为高斯核的标准方差,h是滤波因子且h=10×δ。
9.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(7b)中所述的计算图像块集合{Blkt|k=1,2,...,K;t=1,2,...,Tk}中每个图像块的L个相似图像块的稀疏系数加权和,计算公式为:
其中,为第次迭代时图像块Bkt的稀疏系数,是图像块的加权值,且 是第次迭代时图像块的稀疏系数。
10.根据权利要求1所述的基于超像素聚类和稀疏表示的图像去噪方法,其特征在于,步骤(10)中所述的利用字典集合{Dk|k=1,2...,K}和稀疏系数集合对图像In进行重构,得到去噪后的图像Ic,其中,重构公式为:
其中,是用于提取图像块Blkt的二值矩阵,是图像块Blkt第Λ次迭代的稀疏系数。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710138742.4A CN106934398B (zh) | 2017-03-09 | 2017-03-09 | 基于超像素聚类和稀疏表示的图像去噪方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710138742.4A CN106934398B (zh) | 2017-03-09 | 2017-03-09 | 基于超像素聚类和稀疏表示的图像去噪方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106934398A true CN106934398A (zh) | 2017-07-07 |
CN106934398B CN106934398B (zh) | 2019-11-01 |
Family
ID=59432129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710138742.4A Active CN106934398B (zh) | 2017-03-09 | 2017-03-09 | 基于超像素聚类和稀疏表示的图像去噪方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106934398B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107358590A (zh) * | 2017-07-19 | 2017-11-17 | 南京邮电大学 | 基于超像素分割和相似组稀疏表示的立体视频误码掩盖方法 |
CN109039721A (zh) * | 2018-07-20 | 2018-12-18 | 中国人民解放军国防科技大学 | 基于误差重构的节点重要性评估方法 |
CN110942495A (zh) * | 2019-12-12 | 2020-03-31 | 重庆大学 | 一种基于分析字典学习的cs-mri图像重构方法 |
CN112053295A (zh) * | 2020-08-21 | 2020-12-08 | 珠海市杰理科技股份有限公司 | 图像降噪方法、装置、计算机设备和存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120246533A1 (en) * | 2011-03-24 | 2012-09-27 | Sparsense, Inc. | Scalable hierarchical sparse representations supporting prediction, feedforward bottom-up estimation, and top-down influence for parallel and adaptive signal processing |
CN103049892A (zh) * | 2013-01-27 | 2013-04-17 | 西安电子科技大学 | 基于相似块矩阵秩最小化的非局部图像去噪方法 |
US20130156340A1 (en) * | 2011-12-20 | 2013-06-20 | Fatih Porikli | Image Filtering by Sparse Reconstruction on Affinity Net |
CN103854262A (zh) * | 2014-03-20 | 2014-06-11 | 西安电子科技大学 | 基于结构聚类与稀疏字典学习的医学图像降噪方法 |
CN104050644A (zh) * | 2014-06-23 | 2014-09-17 | 西北工业大学 | 一种基于非局部约束稀疏表示的sar图像去噪方法 |
CN105069478A (zh) * | 2015-08-19 | 2015-11-18 | 西安电子科技大学 | 基于超像素张量稀疏编码的高光谱遥感地物分类方法 |
-
2017
- 2017-03-09 CN CN201710138742.4A patent/CN106934398B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120246533A1 (en) * | 2011-03-24 | 2012-09-27 | Sparsense, Inc. | Scalable hierarchical sparse representations supporting prediction, feedforward bottom-up estimation, and top-down influence for parallel and adaptive signal processing |
US20130156340A1 (en) * | 2011-12-20 | 2013-06-20 | Fatih Porikli | Image Filtering by Sparse Reconstruction on Affinity Net |
CN103049892A (zh) * | 2013-01-27 | 2013-04-17 | 西安电子科技大学 | 基于相似块矩阵秩最小化的非局部图像去噪方法 |
CN103854262A (zh) * | 2014-03-20 | 2014-06-11 | 西安电子科技大学 | 基于结构聚类与稀疏字典学习的医学图像降噪方法 |
CN104050644A (zh) * | 2014-06-23 | 2014-09-17 | 西北工业大学 | 一种基于非局部约束稀疏表示的sar图像去噪方法 |
CN105069478A (zh) * | 2015-08-19 | 2015-11-18 | 西安电子科技大学 | 基于超像素张量稀疏编码的高光谱遥感地物分类方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107358590A (zh) * | 2017-07-19 | 2017-11-17 | 南京邮电大学 | 基于超像素分割和相似组稀疏表示的立体视频误码掩盖方法 |
CN109039721A (zh) * | 2018-07-20 | 2018-12-18 | 中国人民解放军国防科技大学 | 基于误差重构的节点重要性评估方法 |
CN109039721B (zh) * | 2018-07-20 | 2021-06-18 | 中国人民解放军国防科技大学 | 基于误差重构的节点重要性评估方法 |
CN110942495A (zh) * | 2019-12-12 | 2020-03-31 | 重庆大学 | 一种基于分析字典学习的cs-mri图像重构方法 |
CN112053295A (zh) * | 2020-08-21 | 2020-12-08 | 珠海市杰理科技股份有限公司 | 图像降噪方法、装置、计算机设备和存储介质 |
CN112053295B (zh) * | 2020-08-21 | 2024-04-05 | 珠海市杰理科技股份有限公司 | 图像降噪方法、装置、计算机设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN106934398B (zh) | 2019-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Chatterjee et al. | Is denoising dead? | |
CN102156875B (zh) | 基于多任务ksvd字典学习的图像超分辨率重构方法 | |
CN103049892B (zh) | 基于相似块矩阵秩最小化的非局部图像去噪方法 | |
CN108399611B (zh) | 基于梯度正则化的多聚焦图像融合方法 | |
CN107292852B (zh) | 一种基于低秩理论的图像去噪算法 | |
CN102542542A (zh) | 基于非局部稀疏模型的图像去噪方法 | |
CN107067367A (zh) | 一种图像超分辨重建处理方法 | |
Chen et al. | Remote sensing image quality evaluation based on deep support value learning networks | |
CN106934398A (zh) | 基于超像素聚类和稀疏表示的图像去噪方法 | |
CN109993208B (zh) | 一种有噪声图像的聚类处理方法 | |
CN109636722B (zh) | 一种基于稀疏表示的在线字典学习超分辨率重建的方法 | |
Liu et al. | Hyperspectral image restoration based on low-rank recovery with a local neighborhood weighted spectral–spatial total variation model | |
CN106504207A (zh) | 一种图像数据处理方法 | |
CN104657951A (zh) | 图像乘性噪声移除方法 | |
CN109636734A (zh) | 一种基于组稀疏表示的加权稀疏正则项约束图像去噪方法 | |
CN111460966B (zh) | 基于度量学习和近邻增强的高光谱遥感图像分类方法 | |
CN113298742A (zh) | 基于图像配准的多模态视网膜图像融合方法及系统 | |
CN113449658A (zh) | 基于空域、频域、时域的夜间视频序列显著性检测方法 | |
CN112634171A (zh) | 基于贝叶斯卷积神经网络的图像去雾方法及存储介质 | |
CN107301631B (zh) | 一种基于非凸加权稀疏约束的sar图像降斑方法 | |
CN107292855B (zh) | 一种结合自适应非局部样本和低秩的图像去噪方法 | |
CN107392211B (zh) | 基于视觉稀疏认知的显著目标检测方法 | |
CN109741258B (zh) | 基于重建的图像超分辨率方法 | |
CN103413351A (zh) | 基于压缩感知理论的三维人脸快速重建方法 | |
He et al. | Image denoising using asymmetric Gaussian mixture models |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |