CN101639932B - 一种数字图像分辨率增强的方法及系统 - Google Patents

一种数字图像分辨率增强的方法及系统 Download PDF

Info

Publication number
CN101639932B
CN101639932B CN2008101172550A CN200810117255A CN101639932B CN 101639932 B CN101639932 B CN 101639932B CN 2008101172550 A CN2008101172550 A CN 2008101172550A CN 200810117255 A CN200810117255 A CN 200810117255A CN 101639932 B CN101639932 B CN 101639932B
Authority
CN
China
Prior art keywords
image
interpolation
length
resolution
cost function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2008101172550A
Other languages
English (en)
Other versions
CN101639932A (zh
Inventor
黄磊
禹晶
刘昌平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hanwang Technology Co Ltd
Original Assignee
Hanwang Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hanwang Technology Co Ltd filed Critical Hanwang Technology Co Ltd
Priority to CN2008101172550A priority Critical patent/CN101639932B/zh
Publication of CN101639932A publication Critical patent/CN101639932A/zh
Application granted granted Critical
Publication of CN101639932B publication Critical patent/CN101639932B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明公开了一种数字图像分辨率增强的方法及系统,以解决现有视频图像分辨率低,影响图像进一步处理和分析的问题。所述方法包括:图像插值,对低分辨率图像的亮度图进行最近邻插值;改进贝叶斯图像插值模型;插值校正,用改进的贝叶斯图像插值型校正高分辨率图像的亮度图。针对彩色图像,本发明提供了图像预处理和后处理,前者对输入的低分辨率彩色图像进行颜色空间转换,后者将校正后的高分辨率亮度图和色度分量图反向转换成彩色图像。本发明针对现有贝叶斯插值方法计算量庞大、执行速度慢的问题,通过快速确定下降方向和步长,加速了插值的执行,同时本发明具有边缘保持能力,能够有效恢复图像细节,提高图像清晰度。

Description

一种数字图像分辨率增强的方法及系统
技术领域
本发明涉及图像处理领域,特别涉及一种数字图像分辨率增强的方法及系统。
背景技术
在图像处理领域,图像插值是一个重要研究方向,在图像分辨率增强、图像校正、图像旋转和去马赛克等研究方向,图像插值都是一个必不可少的阶段。图像是由像素点组成的,当放大、缩小或者旋转图像时,原始像素就会重新排列,生成一些新的像素,图像插值就是确定这些已知像素中间的未知像素,通过图像插值能减少几何变换对原有图像的破坏。
现有的图像插值方法主要分为两类:自适应方法和非自适应方法。自适应插值方法只考虑了近邻像素的相关性,而没有考虑图像的全局相关性,没有较好地识别边缘而导致边缘模糊或锯齿现象,从而引起图像细节信息的质量下降。由于人眼对于边缘细节部分特别敏感,因此,插值后图像边缘对图像质量有重要的影响。非自适应插值中研究较多的是面向边缘的插值方法。图像插值往往会使图像损失细节,造成图像边缘模糊。
发明内容
本发明所要解决的技术问题是提供一种数字图像分辨率增强的方法及系统,以解决现在有技术条件下图像插值方法中存在的插值后图像模糊、图像边缘部分丢失的问题。
为解决上述技术问题,根据本发明提供的具体实施列,本发明公开了以下技术方案:
本发明提供了一种数字图像分辨率增强的方法,包括:
图像插值,对低分辨率图像的亮度图用最近邻插值方法进行插值,得到高分辨率图像的亮度图;
贝叶斯图像插值模型改进;
插值校正,利用改进的贝叶斯图像插值模型校正高分辨率图像的亮度图,得到校正后的高分辨率图像的亮度图;
优选的,在图像插值之前,对输入的低分辨率彩色图像进行颜色空间转换图像预处理,获得低分辨率彩色图像的亮度图和色度分量图。
优选的,在插值校正之后,对高分辨彩色图像进行图像后处理,将经过校正后的高分辨率亮度图和色度分量图,反向转换成彩色图像。
优选的,图像插值时,对低分辨率彩色图像的亮度图用最近邻插值方法进行插值,对色度分量图进行插值,得到高分辨率彩色图像的亮度图和色度分量图。
优选的,所述亮度图校正的步骤包括:计算代价函数,对高分辨率图像亮度图的平滑性度量值求和;搜索代价函数下降方向;将下降方向投影到可行方向;确定下降步长;像素亮度值校正,使代价函数值减小。
优选的,所述搜索代价函数下降方向的步骤包括:利用拉普拉斯导数算子,将高分辨率图像的亮度图转换为拉普拉斯图像;将高分辨率亮度图的像素的二阶方向差分模板和拉普拉斯图像像素亮度值的卷积图像排列成向量;对像素水平、垂直、对角线和反对角线四个方向的卷积图像排成的向量求和,得到代价函数的下降方向。
优选的,所述确定下降的步骤包括:设定初始步长,判断步长在下降方向上是否可行;如果不可行,减小步长为初始步长值的二分之一;重复执行上面步骤,直到步长在下降方向上可行。
优选的,所述判断步长在下降方向上是否可行,如果下降后新的代价函数值小于原代价函数值,步长在下降方向上可行。
一种数字图像分辨率增强系统,包括:
图像插值单元,用于将低分辨率图像重建成高分辨率图像;
模型改进单元,用于改进贝叶斯图像插值模型;
插值校正单元,用于校正高分辨率图像的亮度图;
优选的,所述插值校正单元进一步包括:
下降方向搜索子单元,用于代价函数值的下降方向;
空间映射子单元,用于将下降方向投影到可行方向上;
步长确定子单元,用于确定向量的下降步长;
校正值选取子单元,用于确定高分辨率未知像素的亮度值。
与现有技术相比,本发明具有以下优点:
本发明对贝叶斯图像插值模型进行了改进,贝叶斯图像插值问题实际上是一个约束最优化的求解问题,而搜索方向和步长的确定是最优化问题求解速度的关键。发明针对精确一维搜索确定步长计算量很大,且对加速收敛作用不大的问题,提出采用简单后退准则的非精确一维搜索确定步长。对于代价函数的梯度不能用解析式表示的情形,提出寻找一个可解析表达的下降方向,使代价函数沿该下降方向收敛到极小点。搜索方向和步长的快速确定,减少了算法的庞大计算量,加速了插值算法的执行。
附图说明
图1是数字图像分辨率增强方法的流程图;
图2是低分辨率和高分辨率图像的像素对应关系图;
图3是高分辨率亮度分量初值图校正子流程图;
图4a是向量Zk,l水平方向二阶方向差分模板;
图4b是向量Zk,l垂直方向二阶方向差分模板;
图4c是向量Zk,l反对角线方向二阶方向差分模板;
图4d是向量Zk,l正对角线方向二阶方向差分模板;
图5是下采样因子q取2时,下采样矩阵D的示意图;
图6a是输入计算机的低分辨率原始图像;
图6b是原始图像分辨率增强后得到的高分辨率图像;
图6c是采用本发明提供的方法得到高分辨率图像最终效果图;
图6d是采用双线性插值方法对彩色图像分辨率增强后效果图;
图7是数字图像分辨率增强系统结构图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
下面详细说明本发明对贝叶斯图像插值模型的改进:
首先介绍现有Huber-Markov图像模型。Huber-Markov图像模型是贝叶斯图像插值模型所采用的一种用来衡量插值图像像素平滑度的模型,要使插值后的图像有良好的平滑度,就需要对Huber-Markov模型中的指数核最优化求解。
Huber-Markov图像模型描述如下:
设低分辨率图像的分辨率为N1×N2,将其按行排列成N1N2维列向量,记作y。则高分辨率图像的分辨率为qN1×qN2,将其按行排列成q2N1N2×1维列向量,记作z。其中,q为水平和垂直方向的下采样/插值因子。下采样模型通过对高分辨率图像取q×q像素块的均值得到,
y ( i , j ) = 1 q 2 ( Σ x = qi q ( x + 1 ) - 1 Σ y = qj q ( j + 1 ) - 1 z ( x , y ) ) - - - ( 1 )
用矩阵-向量形式表示为:
y=Dz    (2)
其中,D为尺寸为N1N2×q2N1N2下采样矩阵。它的每一行有q2个值为1/q2的元素,将高分辨率图像的一个q×q像素块映射为一个低分辨率像素。
Huber-Markov图像模型具有边缘保持能力,其指数核定义为
Ω ( z , T ) = Σ k = 0 q N 1 - 1 Σ l = 0 q N 2 - 1 Σ d = 0 3 ρ ( d k , l , d t z , T ) - - - ( 3 )
式中,dk,l,d tz表示图像局部平滑度,在图像的平滑区域,值较小,而在边缘区域,值较大。高分辨率图像的局部平滑性用二阶方向导数 衡量,每个像素zk,l的4个二阶方向导数由二阶差分近似为
d k , l , d t z = m k , l , d * z k , l , d = 0,1,2,3 - - - ( 4 )
式中,md(d=0,1,2,3)分别表示水平、垂直、对角线和反对角线方向的二阶方向差分模板,“*”表示空间卷积。
Huber边缘惩罚函数定义为
ρ = ( x , T ) = x 2 , | x | ≤ T 2 T | x | - T 2 , | x | > T - - - ( 5 )
其中,T为阈值,当|x|≤T时,ρ(x,T)定义为二次惩罚函数,当|x|>α时,ρ(x,T)定义为线性惩罚函数。因此,噪声的差分较小,被二次惩罚,边缘的差分较大,被线性惩罚,所以Huber惩罚函数既可以平滑插值图像的噪声,又可以保持插值图像的边缘。
相应地,贝叶斯图像插值模型等价于解决如下的约束最优化问题:
min z Ω ( z , T ) = Σ k = 0 q N 1 - 1 Σ l = 0 q N 2 - 1 Σ d = 0 3 ρ ( d k , l , d t z , T ) - - - ( 6 )
s.t.y=Dz
图像插值算法就是在约束空间
S={z:y=Dz}    (7)
上将凸的、但非二次函数Ω(z,T)最小化,得到估计的插值图像 
Figure S2008101172550D00054
现有的贝叶斯图像插值模型,通过下面方法搜索下降方向和确定步长,解决Huber-Markov图像模型的约束最优化问题。
搜索下降方向:
设z为d维向量,函数Ω(z)在z处的偏导数近似为
∂ Ω ( z ‾ ) / ∂ z j = Ω ( z ‾ 0 , L , z ‾ j + 1 , L , z ‾ d - 1 ) - Ω ( z ‾ 0 , L , z ‾ j , L , z ‾ d - 1 ) - - - ( 8 )
式中,表示向量z的第i个分量。
现有贝叶斯图像插值模型利用差分近似偏导数的数值方法计算 梯度,梯度下降最快的方向确定为搜索方向,由于代价函数Ω(z(n),T)的梯度没有解析形式,梯度的每一个分量仅仅能用数值方法求得,运算效率非常低。
确定步长:
现有贝叶斯图像插值模型采用精确一维搜索确定步长,通过对第n次状态的代价函数进行二阶泰勒级数近似,得到如下步长:
α n = - ▿ Ω ( z ( n ) , T ) T d ( n ) d ( n ) T ▿ 2 Ω ( z ( n ) , T ) d ( n ) - - - ( 9 )
其中, 是代价函数Ω(z(n),T)的海塞矩阵。在每一步迭代,步长αn是代价函数最大下降到局部极小点。
现有算法确定步长计算量庞大:第一,需要计算离散型变量的海塞矩阵,第二,需要计算大型矩阵和高维向量之间的乘法,因此计算复杂且耗时。
本发明对贝叶斯图像插值模型的搜索下降方向和确定步长方法进行了改进。
改进后搜索下降方向的方法如下:
用 
Figure S2008101172550D00063
表示zk,l的拉普拉斯图像,定义为
Figure S2008101172550D00064
式中,k=0,1,L,qN1-1;l=0,1,L,qN2-1。
将 
Figure S2008101172550D00065
的卷积图像按行排列成q2N1N2维列向量,记作vd(z(n))。式中md(d=0,1,2,3)分别表示水平、垂直、对角线和反对角线方向的二阶方向差分模板,“*”表示空间卷积。
本发明找到了一个下降方向,用g(n)表示为
g ( n ) = Σ d = 0 3 υ d ( z ( n ) ) . - - - ( 11 )
通过与现有方法的比较可以看出:Huber-Markov图像模型中代价函数Ω(z(n),T)的梯度没有解析形式,梯度的每一个分量仅仅能用数值方法求得。现有贝叶斯插值模型利用差分近似偏导数的数值方法计算梯度,运算效率非常低。在最优化理论中,最快下降方向未必是最好的搜索方向,通常情况下,一维搜索仅仅寻找一个使目标函数值减小的下降方向。为此,本发明寻找到了代价函数的一个可解析表示的下降方向。显然,这样很大程度上减少了计算量。
改进后确定步长的方法如下:
本发明提出一种非精确的一维搜索方法确定步长。设初始步长α=1,若αd(n)不是可行下降方向,则减小步长α为原值的1/2(称之为后退),直至αd(n)是可行下降方向。
判断αd(n)是否为可行下降方向的准则:
1)若z(n)+αd(n)满足约束条件,则αd(n)是可行方向;
2)若新代价函数值小于原代价函数值,即Ω(z(n)+αd(n))<Ω(z(n)),则αd(n)是下降方向。
很显然,本方法克服了精确一维搜索方法做出大量不必要的计算的缺陷,同时又保证了每次迭代沿可行下降方向前进,本方法的使用在很大程度上节约了时间开销。
下面结合实例详细说明完整的数字图像插值方法。
如图1所示,公布了本发明一种数字图像分辨率增强的方法的具体实施例的流程图,具体可以包括以下步骤:
步骤S101,图像插值,对低分辨率图像的亮度图进行最近邻插值,对得到高分辨率图像的亮度图。
参见图2,是本实施例下采样因子q取2时,插值低分辨率和插值后高分辨率图像的像素对应关系图。
优选的,如果输入的图像是彩色图像而非亮度图像,在图像插值之前,对输入的低分辨率彩色图像进行图像预处理,将输入的低分辨 率彩色图像进行颜色空间转换,得到低分辨率彩色图像的亮度图和色度分量图。
对于彩色图像插值问题,通常有两种解决办法:一种方法是融合彩色信息提高运动估计的精度,然后独立地在每个通道上使用灰度超分辨率方法,再从分别处理的分量图像合成彩色图像;一种方法是转换颜色空间,将色度分量和亮度分量分开,仅对亮度分量进行图像插值。
在本实施例中,采用将彩色图像从RGB空间的图像转换到YCbCr(亮度分量、蓝色色度分量、红色色度分量),分别插值后再还原成RGB彩色图像的方法。
将RGB空间的图像转换到YCbCr的公式如下:
Y=0.299*R+0.587*G+0.114*B    (12)
Cr=(R-Y)*0.713+128           (13)
Cb=(B-Y)*0.564+128           (14)
优选的,图像插值时对低分辨率彩色图像的亮度图用最近邻插值方法进行插值,对两幅色度分量图进行插值,得到高分辨率彩色图像的亮度图和色度分量图;
在本实施例中,采用简单双三次插值的方法,对低分辨率彩色图像的蓝色色度分量和红色色度分量进行超分辨率插值重建,得到高分辨率彩色图像的蓝色色度分量图和红色色度分量图。
步骤S102,改进贝叶斯图像插值模型;
本发明对贝叶斯图像插值模型进行了改进,贝叶斯图像插值问题实际上是一个约束最优化的求解问题,而搜索方向和步长的确定是最优化问题求解速度的关键。发明针对精确一维搜索确定步长计算量很大,且对加速收敛作用不大的问题,提出采用简单后退准则的非精确一维搜索确定步长。对于代价函数的梯度不能用解析式表示的情形,提出寻找一个可解析表达的下降方向,使代价函数沿该下降方向收敛到极小点。搜索方向和步长的快速确定,减少了算法的庞大计算量, 加速了插值算法的执行。
步骤S103,插值校正,利用改进的贝叶斯图像插值模型校正高分辨率图像的亮度图,得到校正后的高分辨率图像的亮度图,其子步骤流程图见图3所示。
优选的,本步骤进一步包括如下子步骤:
子步骤A1,计算代价函数,即亮度图像平滑性度量值之和。代价函数的计算公式如下:
Ω ( z , T ) = Σ k = 0 q N 1 - 1 Σ l = 0 q N 2 - 1 Σ d = 0 3 ρ ( d k , l , d t z , T ) - - - ( 15 )
式中,dk,l,d tz表示图像局部平滑度,在图像的平滑区域,值较小,而在边缘区域,值较大。高分辨率图像的局部平滑性用二阶方向导数衡量,每个像素zk,l的4个二阶方向导数由二阶差分近似为
d k , l , d t z = m k , l , d * z k , l , d = 0,1,2,3 - - - ( 16 )
式中,md(d=0,1,2,3)分别表示水平、垂直、对角线和反对角线方向的二阶方向差分模板,“*”表示空间卷积。
参见图4a-4d是本实施列中一像素分量Zk,l的四个方向的差分模板。图4a是向量Zk,l水平方向二阶方向差分模板,图4b是向量Zk,l 垂直方向二阶方向差分模板,图4c是向量Zk,l反对角线方向二阶方向差分模板,图4d是向量Zk,l正对角线方向二阶方向差分模板。
子步骤A2,搜索代价函数下降方向;
用 
Figure S2008101172550D00093
表示高分辨率亮度分量初值图zk,l的拉普拉斯图像,定义为
Figure S2008101172550D00094
式中,k=0,1,L,qN1-1;l=0,1,L,qN2-1。
将 
Figure S2008101172550D00095
的卷积图像按行排列成q2N1N2维列向量,记 作vd(z(n))。
本发明找到的下降方向,用g(n)表示为
g ( n ) = Σ d = 0 3 υ d ( z ( n ) ) ( 18 )
子步骤A3,将下降方向投影到可行方向,投影公式如下:
d(n)=-Pg(n)    (19)
其中,投影矩阵P定义如下:
P=I-q2DTD    (20)
其中I为单位矩阵,q为水平和垂直方向的下采样/插值因子,D为尺寸为N1N2×q2N1N2的下采样矩阵。它的每一行有q2个值为1/q2的元素,将高分辨率图像的一个q×q像素块映射为一个低分辨率像素。参见图5,是本实施列下采样因子q取2时,下采样矩阵D的示意图。
子步骤A4,确定下降步长,本发明采用非精确一维搜索方法确定下降步长,设初始步长α=1,若αd(n)不是可行下降方向,则减小步长α为原值的1/2(称之为后退),直至αd(n)是可行下降方向。
判断αd(n)是否为可行下降方向的准则:
1)满足约束条件,则αd(n)是可行方向;
2)代价函数值小于原代价函数值,即Ω(z(n)+αd(n))<Ω(z(n)),则αd(n)是下降方向。
子步骤A5,像素亮度值校正,使得代价函数值减小。
令:
z(n+1)=z(n)nd(n) 。    (21)
设定阈值ε,
若连续两次的迭代结果满足
er=|Ω(z(n+1),T)-Ω(z(n),T)|/Ω(z(n),T)≤ε    (22)
则迭代终止,估计的高分辨率亮度图结果为 z ^ = z ( n + 1 ) ;
否则转向子步骤A1继续迭代。
优选的,如果输入的原始图像为彩色图像,在插值校正后,对高分辨彩色图像进行图像后处理,将经过校正后的高分辨率亮度图和色度分量图,反向转换成彩色图像。
实施例中,将步骤S103得到的高分辨率亮度图和优选步骤中得到的色度分量图,反向转换成RGB图像,公式如下:
R=Y+1.403*(Cr-128)                   (23)
G=Y-0.344*(Cr-128)-0.714*(Cb-128)    (24)
B=Y+1.773*(Cb-128)                   (25)
参见图6a,是输入计算机的低分辨率原始图像;图6b,是分辨率增强后得到的高分辨率图像;图6c,是本实施例采用本发明提供的方案对彩色图像进行分辨率增强后的最终效果图;通过比较不难看出,经过本发明的处理校正,得到了较为清晰的高分辨率图像。图6d,是采用双线性插值方法对图像进行分辨率增强后的效果图,通过本发明处理后图像与双线性插值方法处理后图像的对比,本技术方案的效果更为明显。
针对上述数字图像插值方法,本发明还提供了一种数字图像分辨率增强系统,参照图7,是实施例所述数字图像分辨率增强系统结构图,所述系统主要包括图像插值单元U101、模型改进单元U102、插值校正单元U103。
其中,所述图像插值单元U101,用于对低分辨率图像的亮度图超分辨率重建,本实施例中采用最近邻插值方法对亮度图进行插值。
优选的,本系统还可以包括图像预处理单元,用于对输入的低分辨率彩色图像进行颜色空间转换。
优选的,本系统还可以包括图像后处理单元,用于将高分辨率彩色图像亮度图、蓝色色度分量图以及红色色度分量图转换成RGB彩色图像。
本实施例中图像预处理单元采用将彩色图像从RGB颜色空间转换到YcrCb颜色空间的方法进行转换,转换后得到彩色图像的亮度图和红色、蓝色色度分量图。
所述模型改进单元U102,用于改进贝叶斯图像插值模型,针对精确一维搜索确定步长计算量很大,提出一种非精确的一维搜索方法确定步长;对于代价函数的梯度不能用解析式表示的情形,提出寻找一个可解析表达的下降方向,使代价函数值沿该下降方向收敛到极小点。搜索方向和步长的快速确定,减少了算法的庞大计算量,加速了插值算法的执行。
所述插值校正单元U103,用于校正高分辨率图像的亮度图,得到校正后的高分辨率图像的亮度图。
优选的,所述插值校正单元U103进一步包括:
下降方向搜索子单元,用于搜索代价函数值的下降方向;
空间映射子单元,用于将下降方向映射到可行方向上;
步长确定子单元,用于确定向量的下降步长;
像素亮度值校正子单元,用于确定高分辨率未知像素的亮度值。
图7所示系统中未详述的部分可以参见图1-图6所示方法的相关部分,为了篇幅考虑,在此不再详述。

Claims (6)

1.一种数字图像分辨率增强的方法,其特征在于,包括如下步骤:
图像插值,对低分辨率图像的亮度图用最近邻插值方法进行插值,得到高分辨率图像的亮度图;
贝叶斯图像插值模型改进,包括:改进搜索代价函数的下降方向的方法和确定下降步长的方法;
插值校正,利用改进的贝叶斯图像插值模型校正高分辨率图像的亮度图,得到校正后的高分辨率图像的亮度图;
改进搜索代价函数的下降方向的方法包括:
利用拉普拉斯导数算子,将高分辨率图像的亮度图转换为拉普拉斯图像;
将高分辨率亮度图像素的二阶方向差分模板和拉普拉斯图像像素亮度值的卷积图像排列成向量;
对像素水平、垂直、对角线和反对角线四个方向的卷积图像排成的向量求和,得到代价函数的下降方向;
改进确定下降步长的方法包括:
设定初始步长,判断步长在下降方向上是否可行;
如果不可行,减小步长为初始步长值的二分之一;
重复执行上面步骤,直到步长在下降方向上可行;
所述插值校正具体包括:
计算代价函数,对高分辨率图像亮度图的平滑性度量值求和;
搜索代价函数下降方向;
将下降方向投影到可行方向上;
确定下降步长;
像素亮度值校正,使代价函数值减小。
2.根据权利要求1所述的方法,其特征在于,在所述图像插值之前,对输入的低分辨率彩色图像进行颜色空间转换的图像预处理,获得低分辨率彩色图像的亮度图和色度分量图。
3.根据权利要求2所述的方法,其特征在于,在插值校正之后,对高分辨彩色图像进行图像后处理,把经过校正后的高分辨率亮度图和色度分量图,反向转换成彩色图像。
4.根据权利要求2或3所述的方法,其特征在于,图像插值时对低分辨率彩色图像的亮度图用最近邻插值方法进行插值,对色度分量图进行插值,得到高分辨率彩色图像的亮度图和色度分量图。
5.根据权利要求1所述的方法,其特征在于,所述判断步长在下降方向上是否可行具体是指:如果下降后新的代价函数值小于原代价函数值,步长在下降方向上可行。
6.一种数字图像分辨率增强系统,其特征在于,包括:
图像插值单元,用于对低分辨率图像的亮度图进行插值;
模型改进单元,用于改进贝叶斯图像插值模型,所述模型改进单元包括:搜索方向改进子单元,用于改进搜索代价函数的下降方向的方法;步长确定方法改进子单元,用于改进确定下降步长的方法;
插值校正单元,用于校正高分辨率图像的亮度图;
其中,搜索方向改进子单元包括:
转换子单元,用于利用拉普拉斯导数算子,将高分辨率图像的亮度图转换为拉普拉斯图像;
排列子单元,用于将高分辨率亮度图像素的二阶方向差分模板和拉普拉斯图像像素亮度值的卷积图像排列成向量;
求和子单元,用于对像素水平、垂直、对角线和反对角线四个方向的卷积图像排成的向量求和,得到代价函数的下降方向;
步长确定方法改进子单元包括:
步长判断子单元,用于设定初始步长,判断步长在下降方向上是否可行;
步长后退子单元,用于在设定的初始步长不可行时,减小步长为初始步长值的二分之一;
重复子单元,用于重复执行判断步长和减小步长步骤,直到步长在下降方向上可行;
所述插值校正单元包括:
代价函数计算子单元,用于计算代价函数,对高分辨率图像亮度图的平滑性度量值求和;
下降方向搜索子单元,用于搜索代价函数的下降方向;
空间映射子单元,用于将下降方向映射到可行方向;
步长确定子单元,用于确定向量的下降步长;
像素亮度值校正子单元,用于确定高分辨率未知像素的亮度值。
CN2008101172550A 2008-07-28 2008-07-28 一种数字图像分辨率增强的方法及系统 Active CN101639932B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2008101172550A CN101639932B (zh) 2008-07-28 2008-07-28 一种数字图像分辨率增强的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2008101172550A CN101639932B (zh) 2008-07-28 2008-07-28 一种数字图像分辨率增强的方法及系统

Publications (2)

Publication Number Publication Date
CN101639932A CN101639932A (zh) 2010-02-03
CN101639932B true CN101639932B (zh) 2011-10-12

Family

ID=41614900

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008101172550A Active CN101639932B (zh) 2008-07-28 2008-07-28 一种数字图像分辨率增强的方法及系统

Country Status (1)

Country Link
CN (1) CN101639932B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102222320B (zh) * 2011-05-24 2013-01-02 西安电子科技大学 基于全变分迭代反向投影的单帧图像空间分辨率增强方法
CN107155131A (zh) * 2016-03-02 2017-09-12 王进洪 一种视频图像分辨率处理系统及方法
CN107301621B (zh) * 2017-06-13 2020-06-16 东南大学 一种提高数字图像分辨率的方法
CN109886391B (zh) * 2019-01-30 2023-04-28 东南大学 一种基于空间正反对角卷积的神经网络压缩方法
CN113366482A (zh) * 2019-01-31 2021-09-07 奥林巴斯株式会社 医疗器具分析装置、医疗器具分析方法以及已学习模型
CN110784648B (zh) * 2019-11-07 2021-04-16 维沃移动通信有限公司 一种图像处理方法和电子设备
CN112330541A (zh) * 2020-11-11 2021-02-05 广州博冠信息科技有限公司 直播视频处理方法、装置、电子设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1416103A (zh) * 2002-12-13 2003-05-07 清华大学 基于子空间分解的高效数字图像大尺度放大方法
US6748120B1 (en) * 1998-12-18 2004-06-08 Canon Kabushiki Kaisha Steerable kernel for image interpolation
CN1588447A (zh) * 2004-08-19 2005-03-02 复旦大学 基于残差的遥感图像融合方法
CN1924928A (zh) * 2005-08-30 2007-03-07 美国西门子医疗解决公司 自动食管分割的概率最小路径

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6748120B1 (en) * 1998-12-18 2004-06-08 Canon Kabushiki Kaisha Steerable kernel for image interpolation
CN1416103A (zh) * 2002-12-13 2003-05-07 清华大学 基于子空间分解的高效数字图像大尺度放大方法
CN1588447A (zh) * 2004-08-19 2005-03-02 复旦大学 基于残差的遥感图像融合方法
CN1924928A (zh) * 2005-08-30 2007-03-07 美国西门子医疗解决公司 自动食管分割的概率最小路径

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2007-74516A 2007.03.22

Also Published As

Publication number Publication date
CN101639932A (zh) 2010-02-03

Similar Documents

Publication Publication Date Title
CN101639932B (zh) 一种数字图像分辨率增强的方法及系统
US9832388B2 (en) Deinterleaving interleaved high dynamic range image by using YUV interpolation
CN102222326B (zh) 一种基于单张低分辨率的图像去模糊方法及装置
CN1312939C (zh) 图像处理方法、图像处理程序、图像处理装置
US20150093039A1 (en) Image super-resolution reconstruction system and method
CN105354809B (zh) 一种基于输出图像像素位置索引的预畸变方法和装置
CN103093444A (zh) 基于自相似性和结构信息约束的图像超分辨重建方法
US8861846B2 (en) Image processing apparatus, image processing method, and program for performing superimposition on raw image or full color image
CN109919840A (zh) 基于密集特征融合网络的图像超分辨率重建方法
US20190073941A1 (en) Data converting method and apparatus, and computer-readable storage medium
CN102118624A (zh) 一种从rgb色彩空间到yuv色彩空间的图像转换方法
CN110706151B (zh) 一种面向视频的非均匀风格迁移方法
CN102280096B (zh) 一种融合图像缩放与颜色空间转换的方法
CN100568913C (zh) 基于梯度的边缘增强颜色插值方法
CN108805806A (zh) 图像处理方法及装置
US7668366B2 (en) Mosaic image data processing
CN107248147B (zh) Raw-rgb图像中坏点消除的方法
CN109285113B (zh) 一种基于梯度的改进彩色图像插值方法
CN113068011B (zh) 图像传感器、图像处理方法及系统
CN107220934A (zh) 图像重建方法及装置
CN102903091B (zh) 用于在数字图像处理设备中拼接图像的方法
CN107622477A (zh) 一种rgbw图像联合去马赛克和去模糊方法
WO2023078015A1 (zh) 一种视频帧的帧内预测模式筛选方法及装置
CN105704363B (zh) 图像数据处理方法和装置
CN102300086A (zh) 对参考帧边界进行扩展和对运动补偿参考样本位置进行限定的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant