CN106875352B - 一种低照度图像增强方法 - Google Patents
一种低照度图像增强方法 Download PDFInfo
- Publication number
- CN106875352B CN106875352B CN201710031020.9A CN201710031020A CN106875352B CN 106875352 B CN106875352 B CN 106875352B CN 201710031020 A CN201710031020 A CN 201710031020A CN 106875352 B CN106875352 B CN 106875352B
- Authority
- CN
- China
- Prior art keywords
- exposure
- image
- model
- formula
- low
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000005286 illumination Methods 0.000 title claims abstract description 28
- 230000004044 response Effects 0.000 claims abstract description 72
- 230000002708 enhancing effect Effects 0.000 claims abstract description 26
- 239000011159 matrix material Substances 0.000 claims description 32
- 230000000007 visual effect Effects 0.000 abstract description 6
- 230000004927 fusion Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 3
- 235000013399 edible fruits Nutrition 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000002156 mixing Methods 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007500 overflow downdraw method Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000005316 response function Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
本发明公布了一种基于相机响应特性的低照度图像增强方法,选用一种曝光模型并得到与之对应的相机响应方程模型;确定相机响应模型的参数;估测所要生成的多曝光图像序列与原始图像的曝光比例,生成多曝光图像序列;将多曝光图像进行图像融合,由此得到一个视觉效果更好、失真更少的增强结果。本发明能够解决现有的低照度图像增强算法在增强图像的同时引入较多人工痕迹的问题,得到一个视觉效果更好、失真更少的增强结果,从而得到一个自然度保持的图像增强结果。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种利用相机响应特性进行低照度图像增强的方法。
背景技术
低照度图像是指局部或全局较暗的图像,例如在较低光照度的条件下拍摄的图像。低照度图像可视性较差,严重影响人们的观察和一些计算机视觉算法的性能。计算机视觉算法通常要求输入图像有较高的可视性,绝大多数算法无法直接对低照度图像进行处理,因此,一些低照度图像往往需要图像增强之后再进行相关操作。为了解决这一问题,已有很多低照度图像的增强算法。低照度增强算法通过改变输入图像的像素亮度使增强结果有更高的可视性。现有的低照度增强方法主要分以下四种:
一、非线性方程映射进行低光照增强的方法:该使用一些非线性的单调方程进行灰度级的映射,例如幂函数、对数函数、指数函数等等。
二、直方图均衡化进行低光照增强的方法:考虑到低光度图像直方图不均匀分布,这种方法使用直方图均衡化来增强低光度图像,通过改变图像的对比度,使图像有较好的可视性。但是,该方法却可能由于图像对比度的过增强而导致增强结果失真。
三、利用视网膜理论进行低光照增强的方法:视网膜理论通过将图像分为辐照度与反射两种分量来增强低光度图像,这种方法可以明显的增强图像细节,但是增强结果却经常出现光晕现象。
四、基于去雾理论进行低光照图像增强的方法:这类方法能够达到良好的主观结果,但是,它们也会因为对比度的过增强而导致一些颜色失真。
综合来看,现有的低光度图像增强方法在增强图像的同时由于引入一些人工痕迹,例如颜色失真,对比度失真等,很难得到一个自然度保持的增强结果,不仅影响人们的主观视觉感受,同时也会影响计算机视觉算法的性能。
发明内容
为了克服上述现有技术的不足,本发明提供提出一种基于相机响应特性的低照度图像增强方法,能够解决现有的低照度图像增强算法在增强图像的同时引入较多人工痕迹的问题,得到一个视觉效果更好,失真更少的增强结果,能够较大程度的保持图像的真实性,从而得到一个自然度保持的图像增强结果。
本发明的原理是:相机的响应特性能够提供很多有用的信息,本发明利用相机的响应特性,首先选用一种能够精确描述不同曝光图像之间关系的曝光模型,并得到与之对应的相机响应方程模型;然后通过低照度图像对应相机的相机响应曲线或者该类相机拍摄出的两张不同曝光的图像确定模型的参数;随后,估测所要生成的多曝光图像序列与原始图像的曝光比例,并利用曝光模型生成多曝光图像序列;最后,利用图像融合的算法将这些多曝光图像融合,由此得到一个视觉效果更好、失真更少的增强结果。
本发明提供的技术方案是:
一种低照度图像增强方法,基于相机响应特性,选择曝光模型并得到所述曝光模型对应的相机响应方程模型;估测所要生成的多曝光图像序列与原始图像的曝光比例,利用曝光模型生成多曝光图像序列;再将所述多曝光图像序列进行图像融合;由此得到保持图像自然度的增强图像结果;包括如下步骤:
1)输入一张低照度图像B,计算得到该图像的亮度分量Y;
2)确定相机响应方程模型及其参数,包括:
21)选择曝光模型,进一步得到曝光模型对应的相机响应方程模型;
22)确定所述相机响应方程模型的模型参数;
3)计算所要生成的多曝光图像序列与输入图像B之间的曝光比例集合K;
4)根据所述的曝光比例集合K,利用曝光模型生成多曝光图像序列;
5)将得到的多曝光图像序列利用图像融合的方法进行融合,得到增强结果并输出;
上述低照度图像增强方法,进一步地,步骤1)通过式6计算得到图像B的亮度分量Y:
其中,Br、Bg、Bb分别为图像B的R、G、B三通道分量值。
上述低照度图像增强方法,进一步地,步骤21)所述曝光模型为式1
式中,B0和B1代表相同场景不同曝光的两张图像;β、γ是该曝光模型的两个参数;从式1中,可以推出所述模型对应的相机响应方程模型为式2:
其中,k为图像B1与B0之间的曝光比例;E是场景的辐照度。
上述低照度图像增强方法,进一步地,步骤22)确定所述相机响应方程模型的相机响应参数的方法包括:
方法一:当已知对应相机的相机响应曲线时,通过相机响应方程模型使用最小二乘拟合法拟合该相机响应曲线,得到响应参数a、b;
方法二:当相机响应曲线未知时,通过式4映射两张相同场景下不同曝光图像之间的关系,得到
式4中,B0和B1代表相同场景不同曝光的两张图像的两张图像;
得到之后,根据式2相机响应方程模型以及图像B1、B0的曝光比例k,得到响应模型的参数a和b;
方法三:当只有一张输入图像而相机的信息未知时,使用多个真实相机响应曲线进行平均,得到平均相机响应曲线,作为该相机的响应曲线;再对该响应曲线进行拟合得到参数a和b。
上述低照度图像增强方法,进一步地,步骤3)所述估测曝光比例集合K包括如下步骤:
31)定义图像的权值矩阵为式7,用于表示一幅图像中不同像素点的曝光情况:
式7中,Yk表示与输入图像曝光比例为k的图像的亮度分量;Wk是图像Yk所对应的权值矩阵,矩阵中某点的权值数值越大,表明该点越接近正常曝光;
32)定义权值矩阵的加法和减法,加法为式8,减法为式9:
式8和式9中,max运算表示取矩阵中对应元素的最大值;
33)估测生成曝光比例集合K,包括:
331)预设曝光权值总量的门限值τ,计算输入图像的曝光权值矩阵W1,并初始化当前曝光序列的曝光权值矩阵W←W1,同时曝光比例集合K←{1};
332)搜索得到使所述当前曝光序列的曝光权值W权值总量增加最多的曝光比例
333)当曝光权值增加量不小于所述门限值τ时,记录获得的曝光比例同时更新当前曝光序列权值矩阵返回步骤332)继续搜索下一个曝光比例
334)当曝光权值总量小于所述门限值τ时,结束操作,得到曝光比例集合K。
上述低照度图像增强方法,本发明实施例中,门限值τ=0.01。
上述低照度图像增强方法,进一步地,步骤4)依次令k*等于所述的曝光集合K中的每一个元素,通过式5生成多曝光图像序列:
式5中,k*为所述的曝光比例集合K中的某一元素。B0为输入的低照度图像,B*为与输入图像B0曝光比为k*的生成图像。
上述低照度图像增强方法,进一步地,步骤5)所述图像融合方法可以采用任意现有的多曝光图像融合算法。在本发明实施例中,具体采用文献(Ma Kede and Wang Zhou,MULTI-EXPOSURE IMAGE FUSION:A PATCH-WISE APPROACH,IEEE ma2015multi,2015)所记载的图像融合方法。
与现有技术相比,本发明的有益效果是:
本发明提供了一种基于相机响应特性的低照度图像增强算法,能够保持图像自然度。本发明首先选用了一种能够精确描述不同曝光图像之间关系的曝光模型,并得到与之对应的相机响应方程模型。然后通过低照度图像对应相机的相机响应曲线或者该类相机拍摄出的两张不同曝光的图像确定模型的参数。随后,估测所要生成的多曝光图像序列与原始图像的曝光比例,并利用曝光模型生成多曝光图像序列。最后,利用图像融合的算法将这些多曝光图像融合,得到增强结果。本发明能够解决现有的低照度图像增强算法在增强图像的同时引入较多人工痕迹的问题,得到视觉效果良好、人工痕迹较少、失真更少的增强结果,能够较大程度的保持图像的真实性,从而得到一个自然度保持的图像增强结果。本方法可作为图像预处理方法,应用到多种计算机视觉领域。
附图说明
图1为本发明提供的低照度图像增强方法的流程框图。
图2为实施例中多曝光图像序列及其权值矩阵和权值矩阵运算结果的示意图;
其中,第一行为某场景的多曝光图像序列;第二行为多曝光图像序列的权值矩阵图;第三行为权值矩阵运算的结果图像。
图3为本发明实施例中采用的低照度输入图像。
图4为本发明实施例中得到的增强结果图像。
具体实施方式
下面结合附图,通过实施例进一步描述本发明,但不以任何方式限制本发明的范围。
本发明提供了一种基于相机响应特性的低照度图像增强算法,能够保持图像自然度。本发明首先选用了一种能够精确描述不同曝光图像之间关系的曝光模型,并得到与之对应的相机响应方程模型。然后通过低照度图像对应相机的相机响应曲线或者该类相机拍摄出的两张不同曝光的图像确定模型的参数。随后,估测所要生成的多曝光图像序列与原始图像的曝光比例,并利用曝光模型生成多曝光图像序列。最后,利用图像融合的算法将这些多曝光图像融合,得到增强结果。图1为本发明提供的低照度图像增强方法的流程框图,包括以下步骤:
步骤1,曝光模型的选择:我们选择了一种能够精确描述不同曝光图像之间关系的曝光模型。该曝光模型的表达式为:
式中,B0和B1代表相同场景不同曝光的两张图像;β、γ是曝光模型的两个参数。实验中我们观察到,对于彩色图像,R、G、B三通道的β、γ参数值相差较小。所以我们假设三通道共用一套参数。
根据式1,我们可以得到该曝光模型对应的相机响应方程模型表达式为式2:
其中,k为图像B1与B0之间的曝光比例;E是场景的辐照度;a,b,c为相机响应方程模型的参数,它们与曝光模型的参数β,γ的关系在式2中列出。
步骤2,相机响应方程模型参数a、b的确定:对于具体的相机,需要确定它的模型参数。如果已知对应相机的相机响应曲线,可以通过相机响应方程模型使用最小二乘拟合法拟合该相机响应曲线得到响应参数a、b。
式3中,n是从曲线上抽得的样本点的个数;Ei是第i个样本点对应的辐照度;yi辐照度为Ei时图像的亮度值;f为式2中的相机响应方程。
如果相机响应曲线未知,也可以通过式4映射两张相同场景下不同曝光图像之间的关系得到
式4中,B0和B1代表相同场景不同曝光的两张图像。
得到之后,根据式2以及B1、B0的曝光比例k得到响应模型的参数a、b。
如果我们仅仅有一张输入图像,并不知道具体相机的信息,可以使用多个真实相机响应曲线进行平均,得到的平均相机响应曲线来近似表达相机的响应曲线;再对该曲线进行拟合得到参数a、b。
步骤3,低照度图像输入:输入一张低照度图像B,并计算出该图像的亮度分量Y,亮度分量通过式6计算得到:
其中,Br、Bg、Bb分别为图像B的R、G、B三通道分量值。
步骤4,曝光比例K的估测:不同的多曝光图像序列将对图像融合算法性能产生很大的影响,因此,为了得到更好的图像融合结果,同时使图像融合程序运算效率最高,我们需要合理的选择多曝光图像序列中各图像与输入图像之间的曝光比例集合K。理想的曝光比例集合K应该使用尽可能少的图像反映尽可能多的场景信息。一般的,对于图像融合算法来说,合理曝光的区域会比不合理曝光区域携带更多场景信息。因此,多曝光序列图像应该使场景中尽可能多的点达到过合理曝光。附图2第一行展示了某场景的多曝光图像序列,可以看出来,三幅图像分别使蓝天、道路、建筑物达到了较为合理的曝光。
为了衡量一幅图像中不同像素点的曝光情况,我们定义了图像的权值矩阵为式7:
式中,Yk表示与输入图像曝光比例为k的图像的亮度分量,Wk是图像Yk所对应的权值矩阵。矩阵中某点的数值越大,表明该点越接近正常曝光,所能提供的场景信息量也就越多。附图2第二行展示了多曝光图像序列的权值矩阵图,图中越亮的点越接近合理曝光。
如前所述,不同曝光值的图像中合理曝光的区域也是不完全相同的。在已知某场景多曝光图像序列的情况下,为了衡量场景中不同像素点曝光情况,我们定义了权值矩阵的加法如式8:
式中,max运算表示取矩阵Wi和Wj中对应元素的最大值。我们同时定义权值矩阵的减法如式9:
式9表示在已知曝光比例为j的图像Bj的情况下,增加曝光比例为i的图像Bi能够使场景中的哪些像素趋于合理曝光。附图2中第三行展示了权值矩阵运算的结果图像。
根据以上的定义,可以写出K的生成算法如算法1(曝光比例生成器)所示:
上述曝光比例是生成器算法,首先计算输入图像的曝光权值矩阵,同时初始化当前曝光序列的权值矩阵W,以及曝光比例集合K,随后搜索得到使所述当前曝光序列的曝光权值W权值总量增加最多的曝光比例并判断增加的曝光权值总量是否小于一个预设的门限值τ,如果小于该门限值,证明增加的权值量已经很少,则跳出循环终止程序,输出K。反之,则记录获得的曝光比例同时更新当前曝光序列权值矩阵W,并继续寻找下一个曝光比例直至算法终止输出K。
步骤5,生成多曝光图像序列:利用步骤2中得到的参数a、b以及步骤4中得到的曝光比例集合K,依次令k*等于集合K中的每一个元素,通过式5生成多曝光图像序列。
式5中,k*为所述的曝光比例集合K中的某一元素。B0为输入的低照度图像,B*为与输入图像B0曝光比为k*的生成图像。
步骤6,图像融合:将步骤5中所得到的图像利用图像融合进行融合,得到增强结果,并输出。
以下实施例利用本发明上述低照度图像增强方法,对图3所示的低照度图像B进行图像增强,包括以下步骤:
1、确定相机响应方程模型参数a,b:我们假设不知道具体相机的信息,而将文献(Grossberg,Michael D and Nayar,Shree K,What is the Space of Camera ResponseFunctions?,IEEE grossberg2003space,2003)中提出的真实相机响应曲线DoRF数据集中所有响应曲线取平均,得到平均相机响应曲线。使用公式(式3)确定相机响应方程模型参数a、b:
令n=256,Ei在[0,1]上均匀分布,拟合该曲线得到参数a=-0.3293,b=1.1258。
2、低照度图像输入:输入一张低照度图像B,如附图3所示,并使用公式(式6)计算出该图像的亮度分量Y:
3、曝光比例K的估测:按照算法1(曝光比例生成器),首先根据公式(式7):
令k=1,σ=0.5,计算输入图像的权值矩阵W1。令W←W1然后根据公式(式11):
计算对应的随后判断式12是否成立:
式12中,取门限值τ=0.01。如果成立,则跳出循环终止程序,输出集合K。反之,则
记录获得的曝光比例同时通过式13更新当前曝光序列图像权值矩阵W:
并继续寻找下一个曝光比例直到算法终止,输出集合K。
4、生成多曝光图像序列:依次令k*等于集合K中的每一个元素,根据公式(式5)生成多曝光图像序列:
5、图像融合:本步骤中,可以使用任意多曝光图像融合算法对所生成的图像序列进行融合得到增强结果。本示例选用了文献(Ma Kede and Wang Zhou,MULTI-EXPOSUREIMAGE FUSION:A PATCH-WISE APPROACH,IEEE ma2015multi,2015)中所记载的图像融合方法,经图像增强得到的结果图像如图4所示。
需要注意的是,公布实施例的目的在于帮助进一步理解本发明,但是本领域的技术人员可以理解:在不脱离本发明及所附权利要求的精神和范围内,各种替换和修改都是可能的。因此,本发明不应局限于实施例所公开的内容,本发明要求保护的范围以权利要求书界定的范围为准。
Claims (6)
1.一种低照度图像增强方法,基于相机响应特性,选择曝光模型并得到所述曝光模型对应的相机响应方程模型;估测所要生成的多曝光图像序列与原始图像的曝光比例,利用曝光模型与测得的曝光比例生成多曝光图像序列;再将所述多曝光图像序列进行图像融合;由此得到保持图像自然度的增强图像结果;包括如下步骤:
1)输入一张低照度图像,计算得到该图像的亮度分量;
2)确定相机响应方程模型及其参数,包括:
21)选择曝光模型,得到曝光模型对应的相机响应方程模型;
22)确定所述相机响应方程模型的模型参数;
3)计算所要生成的多曝光图像序列与输入的低照度图像之间的曝光比例集合;估测曝光比例集合包括如下步骤:
31)定义图像的权值矩阵为式(1),用于表示一幅图像中不同像素点的曝光情况:
式(1)中,Yk表示与输入图像曝光比例为k的图像的亮度分量;Wk是图像Yk所对应的权值矩阵,矩阵中某点的权值数值越大,表明该点越接近正常曝光;
32)定义权值矩阵的加法和减法,加法为式(2),减法为式(3):
式(2)和式(3)中,max运算表示取矩阵Wi和Wj中对应元素的最大值;Wi和Wj分别为不同图像对应的权值矩阵;
33)估测生成曝光比例集合K,包括:
331)将输入图像放入多曝光序列中;预设曝光权值总量的门限值τ;
332)搜索得到使所述输入图像曝光权值总量增加最多的曝光比例
333)当曝光权值总量不小于所述门限值时,记录获得的曝光比例同时更新当前曝光序列权值矩阵W,返回步骤332)继续搜索下一个曝光比例
334)当曝光权值总量小于所述门限值时,结束操作,得到曝光比例集合K;
4)根据所述的曝光比例集合,利用曝光模型生成多曝光图像序列;
5)将得到的多曝光图像序列利用图像融合的方法进行融合,得到增强结果并输出。
2.如权利要求1所述低照度图像增强方法,其特征是,步骤1)通过式(4)计算得到所述低照度图像的亮度分量:
其中,Y为图像的亮度分量;Br、Bg、Bb分别为图像的R、G、B三通道分量值。
3.如权利要求1所述低照度图像增强方法,其特征是,步骤3)所述门限值τ=0.01。
4.如权利要求1所述低照度图像增强方法,其特征是,步骤21)所述曝光模型为式(5):
式中,B0和B1是两个矩阵,代表相同场景曝光值不同的两张图像;β、γ是曝光模型的两个参数;
对于彩色图像,假设R、G、B三通道共用β、γ参数,得到式(1)所述模型对应的相机响应方程模型为式(6):
其中,k为图像B1与B0之间的曝光比例;E是场景的辐照度;a、b、c均为相机响应方程模型的参数。
5.如权利要求1所述低照度图像增强方法,其特征是,步骤22)确定所述相机响应方程模型的相机响应参数a和b的方法包括:
方法一:当已知对应相机的相机响应曲线时,通过相机响应方程模型使用最小二乘拟合法拟合该相机响应曲线,得到响应参数a、b;
方法二:当相机响应曲线未知时,通过式(7)映射两张相同场景下不同曝光图像之间的关系,得到
式(7)中,B0和B1是两个矩阵,代表相同场景不同曝光的两张图像;
得到之后,根据相机响应方程模型和B1、B0的曝光比例k,得到响应模型的参数a和b;
方法三:当只有一张低照度的图像而相机的信息未知时,使用多个真实相机响应曲线进行平均,得到平均相机响应曲线,作为该相机的响应曲线;再对该响应曲线进行拟合得到参数a和b。
6.如权利要求1所述低照度图像增强方法,其特征是,步骤4)通过式(8)生成任意曝光量的多曝光图像序列:
式(8)中,k*为生成图像B*与原始图像B0之间的曝光比例;a和b为相机响应参数;β*和γ*是在曝光比例为k*时模型的参数。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710031020.9A CN106875352B (zh) | 2017-01-17 | 2017-01-17 | 一种低照度图像增强方法 |
US16/478,570 US10614561B2 (en) | 2017-01-17 | 2017-08-04 | Method for enhancing low-illumination image |
PCT/CN2017/095931 WO2018133379A1 (zh) | 2017-01-17 | 2017-08-04 | 一种低照度图像增强方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710031020.9A CN106875352B (zh) | 2017-01-17 | 2017-01-17 | 一种低照度图像增强方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106875352A CN106875352A (zh) | 2017-06-20 |
CN106875352B true CN106875352B (zh) | 2019-08-30 |
Family
ID=59157586
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710031020.9A Active CN106875352B (zh) | 2017-01-17 | 2017-01-17 | 一种低照度图像增强方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10614561B2 (zh) |
CN (1) | CN106875352B (zh) |
WO (1) | WO2018133379A1 (zh) |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106875352B (zh) * | 2017-01-17 | 2019-08-30 | 北京大学深圳研究生院 | 一种低照度图像增强方法 |
CN107833184A (zh) * | 2017-10-12 | 2018-03-23 | 北京大学深圳研究生院 | 一种基于多曝光生成再融合框架的图像增强方法 |
CN110232658B (zh) * | 2018-03-05 | 2021-12-03 | 北京大学 | 图像去雨方法、系统、计算机设备及介质 |
US11094039B1 (en) | 2018-09-11 | 2021-08-17 | Apple Inc. | Fusion-adaptive noise reduction |
US11189017B1 (en) * | 2018-09-11 | 2021-11-30 | Apple Inc. | Generalized fusion techniques based on minimizing variance and asymmetric distance measures |
CN109712091B (zh) * | 2018-12-19 | 2021-03-23 | Tcl华星光电技术有限公司 | 图片处理方法、装置及电子设备 |
CN110211077B (zh) * | 2019-05-13 | 2021-03-09 | 杭州电子科技大学上虞科学与工程研究院有限公司 | 一种基于高阶奇异值分解的多曝光图像融合方法 |
CN110378861B (zh) * | 2019-05-24 | 2022-04-19 | 浙江大华技术股份有限公司 | 一种图像融合方法及装置 |
CN112541859B (zh) * | 2019-09-23 | 2022-11-25 | 武汉科技大学 | 一种光照自适应的人脸图像增强方法 |
CN111080565B (zh) * | 2019-12-11 | 2023-07-18 | 九江学院 | 基于图像质量变化规律的曝光融合方法、设备和存储介质 |
CN111429366B (zh) * | 2020-03-03 | 2022-05-17 | 浙江大学 | 基于亮度转换函数的单帧弱光图像增强方法 |
CN111815529B (zh) * | 2020-06-30 | 2023-02-07 | 上海电力大学 | 一种基于模型融合和数据增强的低质图像分类增强方法 |
CN111932471B (zh) * | 2020-07-24 | 2022-07-19 | 山西大学 | 用于低照度图像增强的双路曝光度融合网络模型及方法 |
CN111899193B (zh) * | 2020-07-30 | 2024-06-14 | 湖北工业大学 | 一种基于低照度图像增强算法的刑侦摄影系统及方法 |
CN111915526B (zh) * | 2020-08-05 | 2024-05-31 | 湖北工业大学 | 一种基于亮度注意力机制低照度图像增强算法的摄影方法 |
CN112508814B (zh) * | 2020-12-07 | 2022-05-20 | 重庆邮电大学 | 一种基于无人机低空视角下的图像色调修复型去雾增强方法 |
CN113096033B (zh) * | 2021-03-22 | 2024-05-28 | 北京工业大学 | 基于Retinex模型自适应结构的低光照图像增强方法 |
CN113034413B (zh) * | 2021-03-22 | 2024-03-05 | 西安邮电大学 | 一种基于多尺度融合残差编解码器的低照度图像增强方法 |
CN113034395A (zh) * | 2021-03-26 | 2021-06-25 | 上海工程技术大学 | 一种低照度图像增强方法 |
CN113160096B (zh) * | 2021-05-27 | 2023-12-08 | 山东中医药大学 | 一种基于视网膜模型的低光图像增强方法 |
CN113347369B (zh) * | 2021-06-01 | 2022-08-19 | 中国科学院光电技术研究所 | 一种深空探测相机曝光调节方法、调节系统及其调节装置 |
CN114066764B (zh) * | 2021-11-23 | 2023-05-09 | 电子科技大学 | 基于距离加权色偏估计的沙尘退化图像增强方法及装置 |
CN114943652A (zh) * | 2022-04-19 | 2022-08-26 | 西北工业大学 | 低照度遥感图像的高动态重建方法及装置 |
CN114862722B (zh) * | 2022-05-26 | 2023-03-24 | 广州市保伦电子有限公司 | 一种图像亮度增强实现方法及处理终端 |
CN115034991B (zh) * | 2022-06-14 | 2024-08-02 | 湖北工业大学 | 用于盾尾间隙智能监测的图像对比度增强方法、系统 |
CN115619659B (zh) * | 2022-09-22 | 2024-01-23 | 北方夜视科技(南京)研究院有限公司 | 基于正则化高斯场模型的低照度图像增强方法与系统 |
WO2024127590A1 (ja) * | 2022-12-15 | 2024-06-20 | 日本電信電話株式会社 | 画像強調装置、画像強調方法及びプログラム |
CN116129375B (zh) * | 2023-04-18 | 2023-07-21 | 华中科技大学 | 一种基于多曝光生成融合的弱光车辆检测方法 |
CN117014729B (zh) * | 2023-09-27 | 2023-12-05 | 合肥辉羲智能科技有限公司 | 一种二次曝光图像融合高动态范围图像的方法及系统 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101916431A (zh) * | 2010-07-23 | 2010-12-15 | 北京工业大学 | 一种低照度图像数据处理方法及系统 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7840066B1 (en) | 2005-11-15 | 2010-11-23 | University Of Tennessee Research Foundation | Method of enhancing a digital image by gray-level grouping |
US8346008B2 (en) * | 2009-06-09 | 2013-01-01 | Aptina Imaging Corporation | Systems and methods for noise reduction in high dynamic range imaging |
CN101661620A (zh) * | 2009-09-18 | 2010-03-03 | 北京航空航天大学 | 单幅图像相机响应曲线标定方法 |
JP2013038504A (ja) * | 2011-08-04 | 2013-02-21 | Sony Corp | 撮像装置、および画像処理方法、並びにプログラム |
JP2013085040A (ja) * | 2011-10-06 | 2013-05-09 | Sanyo Electric Co Ltd | 画像処理装置 |
CN106875352B (zh) * | 2017-01-17 | 2019-08-30 | 北京大学深圳研究生院 | 一种低照度图像增强方法 |
-
2017
- 2017-01-17 CN CN201710031020.9A patent/CN106875352B/zh active Active
- 2017-08-04 WO PCT/CN2017/095931 patent/WO2018133379A1/zh active Application Filing
- 2017-08-04 US US16/478,570 patent/US10614561B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101916431A (zh) * | 2010-07-23 | 2010-12-15 | 北京工业大学 | 一种低照度图像数据处理方法及系统 |
Non-Patent Citations (3)
Title |
---|
Comparametric Equations with Practical Applications in Quantigraphic Image Processing;Steve Mann;《IEEE TRANSACTIONS ON IMAGE PROCESSING》;20000831;第9卷(第8期);第1389-1405页 |
Modeling the space of camera response functions;M.D.Grossberg et al.;《IEEE transactions on pattern analysis and machine intelligence》;20041231;第26卷(第10期);第1272-1282页 |
图像信号处理器的宽动态算法设计;沈国权;《中国优秀硕士学位论文全文数据库》;20140115(第1期);第7-15页 |
Also Published As
Publication number | Publication date |
---|---|
WO2018133379A1 (zh) | 2018-07-26 |
CN106875352A (zh) | 2017-06-20 |
US20190333200A1 (en) | 2019-10-31 |
US10614561B2 (en) | 2020-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106875352B (zh) | 一种低照度图像增强方法 | |
US9639945B2 (en) | Depth-based application of image effects | |
US9852499B2 (en) | Automatic selection of optimum algorithms for high dynamic range image processing based on scene classification | |
CN105279746B (zh) | 一种基于双边滤波的多曝光图像融合方法 | |
Li et al. | A multi-scale fusion scheme based on haze-relevant features for single image dehazing | |
CN109829868B (zh) | 一种轻量级深度学习模型图像去雾方法、电子设备及介质 | |
Vonikakis et al. | Multi-exposure image fusion based on illumination estimation | |
CN113822830B (zh) | 基于深度感知增强的多曝光图像融合方法 | |
CN108024105A (zh) | 图像色彩调节方法、装置、电子设备及存储介质 | |
Huang et al. | A color multi-exposure image fusion approach using structural patch decomposition | |
Kao | High dynamic range imaging by fusing multiple raw images and tone reproduction | |
Shutova et al. | NTIRE 2023 challenge on night photography rendering | |
Masood et al. | Automatic Correction of Saturated Regions in Photographs using Cross‐Channel Correlation | |
Vanmali et al. | Low complexity detail preserving multi-exposure image fusion for images with balanced exposure | |
Dwivedi et al. | Single image dehazing using extended local dark channel prior | |
Jang et al. | Inverse tone mapping operator using sequential deep neural networks based on the human visual system | |
Zhao et al. | Learning tone curves for local image enhancement | |
Li et al. | Multi-exposure image fusion based on improved pyramid algorithm | |
Saha et al. | Low dynamic range image set generation from single image | |
Moumene et al. | Generalized exposure fusion weights estimation | |
Wang et al. | Low visual difference virtual high dynamic range image synthesizer from a single legacy image | |
Zhang et al. | A dynamic range adjustable inverse tone mapping operator based on human visual system | |
JP2006186983A (ja) | カラー画像の露出補正方法 | |
JP5050141B2 (ja) | カラー画像の露出評価方法 | |
Hasan et al. | A Comprehensive Approach to Enhance Dark Image Implementing Image Processing Techniques |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |