CN107292853B - 图像处理方法、装置、计算机可读存储介质和移动终端 - Google Patents

图像处理方法、装置、计算机可读存储介质和移动终端 Download PDF

Info

Publication number
CN107292853B
CN107292853B CN201710626251.4A CN201710626251A CN107292853B CN 107292853 B CN107292853 B CN 107292853B CN 201710626251 A CN201710626251 A CN 201710626251A CN 107292853 B CN107292853 B CN 107292853B
Authority
CN
China
Prior art keywords
image
defogging
processed
brightness value
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710626251.4A
Other languages
English (en)
Other versions
CN107292853A (zh
Inventor
袁全
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710626251.4A priority Critical patent/CN107292853B/zh
Publication of CN107292853A publication Critical patent/CN107292853A/zh
Application granted granted Critical
Publication of CN107292853B publication Critical patent/CN107292853B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/73—Deblurring; Sharpening
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/70—Denoising; Smoothing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20024—Filtering details
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及一种图像处理方法、装置、计算机可读存储介质和移动终端。上述方法包括获取待处理图像的去雾参数值，根据所述去雾参数值对所述待处理图像进行去雾处理；获取所述待处理图像中特征信息，根据所述特征信息获取对应的图像类型及所述图像类型的亮度值；根据所述对应图像类型的亮度值调整去雾后图像的亮度值。上述方法，获取待处理图像的图像类型及对应的亮度值，并根据图像类型对应的亮度值调整去雾后图像的亮度值，调整去雾后图像亮度值，提高了图像的视觉观感，同时对不同类型的图像调整到不同的亮度值，实现了图像处理的智能化。

Description

图像处理方法、装置、计算机可读存储介质和移动终端
技术领域
本发明涉及计算机技术领域，特别是涉及一种图像处理方法、装置、计算机可读存储介质和移动终端。
背景技术
雾是日常生活中常见的自然现象，雾的出现会使得大气能见度降低，在雾天拍摄图像时，大气能见度降低会使得拍摄的图像对比度差、清晰度低。因此，在雾天拍摄图像后，需要对图像进行去雾处理。对图像的去雾处理可包括多种去雾算法，不同的去雾算法具有不同的模型，不同的去雾算法所适用的图像类型也不同。
发明内容
本发明实施例提供一种图像处理方法、装置、计算机可读存储介质和移动终端，可以去除雾天拍摄图像中的噪声污染。
一种图像处理方法，包括：
获取待处理图像的去雾参数值，根据所述去雾参数值对所述待处理图像进行去雾处理；
获取所述待处理图像中特征信息，根据所述特征信息获取对应的图像类型及所述图像类型的亮度值；
根据所述对应图像类型的亮度值调整去雾后图像的亮度值。
一种图像处理装置，包括：
去雾模块，用于获取待处理图像的去雾参数值，根据所述去雾参数值对所述待处理图像进行去雾处理；
识别模块，用于获取所述待处理图像中特征信息，根据所述特征信息获取对应的图像类型及所述图像类型的亮度值；
调整模块，用于根据所述对应图像类型的亮度值调整去雾后图像的亮度值。
一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行如上所述的图像处理方法。
一种移动终端，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如上所述的图像处理方法。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为一个实施例中图像处理方法的流程图；
图2为一个实施例中图像处理装置的结构框图；
图3为另一个实施例中图像处理装置的结构框图；
图4为另一个实施例中图像处理装置的结构框图；
图5为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
图1为一个实施例中图像处理方法的流程图。如图1所示，一种图像处理方法，包括步骤102至步骤106：
102，获取待处理图像的去雾参数值，根据去雾参数值对待处理图像进行去雾处理。
具体地，待处理图像可为含雾图像，也可为不含雾图像。对图像的去雾处理包括多种算法，如暗原色先验去雾算法、单幅图像去雾算法等。以单幅图像去雾算法为例，去雾参数值可包括大气光值、透射率和空气光值；以暗原色先验去雾算法为例，去雾参数值包括大气光值和透射率；基于暗原色先验算法对待处理图像进行去雾的步骤包括：
获取大气散射模型
I(x)＝J(x)t(x)+A(1-t(x))
其中，I(x)为观测到的图像信息，J(x)为来自目标的辐射信息，也就是复原后的无雾图像，x表示图像中某一像素的空间位置，t(x)为透射率，A为无穷远处的大气光值。大气光值可通过待处理图像的灰度图计算获取、也可通过大气光值与天气情况和当前时间的对应关系获取。在通常情况下，可选用图像中最大强度的像素作为大气光值的估测。假设A为已知值，待处理图像中RGB三个通道中存在通道值很低的通道，且该通道值接近于零，则可以得到：
由上式可以获取到透射率即为：
其中即为含雾图像在x领域的暗原色值，可以引入一个0到1之间的权值ω对透射率进行调节，则最终求取的去雾参数即透射率表达式如下：
为了保证去雾效果，可以对透射率设定一个阈值t0，那么无雾时景物的光线强度为：
根据获取的无雾时静物的光线强度则可对待处理图像进行去雾处理。
104，获取待处理图像中特征信息，根据特征信息获取对应的图像类型及图像类型的亮度值。
具体地，待处理图像中特征信息是指标记待处理图像类型的信息，例如，用于标记待处理图像为森林图像的信息、待处理图像为海洋图像的信息。对图像特征提取可采用多种算法，例如，SIFT(Scale-invariant feature transform，尺度不变特征变换)算法，指纹算法函数，Bundling Features算法，散列函数等。在获取到图像的特征信息后，则根据图像的特征信息检测待处理图像对应的图像类型。在获取到待处理图像的特征信息后，可根据待处理图像的特征信息检测待处理图像对应的图像类型。具体为将待处理图像的特征信息与数据库中存储的特征信息进行相似度匹配，若相似度匹配高于指定值，则获取匹配的特征信息对应的图像类型作为待处理图像对应的图像类型。当待处理图像的特征信息与数据库存储的多个特征信息的相似度匹配高于指定值，则将相似度匹配最高的特征信息对应的图像类型作为待处理图像对应的图像类型。其中，与待处理图像的特征信息进行相似度匹配的数据库可为移动终端中数据库也可为服务器中数据库。当移动终端中存储有数据库时，移动终端可定期更新数据库；当移动终端未存储数据库时，移动终端将待处理图像的特征信息上传服务器，并接收服务器返回的与上述特征信息对应的图像类型。其中，每个图像类型有对应的亮度值，再获取待处理图像的图像类型后，再获取图像类型对应的亮度值。
106，根据对应图像类型的亮度值调整去雾后图像的亮度值。
具体地，在获取到待处理图像中特征信息对应的图像类型后，根据图像类型对应的亮度值调整去雾后图像的亮度值。
本发明实施例中图像处理方法，获取待处理图像的图像类型及对应的亮度值，并根据图像类型对应的亮度值调整去雾后图像的亮度值，调整去雾后图像亮度值，提高了图像的视觉观感，同时对不同类型的图像调整到不同的亮度值，实现了图像处理的智能化。
在一个实施例中，步骤106中根据对应图像类型的亮度值调整去雾后图像的亮度值包括：获取去雾后图像的亮度值；若去雾后图像的亮度值低于对应图像类型的亮度值，将去雾后图像的亮度值调整为对应图像类型的亮度值。
具体地，在对待处理图像进行去雾处理后，获取去雾处理后图像的亮度参数值，具体为获取去雾处理后图像RGB三通道像素强度值均值中最大值作为去雾处理后图像的亮度参数值。在获取到去雾处理后图像的亮度参数值后，将去雾处理后图像的亮度参数值与对应图像类型的亮度值作比较，若去雾处理后图像的亮度参数值低于对应图像类型的亮度值，则判定去雾处理后图像的亮度值较低，则将去雾处理后图像的亮度值调整为对应图像类型的亮度值，提高去雾处理后图像的亮度值；若去雾处理后图像的亮度参数值不低于对应图像类型的亮度值，则判定去雾处理后图像的亮度值较高，对上述去雾处理后图像不做处理。
本发明实施例中图像处理方法，检测到待处理图像的亮度值低于指定值时，将图像的亮度值提高，有效了避免了去雾处理后图像亮度值降低的问题，提高了去雾处理后图像的视觉观感。
在一个实施例中，上述图像处理方法还包括：检测去雾后图像中噪点是否不低于指定值；若是，对去雾后图像进行滤波降噪处理。
具体地，当图像中存在噪点时，图像上存在空值区域会导致图像不光滑，即图像包含噪点时图像的质量较差，而直接对图像采取平滑操作会使得图像模糊、图像细节损失。滤波算法可根据空值区域周围像素点的像素值推算空值区域的像素值，进入对图像上空值区域进行填充，使图像变得光滑，进而提高图像的清晰度。常用的滤波算法可包括中值滤波、双边滤波、低通滤波、高斯滤波等。其中，双边滤波作为平滑滤波，既能对图像做平滑处理，又能保持图像的边缘细节信息，提高图像质量。本实施例中，移动终端获取到去雾后图像后，检测去雾后图像中噪点是否不低于第二阈值，若是，则判定去雾后图像中噪声较大，对去雾后图像进行滤波降噪处理；若否，则对去雾后图像不进行处理。
本发明实施例中图像处理方法，在检测到去雾后图像中存在较多噪点时，对去雾后图像进行滤波降噪处理，能够去除图像中噪声污染，提高图像质量。
在一个实施例中，上述图像处理方法还包括：获取用户输入的去雾等级；根据去雾参数值和去雾等级对待处理图像进行去雾处理。
具体地，在对待处理图像进行去雾处理时，可在移动终端显示去雾等级调控控件或去雾等级输入框。当移动终端接收到用户输入的去雾等级后，可对待处理图像的按照获取的去雾等级对待处理图像进行相应等级的去雾。其中，去雾等级越高，则对待处理图像的去雾化处理程度越高。在移动终端中预设有去雾等级与去雾浓度因子的映射关系表，在获取用户输入的去雾等级后，移动终端可查找获取用户输入的去雾等级对应的去雾浓度因子上述去雾浓度因子在0到1之间，再计算透射率值。
在获取到透射率值后，基于暗原色先验算法，根据大气光值和透射率可计算无雾时景物的光线强度，即对待处理图像进行去雾处理。
本发明实施例中图像处理方法，根据用户输入的去雾等级来对待处理图像进行去雾处理，用户可调控对图像的去雾化处理程度，对图像的去雾处理更加智能化。
在一个实施例中，上述图像处理方法还包括：若待处理图像为双摄像头拍摄获取的图像，区分待处理图像的前景区域和背景区域；对前景区域和背景区域分别进行去雾处理。
具体地，当移动终端存在第一摄像头和第二摄像头时，可控制第一摄像头与第二摄像头对同一景物的对焦位置不同。例如，第一摄像头的对焦位置较近、第二摄像头的对焦位置较远。采用第一摄像头与第二摄像头同时进行拍摄，并将第一摄像头与第二摄像头拍摄获取的画面进行合成处理，具体可采用图像超分辨重建技术对第一摄像头与第二摄像头拍摄获取的画面进行合成。在合成图像中，对焦位置较近的第一摄像头拍摄获取的图像为前景区域；对焦位置较远的第二摄像头拍摄获取的图像为背景区域。在对合成图像进行去雾时，可对合成图像汇总前景区域和背景区域分别进行去雾。具体地，可对前景区域和背景区域设定不同的去雾等级，根据设定的去雾等级对前景区域和背景区域分别进行去雾处理。例如，在获取到合成图像中前景区域和背景区域后，对前景区域设定较高的去雾等级、对背景区域设定较低的去雾等级，即对前景区域的去雾化处理程度较高，对背景区域的去雾化处理程度较低。在其他实施例中，在第一摄像头和第二摄像头拍摄获取到画面以后，对对焦位置较近的第一摄像头拍摄获取的画面设定较高的去雾等级，并按照设定的去雾等级进行去雾处理；对对焦位置较远的第二摄像头拍摄获取的画面设定较低的去雾等级，并按照设定的去雾等级进行去雾处理。再将去雾处理后第一摄像头拍摄获取的画面与去雾处理后第二摄像头拍摄获取的画面进行合成。
本发明实施例中图像处理方法，当待处理图像为双摄像头拍摄获取的图像时，对待处理图像的前景区域和背景区域分别进行去雾处理，能够实现对同一图像中不同区域的分别处理，有利于突出图像主体，增强图像的视觉体验效果。
图2为一个实施例中图像处理装置的结构框图，如图2所示，一种图像处理装置，包括去雾模块202、识别模块204和调整模块206，其中：
去雾模块202，用于获取待处理图像的去雾参数值，根据去雾参数值对待处理图像进行去雾处理；
识别模块204，用于获取待处理图像中特征信息，根据特征信息获取对应的图像类型及图像类型的亮度值；
调整模块206，用于根据对应图像类型的亮度值调整去雾后图像的亮度值。
在一个实施例中，去雾模块202还用于获取用户输入的去雾等级；根据去雾参数值和去雾等级对待处理图像进行去雾处理。
在一个实施例中，调整模块206还用于获取去雾后图像的亮度值；若去雾后图像的亮度值低于对应图像类型的亮度值，将去雾后图像的亮度值调整为对应图像类型的亮度值。
图3为另一个实施例中图像处理装置的结构框图。如图3所示，一种图像处理装置，包括去雾模块302、识别模块304、调整模块306和降噪模块308，其中去雾模块302、识别模块304和调整模块306与图2中对应的模块功能相同。
降噪模块308，用于检测去雾后图像中噪点是否不低于指定值；若是，对去雾后图像进行滤波降噪处理。
图4为另一个实施例中图像处理装置的结构框图。如图4所示，一种图像处理装置，包括去雾模块402、识别模块404、调整模块406和区分模块408，其中去雾模块402、识别模块404和调整模块406与图2中对应的模块功能相同。
区分模块408，用于若待处理图像为双摄像头拍摄获取的图像，区分待处理图像的前景区域和背景区域；
去雾模块402，对前景区域和背景区域分别进行去雾处理。
上述图像处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像处理装置按照需要划分为不同的模块，以完成上述图像处理装置的全部或部分功能。
本发明实施例还提供了一种计算机可读存储介质。一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现以下步骤：
(1)获取待处理图像的去雾参数值，根据去雾参数值对待处理图像进行去雾处理；
具体地，对图像的去雾处理包括多种算法，如暗原色先验去雾算法、单幅图像去雾算法等。以单幅图像去雾算法为例，去雾参数值可包括大气光值、透射率和空气光值；以暗原色先验去雾算法为例，去雾参数值包括大气光值和透射率；基于暗原色先验算法对待处理图像进行去雾的步骤包括：
获取大气散射模型
I(x)＝J(x)t(x)+A(1-t(x))
其中，I(x)为观测到的图像信息，J(x)为来自目标的辐射信息，也就是复原后的无雾图像，x表示图像中某一像素的空间位置，t(x)为透射率，A为无穷远处的大气光值。大气光值可通过待处理图像的灰度图计算获取、也可通过大气光值与天气情况和当前时间的对应关系获取。在通常情况下，可选用图像中最大强度的像素作为大气光值的估测。假设A为已知值，待处理图像中RGB三个通道中存在通道值很低的通道，且该通道值接近于零，则可以得到：
由上式可以获取到透射率即为：
其中即为含雾图像在x领域的暗原色值，可以引入一个0到1之间的权值ω对透射率进行调节，则最终求取的去雾参数即透射率表达式如下：
为了保证去雾效果，可以对透射率设定一个阈值t0，那么无雾时景物的光线强度为：
根据获取的无雾时静物的光线强度则可对待处理图像进行去雾处理。
(2)获取待处理图像中特征信息，根据特征信息获取对应的图像类型及图像类型的亮度值；
具体地，待处理图像中特征信息是指标记待处理图像类型的信息，例如，用于标记待处理图像为森林图像的信息、待处理图像为海洋图像的信息。对图像特征提取可采用多种算法，例如，SIFT(Scale-invariant feature transform，尺度不变特征变换)算法，指纹算法函数，Bundling Features算法，散列函数等。在获取到图像的特征信息后，则根据图像的特征信息检测待处理图像对应的图像类型。在获取到待处理图像的特征信息后，可根据待处理图像的特征信息检测待处理图像对应的图像类型。具体为将待处理图像的特征信息与数据库中存储的特征信息进行相似度匹配，若相似度匹配高于指定值，则获取匹配的特征信息对应的图像类型作为待处理图像对应的图像类型。当待处理图像的特征信息与数据库存储的多个特征信息的相似度匹配高于指定值，则将相似度匹配最高的特征信息对应的图像类型作为待处理图像对应的图像类型。其中，与待处理图像的特征信息进行相似度匹配的数据库可为移动终端中数据库也可为服务器中数据库。当移动终端中存储有数据库时，移动终端可定期更新数据库；当移动终端未存储数据库时，移动终端将待处理图像的特征信息上传服务器，并接收服务器返回的与上述特征信息对应的图像类型。其中，每个图像类型有对应的亮度值，再获取待处理图像的图像类型后，再获取图像类型对应的亮度值。
(3)根据对应图像类型的亮度值调整去雾后图像的亮度值。
具体地，在获取到待处理图像中特征信息对应的图像类型后，根据图像类型对应的亮度值调整去雾后图像的亮度值。
在一个实施例中，步骤(3)中根据对应图像类型的亮度值调整去雾后图像的亮度值包括：获取去雾后图像的亮度值；若去雾后图像的亮度值低于对应图像类型的亮度值，将去雾后图像的亮度值调整为对应图像类型的亮度值。
具体地，在对待处理图像进行去雾处理后，获取去雾处理后图像的亮度参数值，具体为获取去雾处理后图像RGB三通道像素强度值均值中最大值作为去雾处理后图像的亮度参数值。在获取到去雾处理后图像的亮度参数值后，将去雾处理后图像的亮度参数值与对应图像类型的亮度值作比较，若去雾处理后图像的亮度参数值低于对应图像类型的亮度值，则判定去雾处理后图像的亮度值较低，则将去雾处理后图像的亮度值调整为对应图像类型的亮度值，提高去雾处理后图像的亮度值；若去雾处理后图像的亮度参数值不低于对应图像类型的亮度值，则判定去雾处理后图像的亮度值较高，对上述去雾处理后图像不做处理。
在一个实施例中，上述图像处理方法还包括：检测去雾后图像中噪点是否不低于指定值；若是，对去雾后图像进行滤波降噪处理。
具体地，当图像中存在噪点时，噪声会造成图像不光滑，即图像包含噪点时图像的质量较差，而直接对图像采取平滑操作会使得图像模糊，存在空值区域，通过滤波处理填充图像上空值区域，即可提高图像清晰度，即提高图像质量。常用的滤波处理可包括中值滤波、双边滤波、低通滤波、高斯滤波等。其中，双边滤波作为平滑滤波，既能对图像做平滑处理，又能保持图像的边缘细节信息，提高图像质量。本实施例中，移动终端获取到去雾后图像后，检测去雾后图像中噪点是否不低于指定值，若是，则判定去雾后图像中噪声较大，对去雾后图像进行滤波降噪处理；若否，则对去雾后图像不进行处理。
在一个实施例中，上述图像处理方法还包括：获取用户输入的去雾等级；根据去雾参数值和去雾等级对待处理图像进行去雾处理。
具体地，在对待处理图像进行去雾处理时，可在移动终端显示去雾等级调控控件或去雾等级输入框。当移动终端接收到用户输入的去雾等级后，可对待处理图像的按照获取的去雾等级对待处理图像进行相应等级的去雾。其中，去雾等级越高，则对待处理图像的去雾化处理程度越高。在移动终端中预设有去雾等级与去雾浓度因子的映射关系表，在获取用户输入的去雾等级后，移动终端可查找获取用户输入的去雾等级对应的去雾浓度因子上述去雾浓度因子在0到1之间，再计算透射率值。
在获取到透射率值后，基于暗原色先验算法，根据大气光值和透射率可计算无雾时景物的光线强度，即对待处理图像进行去雾处理。
在一个实施例中，上述图像处理方法还包括：若待处理图像为双摄像头拍摄获取的图像，区分待处理图像的前景区域和背景区域；对前景区域和背景区域分别进行去雾处理。
具体地，当移动终端存在第一摄像头和第二摄像头时，可控制第一摄像头与第二摄像头对同一景物的对焦位置不同。例如，第一摄像头的对焦位置较近、第二摄像头的对焦位置较远。采用第一摄像头与第二摄像头同时进行拍摄，并将第一摄像头与第二摄像头拍摄获取的画面进行合成处理，具体可采用图像超分辨重建技术对第一摄像头与第二摄像头拍摄获取的画面进行合成。在合成图像中，对焦位置较近的第一摄像头拍摄获取的图像为前景区域；对焦位置较远的第二摄像头拍摄获取的图像为背景区域。在对合成图像进行去雾时，可对合成图像汇总前景区域和背景区域分别进行去雾。具体地，可对前景区域和背景区域设定不同的去雾等级，根据设定的去雾等级对前景区域和背景区域分别进行去雾处理。例如，在获取到合成图像中前景区域和背景区域后，对前景区域设定较高的去雾等级、对背景区域设定较低的去雾等级，即对前景区域的去雾化处理程度较高，对背景区域的去雾化处理程度较低。在其他实施例中，在第一摄像头和第二摄像头拍摄获取到画面以后，对对焦位置较近的第一摄像头拍摄获取的画面设定较高的去雾等级，并按照设定的去雾等级进行去雾处理；对对焦位置较远的第二摄像头拍摄获取的画面设定较低的去雾等级，并按照设定的去雾等级进行去雾处理。再将去雾处理后第一摄像头拍摄获取的画面与去雾处理后第二摄像头拍摄获取的画面进行合成。
本发明实施例还提供一种移动终端。上述移动终端中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图5为一个实施例中图像处理电路的示意图。如图5所示，为便于说明，仅示出与本发明实施例相关的图像处理技术的各个方面。
如图5所示，图像处理电路包括ISP处理器540和控制逻辑器550。成像设备510捕捉的图像数据首先由ISP处理器540处理，ISP处理器540对图像数据进行分析以捕捉可用于确定和/或成像设备510的一个或多个控制参数的图像统计信息。成像设备510可包括具有一个或多个透镜512和图像传感器514的照相机。图像传感器514可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器514可获取用图像传感器514的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器540处理的一组原始图像数据。传感器520可基于传感器520接口类型把原始图像数据提供给ISP处理器540。传感器520接口可以利用SMIA(StandardMobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
ISP处理器540按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器540可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。
ISP处理器540还可从图像存储器530接收像素数据。例如，从传感器520接口将原始像素数据发送给图像存储器530，图像存储器530中的原始像素数据再提供给ISP处理器540以供处理。图像存储器530可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。
当接收到来自传感器520接口或来自图像存储器530的原始图像数据时，ISP处理器540可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器530，以便在被显示之前进行另外的处理。ISP处理器540还可从图像存储器530接收处理数据，对上述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器580，以供用户观看和/或由图形引擎或GPU(GraphicsProcessing Unit，图形处理器)进一步处理。此外，ISP处理器540的输出还可发送给图像存储器530，且显示器580可从图像存储器530读取图像数据。在一个实施例中，图像存储器530可被配置为实现一个或多个帧缓冲器。此外，ISP处理器540的输出可发送给编码器/解码器570，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器580设备上之前解压缩。
ISP处理器540处理后的图像数据可发送给去雾模块560，以便在被显示之前对图像进行去雾处理。去雾模块560对图像数据去雾处理可获取待处理图像的去雾参数值，并根据上述去雾参数值对待处理图像进行去雾处理，对去雾处理后图像调整亮度值；去雾模块560还可根据用户设定的去雾等级对待处理图像进行去雾处理；或根据区分的前景区域和后景区域分别进行去雾处理。其中，去雾模块560可为移动终端中CPU(Central ProcessingUnit，中央处理器)、GPU(Graphics Processing Unit，图形处理器)或协处理器等。去雾模块560将图像数据进行去雾处理后，可将去雾处理后的图像数据发送给编码器/解码器570，以便编码/解码图像数据。编码的图像数据可被保存，并在显示与显示器580设备上之前解压缩。可以理解的是，去雾模块560处理后的图像数据可以不经过编码器/解码器570，直接发给显示器580进行显示。ISP处理器540处理后的图像数据还可以先经过编码器/解码器570处理，然后再经过去雾模块560进行处理。上述编码器/解码器570可为移动终端中CPU、GPU或协处理器等。
ISP处理器540确定的统计数据可发送给控制逻辑器550单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜512阴影校正等图像传感器514统计信息。控制逻辑器550可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备510的控制参数以及ISP处理器540的控制参数。例如，控制参数可包括传感器520控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜512控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜512阴影校正参数。
以下为运用图5中图像处理技术实现图像处理方法的步骤：
(1)获取待处理图像的去雾参数值，根据去雾参数值对待处理图像进行去雾处理；
具体地，对图像的去雾处理包括多种算法，如暗原色先验去雾算法、单幅图像去雾算法等。以单幅图像去雾算法为例，去雾参数值可包括大气光值、透射率和空气光值；以暗原色先验去雾算法为例，去雾参数值包括大气光值和透射率；基于暗原色先验算法对待处理图像进行去雾的步骤包括：
获取大气散射模型
I(x)＝J(x)t(x)+A(1-t(x))
其中，I(x)为观测到的图像信息，J(x)为来自目标的辐射信息，也就是复原后的无雾图像，x表示图像中某一像素的空间位置，t(x)为透射率，A为无穷远处的大气光值。大气光值可通过待处理图像的灰度图计算获取、也可通过大气光值与天气情况和当前时间的对应关系获取。在通常情况下，可选用图像中最大强度的像素作为大气光值的估测。假设A为已知值，待处理图像中RGB三个通道中存在通道值很低的通道，且该通道值接近于零，则可以得到：
由上式可以获取到透射率即为：
其中即为含雾图像在x领域的暗原色值，可以引入一个0到1之间的权值ω对透射率进行调节，则最终求取的去雾参数即透射率表达式如下：
为了保证去雾效果，可以对透射率设定一个阈值t0，那么无雾时景物的光线强度为：
根据获取的无雾时静物的光线强度则可对待处理图像进行去雾处理。
(2)获取待处理图像中特征信息，根据特征信息获取对应的图像类型及图像类型的亮度值；
具体地，待处理图像中特征信息是指标记待处理图像类型的信息，例如，用于标记待处理图像为森林图像的信息、待处理图像为海洋图像的信息。对图像特征提取可采用多种算法，例如，SIFT(Scale-invariant feature transform，尺度不变特征变换)算法，指纹算法函数，Bundling Features算法，散列函数等。在获取到图像的特征信息后，则根据图像的特征信息检测待处理图像对应的图像类型。在获取到待处理图像的特征信息后，可根据待处理图像的特征信息检测待处理图像对应的图像类型。具体为将待处理图像的特征信息与数据库中存储的特征信息进行相似度匹配，若相似度匹配高于指定值，则获取匹配的特征信息对应的图像类型作为待处理图像对应的图像类型。当待处理图像的特征信息与数据库存储的多个特征信息的相似度匹配高于指定值，则将相似度匹配最高的特征信息对应的图像类型作为待处理图像对应的图像类型。其中，与待处理图像的特征信息进行相似度匹配的数据库可为移动终端中数据库也可为服务器中数据库。当移动终端中存储有数据库时，移动终端可定期更新数据库；当移动终端未存储数据库时，移动终端将待处理图像的特征信息上传服务器，并接收服务器返回的与上述特征信息对应的图像类型。其中，每个图像类型有对应的亮度值，再获取待处理图像的图像类型后，再获取图像类型对应的亮度值。
(3)根据对应图像类型的亮度值调整去雾后图像的亮度值。
具体地，在获取到待处理图像中特征信息对应的图像类型后，根据图像类型对应的亮度值调整去雾后图像的亮度值。
在一个实施例中，步骤(3)中根据对应图像类型的亮度值调整去雾后图像的亮度值包括：获取去雾后图像的亮度值；若去雾后图像的亮度值低于对应图像类型的亮度值，将去雾后图像的亮度值调整为对应图像类型的亮度值。
具体地，在对待处理图像进行去雾处理后，获取去雾处理后图像的亮度参数值，具体为获取去雾处理后图像RGB三通道像素强度值均值中最大值作为去雾处理后图像的亮度参数值。在获取到去雾处理后图像的亮度参数值后，将去雾处理后图像的亮度参数值与对应图像类型的亮度值作比较，若去雾处理后图像的亮度参数值低于对应图像类型的亮度值，则判定去雾处理后图像的亮度值较低，则将去雾处理后图像的亮度值调整为对应图像类型的亮度值，提高去雾处理后图像的亮度值；若去雾处理后图像的亮度参数值不低于对应图像类型的亮度值，则判定去雾处理后图像的亮度值较高，对上述去雾处理后图像不做处理。
在一个实施例中，上述图像处理方法还包括：检测去雾后图像中噪点是否不低于指定值；若是，对去雾后图像进行滤波降噪处理。
具体地，当图像中存在噪点时，噪声会造成图像不光滑，即图像包含噪点时图像的质量较差，而直接对图像采取平滑操作会使得图像模糊，存在空值区域，通过滤波处理填充图像上空值区域，即可提高图像清晰度，即提高图像质量。常用的滤波处理可包括中值滤波、双边滤波、低通滤波、高斯滤波等。其中，双边滤波作为平滑滤波，既能对图像做平滑处理，又能保持图像的边缘细节信息，提高图像质量。本实施例中，移动终端获取到去雾后图像后，检测去雾后图像中噪点是否不低于指定值，若是，则判定去雾后图像中噪声较大，对去雾后图像进行滤波降噪处理；若否，则对去雾后图像不进行处理。
在一个实施例中，上述图像处理方法还包括：获取用户输入的去雾等级；根据去雾参数值和去雾等级对待处理图像进行去雾处理。
具体地，在对待处理图像进行去雾处理时，可在移动终端显示去雾等级调控控件或去雾等级输入框。当移动终端接收到用户输入的去雾等级后，可对待处理图像的按照获取的去雾等级对待处理图像进行相应等级的去雾。其中，去雾等级越高，则对待处理图像的去雾化处理程度越高。在移动终端中预设有去雾等级与去雾浓度因子的映射关系表，在获取用户输入的去雾等级后，移动终端可查找获取用户输入的去雾等级对应的去雾浓度因子上述去雾浓度因子在0到1之间，再计算透射率值。
在获取到透射率值后，基于暗原色先验算法，根据大气光值和透射率可计算无雾时景物的光线强度，即对待处理图像进行去雾处理。
在一个实施例中，上述图像处理方法还包括：若待处理图像为双摄像头拍摄获取的图像，区分待处理图像的前景区域和背景区域；对前景区域和背景区域分别进行去雾处理。
具体地，当移动终端存在第一摄像头和第二摄像头时，可控制第一摄像头与第二摄像头对同一景物的对焦位置不同。例如，第一摄像头的对焦位置较近、第二摄像头的对焦位置较远。采用第一摄像头与第二摄像头同时进行拍摄，并将第一摄像头与第二摄像头拍摄获取的画面进行合成处理，具体可采用图像超分辨重建技术对第一摄像头与第二摄像头拍摄获取的画面进行合成。在合成图像中，对焦位置较近的第一摄像头拍摄获取的图像为前景区域；对焦位置较远的第二摄像头拍摄获取的图像为背景区域。在对合成图像进行去雾时，可对合成图像汇总前景区域和背景区域分别进行去雾。具体地，可对前景区域和背景区域设定不同的去雾等级，根据设定的去雾等级对前景区域和背景区域分别进行去雾处理。例如，在获取到合成图像中前景区域和背景区域后，对前景区域设定较高的去雾等级、对背景区域设定较低的去雾等级，即对前景区域的去雾化处理程度较高，对背景区域的去雾化处理程度较低。在其他实施例中，在第一摄像头和第二摄像头拍摄获取到画面以后，对对焦位置较近的第一摄像头拍摄获取的画面设定较高的去雾等级，并按照设定的去雾等级进行去雾处理；对对焦位置较远的第二摄像头拍摄获取的画面设定较低的去雾等级，并按照设定的去雾等级进行去雾处理。再将去雾处理后第一摄像头拍摄获取的画面与去雾处理后第二摄像头拍摄获取的画面进行合成。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (8)

1.一种图像处理方法，其特征在于，包括：
获取待处理图像的去雾参数值，根据所述去雾参数值对所述待处理图像进行去雾处理；
获取所述待处理图像中特征信息，根据所述特征信息获取对应的图像类型及所述图像类型的亮度值；所述特征信息为标记待处理图像类型的信息；所述特征信息包括标记待处理图像为森林图像的信息或标记待处理图像为海洋图像的信息；
根据所述对应图像类型的亮度值调整去雾后图像的亮度值；
所述根据所述对应图像类型的亮度值调整去雾后图像的亮度值包括：
获取所述去雾后图像的亮度值；
若所述去雾后图像的亮度值低于对应图像类型的亮度值，将所述去雾后图像的亮度值调整为所述对应图像类型的亮度值；
所述方法还包括：
若所述待处理图像为双摄像头拍摄获取的图像，区分所述待处理图像的前景区域和背景区域；
对所述前景区域和所述背景区域分别进行去雾处理；
所述前景区域的去雾等级大于所述背景区域的去雾等级。
2.根据权利要求1所述的图像处理方法，其特征在于，所述方法还包括：
检测所述去雾后图像中噪点是否不低于指定值；若是，对所述去雾后图像进行滤波降噪处理。
3.根据权利要求1所述的图像处理方法，其特征在于，所述方法还包括：
获取用户输入的去雾等级；
根据所述去雾参数值和所述去雾等级对所述待处理图像进行去雾处理。
4.一种图像处理装置，其特征在于，包括：
去雾模块，用于获取待处理图像的去雾参数值，根据所述去雾参数值对所述待处理图像进行去雾处理；
识别模块，用于获取所述待处理图像中特征信息，根据所述特征信息获取对应的图像类型及所述图像类型的亮度值；所述特征信息为标记待处理图像类型的信息；
调整模块，用于根据所述对应图像类型的亮度值调整去雾后图像的亮度值；
所述调整模块还用于获取所述去雾后图像的亮度值；若所述去雾后图像的亮度值低于对应图像类型的亮度值，将所述去雾后图像的亮度值调整为所述对应图像类型的亮度值；
所述装置还包括：
区分模块，用于若所述待处理图像为双摄像头拍摄获取的图像，区分所述待处理图像的前景区域和背景区域；
去雾模块，对所述前景区域和所述背景区域分别进行去雾处理；所述前景区域的去雾等级大于所述背景区域的去雾等级。
5.根据权利要求4所述的图像处理装置，其特征在于，所述装置还包括：
降噪模块，用于检测所述去雾后图像中噪点是否不低于指定值；若是，对所述去雾后图像进行滤波降噪处理。
6.根据权利要求4所述的图像处理装置，其特征在于：
所述去雾模块还用于获取用户输入的去雾等级；根据所述去雾参数值和所述去雾等级对所述待处理图像进行去雾处理。
7.一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行如权利要求1至3中任一项所述的图像处理方法。
8.一种移动终端，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如权利要求1至3中任一项所述的图像处理方法。
CN201710626251.4A 2017-07-27 2017-07-27 图像处理方法、装置、计算机可读存储介质和移动终端 Active CN107292853B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710626251.4A CN107292853B (zh) 2017-07-27 2017-07-27 图像处理方法、装置、计算机可读存储介质和移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710626251.4A CN107292853B (zh) 2017-07-27 2017-07-27 图像处理方法、装置、计算机可读存储介质和移动终端

Publications (2)

Publication Number Publication Date
CN107292853A CN107292853A (zh) 2017-10-24
CN107292853B true CN107292853B (zh) 2019-12-27

Family

ID=60103494

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710626251.4A Active CN107292853B (zh) 2017-07-27 2017-07-27 图像处理方法、装置、计算机可读存储介质和移动终端

Country Status (1)

Country Link
CN (1) CN107292853B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111369472B (zh) * 2020-03-12 2021-04-23 北京字节跳动网络技术有限公司 图像去雾方法、装置、电子设备及介质
CN113379631B (zh) * 2021-06-11 2024-05-17 百果园技术(新加坡)有限公司 一种图像去雾的方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105809647A (zh) * 2016-03-31 2016-07-27 北京奇虎科技有限公司 一种自动去雾拍照方法、装置和设备
CN106169081A (zh) * 2016-06-29 2016-11-30 北京工业大学 一种基于不同照度的图像分类及处理方法
CN106847189A (zh) * 2017-03-17 2017-06-13 信利（惠州）智能显示有限公司 Oled显示面板的驱动方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6579868B2 (ja) * 2015-09-01 2019-09-25 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法およびプログラム
CN105701783B (zh) * 2016-01-14 2018-08-07 浙江大学 一种基于环境光模型的单幅图像去雾方法及装置
CN106683100B (zh) * 2016-12-27 2020-08-04 宇龙计算机通信科技(深圳)有限公司 一种图像分割去雾方法及终端

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105809647A (zh) * 2016-03-31 2016-07-27 北京奇虎科技有限公司 一种自动去雾拍照方法、装置和设备
CN106169081A (zh) * 2016-06-29 2016-11-30 北京工业大学 一种基于不同照度的图像分类及处理方法
CN106847189A (zh) * 2017-03-17 2017-06-13 信利（惠州）智能显示有限公司 Oled显示面板的驱动方法及装置

Also Published As

Publication number Publication date
CN107292853A (zh) 2017-10-24

Similar Documents

Publication Publication Date Title
CN110149482B (zh) 对焦方法、装置、电子设备和计算机可读存储介质
CN107451969B (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN107424198B (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN107680128B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
CN108805103B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN113766125B (zh) 对焦方法和装置、电子设备、计算机可读存储介质
CN110473185B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110572573B (zh) 对焦方法和装置、电子设备、计算机可读存储介质
CN108734676B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN107509031B (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
KR20200041981A (ko) 이미지 처리 방법, 기기, 및 장치
CN107493432B (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN108419028B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN109712177B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN108717530B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN107481186B (zh) 图像处理方法、装置、计算机可读存储介质和计算机设备
CN107993209B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN107368806B (zh) 图像矫正方法、装置、计算机可读存储介质和计算机设备
CN107395991B (zh) 图像合成方法、装置、计算机可读存储介质和计算机设备
CN107317967B (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN110366048B (zh) 视频传输方法、装置、电子设备和计算机可读存储介质
CN107862658B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN110191287B (zh) 对焦方法和装置、电子设备、计算机可读存储介质
CN110121031B (zh) 图像采集方法和装置、电子设备、计算机可读存储介质
CN109242794B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: Guangdong Opel Mobile Communications Co., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant