CN107454330B - 一种图像处理方法、移动终端及计算机可读存储介质 - Google Patents
一种图像处理方法、移动终端及计算机可读存储介质 Download PDFInfo
- Publication number
- CN107454330B CN107454330B CN201710737852.2A CN201710737852A CN107454330B CN 107454330 B CN107454330 B CN 107454330B CN 201710737852 A CN201710737852 A CN 201710737852A CN 107454330 B CN107454330 B CN 107454330B
- Authority
- CN
- China
- Prior art keywords
- pixel
- subregion
- image
- value
- weight
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
Abstract
本发明实施例提供了一种图像处理方法、移动终端及计算机可读存储介质,所述方法包括:从待处理图像序列中,选取一张图像作为参考图像;依据所述参考图像,确定待处理图像中的对齐区域;获取所述参考图像中与所述对齐区域对应的目标参考子区域;将所述对齐区域以及所述目标参考子区域进行亮度归一化。本发明实施例通过目标参考子区域对待处理图像中的对齐区域进行亮度归一化,能够改善不同曝光图像之间的对齐误差问题。
Description
技术领域
本发明涉及图像处理技术领域,特别是涉及一种图像处理方法、移动终端及计算机可读存储介质。
背景技术
随着移动终端的普及,越来越多的消费者选择使用移动终端进行拍照。受限于摄像头传感器的动态范围,移动终端在高动态范围场景下拍照时会采用HDR(High-DynamicRange,高动态光照渲染图像)技术,该技术需要拍摄不同曝光参数的图像序列,对图像序列进行融合,融合出一张高动态范围的图像。移动终端在拍摄图像序列时难免会抖动,所拍摄出的图像序列将出现模糊问题,导致最后融合出的高动态图像也会出现模糊问题,为了解决图像模糊的问题,在对图像序列进行融合前需要对图像序列中的各图像进行全局对齐。
全局对齐是基于相同曝光参数或亮度信息对图像序列进行处理。由于拍摄的图像存在过暗和曝光过度的区域,基于相同曝光参数的全局对齐方式对图像序列进行处理时,会存在对齐误差。
发明内容
本发明提供了一种图像处理方法、移动终端及计算机可读存储介质,以解决现有技术存在对齐误差的问题。
为了解决上述问题,本发明公开了一种图像处理方法,所述方法包括:从待处理图像序列中,选取一张图像作为参考图像;依据所述参考图像,确定待处理图像中的对齐区域;获取所述参考图像中与所述对齐区域对应的目标参考子区域;将所述对齐区域以及所述目标参考子区域进行亮度归一化。
为了解决上述问题,本发明还公开了一种移动终端,所述移动终端包括:参考图像确定模块,用于从待处理图像序列中,选取一张图像作为参考图像;确定模块,用于依据参考图像,确定待处理图像中的对齐区域;获取模块,用于获取所述参考图像中与所述对齐区域对应的目标参考子区域;归一化模块,用于将所述对齐区域以及所述目标参考子区域进行亮度归一化。
为了解决上述问题,本发明还公开了一种移动终端包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的图像处理程序,所述图像处理程序被所述处理器执行时实现所述的图像处理方法的步骤。
为了解决上述问题,本发明还公开了一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有图像处理程序,所述图像处理程序被处理器执行时实现所述的图像处理方法的步骤。
与现有技术相比,本发明具有以下优点:
本发明实施例提供的图像处理方案,从待处理图像序列中,选取一张图像作为参考图像,依据参考图像,确定待处理图像中的对齐区域;获取参考图像中与对齐区域对应的目标参考子区域;将对齐区域以及目标参考子区域进行亮度归一化。本发明实施例通过目标参考子区域对待处理图像中的对齐区域进行亮度归一化,能够改善不同曝光图像之间的对齐误差问题。
附图说明
图1是本发明实施例一的一种图像处理方法的步骤流程图;
图2是本发明实施例二的一种图像处理方法的步骤流程图;
图3是本发明实施例三的一种移动终端的结构框图;
图4是本发明实施例四的一种移动终端的结构框图;
图5是本发明实施例五的一种移动终端的结构框图;
图6是本发明实施例六的一种移动终端的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
实施例一
参照图1,示出了本发明实施例一的一种图像处理方法的步骤流程图。
本发明实施例提供的图像处理方法包括以下步骤:
步骤101:从待处理图像序列中,选取一张图像作为参考图像。
步骤102:依据参考图像,确定待处理图像中的对齐区域。
通过控制曝光时间和感光度,连续拍摄多张不同亮度的图像。
下面以连续拍摄3张图像分别为I1、I2、I3为例进行说明。
将图像序列按照亮度进行排序后,排序为I1、I2、I3;选择其中一张图像作为参考图像Iref,本实施例中选取I2中作为参考图像Iref,I1和I3作为待处理图像。
将参考图像以及待处理图像分成N等份,依据一系列算法确定待处理图像中的对齐区域。
相比现有技术需要拍摄不同曝光参数的图像序列,融合前对图像序列进行全局对齐能够减小对齐误差。
步骤103:获取参考图像中与对齐区域对应的目标参考子区域。
例如,获取的对齐区域为待处理图像中排序在第一行第一列的图像子区域,则将目标参考子区域为参考图像的第一行第二列对应的图像子区域确定为目标参考子区域。
步骤104:将对齐区域以及目标参考子区域进行亮度归一化。
将对齐区域以及目标参考子区域通过一系列算法,归一化到相同亮度水平,以减小全局对齐误差。
本发明实施例提供的图像处理方法,从待处理图像序列中,选取一张图像作为参考图像,依据参考图像,确定待处理图像中的对齐区域;获取参考图像中与对齐区域对应的目标参考子区域;将对齐区域以及目标参考子区域进行亮度归一化。本发明实施例通过目标参考子区域对各待处理图像中的对齐区域进行亮度归一化,能够改善不同曝光图像之间的对齐误差问题。
实施例二
参照图2,示出本发明实施例二的一种图像处理方法的步骤流程图。
本发明实施例提供的图像处理方法包括以下步骤:
步骤201:从待处理图像序列中,任意选取一张图像作为参考图像。
步骤202:依据参考图像,计算待处理图像中各子区域的亮度权重以及相似度权重。
一种优选地确定单个子区域的亮度权重的方式为:
首先,确定子区域中包含的各像素点的像素值;
其次,针对各像素点,当像素点的像素值小于第一预设值时,将像素值确定为像素点的像素权重;当像素点的像素值大于或等于第一预设值时,将第二预设值与像素值的差值确定为像素点的像素权重;将各像素点的像素权重之和,确定为子区域的亮度权重。
具体地可以通过以下公式计算单个子区域的亮度权重:
其中,p为像素点的像素,w(p)为各像素点亮度权重,WBrightij为各子区域的亮度权重。
通过计算亮度权重,以避免拍摄的照片存在过度曝光或者曝光过暗导致的对齐误差,曝光适中的像素权重较大,相反过曝或者欠曝的像素权重较小。
一种优选地确定单个子区域的相似度权重的方式为:
首先,确定子区域在参考图像中对应的参考子区域,以及参考子区域的像素均值。
其次,针对子区域中包含的各像素点,确定像素点的像素值与像素均值的第一差值;针对参考子区域中包含的各像素点,确定像素点的像素值与像素均值的第二差值;将各像素点的第一差值与第二差值的乘积之和,确定为子区域的相似度权重。
具体可以通过以下公式计算单个子区域的相似度权重:
其中,表示待对齐图像子区域内像素的均值,表示参考图像对应子区域的均值,WSimij为相似度权重。
通过计算各子区域的相似度权重,以避免运动物体区域导致的对齐误差。待处理图像的子区域与参考图像相同位置子区域的相似度越大,则该区域存在运动物体的概率越小,则该区域的相似度权重越大。
步骤203:分别依据各子区域的亮度权重以及相似度权重,计算各子区域的选择权重。
一种优选地计算子区域选择权重的方式为:将子区域的亮度权重与第一系数的乘积与待处理图像的子区域的相似度权重与第二系数的乘积相加,所得和值为子区域的选择权重。
具体地,可以通过以下公式计算子区域的选择权重:
Wij=α*WBrightij+β*WSimij
其中,α,β分别为第一系数,第二系数,Wij为选择权重。
步骤204:确定最大选择权重对应的子区域作为待处理图像的对齐区域。
通过步骤203计算出待处理图像包含的各子区域的选择权重,从中确定最大选择权重,并确定最大选择权重对应的子区域,将其确定为对齐区域。
步骤205:获取参考图像中与对齐区域对应的目标参考子区域。
步骤206:将对齐区域以及目标参考子区域进行亮度归一化。
一种优选地将对齐区域以及目标参考子区域进行亮度归一化的方式为:
针对对齐区域的各像素点,将像素点的像素值与第三预设值相乘后,与对齐区域中的最大像素值相除,得到第一商值;针对目标参考子区域的各像素点,将像素点的像素值与第三预设值相乘后,与最大像素值相除,得到第二商值;依据第一商值以及第二商值对对齐区域进行亮度归一化。
具体地,可以通过以下公式进行归一化:
NorSubIi(p)=255*p/max(SubIi);NorSubIrefi(p)=255*p/max(SubIrefi)
其中,SubIi为对齐区域,SubIrefi为目标参考子区域,NorSubIi(p)为第一商值,NorSubIrefi(p)为第二商值。
本发明实施例提供的图像处理方法,依据参考图像,确定待处理图像中的对齐区域;获取参考图像中与对齐区域对应的目标参考子区域;将对齐区域以及参考子区域进行亮度归一化。本发明实施例通过目标参考子区域对待处理图像中的对齐区域进行亮度归一化,对亮度归一化的区域进行对齐,子区域的对齐参数可用于全局对齐或邻域子区块的对齐,能够改善不同曝光图像之间的对齐误差问题。
实施例三
参照图3,示出本发明实施例三的一种移动终端的结构框图。
本发明实施例提供的移动终端包括:参考图像确定模块301,用于从待处理图像序列中,选取一张图像作为参考图像;确定模块302,用于依据参考图像,确定待处理图像中的对齐区域;获取模块303,用于获取所述参考图像中与所述对齐区域对应的目标参考子区域;归一化模块304,用于将所述对齐区域以及所述目标参考子区域进行亮度归一化。
本发明实施例提供的移动终端,从待处理图像序列中,选取一张图像作为参考图像,依据参考图像,确定待处理图像中的对齐区域;获取参考图像中与对齐区域对应的目标参考子区域;将对齐区域以及参考子区域进行亮度归一化。本发明实施例通过目标参考子区域对待处理图像中的对齐区域进行亮度归一化,能够改善不同曝光图像之间的对齐误差问题。
实施例四
参照图4,示出本发明实施例四的一种移动终端的结构框图。
本发明实施例提供的移动终端包括:参考图像确定模块401,用于从待处理图像序列中,任意选取一张图像作为参考图像;确定模块402,用于依据参考图像,确定待处理图像中的对齐区域;获取模块403,用于获取所述参考图像中与所述对齐区域对应的目标参考子区域;归一化模块404,用于将所述对齐区域以及所述目标参考子区域进行亮度归一化。
优选地,所述确定模块402包括:第一计算子模块4021,用于依据参考图像,计算待处理图像中各子区域的亮度权重以及相似度权重;第二计算子模块4022,用于分别依据各子区域的亮度权重以及相似度权重,计算各子区域的选择权重;对齐区域确定子模块4023,用于确定最大选择权重对应的子区域作为所述待处理图像的对齐区域。
优选地,所述第一计算子模块4021包括:第一确定单元,用于确定所述子区域中包含的各像素点的像素值;第二确定单元,用于针对各像素点,当所述像素点的像素值小于第一预设值时,将所述像素值确定为所述像素点的像素权重;第三确定单元,用于当所述像素点的像素值大于或等于第一预设值时,将第二预设值与所述像素值的差值确定为所述像素点的像素权重;第四确定单元,用于将各像素点的像素权重之和,确定为所述子区域的亮度权重。
所述第一计算子模块4021还包括:第五确定单元,用于确定所述子区域在所述参考图像中对应的参考子区域,以及所述参考子区域的像素均值;第六确定单元,用于针对所述子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第一差值;第七确定单元,用于针对所述参考子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第二差值;第八确定单元,用于将各像素点的所述第一差值与所述第二差值的乘积之和,确定为所述子区域的相似度权重。
优选地,所述第二计算子模块4022具体用于:将所述子区域的亮度权重与第一系数的乘积与所述待处理图像的子区域的相似度权重与第二系数的乘积相加,所得和值为所述子区域的选择权重。
优选地,所述归一化模块404包括:第一商值计算子模块4041,用于针对所述对齐区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述对齐区域中的最大像素值相除,得到第一商值;第二商值计算子模块4042,用于针对所述目标参考子区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述最大像素值相除,得到第二商值;归一化子模块4043,用于依据所述第一商值以及所述第二商值对所述对齐区域进行亮度归一化。
本发明实施例提供的移动终端,从待处理图像序列中,任意选取一张图像作为参考图像,依据参考图像,确定待处理图像中的对齐区域;获取参考图像中与对齐区域对应的目标参考子区域;将对齐区域以及参考子区域进行亮度归一化。本发明实施例通过目标参考子区域对待处理图像中的对齐区域进行亮度归一化,能够改善不同曝光图像之间的对齐误差问题。
实施例五
参照图5,示出了本发明实施例的移动终端的结构框图。
本发明实施例的移动终端800包括:至少一个处理器801、存储器802、至少一个网络接口804和其他用户接口803。移动终端800中的各个组件通过总线系统805耦合在一起。可理解,总线系统805用于实现这些组件之间的连接通信。总线系统805除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图5中将各种总线都标为总线系统805。
其中,用户接口803可以包括显示器、键盘或者点击设备(例如,鼠标,轨迹球(trackball)、触感板或者触摸屏等。
可以理解,本发明实施例中的存储器802可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch Link DRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM,DRRAM)。本发明实施例描述的系统和方法的存储器802旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中,存储器802存储了如下的元素,可执行模块或者数据结构,或者他们的子集,或者他们的扩展集:操作系统8021和应用程序8022。
其中,操作系统8021,包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序8022,包含各种应用程序,例如媒体播放器(Media Player)、浏览器(Browser)等,用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序8022中。
在本发明实施例中,通过调用存储器802存储的程序或指令,具体的,可以是应用程序8022中存储的程序或指令,处理器801用于:从待处理图像序列中,选取一张图像作为参考图像;依据所述参考图像,确定待处理图像中的对齐区域;获取所述参考图像中与所述对齐区域对应的目标参考子区域;将所述对齐区域以及所述目标参考子区域进行亮度归一化。
上述本发明实施例揭示的方法可以应用于处理器801中,或者由处理器801实现。处理器801可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器801中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器801可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(FieldProgrammable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器802,处理器801读取存储器802中的信息,结合其硬件完成上述方法的步骤。
可以理解的是,本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(ApplicationSpecific Integrated Circuits,ASIC)、数字信号处理器(Digital Signal Processing,DSP)、数字信号处理设备(DSP Device,DSPD)、可编程逻辑设备(Programmable LogicDevice,PLD)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现,可通过执行本发明实施例中所述功能的模块(例如过程、函数等)来实现本发明实施例中所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
可选地,处理器801还用于:所述依据所述参考图像,确定待处理图像中的对齐区域,包括:依据参考图像,计算待处理图像中各子区域的亮度权重以及相似度权重;分别依据各子区域的亮度权重以及相似度权重,计算各子区域的选择权重;确定最大选择权重对应的子区域作为所述待处理图像的对齐区域。
可选地,处理器801还用于:计算待处理图像中,每个子区域的亮度权重,包括:确定所述子区域中包含的各像素点的像素值;针对各像素点,当所述像素点的像素值小于第一预设值时,将所述像素值确定为所述像素点的像素权重;当所述像素点的像素值大于或等于第一预设值时,将第二预设值与所述像素值的差值确定为所述像素点的像素权重;将各像素点的像素权重之和,确定为所述子区域的亮度权重。
可选地,处理器801还用于:计算待处理图像中,每个子区域相似度权重,包括:确定所述子区域在所述参考图像中对应的参考子区域,以及所述参考子区域的像素均值;针对所述子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第一差值;针对所述参考子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第二差值;将各像素点的所述第一差值与所述第二差值的乘积之和,确定为所述子区域的相似度权重。
可选地,处理器801还用于:依据子区域的亮度权重以及相似度权重,计算单个子区域的选择权重,包括:将所述子区域的亮度权重与第一系数的乘积与所述待处理图像的子区域的相似度权重与第二系数的乘积相加,所得和值为所述子区域的选择权重。
可选地,处理器801还用于:所述将所述对齐区域以及所述目标参考子区域进行亮度归一化的步骤包括:针对所述对齐区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述对齐区域中的最大像素值相除,得到第一商值;针对所述目标参考子区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述最大像素值相除,得到第二商值;依据所述第一商值以及所述第二商值对所述对齐区域进行亮度归一化。
移动终端800能够实现前述实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。
通过本发明实施例提供的移动终端,从待处理图像序列中,选取一张图像作为参考图像,依据参考图像,确定待处理图像中的对齐区域;获取参考图像中与对齐区域对应的目标参考子区域;将对齐区域以及目标参考子区域进行亮度归一化。本发明实施例中通过目标参考子区域对待处理图像中的对齐区域进行亮度归一化,能够改善不同曝光图像之间的对齐误差问题。
实施例六
参照图6,示出了本发明实施例的移动终端的结构框图。
本发明实施例中的移动终端可以为手机、平板电脑、个人数字助理(PersonalDigital Assistant,PDA)、或车载电脑等。
图6中的移动终端包括射频(Radio Frequency,RF)电路910、存储器920、输入单元930、显示单元940、处理器960、音频电路970、WiFi(Wireless Fidelity)模块980和电源990。
其中,输入单元930可用于接收用户输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的信号输入。具体地,本发明实施例中,该输入单元930可以包括触控面板931。触控面板931,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板931上的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板931可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给该处理器960,并能接收处理器960发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板931。除了触控面板931,输入单元930还可以包括其他输入设备932,其他输入设备932可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
其中,显示单元940可用于显示由用户输入的信息或提供给用户的信息以及移动终端的各种菜单界面。显示单元940可包括显示面板941,可选的,可以采用LCD或有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板941。
应注意,触控面板931可以覆盖显示面板941,形成触摸显示屏,当该触摸显示屏检测到在其上或附近的触摸操作后,传送给处理器960以确定触摸事件的类型,随后处理器960根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。
触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定,可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件,例如,设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。
其中处理器960是移动终端的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在第一存储器921内的软件程序和/或模块,以及调用存储在第二存储器922内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。可选的,处理器960可包括一个或多个处理单元。
在本发明实施例中,通过调用存储该第一存储器921内的软件程序和/或模块和/或该第二存储器922内的数据,处理器960用于:从待处理图像序列中,选取一张图像作为参考图像;依据所述参考图像,确定待处理图像中的对齐区域;获取所述参考图像中与所述对齐区域对应的目标参考子区域;将所述对齐区域以及所述目标参考子区域进行亮度归一化。
可选地,处理器960还用于:所述依据所述参考图像,确定待处理图像中的对齐区域,包括:依据参考图像,计算待处理图像中各子区域的亮度权重以及相似度权重;分别依据各子区域的亮度权重以及相似度权重,计算各子区域的选择权重;确定最大选择权重对应的子区域作为所述待处理图像的对齐区域。
可选地,处理器960还用于:计算待处理图像中,每个子区域的亮度权重,包括:确定所述子区域中包含的各像素点的像素值;针对各像素点,当所述像素点的像素值小于第一预设值时,将所述像素值确定为所述像素点的像素权重;当所述像素点的像素值大于或等于第一预设值时,将第二预设值与所述像素值的差值确定为所述像素点的像素权重;将各像素点的像素权重之和,确定为所述子区域的亮度权重。
可选地,处理器960还用于:计算待处理图像中,每个子区域相似度权重,包括:确定所述子区域在所述参考图像中对应的参考子区域,以及所述参考子区域的像素均值;针对所述子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第一差值;针对所述参考子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第二差值;将各像素点的所述第一差值与所述第二差值的乘积之和,确定为所述子区域的相似度权重。
可选地,处理器960还用于:依据子区域的亮度权重以及相似度权重,计算单个子区域的选择权重,包括:将所述子区域的亮度权重与第一系数的乘积与所述待处理图像的子区域的相似度权重与第二系数的乘积相加,所得和值为所述子区域的选择权重。
可选地,处理器960还用于:所述将所述对齐区域以及所述目标参考子区域进行亮度归一化的步骤包括:针对所述对齐区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述对齐区域中的最大像素值相除,得到第一商值;针对所述目标参考子区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述最大像素值相除,得到第二商值;依据所述第一商值以及所述第二商值对所述对齐区域进行亮度归一化。
通过本发明实施例提供的移动终端,从待处理图像序列中,选取一张图像作为参考图像,依据参考图像,确定待处理图像中的对齐区域;获取参考图像中与对齐区域对应的目标参考子区域;将对齐区域以及目标参考子区域进行亮度归一化。本发明实施例通过目标参考子区域对待处理图像中的对齐区域进行亮度归一化,能够改善不同曝光图像之间的对齐误差问题。
本发明实施例还提供一种移动终端,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的图像处理程序,所述图像处理程序被所述处理器执行时实现所述的图像处理方法的步骤。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有图像处理程序,所述图像处理程序被处理器执行时实现所述的图像处理方法的步骤。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
在此提供的图像处理的方法不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造具有本发明方案的系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的图像处理的处理方法中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于系统实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
Claims (12)
1.一种图像处理方法,其特征在于,所述方法包括:
从待处理图像序列中,选取一张图像作为参考图像;
依据所述参考图像,确定待处理图像中的对齐区域;
获取所述参考图像中与所述对齐区域对应的目标参考子区域;
将所述对齐区域以及所述目标参考子区域进行亮度归一化;
其中,所述依据所述参考图像,确定待处理图像中的对齐区域,包括:
依据参考图像,计算待处理图像中各子区域的亮度权重以及相似度权重;
分别依据各子区域的亮度权重以及相似度权重,计算各子区域的选择权重;
确定最大选择权重对应的子区域作为所述待处理图像的对齐区域。
2.根据权利要求1所述的方法,其特征在于,计算待处理图像中,每个子区域的亮度权重,包括:
确定所述子区域中包含的各像素点的像素值;
针对各像素点,当所述像素点的像素值小于第一预设值时,将所述像素值确定为所述像素点的像素权重;当所述像素点的像素值大于或等于第一预设值时,将第二预设值与所述像素值的差值确定为所述像素点的像素权重;
将各像素点的像素权重之和,确定为所述子区域的亮度权重。
3.根据权利要求1所述的方法,其特征在于,计算待处理图像中,每个子区域相似度权重,包括:
确定所述子区域在所述参考图像中对应的参考子区域,以及所述参考子区域的像素均值;
针对所述子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第一差值;
针对所述参考子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第二差值;
将各像素点的所述第一差值与所述第二差值的乘积之和,确定为所述子区域的相似度权重。
4.根据权利要求1所述的方法,其特征在于,依据子区域的亮度权重以及相似度权重,计算单个子区域的选择权重,包括:
将所述子区域的亮度权重与第一系数的乘积与所述待处理图像的子区域的相似度权重与第二系数的乘积相加,所得和值为所述子区域的选择权重。
5.根据权利要求1所述的方法,其特征在于,所述将所述对齐区域以及所述目标参考子区域进行亮度归一化的步骤包括:
针对所述对齐区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述对齐区域中的最大像素值相除,得到第一商值;
针对所述目标参考子区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述最大像素值相除,得到第二商值;
依据所述第一商值以及所述第二商值对所述对齐区域进行亮度归一化。
6.一种移动终端,其特征在于,所述移动终端包括:
参考图像确定模块,用于从待处理图像序列中,选取一张图像作为参考图像;
确定模块,用于依据参考图像,确定待处理图像中的对齐区域;
获取模块,用于获取所述参考图像中与所述对齐区域对应的目标参考子区域;
归一化模块,用于将所述对齐区域以及所述目标参考子区域进行亮度归一化;
其中,所述确定模块包括:
第一计算子模块,用于依据所述参考图像,计算待处理图像中各子区域的亮度权重以及相似度权重;
第二计算子模块,用于分别依据各子区域的亮度权重以及相似度权重,计算各子区域的选择权重;
对齐区域确定子模块,用于确定最大选择权重对应的子区域作为所述待处理图像的对齐区域。
7.根据权利要求6所述的移动终端,其特征在于,所述第一计算子模块包括:
第一确定单元,用于确定所述子区域中包含的各像素点的像素值;
第二确定单元,用于针对各像素点,当所述像素点的像素值小于第一预设值时,将所述像素值确定为所述像素点的像素权重;
第三确定单元,用于当所述像素点的像素值大于或等于第一预设值时,将第二预设值与所述像素值的差值确定为所述像素点的像素权重;
第四确定单元,用于将各像素点的像素权重之和,确定为所述子区域的亮度权重。
8.根据权利要求6所述的移动终端,其特征在于,所述第一计算子模块还包括:
第五确定单元,用于确定所述子区域在所述参考图像中对应的参考子区域,以及所述参考子区域的像素均值;
第六确定单元,用于针对所述子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第一差值;
第七确定单元,用于针对所述参考子区域中包含的各像素点,确定所述像素点的像素值与所述像素均值的第二差值;
第八确定单元,用于将各像素点的所述第一差值与所述第二差值的乘积之和,确定为所述子区域的相似度权重。
9.根据权利要求6所述的移动终端,其特征在于,所述第二计算子模块具体用于:将所述子区域的亮度权重与第一系数的乘积与所述待处理图像的子区域的相似度权重与第二系数的乘积相加,所得和值为所述子区域的选择权重。
10.根据权利要求6所述的移动终端,其特征在于,所述归一化模块包括:
第一商值计算子模块,用于针对所述对齐区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述对齐区域中的最大像素值相除,得到第一商值;
第二商值计算子模块,用于针对所述目标参考子区域的各像素点,将所述像素点的像素值与第三预设值相乘后,与所述最大像素值相除,得到第二商值;
归一化子模块,用于依据所述第一商值以及所述第二商值对所述对齐区域进行亮度归一化。
11.一种移动终端,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的图像处理程序,所述图像处理程序被所述处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有图像处理程序,所述图像处理程序被处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710737852.2A CN107454330B (zh) | 2017-08-24 | 2017-08-24 | 一种图像处理方法、移动终端及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710737852.2A CN107454330B (zh) | 2017-08-24 | 2017-08-24 | 一种图像处理方法、移动终端及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107454330A CN107454330A (zh) | 2017-12-08 |
CN107454330B true CN107454330B (zh) | 2019-01-22 |
Family
ID=60493179
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710737852.2A Active CN107454330B (zh) | 2017-08-24 | 2017-08-24 | 一种图像处理方法、移动终端及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107454330B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108012080B (zh) * | 2017-12-04 | 2020-02-04 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
WO2020186385A1 (zh) * | 2019-03-15 | 2020-09-24 | 深圳市大疆创新科技有限公司 | 图像处理方法、电子设备及计算机可读存储介质 |
CN110728644B (zh) * | 2019-10-11 | 2022-06-21 | 厦门美图之家科技有限公司 | 图像生成方法、装置、电子设备和可读存储介质 |
CN111028276A (zh) * | 2019-12-09 | 2020-04-17 | Oppo广东移动通信有限公司 | 图像对齐方法、装置、存储介质及电子设备 |
CN111145153B (zh) * | 2019-12-25 | 2023-10-03 | 上海肇观电子科技有限公司 | 图像处理方法、电路、视障辅助设备、电子设备及介质 |
CN111179199B (zh) * | 2019-12-31 | 2022-07-15 | 展讯通信(上海)有限公司 | 图像处理方法、装置及可读存储介质 |
CN112381836B (zh) * | 2020-11-12 | 2023-03-31 | 贝壳技术有限公司 | 图像处理方法和装置、计算机可读存储介质、电子设备 |
CN113327193A (zh) * | 2021-05-27 | 2021-08-31 | 北京百度网讯科技有限公司 | 图像处理方法、装置、电子设备和介质 |
CN114491131B (zh) * | 2022-01-24 | 2023-04-18 | 北京至简墨奇科技有限公司 | 对候选图像进行重新排序的方法、装置和电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102393958A (zh) * | 2011-07-16 | 2012-03-28 | 西安电子科技大学 | 基于压缩感知的多聚焦图像融合方法 |
CN102420944A (zh) * | 2011-04-25 | 2012-04-18 | 展讯通信(上海)有限公司 | 一种高动态范围图像合成方法及装置 |
CN103141079A (zh) * | 2010-10-05 | 2013-06-05 | 索尼电脑娱乐公司 | 图像生成装置及图像生成方法 |
CN105894484A (zh) * | 2016-03-30 | 2016-08-24 | 山东大学 | 一种基于直方图归一化与超像素分割的hdr重建算法 |
CN106506981A (zh) * | 2016-11-25 | 2017-03-15 | 阿依瓦(北京)技术有限公司 | 生成高动态范围图像的设备和方法 |
-
2017
- 2017-08-24 CN CN201710737852.2A patent/CN107454330B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103141079A (zh) * | 2010-10-05 | 2013-06-05 | 索尼电脑娱乐公司 | 图像生成装置及图像生成方法 |
CN102420944A (zh) * | 2011-04-25 | 2012-04-18 | 展讯通信(上海)有限公司 | 一种高动态范围图像合成方法及装置 |
CN102393958A (zh) * | 2011-07-16 | 2012-03-28 | 西安电子科技大学 | 基于压缩感知的多聚焦图像融合方法 |
CN105894484A (zh) * | 2016-03-30 | 2016-08-24 | 山东大学 | 一种基于直方图归一化与超像素分割的hdr重建算法 |
CN106506981A (zh) * | 2016-11-25 | 2017-03-15 | 阿依瓦(北京)技术有限公司 | 生成高动态范围图像的设备和方法 |
Non-Patent Citations (1)
Title |
---|
《基于多曝光融合及伪影去除的动态范围扩展技术研究》;江燊煜;《浙江大学学位论文》;20151231;27-31页 |
Also Published As
Publication number | Publication date |
---|---|
CN107454330A (zh) | 2017-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107454330B (zh) | 一种图像处理方法、移动终端及计算机可读存储介质 | |
CN107547734B (zh) | 屏幕亮度调节的方法、移动终端和存储介质 | |
CN105898143B (zh) | 一种运动物体的抓拍方法及移动终端 | |
CN106060422B (zh) | 一种图像曝光方法及移动终端 | |
CN106101544B (zh) | 一种图像处理方法及移动终端 | |
CN107566723B (zh) | 一种拍摄方法、移动终端及计算机可读存储介质 | |
CN107231530B (zh) | 一种拍照方法及移动终端 | |
CN107563977A (zh) | 一种图像处理方法、移动终端及计算机可读存储介质 | |
CN106131398B (zh) | 一种图像浏览方法及移动终端 | |
CN107368150A (zh) | 一种拍照方法及移动终端 | |
CN107404577B (zh) | 一种图像处理方法、移动终端及计算机可读存储介质 | |
CN106161932B (zh) | 一种拍照方法及移动终端 | |
CN106937055A (zh) | 一种图像处理方法及移动终端 | |
CN106993091A (zh) | 一种图像虚化方法及移动终端 | |
CN107566720B (zh) | 一种更新移动终端的标定值的方法及移动终端 | |
CN107613218A (zh) | 一种高动态范围图像的拍摄方法及移动终端 | |
CN106101545A (zh) | 一种图像处理方法及移动终端 | |
CN107172346A (zh) | 一种虚化方法及移动终端 | |
CN106993135B (zh) | 一种拍照方法及移动终端 | |
CN109120850A (zh) | 一种图像处理方法及移动终端 | |
CN106713715B (zh) | 一种拍照方法及移动终端 | |
CN106097398B (zh) | 一种运动对象的检测方法及移动终端 | |
CN106412457B (zh) | 一种图像处理方法及移动终端 | |
CN106791809B (zh) | 一种测光方法及移动终端 | |
CN107610059A (zh) | 一种图像处理方法及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |