CN108234880B - 一种图像增强方法和装置 - Google Patents

一种图像增强方法和装置 Download PDF

Info

Publication number
CN108234880B
CN108234880B CN201810108513.2A CN201810108513A CN108234880B CN 108234880 B CN108234880 B CN 108234880B CN 201810108513 A CN201810108513 A CN 201810108513A CN 108234880 B CN108234880 B CN 108234880B
Authority
CN
China
Prior art keywords
image
region
interest
exposure value
brightness
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810108513.2A
Other languages
English (en)
Other versions
CN108234880A (zh
Inventor
王涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Ck Technology Co ltd
Original Assignee
Chengdu Ck Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Ck Technology Co ltd filed Critical Chengdu Ck Technology Co ltd
Priority to CN201810108513.2A priority Critical patent/CN108234880B/zh
Publication of CN108234880A publication Critical patent/CN108234880A/zh
Application granted granted Critical
Publication of CN108234880B publication Critical patent/CN108234880B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

本发明实施例提供了一种图像增强方法和装置,用于实现增强用户感兴趣区域内图像质量的技术效果。所述方法包括:从预览图像中确定出用户感兴趣区域;根据所述感兴趣区域确定第一摄像头的第一曝光值,并控制所述第一摄像头按所述第一曝光值拍摄第一图像;获取第二摄像头拍摄的第二图像;判断所述第二图像中的所述感兴趣区域的亮度是否为弱光或强光;如果所述第二图像中的所述感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述感兴趣区域的图像替换所述第二图像中的所述感兴趣区域的图像,以替换后的所述第二图像作为输出图像。

Description

一种图像增强方法和装置
技术领域
本发明涉及图像处理领域,尤其涉及一种图像增强方法和装置。
背景技术
随着朋友圈以及微博等网络社交的发展,用户手机拍摄图片的质量要求越来越高。尤其地,如果用户是在强光(例如海滩)或者弱光(例如夜晚)情况下拍摄图片,目前手机的拍摄质量往往令用户觉得差强人意。
目前,解决上述问题的方式最常见的就是HDR(高动态范围成像High DynamicRange imaging),以过曝光、正常曝光和欠曝光分别针对同一场景拍摄三张图片,然后再用该三张图片进行全局融合。
然而,以HDR增强后的图像,某些区域可能依然过曝或欠曝,同时这些区域还存在图像细节不清晰的问题。如果该区域的内容为用户关注的内容,就可能导致用户对整体的图片质量都不满。
发明内容
本发明实施例提供了一种图像增强方法和装置,用于实现增强用户感兴趣区域内图像质量的技术效果。
第一方面,本发明提供了一种图像增强方法,包括:
从预览图像中确定出用户感兴趣区域;
根据所述感兴趣区域确定第一摄像头的第一曝光值,并控制所述第一摄像头按所述第一曝光值拍摄第一图像;
获取第二摄像头拍摄的第二图像;
判断所述第二图像中的所述感兴趣区域的亮度是否为弱光或强光;
如果所述第二图像中的所述感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述感兴趣区域的图像替换所述第二图像中的所述感兴趣区域的图像,以替换后的所述第二图像作为输出图像。
可选的,如果所述第二图像中的所述感兴趣区域的亮度不为弱光和强光,所述方法还包括:
从所述第一图像中提取出所述感兴趣区域的边缘;
将从所述第一图像中提取出的边缘与所述第二图像中的所述感兴趣区域的边缘融合,以边缘融合后的所述第二图像作为输出图像。
可选的,所述根据所述感兴趣区域确定第一摄像头的第一曝光值,包括:
计算所述感兴趣区域的区域亮度;
基于所述区域亮度确定所述第一摄像头的所述第一曝光值。
可选的,所述根据所述感兴趣区域确定第一摄像头的第一曝光值,包括:
以所述感兴趣区域为曝光点,确定所述第一摄像头的所述第一曝光值。
可选的,所述从预览图像中确定出用户感兴趣区域,包括:
接收针对所述预览图像中的所述感兴趣区域的选取操作,并基于所述选取操作确定出所述感兴趣区域。
可选的,所述从预览图像中确定出用户感兴趣区域,包括:
从所述预览图像中分离出前景和后景,并将所述前景确定为所述感兴趣区域。
可选的,所述从预览图像中确定出用户感兴趣区域,包括:
在所述预览图像中识别出预设对象,将识别出的所述预设对象所在的区域确定为所述感兴趣区域。
第二方面,本发明提供了一种图像增强装置,包括:
确定模块,用于从预览图像中确定出用户感兴趣区域;
拍摄模块,用于根据所述感兴趣区域确定第一摄像头的第一曝光值,并控制所述第一摄像头按所述第一曝光值拍摄第一图像;
获取模块,用于获取第二摄像头拍摄的第二图像;
判断模块,用于判断所述第二图像中的所述感兴趣区域的亮度是否为弱光或强光;
图像增强模块,用于如果所述第二图像中的所述感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述感兴趣区域的图像替换所述第二图像中的所述感兴趣区域的图像,以替换后的所述第二图像作为输出图像。
第三方面,本发明提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现以下步骤:
从预览图像中确定出用户感兴趣区域;
根据所述感兴趣区域确定第一摄像头的第一曝光值,并控制所述第一摄像头按所述第一曝光值拍摄第一图像;
获取第二摄像头拍摄的第二图像;
判断所述第二图像中的所述感兴趣区域的亮度是否为弱光或强光;
如果所述第二图像中的所述感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述感兴趣区域的图像替换所述第二图像中的所述感兴趣区域的图像,以替换后的所述第二图像作为输出图像。
第四方面,本发明提供了一种终端系统,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现以下步骤:
从预览图像中确定出用户感兴趣区域;
根据所述感兴趣区域确定第一摄像头的第一曝光值,并控制所述第一摄像头按所述第一曝光值拍摄第一图像;
获取第二摄像头拍摄的第二图像;
判断所述第二图像中的所述感兴趣区域的亮度是否为弱光或强光;
如果所述第二图像中的所述感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述感兴趣区域的图像替换所述第二图像中的所述感兴趣区域的图像,以替换后的所述第二图像作为输出图像。
本申请实施例中的上述一个或多个技术方案,至少具有如下一种或多种技术效果:
在本发明实施例中的技术方案中,首先从预览图像中确定出用户感兴趣区域,然后根据感兴趣区域确定第一摄像头的第一曝光值,并按第一曝光值拍摄第一图像,接着获取第二摄像头拍摄的第二图像,判断第二图像中的感兴趣区域的亮度是否为弱光或者强光,如果第二图像中的感兴趣区域的亮度为弱光或强光,则以第一图像中的感兴趣区域的图像替换第一图像中的感兴趣区域的图像,并以替换后的第一图像作为输出图像。由于第一曝光值是基于感兴趣区域的实际情况而确定的,故而第一图像的感兴趣区域曝光值更加符合实际情况,以及第一图像的感兴趣区域可以记录更清晰的细节,因此在第二图像过曝或欠曝时,以第一图像的感兴趣区域替换第二图像的感兴趣区域,从而使得输出图像的感兴趣区域质量更好,由此解决了现有技术存在的区域图像质量低,实现了增强用户感兴趣区域内图像质量的技术效果。
附图说明
图1为一种可能的终端系统示意图;
图2为本发明实施例中的图像增强方法流程图;
图3为本发明实施例中的图像增强装置的结构示意图。
具体实施方式
本发明实施例提供了一种图像增强方法和装置,用于实现增强用户感兴趣区域内图像质量的技术效果。
为了解决上述技术问题,本发明提供的技术方案总体思路如下:
在本发明实施例中的技术方案中,首先从预览图像中确定出用户感兴趣区域,然后根据感兴趣区域确定第一摄像头的第一曝光值,并按第一曝光值拍摄第一图像,接着获取第二摄像头拍摄的第二图像,判断第二图像中的感兴趣区域的亮度是否为弱光或者强光,如果第二图像中的感兴趣区域的亮度为弱光或强光,则以第一图像中的感兴趣区域的图像替换第一图像中的感兴趣区域的图像,并以替换后的第一图像作为输出图像。由于第一曝光值是基于感兴趣区域的实际情况而确定的,故而第一图像的感兴趣区域曝光值更加符合实际情况,以及第一图像的感兴趣区域可以记录更清晰的细节,因此在第二图像过曝或欠曝时,以第一图像的感兴趣区域替换第二图像的感兴趣区域,从而使得输出图像的感兴趣区域质量更好,由此解决了现有技术存在的区域图像质量低,实现了增强用户感兴趣区域内图像质量的技术效果。
下面通过附图以及具体实施例对本发明技术方案做详细的说明,应当理解本申请实施例以及实施例中的具体特征是对本申请技术方案的详细的说明,而不是对本申请技术方案的限定,在不冲突的情况下,本申请实施例以及实施例中的技术特征可以相互组合。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
为方便对本发明实施例中的技术方案进行介绍,首先对应用本发明实施例中图像增强方法的终端系统进行介绍。请参考图1,为一种可能的终端系统示意图。在图1中,终端系统100为包括触摸式输入装置101的系统。然而,应当理解,该系统还可包括一个或多个其他物理用户接口设备,诸如物理键盘、鼠标和/或操纵杆。终端系统100的运行平台可适于运行一种或多种操作系统,例如Android(安卓)操作系统,Windows(视窗)操作系统,苹果IOS操作系统,BlackBerry(黑莓)操作系统,谷歌Chrome操作系统等通用型操作系统。然而,在其它实施例中,终端系统100也可以运行专用的操作系统而非通用操作系统。
在某些实施例中,终端系统100同时可支持运行一种或多种应用程序,包括但不限于以下应用程序中的一个或多个应用程序:磁盘管理应用程序、安全加密应用程序、权限管理应用程序、系统设置应用程序、文字处理应用程序、演示幻灯片应用程序、电子表格应用程序、数据库应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、照片管理应用程序、数字相机应用程序、数字视频相机应用程序、web浏览应用程序、数字音乐播放器应用程序和数字视频播放器应用程序等等。
在终端系统上运行的操作系统和各种应用程序可使用触摸式输入装置101作为用户的物理输入界面装置。触摸式输入装置101具有一触摸表面作为用户界面。可选的,触摸式输入装置101的触摸表面为一显示屏幕102表面,触摸式输入装置101和显示屏幕102共同形成了触敏显示屏120,然而在另一些实施例中,触摸式输入装置101具有一独立的,不与其他设备模块共用的触摸表面。触敏显示屏还进一步包括用于检测触摸式输入装置101上是否发生接触的一个或多个接触传感器106。
触敏显示屏120可选地使用LCD(液晶显示屏,Liquid Crystal Display)技术、LPD(发光聚合物显示器,Laser-powered Phosphor Display)技术或LED(发光二极管)技术,或其它任何可以实现图像显示的技术。触敏显示屏120进一步可使用现在已知或以后开发的多种触摸感测技术的任何一种来检测接触以及接触的任何移动或阻断,例如电容感测技术或电阻感测技术。在一些实施例中,触敏显示屏120可同时检测单个接触点或多个接触点及其移动变化状况。
除触摸式输入装置101与可选的显示屏幕102之外,终端系统100还可包括存储器103(其任选地包括一个或多个计算机可读存储介质)、存储器控制器104以及一个或多个处理器(Processor)105,以上组件可通过一个或多个信号总线107进行通信。
存储器103可包括缓存(Cache)、高速随机存取存储器(RAM),例如常见的双倍数据率同步动态随机存取内存(DDR SDRAM),并且还可包括非易失性存储器(NVRAM),诸如一个或多个只读存储器(ROM)、磁盘存储设备、闪存(Flash)存储器设备、或其他非易失性固态存储器设备例如光盘(CD-ROM,DVD-ROM),软盘或数据磁带等。存储器103可用于存储前述操作系统和应用程序软件,以及在系统工作过程中产生和接收的各种类型数据。存储控制器104可控制系统100的其他部件访问存储器103。
处理器105用于运行或执行被存储在内部存储器103中的操作系统,各种软件程序,以及自身的指令集,并用于处理来自于触摸式输入装置101或自其它外部输入途径接收到的数据和指令,以实现系统100的各种功能。处理器105可以包括但不限于中央处理器(CPU)、通用图像处理器(GPU)、微处理器(MCU)、数字信号处理器(DSP)、现场可编程逻辑门阵列(FPGA),应用专用集成电路(ASIC)中的一种或多种。在一些实施例中,处理器105和存储器控制器104可在单个芯片上实现。在一些其他实施方案中,它们可分别在彼此独立的芯片上实现。
在图1中,信号总线107被配置为将终端系统100的各个组件连接进行通信。应该理解的是,图1所示的信号总线107的配置和连接方式是示例性的而非限制性的。视具体的应用环境和硬件配置要求,在其它实施例中,信号总线107可以采用其它不同但为本领域技术人员惯用的连接方式以及其常规组合或变化,以实现各个组件之间所需要的信号连接。
进一步的,在某些实施例中,终端系统100还可包含外围设备I/O接口111、RF电路112、音频电路113、扬声器114、麦克风115、摄像模块116。设备100还可包括一个或多个不同种类的传感器模块118。
RF(射频)电路112用于接收和发送射频信号以实现同其他通信设备进行通信。RF电路112可包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路112任选地通过无线通信来与网络以及其他设备进行通信,该网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网(诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。RF电路112还可包括用于检测近场通信(NFC)场的电路。无线通信可选用一种或多种通信标准、协议和技术,包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、蓝牙低功耗、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE 802.11b、IEEE 802.11g、IEEE 802.11n和/或IEEE 802.11ac)、互联网协议语音(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS)、或者包括在本申请提交日期时还未开发出的通信协议的任何其他适当的通信协议。
音频电路113、扬声器114和麦克风115提供用户与终端系统100之间的音频接口。音频电路113从外部I/O端口111接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器114。扬声器114将电信号转换为人类可听的声波。音频电路113还接收由麦克风115根据声波转换的电信号。音频电路113可进一步将电信号转换为音频数据,并将音频数据传输到外部I/O端口111以发送给外部设备处理。音频数据可在处理器105与存储控制器104的控制下,被传输至存储器103和/或RF电路112。在一些实施方案中,音频电路113还可连接到耳麦接口。
摄像模块116用于根据来自处理器105的指令,进行静态图像和视频拍摄。摄像模块116可具有镜片装置1161和影像传感器1162,能够由镜头装置1161接收来自外界的光信号,并由影像传感器1162,例如金属-氧化物互补型光电晶体管(CMOS)传感器或电荷耦合器件(CCD)传感器,将光信号转换为电信号。摄像模块116可进一步具有影像处理器(ISP)1163,用于将前述电信号进行处理校正,并转换成特定的图像格式文件,例如JPEG(联合图像专家小组)图像文件,TIFF(标签图像文件格式)图像文件等等。图像文件可根据处理器105和存储控制器104的指令,被送至存储器103进行存储,或送至RF电路112发送给外部设备。
外部I/O端口111为终端系统100同其它外部设备或系统表面物理输入模块提供接口。表面物理输入模块可以为按键,键盘,转盘等等,例如音量按键,电源按键,返回按键和摄像按键。外部I/O端口111所提供的接口还可包括通用串行总线(USB)接口(可包括USB、Mini-USB、Micro-USB、USB Type-C等等)、雷电(Thunderbolt)接口、耳麦接口、视频传输接口(例如高清晰度多媒体HDMI接口,移动高清连接MHL接口)、外部存储接口(例如外置存储卡SD卡接口),用户身份模块卡(SIM卡)接口等等。
传感器模块118可具有一个或多个传感器或传感器阵列,包括但不限于:1、位置传感器,例如全球卫星定位系统(GPS)传感器,北斗卫星定位传感器或格罗洛斯(GLONASS)卫星定位系统传感器,用于检测设备当前地理位置;2、加速度传感器,重力传感器,陀螺仪,用于检测设备运动状态并辅助定位;3、光线传感器,用于检测外部环境光;4、距离传感器,用于检测外部物体同系统的距离;5、压力传感器,用于检测系统接触的压力情况;6、温度与湿度传感器,用于检测环境温度和湿度。传感器模块118还可以视应用需要,添加任何其他种类和数量的传感器或传感器阵列。
在本发明一些实施例中,可由处理器105通过指令调用终端系统100的各个组件,执行本发明的图像处理方法。处理器105执行本发明的图像处理方法所需要的程序由存储器103进行存储。
下面对本发明实施例的图像增强方法进行介绍,请参考图2,为本发明实施例中图像增强方法的流程图。该方法包括:
S101:从预览图像中确定出用户感兴趣区域;
S102:根据感兴趣区域确定第一摄像头的第一曝光值,并控制第一摄像头按第一曝光值拍摄第一图像;
S103:获取第二摄像头拍摄的第二图像;
S104:判断第二图像中的感兴趣区域的亮度是否为弱光或强光;
S105:如果第二图像中的感兴趣区域的亮度为弱光或强光,以第一图像中的感兴趣区域的图像替换第二图像中的感兴趣区域的图像,以替换后的第二图像作为输出图像。
具体来讲,本发明实施例中的终端系统的摄像模块包括两个摄像头,终端系统例如双摄智能手机。启动两个摄像头分采集图像并合成预览图像,将预览图像显示在显示屏上。接下来,在S101中,从预览图像中确定出用户ROI(感兴趣区域,Region Of Interest)。具体来讲,在本发明实施例中,确定ROI的方式包括但不限于以下三种:
第一种:
由于预览图像已经输出在显示屏上,因此用户可以根据自己的需求任意选择一区域作为ROI。因此,在第一种实施方式中,确定ROI就具体为:接收针对预览图像中的感兴趣区域的选取操作,并基于选取操作确定出感兴趣区域。
具体来讲,选取操作例如为点击操作、滑动操作或框选操作等,本发明不做具体限制。举例来说,选取操作具体为点击操作,用户通过观察预览图像,点击自己关注的对象,例如人脸、猫或狗等,进而在接收到点击操作后,基于该点击操作的点击位置,以点击操作为矩形中心,并按照预设边长确定出一矩形,并将该矩形内的区域确定为ROI。或者,再举例来说,选取操作具体为滑动操作,用户通过滑动操作包围出自己关注的对象所在的区域,进而在接收到滑动操作后,进一步获取滑动操作的轨迹,进而获得该轨迹所形成的封闭或近似封闭区域,进而将该区域确定为ROI。在具体实现过程中,本发明所属领域的普通技术人员可以根据实际进行选择,本发明不做具体限制。
第二种:
在第二种实施方式中,从预览图像中分离出前景和后景,并将前景确定为ROI。
具体来讲,对预览图像进行前景分割,进而分离出前景和后景,然后将前景作为目标对象。在具体实现过程中,可以按照基于边缘检测的分割方法、基于阈值的分割方法、基于聚类的分割方法或基于区域生长的分割方法中的一种或任意多种来分割前景,本发明不做具体限制。
一个具体的例子,预览图像具体为自拍图像,通过对自拍图像进行前景后景分割,将自拍图像中的人脸分割为前景,进而将人脸确定为目标对象。
由于在具体实现过程中,用户常常将自己或他人作为目标对象,而在该例子中,由于该人脸与后景景深差异明显,故而通过第二种实施方式,就可以智能地将该人脸所在区域作为ROI,达到了更加智能化的技术效果。
第三种:
在第三种实施方式中,在预览图像中识别出预设对象,将识别出的预设对象所在的区域确定为ROI。其中,预设对象例如为人脸、人体、盆栽、杯子、猫或狗等。一个具体的例子,预设对象具体为人脸和狗,假设在预览图像中识别出了一个预设对象——人脸,则将该人脸所在区域确定为ROI。
进一步,如果从预览图像中识别出多个预设对象,还可以提示用户选取其中的一个对象。沿用上文中的例子,预设对象具体为人脸和狗,假设在预览图像中识别出了两个预设对象——人脸和狗,则进一步提示用户选择人脸或狗。如果用户选择了人脸,则将人脸所在区域作为ROI,而狗所在的区域则不作为ROI;如果用户选择了狗,则将狗所在的区域作为ROI,而人脸所在区域则不作为ROI。
在第三种实施方式中,由于通过识别预览图像中的预设对象来确定ROI,故而保证ROI为预先设置的某种对象对应的区域,避免了将其他区域误确定为ROI,达到了提高ROI命中率的技术效果。
以上是对三种确定ROI的方式的介绍,在具体实现过程中,本发明所属领域的普通技术人员可以根据实际进行选择,本发明不做具体限制。
S101中确定出ROI之后,在S102中,第一摄像头根据ROI确定第一曝光值,并按第一曝光值拍摄第一图像。具体来讲,确定第一曝光值,在一种实施方式中,计算ROI的区域亮度,然后基于区域亮度确定第一摄像头的第一曝光值。
具体来讲,首先基于点测光法、中央权重法或平均测光法计算出ROI的区域亮度。然后,如果ROI的区域亮度较大,即该ROI的环境为强光环境,则降低第一摄像头的曝光值,进而将降低后的曝光值作为第一曝光值;如果ROI的区域亮度适中,即ROI的环境为正常光线环境,则保持正常曝光值作为第一曝光值;如果ROI的区域亮度较小,即ROI的环境为弱光环境,则增大第一摄像头的曝光值,进而将增大后的曝光值作为第一曝光值。
在第二种实施方式中,以ROI为曝光点,计算出第一摄像头的第一曝光值。
在具体实现过程中,本领域所属领域的普通技术人员可以根据实际进行选择,本发明不做具体限制。
另外,在本发明实施例中,对于第二摄像头的第二曝光值,则按照常规方式计算得到,例如以中央权重算法计算第二曝光值等,以及按照常规方式拍摄获得第二图像,这里就不详细介绍了。
接下来,在S103中,获取第二图像。然后,根据S101中确定出的ROI,从第一图像中搜索出第一图像的ROI,以及从第二图像中也搜索出第二图像的ROI。具体地可以按照漫水填充算法来进行搜索,这里就不详细介绍了。
接下来,在S104中,基于第二图像的ROI,判断第二图像的ROI是弱光、强光还是正常光。具体地,可以计算第二图像的ROI的区域亮度,然后基于该区域亮度进行判断。
在本发明实施例中,如果第二图像的ROI的亮度为强光,由于第二摄像头是按照常规方式计算第二曝光值并进行拍摄的,因此第二图像中的ROI是过曝的,并且,第二图像中的ROI也无法记录足够清晰的细节,因此,在本发明实施例中,以第一图像的ROI替换第二图像的ROI,并以替换后的第二图像作为输出图像。
如果第二图像的ROI的亮度为弱光,由于第二摄像头是按照常规方式计算第二曝光值并进行拍摄的,因此第二图像中的ROI是欠曝的,并且,第二图像中的ROI也无法记录足够清晰的细节,因此,在本发明实施例中,以第一图像中ROI替换第二图像中的ROI,并以替换后的第二图像作为输出图像。
在本发明实施例中的技术方案中,首先从预览图像中确定出用户感兴趣区域,然后根据感兴趣区域确定第一摄像头的第一曝光值,并按第一曝光值拍摄第一图像,接着获取第二摄像头拍摄的第二图像,判断第二图像中的感兴趣区域的亮度是否为弱光或者强光,如果第二图像中的感兴趣区域的亮度为弱光或强光,则以第一图像中的感兴趣区域的图像替换第一图像中的感兴趣区域的图像,并以替换后的第一图像作为输出图像。由于第一曝光值是基于感兴趣区域的实际情况而确定的,故而第一图像的感兴趣区域曝光值更加符合实际情况,以及第一图像的感兴趣区域可以记录更清晰的细节,因此在第二图像过曝或欠曝时,以第一图像的感兴趣区域替换第二图像的感兴趣区域,从而使得输出图像的感兴趣区域质量更好,由此解决了现有技术存在的区域图像质量低,实现了增强用户感兴趣区域内图像质量的技术效果。
而如果第二图像的ROI的亮度为正常,则表示第二图像中的ROI的曝光值适宜,故而就不需要替换第二图像中的ROI区域了。此时,可以直接将第二图像作为输出图像,也可以按照现有技术中的方式,将第一图像和第二图像整体融合为一张图像后再将该融合的图像作为输出图像,本发明不作具体限制。
进一步,如果第二图像中的ROI的亮度不为弱光和强光,即第二图像的ROI的亮度为正常,还可以从第一图像中提取出ROI的边缘,然后将提取出的边缘融合到第二图像中的ROI的边缘,以边缘融合后的第二图像作为输出图像。通过融合第一图像和第二图像的ROI边缘,就增强了第二图像中ROI的细节,从而进一步提高输出图像质量。
基于与前述实施例中图像增强方法同样的发明构思,本发明第二方面还提供一种图像增强装置,如图3所示,包括:
确定模块101,用于从预览图像中确定出用户感兴趣区域;
拍摄模块102,用于根据所述感兴趣区域确定第一摄像头的第一曝光值,并控制所述第一摄像头按所述第一曝光值拍摄第一图像;
获取模块103,用于获取第二摄像头拍摄的第二图像;
判断模块104,用于判断所述第二图像中的所述感兴趣区域的亮度是否为弱光或强光;
图像增强模块105,用于如果所述第二图像中的所述感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述感兴趣区域的图像替换所述第二图像中的所述感兴趣区域的图像,以替换后的所述第二图像作为输出图像。
前述图2实施例中的图像增强方法的各种变化方式和具体实例同样适用于本实施例的图像增强装置,通过前述对图像增强方法的详细描述,本领域技术人员可以清楚的知道本实施例中图像增强装置的实施方法,所以为了说明书的简洁,在此不再详述。
基于与前述实施例中图像增强方法同样的发明构思,本发明第三方面还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现以下步骤:
从预览图像中确定出用户感兴趣区域;
根据所述感兴趣区域确定第一摄像头的第一曝光值,并控制所述第一摄像头按所述第一曝光值拍摄第一图像;
获取第二摄像头拍摄的第二图像;
判断所述第二图像中的所述感兴趣区域的亮度是否为弱光或强光;
如果所述第二图像中的所述感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述感兴趣区域的图像替换所述第二图像中的所述感兴趣区域的图像,以替换后的所述第二图像作为输出图像。
基于与前述实施例中图像增强方法同样的发明构思,本发明第四方面还提供一种终端系统,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现以下步骤:
从预览图像中确定出用户感兴趣区域;
根据所述感兴趣区域确定第一摄像头的第一曝光值,并控制所述第一摄像头按所述第一曝光值拍摄第一图像;
获取第二摄像头拍摄的第二图像;
判断所述第二图像中的所述感兴趣区域的亮度是否为弱光或强光;
如果所述第二图像中的所述感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述感兴趣区域的图像替换所述第二图像中的所述感兴趣区域的图像,以替换后的所述第二图像作为输出图像。
对于终端系统存储器、处理器以及其他结构的介绍请参考上文,这里就不再重复赘述了。
本申请实施例中的上述一个或多个技术方案,至少具有如下一种或多种技术效果:
在本发明实施例中的技术方案中,首先从预览图像中确定出用户感兴趣区域,然后根据感兴趣区域确定第一摄像头的第一曝光值,并按第一曝光值拍摄第一图像,接着获取第二摄像头拍摄的第二图像,判断第二图像中的感兴趣区域的亮度是否为弱光或者强光,如果第二图像中的感兴趣区域的亮度为弱光或强光,则以第一图像中的感兴趣区域的图像替换第一图像中的感兴趣区域的图像,并以替换后的第一图像作为输出图像。由于第一曝光值是基于感兴趣区域的实际情况而确定的,故而第一图像的感兴趣区域曝光值更加符合实际情况,以及第一图像的感兴趣区域可以记录更清晰的细节,因此在第二图像过曝或欠曝时,以第一图像的感兴趣区域替换第二图像的感兴趣区域,从而使得输出图像的感兴趣区域质量更好,由此解决了现有技术存在的区域图像质量低,实现了增强用户感兴趣区域内图像质量的技术效果。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (8)

1.一种图像增强方法,其特征在于,包括:
从预览图像中确定出用户的感兴趣区域;基于点测光法、中央权重法或平均测光法计算所述感兴趣区域的区域亮度,如果所述感兴趣区域的区域亮度较大,即所述感兴趣区域的环境为强光环境,则降低第一摄像头的曝光值,进而将降低后的曝光值作为第一曝光值;
如果所述感兴趣区域的区域亮度适中,即所述感兴趣区域的环境为正常光线环境,则保持正常曝光值作为第一曝光值;
如果所述感兴趣区域的区域亮度较小,即所述感兴趣区域的环境为弱光环境,则增大第一摄像头的曝光值,进而将增大后的曝光值作为第一曝光值;
或者,以所述感兴趣区域为曝光点,确定所述第一摄像头的所述第一曝光值;
控制所述第一摄像头按所述第一曝光值拍摄第一图像;
以中央权重算法计算第二曝光值,获取第二摄像头在所述第二曝光值下拍摄的第二图像;
根据从所述预览图像中确定的所述感兴趣区域,从第一图像中搜索出第一感兴趣区域,从第二图像中搜索出第二感兴趣区域;
基于第二图像的第二感兴趣区域,判断所述第二图像中的所述第二感兴趣区域的亮度是否为弱光、强光还是正常光;
如果所述第二图像中的所述第二感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述第一感兴趣区域的图像替换所述第二图像中的所述第二感兴趣区域的图像,以替换后的所述第二图像作为输出图像;如果第二图像的所述第二感兴趣区域的亮度为正常光,直接将第二图像作为输出图像。
2.如权利要求1所述的方法,其特征在于,如果所述第二图像中的所述第二感兴趣区域的亮度不为弱光和强光,所述方法还包括:
从所述第一图像中提取出所述第一感兴趣区域的边缘;
将从所述第一图像中提取出的边缘与所述第二图像中的所述第二感兴趣区域的边缘融合,以边缘融合后的所述第二图像作为输出图像。
3.如权利要求1所述的方法,其特征在于,所述从预览图像中确定出用户的感兴趣区域,包括:
接收针对所述预览图像中的所述感兴趣区域的选取操作,并基于所述选取操作确定出所述感兴趣区域。
4.如权利要求1所述的方法,其特征在于,所述从预览图像中确定出用户感兴趣区域,包括:
从所述预览图像中分离出前景和后景,并将所述前景确定为所述感兴趣区域。
5.如权利要求1所述的方法,其特征在于,所述从预览图像中确定出用户感兴趣区域,包括:
在所述预览图像中识别出预设对象,将识别出的所述预设对象所在的区域确定为所述感兴趣区域。
6.一种图像增强装置,其特征在于,包括:
确定模块,用于从预览图像中确定出用户的感兴趣区域;
拍摄模块,用于基于点测光法、中央权重法或平均测光法计算所述感兴趣区域的区域亮度,如果所述感兴趣区域的区域亮度较大,即所述感兴趣区域的环境为强光环境,则降低第一摄像头的曝光值,进而将降低后的曝光值作为第一曝光值;如果所述感兴趣区域的区域亮度适中,即所述感兴趣区域的环境为正常光线环境,则保持正常曝光值作为第一曝光值;如果所述感兴趣区域的区域亮度较小,即所述感兴趣区域的环境为弱光环境,则增大第一摄像头的曝光值,进而将增大后的曝光值作为第一曝光值;或者,以所述感兴趣区域为曝光点,确定所述第一摄像头的所述第一曝光值;控制所述第一摄像头按所述第一曝光值拍摄第一图像;
获取模块,用于以中央权重算法计算第二曝光值,获取第二摄像头在所述第二曝光值下拍摄的第二图像;
搜索模块,用于根据从所述预览图像中确定的所述感兴趣区域,从第一图像中搜索出第一感兴趣区域,从第二图像中搜索出第二感兴趣区域;
判断模块,用于判断所述第二图像中的所述第二感兴趣区域的亮度是否为弱光或强光或正常光;
图像增强模块,用于如果所述第二图像中的所述第二感兴趣区域的亮度为弱光或强光,以所述第一图像中的所述第一感兴趣区域的图像替换所述第二图像中的所述第二感兴趣区域的图像,以替换后的所述第二图像作为输出图像;如果第二图像的所述第二感兴趣区域的亮度为正常光,直接将第二图像作为输出图像。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-5任一项所述的方法的步骤。
8.一种终端系统,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-5任一项所述的方法的步骤。
CN201810108513.2A 2018-02-02 2018-02-02 一种图像增强方法和装置 Active CN108234880B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810108513.2A CN108234880B (zh) 2018-02-02 2018-02-02 一种图像增强方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810108513.2A CN108234880B (zh) 2018-02-02 2018-02-02 一种图像增强方法和装置

Publications (2)

Publication Number Publication Date
CN108234880A CN108234880A (zh) 2018-06-29
CN108234880B true CN108234880B (zh) 2020-11-24

Family

ID=62669431

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810108513.2A Active CN108234880B (zh) 2018-02-02 2018-02-02 一种图像增强方法和装置

Country Status (1)

Country Link
CN (1) CN108234880B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109360163A (zh) * 2018-09-26 2019-02-19 深圳积木易搭科技技术有限公司 一种高动态范围图像的融合方法及融合系统
CN109862269B (zh) 2019-02-18 2020-07-31 Oppo广东移动通信有限公司 图像采集方法、装置、电子设备和计算机可读存储介质
CN110263721B (zh) * 2019-06-21 2022-04-26 北京字节跳动网络技术有限公司 车灯设置方法及设备
CN110971822A (zh) * 2019-11-29 2020-04-07 Oppo广东移动通信有限公司 图片处理方法、装置、终端设备及计算机可读存储介质
CN111028189B (zh) * 2019-12-09 2023-06-27 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN117061841A (zh) * 2023-06-12 2023-11-14 深圳市博盛医疗科技有限公司 一种双晶片内窥镜成像方法及成像装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003274289A (ja) * 2002-03-15 2003-09-26 Konica Corp 電子カメラ
CN104104886A (zh) * 2014-07-24 2014-10-15 深圳市中兴移动通信有限公司 过曝拍摄方法及装置
CN105049704A (zh) * 2015-06-17 2015-11-11 青岛海信移动通信技术股份有限公司 一种拍照的方法和设备
CN106060422A (zh) * 2016-07-06 2016-10-26 维沃移动通信有限公司 一种图像曝光方法及移动终端
CN106231204A (zh) * 2016-08-30 2016-12-14 宇龙计算机通信科技(深圳)有限公司 基于双摄像头的防抖拍照方法及装置、终端
CN106331510A (zh) * 2016-10-31 2017-01-11 维沃移动通信有限公司 一种逆光拍照方法及移动终端
CN106454290A (zh) * 2016-10-12 2017-02-22 成都西纬科技有限公司 一种双摄像头图像处理系统及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003274289A (ja) * 2002-03-15 2003-09-26 Konica Corp 電子カメラ
CN104104886A (zh) * 2014-07-24 2014-10-15 深圳市中兴移动通信有限公司 过曝拍摄方法及装置
CN105049704A (zh) * 2015-06-17 2015-11-11 青岛海信移动通信技术股份有限公司 一种拍照的方法和设备
CN106060422A (zh) * 2016-07-06 2016-10-26 维沃移动通信有限公司 一种图像曝光方法及移动终端
CN106231204A (zh) * 2016-08-30 2016-12-14 宇龙计算机通信科技(深圳)有限公司 基于双摄像头的防抖拍照方法及装置、终端
CN106454290A (zh) * 2016-10-12 2017-02-22 成都西纬科技有限公司 一种双摄像头图像处理系统及方法
CN106331510A (zh) * 2016-10-31 2017-01-11 维沃移动通信有限公司 一种逆光拍照方法及移动终端

Also Published As

Publication number Publication date
CN108234880A (zh) 2018-06-29

Similar Documents

Publication Publication Date Title
CN108234880B (zh) 一种图像增强方法和装置
CN109495689B (zh) 一种拍摄方法、装置、电子设备及存储介质
WO2020192461A1 (zh) 一种延时摄影的录制方法及电子设备
CN108234879B (zh) 一种获取滑动变焦视频的方法和装置
US9451173B2 (en) Electronic device and control method of the same
CN105874776B (zh) 图像处理设备和方法
JP7266672B2 (ja) 画像処理方法および画像処理装置、ならびにデバイス
WO2021143269A1 (zh) 一种长焦场景下的拍摄方法及移动终端
CN112449120B (zh) 高动态范围视频生成方法及装置
CN108419009B (zh) 图像清晰度增强方法和装置
CN107566752B (zh) 一种拍摄方法、终端及计算机存储介质
CN113890989B (zh) 一种拍摄方法以及电子装置
US10033918B2 (en) Method and system for image processing to detect salient objects in image
CN109151318B (zh) 一种图像处理方法、装置及计算机存储介质
US10515463B2 (en) Object segmentation in a sequence of color image frames by background image and background depth correction
US20160182801A1 (en) Modifying image parameters using wearable device input
KR20190014092A (ko) 이미지 천이들 사이에서의 원하는 줌 레벨 및 관심 오브젝트로의 이미지들의 그룹의 록킹
CN109784164B (zh) 前景识别方法、装置、电子设备及存储介质
CN109547699A (zh) 一种拍照的方法及装置
WO2021032117A1 (zh) 一种拍摄方法及电子设备
CN108389165B (zh) 一种图像去噪方法、装置、终端系统和存储器
CN109167939B (zh) 一种自动配文方法、装置及计算机存储介质
CN109509195B (zh) 前景处理方法、装置、电子设备及存储介质
CN109784327B (zh) 边界框确定方法、装置、电子设备及存储介质
US9076207B1 (en) Image processing method, system and electronic device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant