CN108881730A - 图像融合方法、装置、电子设备及计算机可读存储介质 - Google Patents

图像融合方法、装置、电子设备及计算机可读存储介质 Download PDF

Info

Publication number
CN108881730A
CN108881730A CN201810885896.4A CN201810885896A CN108881730A CN 108881730 A CN108881730 A CN 108881730A CN 201810885896 A CN201810885896 A CN 201810885896A CN 108881730 A CN108881730 A CN 108881730A
Authority
CN
China
Prior art keywords
image
electronic equipment
background
flash lamp
foreground
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810885896.4A
Other languages
English (en)
Inventor
邹启扬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Science And Technology Co Ltd
Original Assignee
Chengdu Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Science And Technology Co Ltd filed Critical Chengdu Science And Technology Co Ltd
Priority to CN201810885896.4A priority Critical patent/CN108881730A/zh
Publication of CN108881730A publication Critical patent/CN108881730A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及图像处理技术领域,具体涉及一种图像融合方法、装置、电子设备及计算机可读存储介质,该图像融合方法及装置应用于电子设备。该方法包括:接收并响应用户的拍照操作控制安装于电子设备的闪光灯主闪打开,且控制安装于电子设备的摄像头采集第一图像,进而获取该第一图像的深度图像,并对该深度图像进行分析得到第一图像的前景图像。此外,还控制安装于电子设备的闪光灯关闭,且控制电子设备的摄像头采集第二图像,进而获取第二图像的后景图像,最后将前景图像和后景图像进行融合得到目的图像,以提高图像的可欣赏性和美感。

Description

图像融合方法、装置、电子设备及计算机可读存储介质
技术领域
本发明涉及图像处理技术领域,具体而言,涉及一种图像融合方法、装置、电子设备及计算机可读存储介质。
背景技术
随着手机拍照功能越来越强大,拍照已经成为手机上非常重要的核心功能之一,越来越多的消费者日常生活中使用手机摄像头进行拍摄,尤其是拍摄夜景。夜景拍摄通常在光线较暗的环境下进行,而目前手机通常都配有闪光灯,使用闪光灯虽然能一定程度上对较近的拍摄物体进行补光,但在闪光灯下,会导致前景和背景亮度差异较大,而拍摄出的图像背景昏暗。而关闭闪光灯拍摄,前景缺少光照,导致前景画面昏暗,而背景亮度通常比前景亮度更高。因此,提供一种能够拍摄高质量图像的方法是十分必要的。
发明内容
本发明的目的在于提供一种图像融合方法,通过对不同情况下采集的图像进行融合,以得到高质量的图像。
本发明的另一目的在于提供一种图像融合装置,通过对不同情况下采集的图像进行融合,以得到高质量的图像。
本发明的另一目的在于提供一种电子设备,通过对不同情况下采集的图像进行融合,以得到高质量的图像。
本发明的另一目的在于提供一种计算机可读存储介质,通过对不同情况下的图像进行融合,以得到高质量的图像。
为了实现上述目的,本发明实施例采用的技术方案如下:
第一方面,本发明实施例提供了一种图像融合方法,应用于电子设备,所述方法包括:接收并响应用户的拍照操作控制安装于所述电子设备的闪光灯主闪打开,且控制安装于所述电子设备的摄像头采集第一图像,获取所述第一图像的深度图像;对所述深度图像进行分析得到所述第一图像的前景图像;控制安装于所述电子设备的闪光灯关闭,且控制安装于所述电子设备的摄像头采集第二图像;获取所述第二图像的后景图像;对所述前景图像和所述后景图像进行融合得到目的图像。
第二方面,本发明实施例还提供了一种图像融合装置,应用于电子设备,所述装置包括:第一控制模块,用于接收并响应用户的拍照操作控制安装于所述电子设备的闪光灯主闪打开,且控制安装于所述电子设备的摄像头采集第一图像;第一获取模块,用于获取所述第一图像的深度图像;分析模块,用于对所述深度图像进行分析得到所述第一图像的前景图像;第二控制模块,用于控制安装于所述电子设备的闪光灯关闭,且控制安装于所述电子设备的摄像头采集第二图像;第二获取模块,用于获取所述第二图像的后景图像;融合模块,用于
对所述前景图像和所述后景图像进行融合得到目的图像。
第三方面,本发明实施例还提供了一种电子设备,所述电子设备包括存储器和处理器,所述存储器用于存储计算机程序代码,所述处理器用于执行存储于所述存储器中的计算机程序代码以实现所述的图像融合方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现所述的图像融合方法。
本发明实施例提供的一种图像融合方法、装置、电子设备及计算机可读存储介质,该图像融合方法及装置应用于电子设备。该方法包括:接收并响应用户的拍照操作控制安装于电子设备的闪光灯主闪打开,且控制安装于电子设备的摄像头采集第一图像,进而获取该第一图像的深度图像,并对该深度图像进行分析得到第一图像的前景图像。此外,还控制安装于电子设备的闪光灯关闭,且控制电子设备的摄像头采集第二图像,进而获取第二图像的后景图像,最后将前景图像和后景图像进行融合得到目的图像。
由此可见,在本方案中,通过在打开电子设备的闪光灯时采集第一图像,此时第一图像的前景图像的亮度较大,因而通过分析第一图像的深度图像获取第一图像的前景图像。另外,通过在关闭电子设备的闪光灯时采集第二图像,此时第二图像的后景图像的亮度较大,因而获取第二图像的后景图像。最后将第一图像的前景图像和第二图像的后景图像进行融合后将得到整体亮度一致的目的图像,从而提高了图像的可欣赏性和美感。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本发明实施例提供的一种电子设备的结构示意图。
图2示出了本发明实施例提供的一种图像融合方法的流程示意图。
图3示出了本发明实施例提供的一种图像融合方法的子步骤的流程示意图。
图4示出了本发明实施例提供的一种图像融合方法的另一子步骤的流程示意图。
图5示出了本发明实施例提供的一种图像融合装置的功能模块示意图。
图示:100-电子设备;110-图像融合装置;120-存储器;130-存储控制器;140-处理器;150-外设接口;160-输入输出单元;170-音频单元;180-显示单元;190-通信单元;111-第一控制模块;112-第一获取模块;113-分析模块;114-第二控制模块;115-第二获取模块;116-融合模块;200-闪光灯;210-摄像头。
具体实施方式
下面将结合本发明实施例中附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本发明的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
本发明实施例提供的一种图像融合方法应用于电子设备,该电子设备包括但不限于,手机或平板电脑,该电子设备上安装有闪光灯和摄像头,亦即是说,该电子设备可通过摄像头采集普通场景的图像,并可通过闪光灯补光后采集光线较暗场景下的图像。该图像融合方法适用于夜景拍摄或光线较暗的场景下进行拍摄,其通过在闪光灯主闪开启的情况下采集第一图像,同时在闪光灯关闭的情况下采集第二图像,进而选取第一图像的前景图像和第二图像的后景图像进行融合,以得到整体光线亮度一致的图像,以提高图像的可欣赏性和美感,提高用户的拍照体验。
请参照图1,是本发明实施例提供的一种电子设备100的结构示意图,该电子设备100包括图像融合装置110、存储器120、存储控制器130、处理器140、外设接口150、输入输出单元160、音频单元170、显示单元180、通信单元190、闪光灯200以及摄像头210。
所述存储器120、存储控制器130、处理器140、外设接口150、输入输出单元160、音频单元170、显示单元180、通信单元190各元件相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述图像融合装置110包括至少一个可以软件或固件(firmware)的形式存储于所述存储器120中或固化在所述电子设备100的操作系统(operating system,OS)中的软件功能模块。所述处理器140用于执行存储器120中存储的可执行模块,例如所述图像融合装置110包括的软件功能模块或计算机程序。
其中,存储器120可以是,但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-OnlyMemory,PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,EEPROM)等。其中,存储器120用于存储程序,所述处理器140在接收到执行指令后,执行所述程序,本发明实施例任一实施例揭示的流过程定义的电子设备100所执行的方法可以应用于处理器140中,或者由处理器140实现。
处理器140可能是一种集成电路芯片,具有信号的处理能力。上述的处理器140可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器140也可以是任何常规的处理器140等。
所述外设接口150将各种输入/输出装置耦合至处理器140以及存储器120。在一些实施例中,外设接口150,处理器140以及存储控制器130可以在单个芯片中实现。在其他一些实例中,他们可以分别由独立的芯片实现。
输入输出单元160用于提供给用户输入数据实现用户与所述数据采集端100的交互。所述输入输出单元160可以是,但不限于,鼠标和键盘等。
音频单元170向用户提供音频接口,其可包括一个或多个麦克风、一个或者多个扬声器以及音频电路。
显示单元180在电子设备100与用户之间提供一个交互界面(例如用户操作界面)或用于显示图像数据给用户参考。在本实施例中,所述显示单元180可以是液晶显示器或触控显示器。若为触控显示器,其可为支持单点和多点触控操作的电容式触控屏或电阻式触控屏等。支持单点和多点触控操作是指触控显示器能感应到来自该触控显示器上一个或多个位置处同时产生的触控操作,并将该感应到的触控操作交由处理器140进行计算和处理。
所述摄像头210用于响应用户的操作进行拍照,所述闪光灯200用于用户在光线较暗的场景下开启,以为摄像头210拍照补充光线以获得高质量的图像。
所述通信单元190用于通过网络与云端之间建立连接,从而实现所述电子设备100与云端之间的通信连接,并用于通过网络收发数据。
请参照图2,是本发明实施例提供的一种图像融合方法的流程示意图,该方法包括:
步骤S110,通过安装于所述电子设备的摄像头采集预览图像。
具体为,当用户打开安装于电子设备100的摄像头210时,摄像头210所呈现的画面为预览图像,用户可根据自己的需求移动电子设备100,以选取需要拍摄的场景,并可通过预览的方式对将要拍摄的场景进行预览。
步骤S120,根据所述预览图像的亮度判断是否需要使用安装于所述电子设备的闪光灯,若所述预览图像的亮度低于阈值,则控制所述闪光灯预闪打开,以便于自动对焦拍摄主体。
具体为,该电子设备100将根据获取的预览图像的亮度判断是否需要使用闪光灯200,即是说,该电子设备100将把获取的预览图像的亮度与设定的阈值进行比较。若该预览图像的亮度低于阈值,则认定当前摄像头210选取的场景光线过暗,则该电子设备100将控制闪光灯预闪打开,对当前选取的场景进行补充光线,以使得当前场景的亮度高一些。同时,在电子设备100控制闪光灯200预闪打开时,该电子设备100还控制摄像头210自动对焦拍摄主体。亦即是说,当预览图像的亮度较低时,该电子设备100一方面控制闪光灯200预闪打开对预览图像补充光线,另一方面同步控制摄像头210在预览图像光线较好时,自动对焦拍摄主体,以获得较好的拍摄效果。
此外,若该预览图像的亮度高于阈值,则表明当前场景光线适宜,则无需打开闪光灯预闪进行补充光线。
需要说明的是,该闪光灯200预闪可以理解为,闪光灯200在拍照时类似地做手电筒使用,即是说,当闪光灯200预闪打开时,闪光灯200将在拍照时持续一段时间发光,以更方便进行对焦,在对焦完毕后,预闪将关闭。但闪光灯200预闪相比于闪光灯200主闪,其光线会暗一些,容易理解的,该闪光灯200主闪为用户使用电子设备100拍照时发出的闪光。
步骤S130,接收并响应用户的拍照操作控制安装于所述电子设备的闪光灯主闪打开,且控制安装于所述电子设备的摄像头采集第一图像。
具体为,在电子设备100控制摄像头210自动对焦拍摄主体后,用户可通过触摸或按键的方式操控电子设备100以发出拍照操作,进而该电子设备100将响应该拍照操作控制电子设备100上的闪光灯200主闪打开,同时控制摄像头210采集第一图像。
容易理解的,由于闪光灯200主闪较闪光灯200预闪的光线更亮,可以对拍摄主体进行充分补光,此时将采集到一张前景足够亮,但是背景偏暗的图像。在本发明实施例中,将拍摄主体定义为前景,将拍摄主体所处的背景定义为后景。进而采集到的第一图像中的拍摄主体很亮,但是背景偏暗。如晚上拍摄时,拍摄主体“人”站在背景“楼”前面,此时,若操控闪光灯主闪打开对“人”进行拍照,将会得到一张“人”很亮,但“楼”偏暗的图像。
步骤S140,获取所述第一图像的深度图像。
具体为,可通过双目视觉和三维重建技术获取第一图像的深度图像,也可通过深度学习技术获取第一图像的深度图像。由于该第一图像上的前景和后景距离镜头远近不同,且离镜头较远的后景深度值较小,离镜头较近的前景深度值较大,此外,前景和后景亮度不同也对前景和后景的深度值存在影响,进而可通过前景与后景的深度值差异明显地区分出深度图像上的前景和后景。
步骤S150,对所述深度图像进行分析得到所述第一图像的前景图像。
亦即是说,通过对深度图像的深度值区分出深度图像中的前景和后景后,该第一图像与深度图像中的前景对应的区域即为第一图像的前景图像。
步骤S160,响应用户的所述拍照操作控制安装于所述电子设备的闪光灯关闭,且控制安装于所述电子设备的摄像头采集第二图像。
即是说,该电子设备100还将响应用户的拍照操作控制该电子设备100上安装的闪光灯200关闭,同时控制该电子设备100上安装的摄像头210采集第二图像。亦即是说,该电子设备100将自动执行用户发出的所述拍照操作在控制闪光灯200关闭的同时,控制摄像头210重新采集一次图像,并将该图像定义为第二图像,以与第一图像进行区分。
容易理解的,由于该第二图像是在闪光灯200关闭的情况下进行采集的,则摄像头210在对图像进行采集的时候,摄像头210是处于自然曝光的状态,进而在此种情况下采集的第二图像为背景相对更亮,前景偏暗的图像,亦即是说,在第二图像中背景的显示效果更好。如人站在大楼前,若在闪光灯关闭情况下,对人进行拍照,将得到大楼比较亮,人比较暗的图像。
步骤S170,获取所述第二图像的后景图像。
具体为,由于第二图像的后景显示效果更好,则对第二图像的后景图像进行提取,在本发明实施例中提供了两种获取第二图像的后景图像的方法,分别为:
第一种
请参照图3,是本发明实施例提供的一种图像融合方法的步骤S170的子步骤的流程示意图。该步骤包括:
步骤S171,将所述第二图像与所述第一图像的后景图像进行匹配。
由于第一图像和第二图像均是采集同一场景的图像,只是打开闪光灯200和未打开闪光灯200的差别,因此,第一图像和第二图像的图像内容一致,但是亮度不同。此外,第一图像的前景图像已经通过分析深度图像的方式进行确定,容易理解的,该第一图像中的后景图像也能明显确定,进而将第二图像与第一图像的后景图像进行匹配。
步骤S172,选取所述第二图像中与所述第一图像的后景图像匹配一致的部分为第二图像的后景图像。
进而,由于第二图像与第一图像的图像内容一致,则第二图像与第一图像中的后景图像匹配一致的部分即为第二图像的后景图像。
第二种
请参照图4,是本发明实施例提供的一种图像融合方法的另一子步骤的流程示意图,该步骤包括:
步骤S173,获取所述第二图像的深度图像。
即是说,通过双目视觉和三维重建技术获取第二图像的深度图像,也可通过深度学习技术获取第二图像的深度图像。由于该第二图像上的前景和后景距离镜头远近不同,且离镜头较远的后景深度值较小,离镜头较近的前景深度值较大,进而通过深度值差异区分出前景和后景。
步骤S174,对所述第二图像的深度图像进行分析得到所述第二图像的后景图像。
具体为,通过深度值的差异确定出深度图像中的前景和后景后,该第二图像与深度图像中的后景对应的部分即为第二图像的后景图像。
步骤S180,对所述前景图像和所述后景图像进行融合得到目的图像。
容易理解的,该前景图像为在闪光灯200主闪打开情况下,对摄像头210采集的第一图像分析后获取的拍摄主体的图像,由于闪光灯200主闪打开使得第一图像中的拍摄主体较亮,拍摄背景较暗,则此时提取的第一图像的前景图像将更加清晰。此外,该后景图像为在闪光灯200关闭的情况下,对摄像头210采集的第二图像分析后获取的拍摄背景的图像,由于闪光灯200关闭,该摄像头210将采用自然曝光的模式进行拍照,使得采集的图像中的拍摄主体较暗,拍摄背景较亮,此时提取的第二图像的背景图像将更加清晰。
进而将两次获取的前景图像和后景图像进行融合得到目的图像,该目的图像相较于两次分别提取的第一图像和第二图像,整体光线将更加一致,整体清晰度将提高,以使得用户可以在夜景下或光线较暗的场景下拍摄得到质量较高的图像。
其对前景图像和后景图像进行融合的具体方式为:
首先,获取共同存在于所述前景图像和所述后景图像上的像素点分别在所述前景图像上的第一像素值和在所述后景图像上的第二像素值。
即是说,前景图像为拍摄主体的图像,后景图像为拍摄背景的图像,则在对前景图像和后景图像进行融合的时候,前景图像和后景图像上存在一些共同的像素点,则分别获取该像素点在前景图像上的第一像素值和在后景图像上的第二像素值。
其次,根据预设算法以所述第一像素值和第二像素值确定所述像素点的目的像素值。
由于该部分共同存在于前景图像和后景图像的像素点在前景图像和后景图像上具有不同的像素值,则为了使得融合后的目的图像更加平滑和自然,将根据预设算法对该部分像素点的第一像素值和第二像素值进行处理。具体为,若第一像素值和第二像素值差距在预设范围内,则取第一像素值和第二像素值的平均值为该像素点的目的像素值,如第一像素值为100,第二像素值为200,则取第一像素值和第二像素值的平均值200,为该像素点的目的像素值;若第一像素值和第二像素值差距超过了预设范围,则选取像素值较大的像素值为目的像素值,之所以选取像素值较大的像素值为目的像素值,是因为像素值更大表明该前景图像或后景图像显示效果更加明显。
最后,根据所述目的像素值对所述前景图像和后景图像进行融合。
进而,根据确定的共同存在于前景图像和后景图像上的各个像素点的目的像素值,对前景图像和后景图像进行融合。此种融合方式相当于直接“抠图贴合”的方式更加自然,显示效果更好。
步骤S190,对融合得到的所述目的图像进行亮度调节和平滑处理。
具体为,为了使融合得到的目的图像整体更加美观,过度更加平滑和自然,还将采用Tone Mapping技术和Dehaze技术依次对目的图像进行亮度调节和平滑处理。
进而,用户在发出拍照指令后,电子设备100将对采集的图像按照上述方式进行融合处理后,将存储于电子设备100的图片库中,用户可在图片库中查看到处理完毕的图像。
由此可见,本发明实施例提供的一种图像融合方法,通过对两次采集的图像选取清晰度更好的部分进行图像融合,以获得整体亮度一致,清晰度更好的目的图像,以提高了用户在夜景或光线较暗场景下的拍摄体验,实用性较强。
请参照图5,是本发明实施例提供的一种图像融合装置110的功能模块示意图,该装置包括第一控制模块111、第一获取模块112、分析模块113、第二控制模块114、第二获取模块115以及融合模块116。
第一控制模块111,用于接收并响应用户的拍照操作控制安装于所述电子设备的闪光灯主闪打开,且控制安装于所述电子设备的摄像头采集第一图像。
在本发明实施例中,步骤S110~S130可以由第一控制模块111执行。
第一获取模块112,用于获取所述第一图像的深度图像。
在本发明实施例中,步骤S140可以由第一获取模块112执行。
分析模块113,用于对所述深度图像进行分析得到所述第一图像的前景图像。
在本发明实施例中,步骤S150可以由分析模块113执行。
第二控制模块114,用于控制安装于所述电子设备的闪光灯关闭,且控制安装于所述电子设备的摄像头采集第二图像。
在本发明实施例中,步骤S160可以由第二控制模块114执行。
第二获取模块115,用于获取所述第二图像的后景图像。
在本发明实施例中,步骤S170可以由第二获取模块115执行。
融合模块116,用于对所述前景图像和所述后景图像进行融合得到目的图像。
在本发明实施例中,步骤S180和步骤S190可以由融合模块116执行。
由于在图像融合方法部分已经详细描述,在此不再赘述。
本发明实施例还揭示了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器140执行时实现本发明实施例揭示的图像融合方法。
综上所述,本发明实施例提供的一种图像融合方法、装置、电子设备及计算机可读存储介质,该图像融合方法及装置应用于电子设备。该方法包括:接收并响应用户的拍照操作控制安装于电子设备的闪光灯主闪打开,且控制安装于电子设备的摄像头采集第一图像,进而获取该第一图像的深度图像,并对该深度图像进行分析得到第一图像的前景图像。此外,还控制安装于电子设备的闪光灯关闭,且控制电子设备的摄像头采集第二图像,进而获取第二图像的后景图像,最后将前景图像和后景图像进行融合得到目的图像。
由此可见,在本方案中,通过在打开电子设备的闪光灯时采集第一图像,此时第一图像的前景图像的亮度较大,因而通过分析第一图像的深度图像获取第一图像的前景图像。另外,通过在关闭电子设备的闪光灯时采集第二图像,此时第二图像的后景图像的亮度较大,因而获取第二图像的后景图像。最后将第一图像的前景图像和第二图像的后景图像进行融合后将得到整体亮度一致的目的图像,从而提高了图像的可欣赏性和美感。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种图像融合方法,应用于电子设备,其特征在于,所述方法包括:
接收并响应用户的拍照操作控制安装于所述电子设备的闪光灯主闪打开,且控制安装于所述电子设备的摄像头采集第一图像;
获取所述第一图像的深度图像;
对所述深度图像进行分析得到所述第一图像的前景图像;
控制安装于所述电子设备的闪光灯关闭,且控制安装于所述电子设备的摄像头采集第二图像;
获取所述第二图像的后景图像;
对所述前景图像和所述后景图像进行融合得到目的图像。
2.如权利要求1所述的方法,其特征在于,所述对所述深度图像进行分析得到所述第一图像的前景图像之后还包括步骤:
对所述深度图像进行分析得到所述第一图像的后景图像。
3.如权利要求2所述的方法,其特征在于,所述获取所述第二图像的后景图像的步骤包括:
将所述第二图像与所述第一图像的后景图像进行匹配;
选取所述第二图像中与所述第一图像的后景图像匹配一致的部分为第二图像的后景图像。
4.如权利要求1所述的方法,其特征在于,所述获取所述第二图像的后景图像的步骤包括:
获取所述第二图像的深度图像;
对所述第二图像的深度图像进行分析得到所述第二图像的后景图像。
5.如权利要求1所述的方法,其特征在于,所述对所述前景图像和所述后景图像进行融合得到目的图像的步骤包括:
获取共同存在于所述前景图像和所述后景图像上的像素点分别在所述前景图像上的第一像素值和在所述后景图像上的第二像素值;
根据预设算法以所述第一像素值和第二像素值确定所述像素点的目的像素值;
根据所述目的像素值对所述前景图像和后景图像进行融合。
6.如权利要求1所述的方法,其特征在于,所述方法还包括:
对融合得到的所述目的图像进行亮度调节和平滑处理。
7.如权利要求1所述的方法,其特征在于,所述接收用户的拍照操作之前还包括步骤:
通过安装于所述电子设备的摄像头采集预览图像;
根据所述预览图像的亮度判断是否需要使用安装于所述电子设备的闪光灯,若所述预览图像的亮度低于阈值,则控制所述闪光灯预闪打开,以便于自动对焦拍摄主体。
8.一种图像融合装置,应用于电子设备,其特征在于,所述装置包括:
第一控制模块,用于接收并响应用户的拍照操作控制安装于所述电子设备的闪光灯主闪打开,且控制安装于所述电子设备的摄像头采集第一图像;
第一获取模块,用于获取所述第一图像的深度图像;
分析模块,用于对所述深度图像进行分析得到所述第一图像的前景图像;
第二控制模块,用于控制安装于所述电子设备的闪光灯关闭,且控制安装于所述电子设备的摄像头采集第二图像;
第二获取模块,用于获取所述第二图像的后景图像;
融合模块,用于对所述前景图像和所述后景图像进行融合得到目的图像。
9.一种电子设备,其特征在于,所述电子设备包括存储器和处理器,所述存储器用于存储计算机程序代码,所述处理器用于执行存储于所述存储器中的计算机程序代码以实现如权利要求1-7任一一项所述的图像融合方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-7任一一项所述的图像融合方法。
CN201810885896.4A 2018-08-06 2018-08-06 图像融合方法、装置、电子设备及计算机可读存储介质 Pending CN108881730A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810885896.4A CN108881730A (zh) 2018-08-06 2018-08-06 图像融合方法、装置、电子设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810885896.4A CN108881730A (zh) 2018-08-06 2018-08-06 图像融合方法、装置、电子设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN108881730A true CN108881730A (zh) 2018-11-23

Family

ID=64307714

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810885896.4A Pending CN108881730A (zh) 2018-08-06 2018-08-06 图像融合方法、装置、电子设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN108881730A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109636814A (zh) * 2018-12-18 2019-04-16 联想(北京)有限公司 一种图像处理方法及电子设备
CN110012229A (zh) * 2019-04-12 2019-07-12 维沃移动通信有限公司 一种图像处理方法和终端
CN111260601A (zh) * 2020-02-12 2020-06-09 北京字节跳动网络技术有限公司 图像融合方法、装置、可读介质及电子设备
CN112991242A (zh) * 2019-12-13 2021-06-18 RealMe重庆移动通信有限公司 图像处理方法、图像处理装置、存储介质与终端设备
CN113572980A (zh) * 2020-04-28 2021-10-29 华为技术有限公司 拍照方法、装置、终端设备及存储介质
CN114302068A (zh) * 2022-01-06 2022-04-08 重庆紫光华山智安科技有限公司 图像拍摄方法及设备
CN116600150A (zh) * 2023-05-29 2023-08-15 佛山市炫新智能科技有限公司 一种矩阵式直播展示系统及其展示方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102075679A (zh) * 2010-11-18 2011-05-25 无锡中星微电子有限公司 一种图像采集方法和装置
CN105049704A (zh) * 2015-06-17 2015-11-11 青岛海信移动通信技术股份有限公司 一种拍照的方法和设备
CN105915815A (zh) * 2016-05-31 2016-08-31 北京奇虎科技有限公司 一种基于移动设备进行拍摄的方法、装置和移动设备
CN107392087A (zh) * 2017-05-27 2017-11-24 华勤通讯技术有限公司 一种图像处理方法与装置
CN107948519A (zh) * 2017-11-30 2018-04-20 广东欧珀移动通信有限公司 图像处理方法、装置及设备
CN108156369A (zh) * 2017-12-06 2018-06-12 广东欧珀移动通信有限公司 图像处理方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102075679A (zh) * 2010-11-18 2011-05-25 无锡中星微电子有限公司 一种图像采集方法和装置
CN105049704A (zh) * 2015-06-17 2015-11-11 青岛海信移动通信技术股份有限公司 一种拍照的方法和设备
CN105915815A (zh) * 2016-05-31 2016-08-31 北京奇虎科技有限公司 一种基于移动设备进行拍摄的方法、装置和移动设备
CN107392087A (zh) * 2017-05-27 2017-11-24 华勤通讯技术有限公司 一种图像处理方法与装置
CN107948519A (zh) * 2017-11-30 2018-04-20 广东欧珀移动通信有限公司 图像处理方法、装置及设备
CN108156369A (zh) * 2017-12-06 2018-06-12 广东欧珀移动通信有限公司 图像处理方法和装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109636814A (zh) * 2018-12-18 2019-04-16 联想(北京)有限公司 一种图像处理方法及电子设备
CN110012229A (zh) * 2019-04-12 2019-07-12 维沃移动通信有限公司 一种图像处理方法和终端
CN110012229B (zh) * 2019-04-12 2021-01-08 维沃移动通信有限公司 一种图像处理方法和终端
CN112991242A (zh) * 2019-12-13 2021-06-18 RealMe重庆移动通信有限公司 图像处理方法、图像处理装置、存储介质与终端设备
CN111260601A (zh) * 2020-02-12 2020-06-09 北京字节跳动网络技术有限公司 图像融合方法、装置、可读介质及电子设备
CN111260601B (zh) * 2020-02-12 2021-04-23 北京字节跳动网络技术有限公司 图像融合方法、装置、可读介质及电子设备
CN113572980A (zh) * 2020-04-28 2021-10-29 华为技术有限公司 拍照方法、装置、终端设备及存储介质
WO2021218551A1 (zh) * 2020-04-28 2021-11-04 华为技术有限公司 拍照方法、装置、终端设备及存储介质
CN113572980B (zh) * 2020-04-28 2022-10-11 华为技术有限公司 拍照方法、装置、终端设备及存储介质
CN114302068A (zh) * 2022-01-06 2022-04-08 重庆紫光华山智安科技有限公司 图像拍摄方法及设备
CN114302068B (zh) * 2022-01-06 2023-09-26 重庆紫光华山智安科技有限公司 图像拍摄方法及设备
CN116600150A (zh) * 2023-05-29 2023-08-15 佛山市炫新智能科技有限公司 一种矩阵式直播展示系统及其展示方法
CN116600150B (zh) * 2023-05-29 2024-02-06 佛山市炫新智能科技有限公司 一种矩阵式直播展示系统及其展示方法

Similar Documents

Publication Publication Date Title
CN108881730A (zh) 图像融合方法、装置、电子设备及计算机可读存储介质
CN112585940B (zh) 为基于人工智能的图像捕获设备提供反馈的系统和方法
CN112767285B (zh) 图像处理方法及装置、电子设备和存储介质
CN104113688B (zh) 一种图像处理方法及其电子设备
CN110663045B (zh) 用于数字图像的自动曝光调整的方法、电子系统和介质
CN103220421B (zh) 使用移动终端进行自拍的方法及其装置
EP3134850B1 (en) Method for controlling a camera based on processing an image captured by other camera
CN103973968B (zh) 电子装置及其影像合成方法
CN114364099B (zh) 调节智能灯光设备的方法、机器人及电子设备
CN104869320A (zh) 电子设备和控制电子设备操作方法
CN104780308A (zh) 一种信息处理方法及电子设备
KR20190035116A (ko) Ar 객체를 표시하기 위한 장치 및 방법
CN105791708A (zh) 一种拍摄控制方法、装置及智能终端
WO2022160895A1 (zh) 图像处理方法、图像处理装置、电子系统及可读存储介质
CN103957354A (zh) 一种移动终端及其引导拍照的方法和装置
CN116320771B (zh) 一种拍摄方法和电子设备
CN109327691B (zh) 图像拍摄方法、装置、存储介质及移动终端
CN113452969B (zh) 图像处理方法和装置
JP2023500510A (ja) 環境光画像補正を実施するためのシステム
CN108111776A (zh) 自拍补光方法、装置、移动终端和计算机可读存储介质
CN208013970U (zh) 一种生物特征识别系统
CN111127367A (zh) 人脸图像处理的方法、装置及系统
US20090172756A1 (en) Lighting analysis and recommender system for video telephony
CN106803920A (zh) 一种图像处理的方法、装置及智能会议终端
CN106022283A (zh) 生物识别方法、装置及识别设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181123

RJ01 Rejection of invention patent application after publication