CN110012227A - 图像处理方法、装置、存储介质及电子设备 - Google Patents

图像处理方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN110012227A
CN110012227A CN201910279898.3A CN201910279898A CN110012227A CN 110012227 A CN110012227 A CN 110012227A CN 201910279898 A CN201910279898 A CN 201910279898A CN 110012227 A CN110012227 A CN 110012227A
Authority
CN
China
Prior art keywords
image
raw
raw image
electronic equipment
packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910279898.3A
Other languages
English (en)
Other versions
CN110012227B (zh
Inventor
黄杰文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201910279898.3A priority Critical patent/CN110012227B/zh
Publication of CN110012227A publication Critical patent/CN110012227A/zh
Priority to US16/839,638 priority patent/US11503223B2/en
Priority to EP20169002.1A priority patent/EP3723360A1/en
Priority to PCT/CN2020/083909 priority patent/WO2020207427A1/en
Application granted granted Critical
Publication of CN110012227B publication Critical patent/CN110012227B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/743Bracketing, i.e. taking a series of images with varying exposure conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/76Circuitry for compensating brightness variation in the scene by influencing the image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/587Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • H04N25/589Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields with different integration times, e.g. short and long exposures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/911Television signal processing therefor for the suppression of noise
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了一种图像处理方法、装置、存储介质及电子设备。该方法可以包括:获取RAW图像包,该RAW图像包中包括至少两组RAW图像的数据,该至少两组RAW图像具有不同的曝光时间;对该RAW图像包进行解包处理,得到该至少两组RAW图像;对该至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像;利用该RAW合成图像,进行图像的预览或拍照或录像操作。本实施例提供的图像处理方案得到的图像能够适用于图像的预览、拍照和录像。

Description

图像处理方法、装置、存储介质及电子设备
技术领域
本申请属于图像技术领域,尤其涉及一种图像处理方法、装置、存储介质及电子设备。
背景技术
相比于普通的图像,高动态范围图像(High-Dynamic Range,简称HDR)可以提供更多的动态范围和图像细节。电子设备可以在同一场景下拍摄具有不同曝光程度的多帧图像,将过曝光图像的暗部细节、正常曝光图像的中间细节和欠曝光图像的亮部细节合成得到HDR图像。然而,相关的HDR技术处理得到的图像难以同时适用于预览、拍照和录像。
发明内容
本申请实施例提供一种图像处理方法、装置、存储介质及电子设备,其处理得到的图像能够适用于预览、拍照和录像。
本申请实施例提供一种图像处理方法,包括:
获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两组RAW图像具有不同的曝光时间;
对所述RAW图像包进行解包处理,得到所述至少两组RAW图像;
对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像;
利用所述RAW合成图像,进行图像的预览或拍照或录像操作。
本申请实施例提供一种图像处理装置,包括:
获取模块,用于获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两组RAW图像具有不同的曝光时间;
解包模块,用于对所述RAW图像包进行解包处理,得到所述至少两组RAW图像;
合成模块,用于对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像;
处理模块,用于利用所述RAW合成图像,进行图像的预览或拍照或录像操作。
本申请实施例提供一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上执行时,使得所述计算机执行本申请实施例提供的图像处理方法。
本申请实施例还提供一种电子设备,包括存储器,处理器,所述处理器通过调用所述存储器中存储的计算机程序,用于执行本申请实施例提供的图像处理方法。
本实施例中,由于RAW图像包中包括的至少两组RAW图像均是完整曝光的图像,因此用该至少两组RAW图像去做高动态范围合成处理后得到的图像其分辨率就不会有损失,其信噪比也较高,即本实施例中得到的具有高动态范围的RAW合成图像具有分辨率高和信噪比高的优点。这种分辨率高、信噪比高的具有高动态范围的RAW合成图像可以直接用于图像预览、拍照和录像。即,本实施例提供的图像处理方案得到的图像能够适用于预览、拍照和录像。
附图说明
下面结合附图,通过对本申请的具体实施方式详细描述,将使本申请的技术方案及其有益效果显而易见。
图1是本实施例提供的图像处理方法的第一种流程示意图。
图2是本实施例提供的RAW图像包的第一种示意图。
图3是本实施例提供的图像处理方法的第二种流程示意图。
图4是本实施例提供的图像处理方法的第三种流程示意图。
图5是本实施例提供的RAW图像包的第二种示意图。
图6是本实施例提供的YUV图像和第一图像缓存队列的示意图。
图7是本实施例提供的图像处理方法的第四种流程示意图。
图8是本实施例提供的第二图像缓存队列的示意图。
图9是本实施例提供的图像处理方法的第五种流程示意图
图10是本实施例提供的第三图像缓存队列的示意图。
图11是本申请实施例提供的图像处理装置的结构示意图。
图12是本申请实施例提供的电子设备的结构示意图。
图13是本申请实施例提供的电子设备的另一结构示意图。
图14是本实施例提供的图像处理电路的结构示意图。
具体实施方式
请参照图示,其中相同的组件符号代表相同的组件,本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例,其不应被视为限制本申请未在此详述的其它具体实施例。
可以理解的是,本申请实施例的执行主体可以是诸如智能手机或平板电脑等的电子设备。
请参阅图1,图1是本申请实施例提供的图像处理方法的第一种流程示意图,流程可以包括:
在101中,获取RAW图像包,该RAW图像包中包括至少两组RAW图像的数据,该至少两组RAW图像具有不同的曝光时间。
相比于普通的图像,高动态范围图像(High-Dynamic Range,简称HDR)可以提供更多的动态范围和图像细节。电子设备可以在同一场景下拍摄具有不同曝光程度的多帧图像,将过曝光图像的暗部细节、正常曝光图像的中间细节和欠曝光图像的亮部细节合成得到HDR图像。然而,相关的HDR技术处理得到的图像难以同时适用于预览、拍摄和录像。
比如,利用zzHDR技术进行图像处理时,因为zzHDR技术是在同一帧图像中既有进行长曝光的像素又有进行短曝光的像素,长、短曝光像素合并生成高动态范围图像时,会降低至少一半的分辨率。因此利用zzHDR技术得到的高动态范围图像无法用于拍照或者录像,否则用户会明显看出分辨率降低的图像显示效果。即,zzHDR技术无法适用于拍照和录像的场景。相关技术中的另一些HDR技术也存在着诸如分辨率降低或者信噪比较低的问题,使得这些HDR技术处理得到的图像无法同时适用于预览、拍照和录像。
本实施例提供的图像处理方法可以应用于具有摄像模组的电子设备。电子设备的摄像模组由透镜和图像传感器构成,其中透镜用于采集外部的光源信号提供给图像传感器,图像传感器感应来自于透镜的光源信号,将其转换为数字化的原始图像数据,即RAW图像数据。RAW是未经处理、也未经压缩的格式,可以将其形象地称为“数字底片”。本实施例中电子设备的摄像模组的图像传感器可以具有第一工作模式和第二工作模式。
需要说明的是,在该第一工作模式下,图像传感器将在一帧图像的时间内产生至少两组曝光时间不同的RAW图像,并在将该至少两组RAW图像处理成RAW图像包后以RAW图像包的形式输出。例如,图像传感器的帧率为30fps,则图像传感器会在三十分之一秒内产生至少两组曝光时间不同的RAW图像,并以RAW图像包的形式输出。比如,请参照图2,工作在第一工作模式的图像传感器输出的RAW图像包中包括两组RAW图像,例如每组RAW图像中包括一个RAW图像,且其中一个RAW图像的曝光时间为另一个RAW图像曝光时间的两倍。即,工作在第一工作模式下的图像传感器可以在一帧的时间(如三十分之一秒)内输出一RAW图像包,该RAW图像包中包括两个RAW图像的数据,这两个RAW图像中的一个RAW图像的曝光时间为另一个RAW图像曝光时间的两倍。当然这两个RAW图像的曝光时间长度的比值也可以是其它数值,如3:1或者4:1或者3:2等等,本实施例对此不做具体限定。可以理解的是,由于RAW图像包中的两组RAW图像的拍摄时间间隔很短,因此可以认为这两组RAW图像是在同一场景下拍摄得到的图像。
上述第二工作模式为普通工作模式。在该第二工作模式下,图像传感器在一帧图像的时间内将产生一个单独的RAW图像,而不是RAW图像包。例如,普通工作模式下,图像传感器的帧率为60fps,则图像传感器会在六十分之一秒内产生一帧RAW图像并输出。
在本申请实施例中,电子设备可以先通过工作在第一工作模式的图像传感器获取一RAW图像包。其中,来源于当前场景的光信号经过摄像头的透镜后汇聚到图像传感器上,图像传感器将进行具有不同曝光时间的交替曝光,持续输出包括至少两组RAW图像的RAW图像包。可以理解的是,该RAW图像包中包括的至少两组RAW图像具有不同的曝光时间。
比如,当用户操作电子设备开启相机应用后,电子设备使能图像传感器,并使其工作在第一工作模式。若用户操作电子设备的摄像头对准某一场景,则电子设备将通过工作在第一工作模式的图像传感器持续获取到该场景下的RAW图像包,该RAW图像包中至少包括两组具有不同曝光时间的RAW图像。
在102中,对RAW图像包进行解包处理,得到至少两组RAW图像。
比如,在获取到RAW图像包之后,电子设备可以对该RAW图像包进行解包处理,从而得到至少两组RAW图像。
在103中,对至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
比如,在对RAW图像包进行解包处理后,电子设备可以对解包得到的至少两组RAW图像进行HDR合成处理,从而得到具有高动态范围的RAW合成图像。
在104中,利用RAW合成图像,进行图像的预览或拍照或录像操作。
比如,在得到具有高动态范围的RAW合成图像后,电子设备可以利用该RAW合成图像,进行图像的预览或拍照或录像操作。例如,电子设备可以将该RAW合成图像显示在该电子设备的相机应用的预览界面供用户预览。或者,当电子设备接收到拍照指令,例如用户按下拍照按钮时,该电子设备可以直接将该RAW合成图像作为照片输出显示在显示屏上供用户查看。或者,当电子设备接收到录像指令时,电子设备可以将该RAW合成图像作为录像得到的视频的其中一帧。
需要说明的是,本实施例中,由于RAW图像包中包括的至少两组RAW图像均是完整曝光的图像,因此用该至少两组RAW图像去做高动态范围合成处理后得到的图像其分辨率就不会有损失,其信噪比也较高,即本实施例中得到的具有高动态范围的RAW合成图像具有分辨率高和信噪比高的优点。这种分辨率高、信噪比高的具有高动态范围的RAW合成图像可以直接用于图像预览、拍照和录像。
请参阅图3,图3为本申请实施例提供的图像处理方法的第二种流程示意图,流程可以包括:
在201中,电子设备获取RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,该第一RAW图像的曝光时间长于该第二RAW图像的曝光时间。
比如,用户开启相机应用后,电子设备可以使能其图像传感器,并使该图像传感器工作在第一工作模式,该图像传感器可以在一帧图像的时间内产生两个曝光时间不同的RAW图像,并以RAW图像包的形式输出。例如,图像传感器的帧率为30fps,则图像传感器会在每一个三十分之一秒内产生两个曝光时间不同的RAW图像,并以RAW图像包的形式输出。例如,在第一个三十分之一秒内,依次产生具有第一曝光时间T1的L1图像帧和具有曝光时间T2的S1图像帧。其中,第一曝光时间T1长于第二曝光时间T2。图像传感器在进行完较长曝光得到L1图像帧后,并不会马上输出L1图像帧,而是将L1图像帧存入图像传感器的缓存器中,并马上清空图像传感器上积累的电荷,再进行短曝光得到S1图像帧。在读取出S1图像帧之后,电子设备可以将L1图像帧和S1图像帧的数据打包处理成RAW图像包。在第二个三十分之一秒内,依次产生具有第一曝光时间T1的L2图像帧和具有曝光时间T2的S2图像帧。在第三个三十分之一秒内,依次产生具有第一曝光时间T1的L3图像帧和具有曝光时间T2的S3图像帧。也就是说,在本实施例中,电子设备会交替进行长、短曝光从而输出RAW图像包。
在使电子设备工作于第一工作模式后,比如用户将摄像头对准某一场景,则电子设备可以通过其图像传感器获取关于该场景下的RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,且该第一RAW图像的曝光时间长于该第二RAW图像的曝光时间。本实施例中,将RAW图像包中曝光时间较长的图像统一记为第一RAW图像,将RAW图像包中曝光时间较短的图像统一记为第二RAW图像。例如,第一RAW图像的曝光时间可以是第二RAW图像的曝光时间的2倍。可以理解的是,由于RAW图像包中的第一RAW图像和第二RAW图像的拍摄时间间隔很短,因此可以认为RAW图像包中的第一RAW图像和第二RAW图像是在同一场景下拍摄得到的图像。
在202中,电子设备对RAW图像包进行解包处理,得到第一RAW图像和第二RAW图像。
比如,在获取到RAW图像包之后,电子设备可以对该RAW图像包进行解包处理,从而得到第一RAW图像和第二RAW图像。
在203中,电子设备对第一RAW图像和第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
比如,在解包得到第一RAW图像和第二RAW图像之后,电子设备可以对该第一RAW图像和第二RAW图像进行高动态范围合成处理,得到具有高动态范围的RAW图像,即RAW合成图像。
在204中,电子设备将RAW合成图像转换为YUV图像。
比如,在得到RAW合成图像后,电子设备可以将该RAW合成图像转换为YUV格式的图像,得到YUV图像。
需要说明的是,YUV是一种颜色编码方法,其中Y表示亮度,U表示色度,V表示浓度,人眼从YUV图像中可以直观的感受到其中所包含的自然特征。本申请实施例中,对于合成得到的RAW合成图像,电子设备可以对其进行格式转换,将其转换到YUV颜色空间,得到适于人眼查看的YUV图像。
在205中,电子设备对YUV图像进行预设处理后,进行图像的预览或拍照或录像操作。
比如,在将RAW合成图像转换为YUV图像后,电子设备可以对该YUV图像进行预设处理,在经过该预设处理后,电子设备可以利用经过预设处理后的YUV图像进行图像的预览或者进行拍照或者进行录像等操作。
比如,当前处于电子设备的相机应用的图像预览界面,那么电子设备可以将经过预设处理后的YUV图像直接呈现在该图像预览界面中供用户预览。
又如,在对YUV图像进行预设处理后,用户点击了电子设备的相机应用的拍照按钮进行拍照操作,那么电子设备可以直接将该经过预设处理的YUV图像作为用于响应该拍照操作的图像显示在显示屏上供用户查看拍照效果。
再如,电子设备当前处于录像模式,那么电子设备可以将经过预设处理后的YUV图像作为录像得到的视频的其中一帧。
在一种实施方式中,205中的预设处理可以是诸如图像锐化处理、图像降噪处理等图像优化处理。
可以理解的是,由于RAW合成图像具有高动态范围效果,因此由该RAW合成图像转换而来的YUV图像也具有高动态范围效果,这将使得205中在对该YUV图像进行预设处理后进行的图像预览或拍照或录像操作时呈现给用户查看的图像均具有高动态范围效果。
本实施例中,由于RAW图像包中包括的第一RAW图像和第二RAW图像均是完整曝光的图像,因此用该第一RAW图像和第二RAW图像去做高动态范围合成处理后得到的图像其分辨率就不会有损失,其信噪比也较高,即本实施例中得到的具有高动态范围的RAW合成图像具有分辨率高和信噪比高的优点。这种分辨率高、信噪比高的具有高动态范围的RAW合成图像在转换为YUV图像并经预设处理后可以直接用于图像预览、拍照和录像。即,利用本实施例提供的图像处理方法得到的图像可以适用于预览、拍照和录像。
请参阅图4,图4为本申请实施例提供的图像处理方法的第三种流程示意图,流程可以包括:
在301中,电子设备获取RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,该第一RAW图像的曝光时间长于该第二RAW图像的曝光时间。
在302中,电子设备对RAW图像包进行解包处理,得到第一RAW图像和第二RAW图像。
在303中,电子设备对第一RAW图像和第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
在304中,电子设备将RAW合成图像转换为YUV图像。
比如,301、302、303和304可以包括:
用户开启相机应用后,电子设备可以使能其图像传感器,并使该图像传感器工作在第一工作模式。
在使电子设备工作于第一工作模式后,比如用户将摄像头对准某一场景,则电子设备可以通过其图像传感器获取关于该场景下的RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,且该第一RAW图像的曝光时间长于该第二RAW图像的曝光时间。例如,第一RAW图像的曝光时间可以是第二RAW图像的曝光时间的2倍。可以理解的是,由于RAW图像包中的第一RAW图像和第二RAW图像的拍摄时间间隔很短,因此可以认为RAW图像包中的第一RAW图像和第二RAW图像是在同一场景下拍摄得到的图像。
在获取到RAW图像包之后,电子设备可以对该RAW图像包进行解包处理,从而得到第一RAW图像和第二RAW图像。之后,电子设备可以对该第一RAW图像和第二RAW图像进行高动态范围合成处理,得到具有高动态范围的RAW图像,即RAW合成图像。
之后,电子设备可以将RAW合成图像转换为YUV图像。
也就是说,电子设备每获取到一个RAW图像包,就会将其解包为第一RAW图像和第二RAW图像,再对第一RAW图像和第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像,并将RAW合成图像转换为YUV图像。即,电子设备可以不断地获取到YUV图像。
电子设备获取到的YUV图像可以显示在相机应用的预览界面中。
例如,电子设备获取到第一个RAW图像包后,经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像A。
当电子设备获取到第二个RAW图像包后,同样经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像B。
当电子设备获取到第三个RAW图像包后,经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像C,等等。
那么,在电子设备的相机应用的预览界面中可以依次显示YUV图像A、YUV图像B和YUV图像C,等等。
在305中,电子设备将由RAW合成图像转换得到的YUV图像存入预设的第一图像缓存队列。
比如,在将RAW合成图像转换为对应的YUV图像后,电子设备可以将转换得到的YUV图像存入预设的第一图像缓存队列中。该第一图像缓存队列可以是定长队列,也可以是不定长队列,本实施例对此不做具体限定。
在306中,若接收到拍照指令,则电子设备从第一图像缓存队列中获取多帧历史YUV图像,该历史YUV图像为根据历史获取到的RAW图像包得到的YUV图像。
在307中,电子设备对多帧历史YUV图像进行多帧降噪处理,得到第一降噪图像。
在308中,电子设备对第一降噪图像进行预设处理,并将经过预设处理后的第一降噪图像确定为用于响应拍照指令的图像。
比如,306、307和308可以包括:
例如,用户按下相机应用中的拍照按钮,此时电子设备可以接收到拍照指令。在这种情况下,电子设备可以获取多帧历史YUV图像,这些历史YUV图像均为根据历史获取到的RAW图像包得到的YUV图像。例如,电子设备可以从第一图像缓存队列中获取最近得到的多帧YUV图像。
在得到多帧历史YUV图像后,电子设备可以对这多帧历史YUV图像进行多帧降噪处理,得到第一降噪图像,然后电子设备可以对该第一降噪图像进行预设处理,并将经过预设处理后的第一降噪图像确定为用于响应拍照指令的图像。
例如,电子设备从第一图像缓存队列中获取到的四帧历史YUV图像分别为YUV图像A、YUV图像B、YUV图像C和YUV图像D。之后,电子设备可以对YUV图像A、YUV图像B、YUV图像C和YUV图像D进行多帧降噪处理,得到第一降噪图像。
需要说明的是,在对YUV图像A、YUV图像B、YUV图像C和YUV图像D进行多帧降噪处理时,电子设备可以从YUV图像A、YUV图像B、YUV图像C和YUV图像D中确定出一帧基础帧,例如将YUV图像A确定为基础帧,然后电子设备可以将YUV图像A、YUV图像B、YUV图像C和YUV图像D进行图像对齐。之后,电子设备可以基于对齐后的各图像,计算得到各像素点的平均像素值,比如,某位置的像素点在四帧YUV图像A、B、C、D中的像素值依次为:101,102,103,102,则可计算得到该位置的像素点的平均像素值为102。那么,电子设备可以将该位置的像素点的像素值确定为102,将基础帧YUV图像A在该位置的像素值由101改为102。同理,将基础帧YUV图像A中各位置的像素值改为对应的平均像素值后即可以得到降噪图像,即第一降噪图像。
在得到第一降噪图像后,电子设备可以对该第一降噪图像进行诸如图像锐化等预设处理,并将经过预设处理的第一降噪图像确定为用于响应拍照指令的图像。比如,电子设备可以将经过预设处理的第一降噪图像确定为照片,并显示在相机应用界面中供用户查看拍照效果。
可以理解的是,本实施例中,电子设备可以利用对历史得到的多帧YUV图像进行多帧降噪的方式来得到清晰度更好的高动态范围的拍照照片。
例如,用户开启相机应用后,电子设备可以使能其图像传感器,并使该图像传感器工作在第一工作模式。在使电子设备工作于第一工作模式后,比如用户将摄像头对准当前场景,则电子设备可以通过其图像传感器获取关于该场景下的RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,且该第一RAW图像的曝光时间是第二RAW图像的曝光时间的2倍。
例如,请同时参阅图5和图6,电子设备通过图像传感器获取到的第一个RAW图像包经解包处理后得到第一RAW图像(长曝光图像)L1和第二RAW图像(短曝光图像)S1。之后,电子设备可以对图像L1和图像S1进行合成处理,得到具有高动态范围的RAW合成图像,例如为R1,再对该图像R1转换为YUV格式的图像Y1。在得到图像Y1后,电子设备可以将该图像Y1显示在相机应用的预览界面供用户进行拍照预览。并且,电子设备可以将图像Y1存入预设的第一图像缓存队列中。
之后,电子设备通过图像传感器获取到的第二个RAW图像包经解包处理后得到第一RAW图像(长曝光图像)L2和第二RAW图像(短曝光图像)S2。之后,电子设备可以对图像L2和图像S2进行合成处理,得到具有高动态范围的RAW合成图像,例如为R2,再对该图像R2转换为YUV格式的图像Y2。在得到图像Y2后,电子设备可以将该图像Y2显示在相机应用的预览界面供用户进行拍照预览。并且,电子设备可以将图像Y2存入预设的第一图像缓存队列中。
之后,电子设备通过图像传感器获取到的第三个RAW图像包。同样的,经过解包处理后得到第一RAW图像(长曝光图像)L3和第二RAW图像(短曝光图像)S3。电子设备可以将图像L3和图像S3合成为具有高动态范围的RAW合成图像,例如为R3,再将该图像R3转换为YUV格式的图像Y3。在得到图像Y3后,电子设备可以将该图像Y3显示在相机应用的预览界面供用户进行拍照预览。并且,电子设备可以将图像Y3存入预设的第一图像缓存队列中。
之后,电子设备通过图像传感器获取到的第四个RAW图像包。同样的,经过解包处理后得到第一RAW图像(长曝光图像)L4和第二RAW图像(短曝光图像)S4。电子设备可以将图像L4和图像S4合成为具有高动态范围的RAW合成图像,例如为R4,再将该图像R4转换为YUV格式的图像Y4。在得到图像Y4后,电子设备可以将该图像Y4显示在相机应用的预览界面供用户进行拍照预览。并且,电子设备可以将图像Y4存入预设的第一图像缓存队列中。
当用户按下相机应用界面的拍照按钮时,电子设备可以从第一图像缓存队列中获取最近得到的4帧历史YUV图像,例如电子设备获取到图像Y4、Y3、Y2和Y1。之后,电子设备可以对图像Y4、Y3、Y2和Y1进行多帧降噪处理,得到降噪图像,再对该降噪图像进行诸如图像锐化等处理,之后电子设备可以将该经过处理的降噪图像显示在相机应用的界面中作为拍照得到的照片,提供给用户查看。
请参阅图7,图7为本申请实施例提供的图像处理方法的第四种流程示意图,流程可以包括:
在401中,电子设备获取RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,该第一RAW图像的曝光时间长于该第二RAW图像的曝光时间。
在402中,电子设备对RAW图像包进行解包处理,得到第一RAW图像和第二RAW图像。
在403中,电子设备将第二RAW图像存入预设的第二图像缓存队列中。
在404中,电子设备对第一RAW图像和第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
在405中,电子设备将RAW合成图像转换为YUV图像。
比如,401、402、403、404和405可以包括:
用户开启相机应用后,电子设备可以使能其图像传感器,并使该图像传感器工作在第一工作模式。
在使电子设备工作于第一工作模式后,比如用户将摄像头对准某一场景,则电子设备可以通过其图像传感器获取关于该场景下的RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,且该第一RAW图像的曝光时间长于该第二RAW图像的曝光时间。例如,第一RAW图像的曝光时间可以是第二RAW图像的曝光时间的2倍。可以理解的是,由于RAW图像包中的第一RAW图像和第二RAW图像的拍摄时间间隔很短,因此可以认为RAW图像包中的第一RAW图像和第二RAW图像是在同一场景下拍摄得到的图像。
在获取到RAW图像包之后,电子设备可以对该RAW图像包进行解包处理,从而得到第一RAW图像和第二RAW图像。并且,电子设备可以将第二RAW图像存入预设的第二图像缓存队列中。在本实施例中,第二图像缓存队列可以是定长队列,也可以是不定长队列。
之后,电子设备可以对该第一RAW图像和第二RAW图像进行高动态范围合成处理,得到具有高动态范围的RAW图像,即RAW合成图像。
之后,电子设备可以将RAW合成图像进行格式转换为YUV图像。
也就是说,电子设备每获取到一个RAW图像包,就会将其解包为第一RAW图像和第二RAW图像,再对第一RAW图像和第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像,并将RAW合成图像转换为YUV图像。因此,电子设备可以不断地获取到YUV图像。
电子设备获取到的YUV图像可以显示在相机应用的预览界面中。
例如,电子设备获取到第一个RAW图像包后,经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像A。
当电子设备获取到第二个RAW图像包后,同样经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像B。
当电子设备获取到第三个RAW图像包后,经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像C,等等。
那么,在电子设备的相机应用的预览界面中可以依次显示YUV图像A、YUV图像B和YUV图像C,等等。
在406中,电子设备对YUV图像进行预设处理后,进行图像的预览。
比如,在电子设备将RAW合成图像进行格式转换为YUV图像后,该电子设备可以对该YUV图像进行诸如图像锐化、降噪等预设处理,然后该电子设备可以将经过预设处理的YUV图像显示在相机应用的预览界面供用户进行拍照预览。
在407中,若接收到拍照指令,则电子设备从第二图像缓存队列中获取多帧历史第二RAW图像,该历史第二RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第二RAW图像。
比如,用户在预览YUV图像时,点击了相机应用的拍照按钮,即电子设备接收到拍照指令,此时电子设备可以从第二图像缓存队列中获取多帧历史第二RAW图像。可以理解的是,上述历史第二RAW图像即是电子设备历史获取到的RAW图像包经解包处理后得到的第二RAW图像(即短曝光图像)。
例如,第二图像缓存队列中缓存有8帧第二RAW图像,按照存入的时间先后顺序依次为S1、S2、S3、S4、S5、S6、S7和S8。那么,电子设备在接收到拍照指令后,可以从该第二图像缓存队列中获取最近存入的4帧第二RAW图像,例如为S5、S6、S7和S8。
在408中,电子设备对多帧历史第二RAW图像进行合成处理,得到具有高动态范围的第一合成图像。
在409中,电子设备根据第一合成图像响应拍照指令。
比如,在获取到4帧历史第二RAW图像S5、S6、S7和S8后,电子设备可以对这4帧历史第二RAW图像进行合成处理,从而得到具有高动态范围的第一合成图像,并根据该第一合成图像响应拍照指令。例如电子设备可以将该第一合成图像输出并显示在相机应用界面作为用户拍照得到照片供用户查看。
可以理解的是,本实施例中,电子设备可以将由最近获取到的RAW图像包解包得到的第一RAW图像和第二RAW图像合成得到的RAW合成图像转换为对应的YUV图像,并将该YUV图像用于图像预览。在接收到拍照指令时,电子设备可以获取多帧历史第二RAW图像,并对这多帧历史第二RAW图像进行合成处理,得到具有高动态范围的第一合成图像,并将该第一合成用于响应拍照指令。即,本实施例提供的图像处理方法在响应拍照指令时,可以利用多帧短曝光的图像进行高动态范围合成处理。
需要说明的是,由于多帧历史第二RAW图像均为短曝光图像,因此这多帧历史第二RAW图像处于同一亮度等级。在图像合成时,无论是进行图像中物体的运动检测,还是在检测到物体发生运动后针对物体运动产生的运动鬼影问题进行图像修补的优化,利用处于相同亮度等级的多帧历史第二RAW图像都可以比较容易地进行运动检测或针对运动鬼影问题进行图像修补。因此,本实施例提供的图像处理方案可以使得拍照得到的图像中的运动鬼影问题得到优化。
在一种实施方式中,404中电子设备对多帧历史第二RAW图像进行合成处理,得到具有高动态范围的第一合成图像的流程,可以包括:
电子设备对多帧历史第二RAW图像进行多帧降噪处理,得到第二降噪图像;
电子设备对第二降噪图像进行亮度提升处理,得到具有高动态范围的第一合成图像。
比如,电子设备获取到的多帧历史第二RAW图像为S5、S6、S7和S8,那么电子设备可以先对S5、S6、S7和S8进行多帧降噪处理,如电子设备可以选取S8作为基础帧,然后利用S5、S6和S7对基础帧S8进行多帧降噪,得到经过降噪处理的S8图像(即第二降噪图像)。之后,电子设备可以对经过降噪处理的S8图像进行亮度提升处理,从而提升S8图像中的暗部细节,从而得到具有高动态范围的第一合成图像。
在一些实施方式中,本实施例提供的利用多帧历史第二RAW图像合成具有高动态范围的第一合成图像,并根据该第一合成图像来响应拍照指令的图像处理方式可以应用在动态范围小的拍照场景中。其中,动态范围小的拍照场景可以是诸如正常的室内、室外拍照场景并且不是出于严重逆光的场景。
例如,用户开启相机应用后,电子设备可以使能其图像传感器,并使该图像传感器工作在第一工作模式。在使电子设备工作于第一工作模式后,比如用户将摄像头对准当前场景,则电子设备可以通过其图像传感器获取关于该场景下的RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,且该第一RAW图像的曝光时间是第二RAW图像的曝光时间的2倍。
例如,请同时参阅图5和图8电子设备通过图像传感器获取到的第一个RAW图像包经解包处理后得到第一RAW图像(长曝光图像)L1和第二RAW图像(短曝光图像)S1。并且,电子设备可以将图像S1存入预设的第二图像缓存队列中。之后,电子设备可以对图像L1和图像S1进行合成处理,得到具有高动态范围的RAW合成图像,例如为R1,再对该图像R1转换为YUV格式的图像Y1。在得到图像Y1后,电子设备可以将该图像Y1显示在相机应用的预览界面供用户进行拍照预览。
之后,电子设备通过图像传感器获取到的第二个RAW图像包经解包处理后得到第一RAW图像(长曝光图像)L2和第二RAW图像(短曝光图像)S2。并且,电子设备可以将图像S2存入预设的第二图像缓存队列中。之后,电子设备可以对图像L2和图像S2进行合成处理,得到具有高动态范围的RAW合成图像,例如为R2,再对该图像R2转换为YUV格式的图像Y2。在得到图像Y2后,电子设备可以将该图像Y2显示在相机应用的预览界面供用户进行拍照预览。
之后,电子设备通过图像传感器获取到的第三个RAW图像包。同样的,经过解包处理后得到第一RAW图像(长曝光图像)L3和第二RAW图像(短曝光图像)S3。并且,电子设备可以将图像S3存入预设的第二图像缓存队列中。电子设备可以将图像L3和图像S3合成为具有高动态范围的RAW合成图像,例如为R3,再将该图像R3转换为YUV格式的图像Y3。在得到图像Y3后,电子设备可以将该图像Y3显示在相机应用的预览界面供用户进行拍照预览。
之后,电子设备通过图像传感器获取到的第四个RAW图像包。同样的,经过解包处理后得到第一RAW图像(长曝光图像)L4和第二RAW图像(短曝光图像)S4。并且,电子设备可以将图像S4存入预设的第二图像缓存队列中。电子设备可以将图像L4和图像S4合成为具有高动态范围的RAW合成图像,例如为R4,再将该图像R4转换为YUV格式的图像Y4。在得到图像Y4后,电子设备可以将该图像Y4显示在相机应用的预览界面供用户进行拍照预览。
当用户按下相机应用界面的拍照按钮时,电子设备可以从第二图像缓存队列中获取最近得到的4帧历史第二RAW图像,例如电子设备获取到图像S4、S3、S2和S1。之后,电子设备可以对图像S4、S3、S2和S1进行合成处理,得到第一合成图像。之后,电子设备可以对第一合成图像进行诸如图像锐化等处理,并将该经过处理的第一合成图像显示在相机应用的界面中作为拍照得到的照片,提供给用户查看。
请参阅图9,图9为本申请实施例提供的图像处理方法的第五种流程示意图,流程可以包括:
在501中,电子设备获取RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,该第一RAW图像的曝光时间长于该第二RAW图像的曝光时间。
在502中,电子设备对RAW图像包进行解包处理,得到第一RAW图像和第二RAW图像。
在503中,电子设备将第一RAW图像和第二RAW图像存入预设的第三图像缓存队列中。
在504中,电子设备对第一RAW图像和第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
在505中,电子设备将RAW合成图像转换为YUV图像。
比如,501、502、503、504和505可以包括:
用户开启相机应用后,电子设备可以使能其图像传感器,并使该图像传感器工作在第一工作模式。
在使电子设备工作于第一工作模式后,比如用户将摄像头对准某一场景,则电子设备可以通过其图像传感器获取关于该场景下的RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,且该第一RAW图像的曝光时间长于该第二RAW图像的曝光时间。例如,第一RAW图像的曝光时间可以是第二RAW图像的曝光时间的2倍。可以理解的是,由于RAW图像包中的第一RAW图像和第二RAW图像的拍摄时间间隔很短,因此可以认为RAW图像包中的第一RAW图像和第二RAW图像是在同一场景下拍摄得到的图像。
在获取到RAW图像包之后,电子设备可以对该RAW图像包进行解包处理,从而得到第一RAW图像和第二RAW图像。并且,电子设备可以将解包得到的第一RAW图像和第二RAW图像存入预设的第三图像缓存队列。在本实施例中,第三图像缓存队列可以是定长队列,也可以是不定长队列。
之后,电子设备可以对解包得到的该第一RAW图像和第二RAW图像进行高动态范围合成处理,得到具有高动态范围的RAW图像,即RAW合成图像。
之后,电子设备可以将RAW合成图像转换为YUV图像。
也就是说,电子设备会每获取到一个RAW图像包,就会将其解包为第一RAW图像和第二RAW图像,再对第一RAW图像和第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像,并将RAW合成图像转换为YUV图像。即,电子设备可以不断地获取到YUV图像。
电子设备获取到的YUV图像可以显示在相机应用的预览界面中。
例如,电子设备获取到第一个RAW图像包后,经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像A。
当电子设备获取到第二个RAW图像包后,同样经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像B。
当电子设备获取到第三个RAW图像包后,经过解包得到第一RAW图像和第二RAW图像、对第一RAW图像和第二RAW图像进行合成处理得到RAW合成图像以及将RAW合成图像转换为YUV图像C,等等。
那么,在电子设备的相机应用的预览界面中可以依次显示YUV图像A、YUV图像B和YUV图像C供用户预览,等等。
在506中,电子设备对YUV图像进行预设处理后,进行图像的预览。
比如,在电子设备将RAW合成图像进行格式转换为YUV图像后,该电子设备可以对该YUV图像进行诸如图像锐化、降噪等预设处理,然后该电子设备可以将经过预设处理的YUV图像显示在相机应用的预览界面供用户进行拍照预览。
在507中,若接收到拍照指令,则电子设备从第三图像缓存队列中获取多帧历史第一RAW图像和一帧历史第二RAW图像,该历史第一RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第一RAW图像,该历史第二RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第二RAW图像。
比如,用户在预览YUV图像时,点击了相机应用的拍照按钮,即电子设备接收到拍照指令,此时电子设备可以从第三图像缓存队列中获取多帧历史第一RAW图像以及一帧历史第二RAW图像。可以理解的是,上述历史第一RAW图像即是电子设备历史获取到的RAW图像包经解包处理后得到的第一RAW图像(即长曝光图像)。上述历史第二RAW图像即是电子设备历史获取到的RAW图像包经解包处理后得到的第二RAW图像(即短曝光图像)。
例如,第三图像缓存队列中缓存有8帧第一RAW图像,按照存入的时间先后顺序依次为L1、L2、L3、L4、L5、L6、L7和L8。那么,电子设备在接收到拍照指令后,可以从该第三图像缓存队列中获取最近存入的4帧第一RAW图像,例如为L5、L6、L7和L8。第三图像缓存队列中缓存有8帧第二RAW图像,按照存入的时间先后顺序依次为S1、S2、S3、S4、S5、S6、S7和S8。那么,电子设备在接收到拍照指令后,可以从该缓存队列中获取最近存入的一帧第二RAW图像,例如为S8。
在508中,电子设备对多帧历史第一RAW图像进行多帧降噪处理,得到第三降噪图像。
在509中,电子设备对第三降噪图像和历史第二RAW图像进行合成处理,得到具有高动态范围的第二合成图像。
在510中,电子设备根据第二合成图像响应拍照指令。
比如,在获取到4帧历史第一RAW图像L5、L6、L7和L8后,电子设备可以对这4帧历史第一RAW图像进行多帧降噪处理,从而得到第三降噪图像。例如,由于电子设备选取的历史第二RAW图像为S8,因此电子设备可以将与第二RAW图像对应的第一RAW图像L8确定为多帧降噪的基础帧,在利用其它三帧历史第一RAW图像L5、L6、L7对基础帧L8进行多帧降噪,得到经过降噪处理的L8图像(即第三降噪图像)。
在得到第三降噪图像后,电子设备可以对该第三降噪图像和历史第二RAW图像进行合成处理,从而得到具有高动态范围的第二合成图像。例如,电子设备可以对经过降噪处理的L8图像和第二RAW图像S8进行合成处理,从而得到具有高动态范围的第二合成图像。
在得到具有高动态范围的第二合成图像后,电子设备可以根据该第二合成图像响应拍照指令。例如电子设备可以将该第二合成图像输出并显示在相机应用界面作为用户拍照得到照片供用户查看。
可以理解的是,本实施例中,电子设备可以将由最近获取到的RAW图像包解包得到的第一RAW图像和第二RAW图像合成得到的RAW合成图像转换为对应的YUV图像,并将该YUV图像用于图像预览。同时,电子设备可以将解包得到的第一RAW图像和第二RAW图像缓存起来。在接收到拍照指令时,电子设备可以获取多帧历史第一RAW图像和一帧历史第二RAW图像,并先对这多帧历史第一RAW图像进行多帧降噪处理,得到第三降噪图像,再对该第三降噪图像和历史第二RAW图像进行合成处理,得到具有高动态范围的第二合成图像,并将该第二合成用于响应拍照指令。即,本实施例提供的图像处理方法在响应拍照指令时,可以先利用长曝光的图像进行多帧降噪,再将多帧降噪得到的图像和一帧短曝光的图像进行高动态范围合成处理。
需要说明的是,上述实施例提供的图像处理方法在响应拍照指令时,先用长曝光图像L5、L6、L7和L8进行多帧降噪,例如在白天的拍照场景下,由于长曝光图像的噪声相对较小,因此最终用于响应拍照指令的第二合成图像的噪声较小。在利用长曝光图像进行多帧降噪得到降噪图像后,会将该降噪图像和短曝光图像进行高动态范围合成处理,因此最终用于响应拍照指令的第二合成图像的动态范围也较宽。此外,由于用于高动态范围合成处理的长曝光图像L8和短曝光图像S8的拍摄间隔小,因此最终用于响应拍照指令的第二合成图像的运动鬼影问题可以得到明显优化。因此,本实施例提供的图像处理方案可以在噪声、高动态范围和运动鬼影优化之前取得较好的平衡。
上述第五种流程示意图对应的图像处理方法可以应用在动态范围较大的场景中。动态范围较大的场景可以是诸如逆光拍摄等场景,例如在晴天逆光拍摄位于窗口前的人物等拍摄场景。
例如,用户开启相机应用后,电子设备可以使能其图像传感器,并使该图像传感器工作在第一工作模式。在使电子设备工作于第一工作模式后,比如用户将摄像头对准当前场景,则电子设备可以通过其图像传感器获取关于该场景下的RAW图像包,该RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,且该第一RAW图像的曝光时间是第二RAW图像的曝光时间的2倍。
例如,请同时参阅图5和图10,电子设备通过图像传感器获取到的第一个RAW图像包经解包处理后得到第一RAW图像(长曝光图像)L1和第二RAW图像(短曝光图像)S1。并且,电子设备可以将图像L1和S1存入预设的第三图像缓存队列中。之后,电子设备可以对图像L1和图像S1进行合成处理,得到具有高动态范围的RAW合成图像,例如为R1,再对该图像R1转换为YUV格式的图像Y1。在得到图像Y1后,电子设备可以将该图像Y1显示在相机应用的预览界面供用户进行拍照预览。
之后,电子设备通过图像传感器获取到的第二个RAW图像包经解包处理后得到第一RAW图像(长曝光图像)L2和第二RAW图像(短曝光图像)S2。并且,电子设备可以将图像L2和S2存入预设的第三图像缓存队列中。之后,电子设备可以对图像L2和图像S2进行合成处理,得到具有高动态范围的RAW合成图像,例如为R2,再对该图像R2转换为YUV格式的图像Y2。在得到图像Y2后,电子设备可以将该图像Y2显示在相机应用的预览界面供用户进行拍照预览。
之后,电子设备通过图像传感器获取到的第三个RAW图像包。同样的,经过解包处理后得到第一RAW图像(长曝光图像)L3和第二RAW图像(短曝光图像)S3。并且,电子设备可以将图像L3和S3存入预设的第三图像缓存队列中。电子设备可以将图像L3和图像S3合成为具有高动态范围的RAW合成图像,例如为R3,再将该图像R3转换为YUV格式的图像Y3。在得到图像Y3后,电子设备可以将该图像Y3显示在相机应用的预览界面供用户进行拍照预览。
之后,电子设备通过图像传感器获取到的第四个RAW图像包。同样的,经过解包处理后得到第一RAW图像(长曝光图像)L4和第二RAW图像(短曝光图像)S4。并且,电子设备可以将图像L4和S4存入预设的第三图像缓存队列中。电子设备可以将图像L4和图像S4合成为具有高动态范围的RAW合成图像,例如为R4,再将该图像R4转换为YUV格式的图像Y4。在得到图像Y4后,电子设备可以将该图像Y4显示在相机应用的预览界面供用户进行拍照预览。
当用户按下相机应用界面的拍照按钮时,电子设备可以从第三图像缓存队列中获取最近得到的4帧历史第一RAW图像和一帧历史第二RAW图像,例如电子设备获取到历史第一RAW图像为L4、L3、L2和L1,获取到的历史第二RAW图像为S4。之后,电子设备可以对图像L4、L3、L2和L1进行多帧降噪处理,得到第三降噪图像,例如为经过降噪处理的L4。之后,电子设备对经过降噪处理的L4和S4进行合成处理,得到具有高动态范围的第二合成图像。之后,电子设备可以对第二合成图像进行诸如图像锐化等处理,并将该经过处理的第二合成图像显示在相机应用的界面中作为拍照得到的照片,提供给用户查看。
请参阅图11,图11为本申请实施例提供的图像处理装置的结构示意图。图像处理装置300可以包括:获取模块601,解包模块602,合成模块603,处理模块604。
获取模块601,用于获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两组RAW图像具有不同的曝光时间。
解包模块602,用于对所述RAW图像包进行解包处理,得到所述至少两组RAW图像。
合成模块603,用于对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
处理模块604,用于利用所述RAW合成图像,进行图像的预览或拍照或录像操作。
在一种实施方式中,获取模块601可以用于:获取RAW图像包,所述RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,所述第一RAW图像的曝光时间长于所述第二RAW图像的曝光时间;
解包模块602可以用于:对所述RAW图像包进行解包处理,得到所述第一RAW图像和所述第二RAW图像;
合成模块603可以用于:对所述第一RAW图像和所述第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
在一种实施方式中,处理模块604可以用于:
将所述RAW合成图像转换为YUV图像;
对所述YUV图像进行预设处理后,进行图像的预览或拍照或录像操作。
在一种实施方式中,处理模块604还可以用于:
将由RAW合成图像转换得到的YUV图像存入预设的第一图像缓存队列;
在进行图像的预览之后,若接收到拍照指令,则从所述第一图像缓存队列中获取多帧历史YUV图像,所述历史YUV图像为根据历史获取到的RAW图像包得到的YUV图像;
对所述多帧历史YUV图像进行多帧降噪处理,得到第一降噪图像。
根据所述第一降噪图像响应所述拍照指令。
在一种实施方式中,处理模块604还可以用于:
将所述第二RAW图像存入预设的第二图像缓存队列中;
在进行图像的预览之后,若接收到拍照指令,则从所述第二图像缓存队列中获取多帧历史第二RAW图像,所述历史第二RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第二RAW图像;
对所述多帧历史第二RAW图像进行合成处理,得到具有高动态范围的第一合成图像;
根据所述第一合成图像响应所述拍照指令。
在一种实施方式中,处理模块604可以用于:
对所述多帧历史第二RAW图像进行多帧降噪处理,得到第二降噪图像;
对所述第二降噪图像进行亮度提升处理,得到具有高动态范围的第一合成图像。
在一种实施方式中,处理模块604可以用于:
将所述第一RAW图像和所述第二RAW图像存入预设的第三图像缓存队列中;
在进行图像的预览之后,若接收到拍照指令,则从所述第三图像缓存队列中获取多帧历史第一RAW图像和一帧历史第二RAW图像,所述历史第一RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第一RAW图像,所述历史第二RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第二RAW图像;
对所述多帧历史第一RAW图像进行多帧降噪处理,得到第三降噪图像;
对所述第三降噪图像和所述历史第二RAW图像进行合成处理,得到具有高动态范围的第二合成图像;
根据所述第二合成图像响应所述拍照指令。
本申请实施例提供一种计算机可读的存储介质,其上存储有计算机程序,当所述计算机程序在计算机上执行时,使得所述计算机执行如本实施例提供的图像处理方法中的流程。
本申请实施例还提供一种电子设备,包括存储器,处理器,所述处理器通过调用所述存储器中存储的计算机程序,用于执行本实施例提供的图像处理方法中的流程。
例如,上述电子设备可以是诸如平板电脑或者智能手机等移动终端。请参阅图12,图12为本申请实施例提供的电子设备的结构示意图。
该电子设备700可以包括摄像模组701、存储器702、处理器703等部件。本领域技术人员可以理解,图12中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
摄像模组701可以包括透镜和图像传感器,其中透镜用于采集外部的光源信号提供给图像传感器,图像传感器感应来自于透镜的光源信号,将其转换为数字化的原始图像数据,即RAW图像数据。RAW是未经处理、也未经压缩的格式,可以将其形象地称为“数字底片”。电子设备的摄像模组的图像传感器可以具有第一工作模式和第二工作模式。在该第一工作模式下,图像传感器将在一帧图像的时间内产生至少两组曝光时间不同的RAW图像,并在将该至少两组RAW图像处理成RAW图像包后以RAW图像包的形式输出。在该第二工作模式下,图像传感器在一帧图像的时间内将产生一个单独的RAW图像,而不是RAW图像包。
存储器702可用于存储应用程序和数据。存储器702存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器703通过运行存储在存储器702的应用程序,从而执行各种功能应用以及数据处理。
处理器703是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器702内的应用程序,以及调用存储在存储器702内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。
在本实施例中,电子设备中的处理器703会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器702中,并由处理器703来运行存储在存储器702中的应用程序,从而执行:
获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两帧RAW图像具有不同的曝光时间;
对所述RAW图像包进行解包处理,得到所述至少两组RAW图像;
对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像;
利用所述RAW合成图像,进行图像的预览或拍照或录像操作。
请参阅图13,电子设备800可以包括摄像模组801、存储器802、处理器803、触摸显示屏804、扬声器805、麦克风806等部件。
摄像模组801可以包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义图像信号处理(Image Signal Processing)管线的各种处理单元。图像处理电路至少可以包括:摄像头、图像信号处理器(Image Signal Processor,ISP处理器)、控制逻辑器、图像存储器以及显示器等。其中摄像头至少可以包括一个或多个透镜和图像传感器。图像传感器可包括色彩滤镜阵列(如Bayer滤镜)。图像传感器可获取用图像传感器的每个成像像素捕捉的光强度和波长信息,并提供可由图像信号处理器处理的一组原始图像数据。
图像信号处理器可以按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,图像信号处理器可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。原始图像数据经过图像信号处理器处理后可存储至图像存储器中。图像信号处理器还可从图像存储器处接收图像数据。
图像存储器可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像存储器的图像数据时,图像信号处理器可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器,以便在被显示之前进行另外的处理。图像信号处理器还可从图像存储器接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,图像信号处理器的输出还可发送给图像存储器,且显示器可从图像存储器读取图像数据。在一种实施方式中,图像存储器可被配置为实现一个或多个帧缓冲器。
图像信号处理器确定的统计数据可发送给控制逻辑器。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜阴影校正等图像传感器的统计信息。
控制逻辑器可包括执行一个或多个例程(如固件)的处理器和/或微控制器。一个或多个例程可根据接收的统计数据,确定摄像头的控制参数以及ISP控制参数。例如,摄像头的控制参数可包括照相机闪光控制参数、透镜的控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵等。
请参阅图14,图14为本实施例中图像处理电路的结构示意图。如图14所示,为便于说明,仅示出与本发明实施例相关的图像处理技术的各个方面。
例如图像处理电路可以包括:摄像头、图像信号处理器、控制逻辑器、图像存储器、显示器。其中,摄像头可以包括一个或多个透镜和图像传感器。在一些实施例中,摄像头可为长焦摄像头或广角摄像头中的任一者。
摄像头采集的第一图像传输给图像信号处理器进行处理。图像信号处理器处理第一图像后,可将第一图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器。控制逻辑器可根据统计数据确定摄像头的控制参数,从而摄像头可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过图像信号处理器进行处理后可存储至图像存储器中。图像信号处理器也可以读取图像存储器中存储的图像以进行处理。另外,第一图像经过图像信号处理器进行处理后可直接发送至显示器进行显示。显示器也可以读取图像存储器中的图像以进行显示。
此外,图中没有展示的,电子设备还可以包括CPU和供电模块。CPU和逻辑控制器、图像信号处理器、图像存储器和显示器均连接,CPU用于实现全局控制。供电模块用于为各个模块供电。
存储器802存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器803通过运行存储在存储器802的应用程序,从而执行各种功能应用以及数据处理。
处理器803是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器802内的应用程序,以及调用存储在存储器802内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。
触摸显示屏804可以用于接收用户对电子设备的触摸控制操作。扬声器805可以播放声音信号。麦克风806可以用于拾取声音信号。
在本实施例中,电子设备中的处理器803会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器802中,并由处理器803来运行存储在存储器802中的应用程序,从而执行:
获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两组RAW图像具有不同的曝光时间;
对所述RAW图像包进行解包处理,得到所述至少两组RAW图像;
对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像;
利用所述RAW合成图像,进行图像的预览或拍照或录像操作。
在一种实施方式中,处理器803执行所述获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两组RAW图像具有不同的曝光时间时,可以执行:获取RAW图像包,所述RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,所述第一RAW图像的曝光时间长于所述第二RAW图像的曝光时间。
那么,处理器803执行所述对所述RAW图像包进行解包处理,得到所述至少两组RAW图像时,可以执行:对所述RAW图像包进行解包处理,得到所述第一RAW图像和所述第二RAW图像。
处理器803执行所述对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像时,可以执行:对所述第一RAW图像和所述第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
在一种实施方式中,处理器803执行所述利用所述RAW合成图像,进行图像的预览或拍照或录像操作时,可以执行:将所述RAW合成图像转换为YUV图像;对所述YUV图像进行预设处理后,进行图像的预览或拍照或录像操作。
在一种实施方式中,在将所述RAW合成图像转换为YUV图像之后,处理器803还可以执行:将由RAW合成图像转换得到的YUV图像存入预设的第一图像缓存队列;在进行图像的预览之后,若接收到拍照指令,则从所述第一图像缓存队列中获取多帧历史YUV图像,所述历史YUV图像为根据历史获取到的RAW图像包得到的YUV图像;对所述多帧历史YUV图像进行多帧降噪处理,得到第一降噪图像。根据所述第一降噪图像响应所述拍照指令。
在一种实施方式中,在对所述RAW图像包进行解包处理,得到所述第一RAW图像和所述第二RAW图像之后,处理器803还可以执行:将所述第二RAW图像存入预设的第二图像缓存队列中;在进行图像的预览之后,若接收到拍照指令,则从所述第二图像缓存队列中获取多帧历史第二RAW图像,所述历史第二RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第二RAW图像;对所述多帧历史第二RAW图像进行合成处理,得到具有高动态范围的第一合成图像;根据所述第一合成图像响应所述拍照指令。
在一种实施方式中,处理器803执行所述对所述多帧历史第二RAW图像进行合成处理,得到具有高动态范围的第一合成图像时,可以执行:对所述多帧历史第二RAW图像进行多帧降噪处理,得到第二降噪图像;对所述第二降噪图像进行亮度提升处理,得到具有高动态范围的第一合成图像。
在一种实施方式中,在对所述RAW图像包进行解包处理,得到所述第一RAW图像和所述第二RAW图像之后,处理器803还可以执行:将所述第一RAW图像和所述第二RAW图像存入预设的第三图像缓存队列中;在进行图像的预览之后,若接收到拍照指令,则从所述第三图像缓存队列中获取多帧历史第一RAW图像和一帧历史第二RAW图像,所述历史第一RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第一RAW图像,所述历史第二RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第二RAW图像;对所述多帧历史第一RAW图像进行多帧降噪处理,得到第三降噪图像;对所述第三降噪图像和所述历史第二RAW图像进行合成处理,得到具有高动态范围的第二合成图像;根据所述第二合成图像响应所述拍照指令。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对图像处理方法的详细描述,此处不再赘述。
本申请实施例提供的所述图像处理装置与上文实施例中的图像处理方法属于同一构思,在所述图像处理装置上可以运行所述图像处理方法实施例中提供的任一方法,其具体实现过程详见所述图像处理方法实施例,此处不再赘述。
需要说明的是,对本申请实施例所述图像处理方法而言,本领域普通技术人员可以理解实现本申请实施例所述图像处理方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,所述计算机程序可存储于一计算机可读取存储介质中,如存储在存储器中,并被至少一个处理器执行,在执行过程中可包括如所述图像处理方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)等。
对本申请实施例的所述图像处理装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,所述存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的一种图像处理方法、装置、存储介质以及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种图像处理方法,其特征在于,包括:
获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两组RAW图像具有不同的曝光时间;
对所述RAW图像包进行解包处理,得到所述至少两组RAW图像;
对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像;
利用所述RAW合成图像,进行图像的预览或拍照或录像操作。
2.根据权利要求1所述的图像处理方法,其特征在于,所述获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两组RAW图像具有不同的曝光时间,包括:获取RAW图像包,所述RAW图像包中包括依次曝光的第一RAW图像和第二RAW图像的数据,所述第一RAW图像的曝光时间长于所述第二RAW图像的曝光时间;
所述对所述RAW图像包进行解包处理,得到所述至少两组RAW图像,包括:对所述RAW图像包进行解包处理,得到所述第一RAW图像和所述第二RAW图像;
所述对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像,包括:对所述第一RAW图像和所述第二RAW图像进行合成处理,得到具有高动态范围的RAW合成图像。
3.根据权利要求1所述的图像处理方法,其特征在于,所述利用所述RAW合成图像,进行图像的预览或拍照或录像操作,包括:
将所述RAW合成图像转换为YUV图像;
对所述YUV图像进行预设处理后,进行图像的预览或拍照或录像操作。
4.根据权利要求3所述的图像处理方法,其特征在于,在将所述RAW合成图像转换为YUV图像之后,还包括:将由RAW合成图像转换得到的YUV图像存入预设的第一图像缓存队列;
在进行图像的预览之后,还包括:
若接收到拍照指令,则从所述第一图像缓存队列中获取多帧历史YUV图像,所述历史YUV图像为根据历史获取到的RAW图像包得到的YUV图像;
对所述多帧历史YUV图像进行多帧降噪处理,得到第一降噪图像。
根据所述第一降噪图像响应所述拍照指令。
5.根据权利要求3所述的图像处理方法,其特征在于,在对所述RAW图像包进行解包处理,得到所述第一RAW图像和所述第二RAW图像之后,还包括:将所述第二RAW图像存入预设的第二图像缓存队列中;
在进行图像的预览之后,还包括:
若接收到拍照指令,则从所述第二图像缓存队列中获取多帧历史第二RAW图像,所述历史第二RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第二RAW图像;
对所述多帧历史第二RAW图像进行合成处理,得到具有高动态范围的第一合成图像;
根据所述第一合成图像响应所述拍照指令。
6.根据权利要求5所述的图像处理方法,其特征在于,所述对所述多帧历史第二RAW图像进行合成处理,得到具有高动态范围的第一合成图像,包括:
对所述多帧历史第二RAW图像进行多帧降噪处理,得到第二降噪图像;
对所述第二降噪图像进行亮度提升处理,得到具有高动态范围的第一合成图像。
7.根据权利要求3所述的图像处理方法,其特征在于,在对所述RAW图像包进行解包处理,得到所述第一RAW图像和所述第二RAW图像之后,还包括:将所述第一RAW图像和所述第二RAW图像存入预设的第三图像缓存队列中;
在进行图像的预览之后,还包括:
若接收到拍照指令,则从所述第三图像缓存队列中获取多帧历史第一RAW图像和一帧历史第二RAW图像,所述历史第一RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第一RAW图像,所述历史第二RAW图像为历史获取到的RAW图像包在经过解包处理后得到的第二RAW图像;
对所述多帧历史第一RAW图像进行多帧降噪处理,得到第三降噪图像;
对所述第三降噪图像和所述历史第二RAW图像进行合成处理,得到具有高动态范围的第二合成图像;
根据所述第二合成图像响应所述拍照指令。
8.一种图像处理装置,其特征在于,包括:
获取模块,用于获取RAW图像包,所述RAW图像包中包括至少两组RAW图像的数据,所述至少两组RAW图像具有不同的曝光时间;
解包模块,用于对所述RAW图像包进行解包处理,得到所述至少两组RAW图像;
合成模块,用于对所述至少两组RAW图像进行合成处理,得到具有高动态范围的RAW合成图像;
处理模块,用于利用所述RAW合成图像,进行图像的预览或拍照或录像操作。
9.一种存储介质,其上存储有计算机程序,其特征在于,当所述计算机程序在计算机上执行时,使得所述计算机执行如权利要求1至7中任一项所述的方法。
10.一种电子设备,包括存储器,处理器,其特征在于,所述处理器通过调用所述存储器中存储的计算机程序,用于执行如权利要求1至7中任一项所述的方法。
CN201910279898.3A 2019-04-09 2019-04-09 图像处理方法、装置、存储介质及电子设备 Active CN110012227B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201910279898.3A CN110012227B (zh) 2019-04-09 2019-04-09 图像处理方法、装置、存储介质及电子设备
US16/839,638 US11503223B2 (en) 2019-04-09 2020-04-03 Method for image-processing and electronic device
EP20169002.1A EP3723360A1 (en) 2019-04-09 2020-04-09 Method for image-processing and electronic device
PCT/CN2020/083909 WO2020207427A1 (en) 2019-04-09 2020-04-09 Method for image-processingand electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910279898.3A CN110012227B (zh) 2019-04-09 2019-04-09 图像处理方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN110012227A true CN110012227A (zh) 2019-07-12
CN110012227B CN110012227B (zh) 2021-06-29

Family

ID=67170426

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910279898.3A Active CN110012227B (zh) 2019-04-09 2019-04-09 图像处理方法、装置、存储介质及电子设备

Country Status (4)

Country Link
US (1) US11503223B2 (zh)
EP (1) EP3723360A1 (zh)
CN (1) CN110012227B (zh)
WO (1) WO2020207427A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020207427A1 (en) * 2019-04-09 2020-10-15 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for image-processingand electronic device
CN114862735A (zh) * 2022-05-23 2022-08-05 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备和计算机可读存储介质
CN117119314A (zh) * 2023-02-25 2023-11-24 荣耀终端有限公司 一种图像处理方法及相关电子设备
CN117119314B (zh) * 2023-02-25 2024-06-07 荣耀终端有限公司 一种图像处理方法及相关电子设备

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101764959A (zh) * 2008-12-25 2010-06-30 昆山锐芯微电子有限公司 图像拾取系统及图像处理方法
CN102629995A (zh) * 2012-03-29 2012-08-08 天津大学 Cmos图像传感器像素时序控制方法
CN102694962A (zh) * 2011-03-22 2012-09-26 中兴通讯股份有限公司 降噪方法及装置
CN102833471A (zh) * 2011-06-15 2012-12-19 奥林巴斯映像株式会社 摄像装置和摄像方法
CN103260042A (zh) * 2013-04-26 2013-08-21 Tcl商用信息科技(惠州)股份有限公司 一种立体图像合成方法及装置
US20150195441A1 (en) * 2012-09-20 2015-07-09 Huawei Technologies Co., Ltd. Image Processing Method and Apparatus
CN104917940A (zh) * 2014-03-13 2015-09-16 奥林巴斯株式会社 摄像装置、摄像方法和数据记录装置
US20180097984A1 (en) * 2016-10-03 2018-04-05 Denso Corporation Imaging device provided with high dynamic range rendering function
CN108280817A (zh) * 2018-01-15 2018-07-13 维沃移动通信有限公司 一种图像处理方法及移动终端
CN108419023A (zh) * 2018-03-26 2018-08-17 华为技术有限公司 一种生成高动态范围图像的方法以及相关设备
CN108989700A (zh) * 2018-08-13 2018-12-11 Oppo广东移动通信有限公司 成像控制方法、装置、电子设备以及计算机可读存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008128205A1 (en) 2007-04-13 2008-10-23 Presler Ari M Digital cinema camera system for recording, editing and visualizing images
US8933985B1 (en) 2011-06-06 2015-01-13 Qualcomm Technologies, Inc. Method, apparatus, and manufacture for on-camera HDR panorama
US9137456B2 (en) 2012-06-06 2015-09-15 Apple Inc. Intelligent auto-exposure bracketing
JP6306845B2 (ja) 2013-09-12 2018-04-04 キヤノン株式会社 撮像装置及びその制御方法
US9600887B2 (en) 2013-12-09 2017-03-21 Intel Corporation Techniques for disparity estimation using camera arrays for high dynamic range imaging
US9704269B2 (en) * 2014-11-21 2017-07-11 Texas Instruments Incorporated Efficient methodology to process wide dynamic range images
US10743002B2 (en) 2017-03-03 2020-08-11 Gopro, Inc. Sequential in-place blocking transposition for image signal processing
CN109413335B (zh) 2017-08-16 2020-12-18 瑞芯微电子股份有限公司 一种双重曝光合成hdr图像的方法和装置
CN107566739B (zh) 2017-10-18 2019-12-06 维沃移动通信有限公司 一种拍照方法及移动终端
CN108259774B (zh) 2018-01-31 2021-04-16 珠海市杰理科技股份有限公司 图像合成方法、系统和设备
US11107191B2 (en) * 2019-02-18 2021-08-31 Samsung Electronics Co., Ltd. Apparatus and method for detail enhancement in super-resolution imaging using mobile electronic device
CN110012227B (zh) 2019-04-09 2021-06-29 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101764959A (zh) * 2008-12-25 2010-06-30 昆山锐芯微电子有限公司 图像拾取系统及图像处理方法
CN102694962A (zh) * 2011-03-22 2012-09-26 中兴通讯股份有限公司 降噪方法及装置
CN102833471A (zh) * 2011-06-15 2012-12-19 奥林巴斯映像株式会社 摄像装置和摄像方法
CN102629995A (zh) * 2012-03-29 2012-08-08 天津大学 Cmos图像传感器像素时序控制方法
US20150195441A1 (en) * 2012-09-20 2015-07-09 Huawei Technologies Co., Ltd. Image Processing Method and Apparatus
CN103260042A (zh) * 2013-04-26 2013-08-21 Tcl商用信息科技(惠州)股份有限公司 一种立体图像合成方法及装置
CN104917940A (zh) * 2014-03-13 2015-09-16 奥林巴斯株式会社 摄像装置、摄像方法和数据记录装置
US20180097984A1 (en) * 2016-10-03 2018-04-05 Denso Corporation Imaging device provided with high dynamic range rendering function
CN107896307A (zh) * 2016-10-03 2018-04-10 株式会社电装 具有高动态范围渲染功能的成像装置
CN108280817A (zh) * 2018-01-15 2018-07-13 维沃移动通信有限公司 一种图像处理方法及移动终端
CN108419023A (zh) * 2018-03-26 2018-08-17 华为技术有限公司 一种生成高动态范围图像的方法以及相关设备
CN108989700A (zh) * 2018-08-13 2018-12-11 Oppo广东移动通信有限公司 成像控制方法、装置、电子设备以及计算机可读存储介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020207427A1 (en) * 2019-04-09 2020-10-15 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for image-processingand electronic device
US11503223B2 (en) 2019-04-09 2022-11-15 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method for image-processing and electronic device
CN114862735A (zh) * 2022-05-23 2022-08-05 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备和计算机可读存储介质
CN117119314A (zh) * 2023-02-25 2023-11-24 荣耀终端有限公司 一种图像处理方法及相关电子设备
CN117119314B (zh) * 2023-02-25 2024-06-07 荣耀终端有限公司 一种图像处理方法及相关电子设备

Also Published As

Publication number Publication date
US20200329188A1 (en) 2020-10-15
CN110012227B (zh) 2021-06-29
EP3723360A1 (en) 2020-10-14
WO2020207427A1 (en) 2020-10-15
US11503223B2 (en) 2022-11-15

Similar Documents

Publication Publication Date Title
CN107959778B (zh) 基于双摄像头的成像方法和装置
CN109040609B (zh) 曝光控制方法、装置、电子设备和计算机可读存储介质
US11532076B2 (en) Image processing method, electronic device and storage medium
CN109993722A (zh) 图像处理方法、装置、存储介质及电子设备
CN110198417A (zh) 图像处理方法、装置、存储介质及电子设备
CN110198418A (zh) 图像处理方法、装置、存储介质及电子设备
CN110166708B (zh) 夜景图像处理方法、装置、电子设备以及存储介质
CN110505411A (zh) 图像拍摄方法、装置、存储介质及电子设备
CN108833804A (zh) 成像方法、装置和电子设备
CN110198419A (zh) 图像处理方法、装置、存储介质及电子设备
CN110213502A (zh) 图像处理方法、装置、存储介质及电子设备
CN109194855A (zh) 成像方法、装置和电子设备
CN109167930A (zh) 图像显示方法、装置、电子设备和计算机可读存储介质
CN110381263A (zh) 图像处理方法、装置、存储介质及电子设备
CN110430370A (zh) 图像处理方法、装置、存储介质及电子设备
CN108419022A (zh) 控制方法、控制装置、计算机可读存储介质和计算机设备
CN110290325A (zh) 图像处理方法、装置、存储介质及电子设备
CN108520493A (zh) 图像替换的处理方法、装置、存储介质及电子设备
CN110266954A (zh) 图像处理方法、装置、存储介质及电子设备
CN110266966A (zh) 图像生成方法和装置、电子设备、计算机可读存储介质
CN116744120B (zh) 图像处理方法和电子设备
CN108833803A (zh) 成像方法、装置和电子设备
CN110392214A (zh) 图像处理方法、装置、存储介质及电子设备
CN110278375A (zh) 图像处理方法、装置、存储介质及电子设备
CN110012227A (zh) 图像处理方法、装置、存储介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant