CN111418201B - 一种拍摄方法及设备 - Google Patents
一种拍摄方法及设备 Download PDFInfo
- Publication number
- CN111418201B CN111418201B CN201880077221.5A CN201880077221A CN111418201B CN 111418201 B CN111418201 B CN 111418201B CN 201880077221 A CN201880077221 A CN 201880077221A CN 111418201 B CN111418201 B CN 111418201B
- Authority
- CN
- China
- Prior art keywords
- image
- brightness
- exposure
- value
- preview image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
Abstract
本申请实施例公开了一种拍摄方法、设备及系统,涉及通信技术领域,以提高拍摄的图像的质量。该方法应用于包括摄像机和ISP的电子设备,包括:根据预览图像计算短曝光量,以及拍摄帧数M,将短曝光量和拍摄帧数M通过ISP下发至摄像机,并控制摄像机根据短曝光量和拍摄帧数M采集M帧短曝光图像;对M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像;将RAW图像发送至ISP进行处理,得到YUV图像;对YUV图像进行压缩编码,得到目标图像。本申请提供的拍摄方法用于拍摄高动态范围图像。
Description
技术领域
本申请实施例涉及通信技术领域,尤其涉及一种拍摄方法及设备。
背景技术
随着科学技术的不断发展,智能手机、个人数字助理(英文:Personal DigitalAssistant,PAD)等电子设备的功能越来越强大,越来越多的用户喜欢通过智能手机等电子设备来拍摄图像。然而,受电子设备的硬件条件限制,当拍摄高动态图像时,通常获取到的图像只能采集到高动态范围场景的一部分信息,或者存在亮区过曝问题,或者存在暗区亮度不足问题,整体拍摄效果较差。
为提高拍摄效果,现有高动态图像的拍摄方法如图1所示,利用一张长曝光图像,一张短曝光图像,以及一张正常曝光图像作为基准,通过曝光融合算法合成一张图像,使得图像中的暗区由长曝光提亮,亮区由短曝光恢复,整张图像亮暗合适。然而,这种拍摄方法存在着以下问题:不同亮度图像之间特征点不一致,导致配准困难,图像间残留运动;长曝光图像会因为时间长导致模糊;长曝光图像因为整体亮度的提升,图像的对比度会降低等,导致拍摄出来的图像质量较差。
发明内容
本申请实施例提供一种拍摄方法、设备及系统,以解决现有拍摄高动态图像时,拍摄图像的图像质量较差的问题。
为达到上述目的,本申请实施例采用如下技术方案:
本申请实施例的第一方面,提供一种拍摄方法,该方法应用于包括摄像机和图像信号处理器(Image Signal Processor,ISP)的电子设备,包括:电子设备根据高动态范围图像的预览图像计算短曝光量以及拍摄帧数M,将短曝光量和拍摄帧数M通过ISP下发至摄像机,并控制摄像机根据短曝光量和拍摄帧数M采集M帧短曝光图像,对M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像,将RAW图像发送至ISP进行处理,得到YUV图像,对YUV图像进行压缩编码,得到目标图像。即本实施例提供的技术方案中,基于当前拍摄的预览图像计算短曝光量和拍摄帧数M等拍摄参数,采用计算出的拍摄参数拍摄多帧短曝光图像,对多帧短曝光图像的降噪、局部亮度调整等处理得到RAW图,并由ISP对RAW进行处理得到目标图像。如此,不仅保证每一个拍摄场景都可以控制曝光,而且,通过降噪处理,使拍摄出的图像具有更好的噪声表现,以及通过局部亮度调整使得图像的高光细节保留,此外,RAW图回灌至ISP处理,由于ISP的处理比较快,提高了拍摄效率。
在一种可能的设计中,结合第一方面,基于预览图像计算短曝光量包括:计算预览图像中由过曝像素组成的高光区域的亮度平均值;根据高光区域的亮度平均值、预览图像的曝光值、以及用户期望达到的目标亮度值,确定短曝光量。如此,可以根据用户所期望的图像亮度确定短曝光量,使拍摄出的图像的亮度贴合用户要求。
需要说明的是,只要预览图像中存在过曝像素,就可以根据预览图像计算短曝光量,执行第一方面所述的多帧短曝光图像的拍摄方案。
在又一种可能的设计中,结合第一方面,为了凸显用户所期望拍摄的主体(如人脸、花朵、景物所在的特征区域)的亮度,则可以使根据预览图像计算的短曝光量加长,即增加曝光时间,使其拍摄出的图像的亮度更强。具体的,若预览图像包括用户期望拍摄的图像拍摄主体所处的特征区域,则根据预览图像计算短曝光量包括:计算预览图像的特征区域的亮度平均值,根据特征区域的亮度平均值和目标亮度值计算特征区域的第一亮度下降比率,根据计算出的第一亮度下降比率、以及预设的对特征区域进行亮度补偿的最小下降比率,确定特征区域的第二亮度下降比率,根据预览图像的曝光值、以及第二亮度下降比率,确定短曝光量,其中,第二亮度下降比率大于等于最小下降比率。如此,使补偿特征区域的亮度下降比率始终大于预设的最小下降比率,保证了提高特征区域的亮度所需要的曝光量。
在又一种可能的设计中,结合第一方面或者上述任一可能的设计,为了避免因预览图像欠曝严重,本申请实施例提供的多帧短曝光图像的拍摄方案不能很好的展现图像中暗区的细节的问题,当预览图像中欠曝像素的比例值大于预设阈值时,在对M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像之前,所述方法还包括:计算预览图像的过暗区域的亮度平均值,根据过暗区域的亮度平均值、预览图像的曝光值、以及目标亮度值,确定长曝光量,控制摄像头采集一帧长曝光图像,将对M帧短曝光图像进行多帧降噪处理、局部亮度调整后的图像与长曝光图像进行曝光融合,得到一帧RAW图像,将RAW图像输入ISP进行处理。如此,可以通过多帧短曝光图像+一帧长曝光图像的处理方案,以改善图像中暗区的噪声细节。
需要说明的是,在实际应用中,可以结合预览图像的欠曝程度,动态设置长曝光图像的帧数(不仅可以设置为一帧,还可以设置为多帧),采用多帧多曝光图像+多帧长曝光图像的处理方案来改善图像中暗区的噪声细节。
在再一种可能的设计中,结合第一方面或者上述任一种可能的设计,上述多帧降噪处理包括:多帧时域降噪处理,或者多帧时域降噪处理和空域降噪处理。
本申请实施例的第二方面,提供一种拍摄方法,该方法应用于包括摄像机和ISP的电子设备,包括:电子设备根据高动态范围图像的预览图像计算长曝光量以及拍摄帧数N,将长曝光量和拍摄帧数N通过ISP下发至摄像机,并控制摄像机根据长曝光量和拍摄帧数N采集N帧长曝光图像,对N帧长曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像,将RAW图像发送至ISP进行处理,得到YUV图像,对YUV图像进行压缩编码,得到目标图像;其中,该方案可适用于预览图像欠曝严重的情况。如此,基于本实施例提供的技术方案,不仅可以改善图像的暗区的细节,而且,将得到的RAW图回灌至ISP处理,处理比较快,提高了拍摄效率。
本申请实施例的第三方面,提供了一种电子设备,该电子设备包括摄像机和ISP,该电子设备还包括:计算单元,拍摄控制单元,图像处理单元;其中,计算单元用于根据预览图像计算短曝光量,以及拍摄帧数M;拍摄控制单元,用于将所述短曝光量和所述拍摄帧数M通过所述ISP下发至摄像机,并控制所述摄像机根据所述短曝光量和所述拍摄帧数M采集M帧短曝光图像;图像处理单元,用于对所述M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像,将所述RAW图像发送至所述ISP进行处理,得到YUV图像,对所述YUV图像进行压缩编码,得到目标图像。
其中,电子设备的具体实现方式可以参考第一方面或上述方面的任一种可能的设计提供的拍摄方法中电子设备的行为功能,在此不再重复赘述。因此,该方面提供的电子设备可以达到与第一方面或第一方面的任一种可能的设计相同的有益效果。
本申请实施例的第四方面,提供了一种电子设备,包括一个或多个处理器和一个或多个存储器。该一个或多个存储器与一个或多个处理器耦合,一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当一个或多个处理器执行计算机指令时,使得电子设备执行上述任一方面任一项可能的设计中的拍摄方法。
本申请实施例的第五方面,提供了一种计算机存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行上述任一方面任一项可能的设计中的拍摄方法。
本申请实施例的第六方面,提供了一种计算机程序产品,当计算机程序产品在计算机上运行时,使得计算机执行上述任一方面任一项可能的设计中的拍摄方法。
本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。
附图说明
图1为现有拍摄高动态图像的流程示意图;
图2为本申请实施例提供的原理框图;
图3为本申请实施例提供的手机的结构图;
图4为本申请实施例提供的一种拍摄方法的流程图;
图5为本申请实施例提供的一种拍摄方法的流程图;
图5a为本申请实施例提供的预览图像的灰度直方图;
图5b为本申请实施例提供的高光恢复示意图;
图5c为本申请实施例提供的图像局部增强示意图;
图5d为本申请实施例提供的图像提亮示意图;
图5e为本申请实施例提供的细节回叠示意图;
图6a为本申请实施例提供的拍摄效果示意图;
图6b为本申请实施例提供的拍摄人物时的效果示意图;
图7为本申请实施例提供的多帧短曝光图像+长曝光图像的拍摄方法的流程图;
图7a为本申请实施例提供的多帧短曝光图像+长曝光图像的拍摄效果示意图;
图7b为本申请实施例提供的权重曲线示意图;
图7c为本申请实施例提供的曝光融合示意图;
图8为本申请实施例提供的一种电子设备的结构图。
具体实施方式
本申请实施例原理框图如图2所示,用户打开拍照应用后,启动摄像机的预览功能,根据预览图像确定拍摄参数(短曝光量、以及拍摄帧数M),并通过拍摄设备内部设置的ISP将确定的拍摄参数传输至摄像机,控制摄像机采集M(M为大于或等于2的整数)帧短曝光;后续,对M帧短曝光帧在原始(RAW)域进行处理(如多帧时域降噪、单帧时域降噪、局部亮度增强等)得到一帧动态范围高、噪声少的RAW图,并将该RAW图发送至ISP,由ISP处理得到YUV图像;最后,对YUV图像进行联合图像专家小组(Joint Photographic Experts Group,JPEG)编码得到目标图像。如此,可以快速地得到一张高质量的JPEG图像,改善多种应用场景下的拍摄效果。改善拍摄的噪声、动态范围等效果。具体的,其实施方式可参照下述图4或图5所示方案。
为了便于理解,示例的给出了部分与本申请实施例相关概念的说明以供参考。如下所示:
YUV图像:可以指采用YUV编码方法得到的图像,YUV是被欧洲电视系统所采用的一种颜色编码方法。通常,可采用三管彩色摄影机进行取像,然后把取得的彩色图像信号经分色、分别放大校正后得到RGB,再经过矩阵变换电路得到亮度信号Y和两个色差信号R-Y(即U)、B-Y(即V),最后发送端把亮度和色差三个信号分别进行编码,得到YUV图像。
动态范围是指:摄像机对拍摄场景中景物光照反射的适应能力,具体指亮度的变化范围。通常情况下,亮度变化范围较大的图像可以称为高动态范围(High DynamicRange,HDR)图像,亮度变化范围较小的图像可称为低动态范围(Low Dynamic Range,LDR)图像。
曝光量:是指从相机快门打开到关闭的时间间隔,在这一时间内,物体可以在底片上留下影像,曝光时间是看需要而定的,曝光时间越长底片上生成的相片越亮,相反越暗,在外界光线比较暗的情况下一般要求延长曝光时间,曝光时间短则适合光线比较好的情况。通常情况下,短曝光量和长曝光量以正常曝光量为分界线,小于正常曝光量的曝光时间称为短曝光量,大于正常曝光量的曝光时间称为长曝光量。
正常曝光量可以是相机预览图像时候的曝光。通常,可以在YUV空间计算当前图像的Y值的均值,并调节(自动或手动)各种曝光参数设定,当该均值落在一个目标值附近的时候,其曝光参数中的曝光量就认为是正常曝光量。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
本申请实施例提供的拍摄方法可以适用于设置有摄像机的电子设备,其中,该电子设备可以为手机、平板电脑、笔记本电脑、超级移动个人计算机(Ultra-mobile PersonalComputer,UMPC)、上网本、掌上电脑(Personal Digital Assistant,PDA)、摄像机、数码相机、监控等设备。具体的,本申请实施例以电子设备为图3所示手机100为例,对本申请提供的拍摄方法进行介绍。应该理解的是,图示手机100仅是电子设备的一个范例,并且手机100可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
如图3所示,手机100可以包括:处理器101、存储器102、ISP103、摄像机104、触摸屏105等部件,这些部件可通过一根或多根通信总线或信号线(图3中未示出)进行通信。本领域技术人员可以理解,图3中示出的硬件结构并不构成对手机100的限定,手机100可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图3对手机100的各个部件进行具体的介绍:
处理器101是手机100的控制中心,利用各种接口和线路连接手机100的各个部分,通过运行或执行存储在存储器102内的应用程序(Application,App),以及调用存储在存储器102内的数据和指令,执行手机100的各种功能和处理数据。在一些实施例中,处理器101可包括一个或多个处理单元;处理器101还可以集成应用处理器(Application Processor,应用服务器)、调制解调处理器以及数字信号处理器(Digital Signal Processor,DSP);其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信,DSP主要用于将模拟信号转化为数字信号,以及对数字信号的噪声进行过滤等。可以理解的是,上述调制解调处理器、图像处理器也可以不集成到处理器101中。举例来说,处理器101可以是华为技术有限公司制造的麒麟960芯片。
存储器102用于存储应用程序以及数据,处理器101通过运行存储在存储器102的应用程序以及数据,执行手机100的各种功能以及数据处理。存储器102主要包括存储程序区以及存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等);存储数据区可以存储根据使用手机100时所创建的数据(比如音频数据、电话本等)。此外,存储器102可以包括高速随机存取存储器,还可以包括非易失存储器,例如磁盘存储器件、闪存器件或其他易失性固态存储器件等。存储器102可以存储各种操作系统,例如苹果公司所开发的IOS操作系统,谷歌公司所开发的ANDROID操作系统等。
ISP103用于对处理器101中DSP输出的图像进行坏点修补、白平衡、伽马(gamma)校正、锐利度、颜色插值等处理,输出用户应用所需要的图像。ISP103是成像设备性能的决定因素。ISP103可以集成在AP中,也可以是单独的芯片,不予限制。
触摸屏104可称为触控显示面板,用于实现手机100的输入和输出功能,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触摸屏104上或在触摸屏104附近的操作)(如用户按压拍摄按钮的操作),并根据预先设定的程式驱动相应的连接装置,还可用于显示由用户输入的信息或提供给用户的信息(如通过摄像机采集到的图像)以及手机的各种菜单。可选的,触摸屏104可包括触摸检测装置和触摸控制器两个部分,其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器101,并能接收处理器101发来的命令并加以执行。
摄像机105可称为(camera),为具有视频摄像/传播和静态图像捕捉等基本功能的部件,主要用于图像采集。具体的,摄像机105可以包括摄像头和图像传感器,该图像传感器可以为电荷耦合元件(Charge Coupled Device,CCD),还可以为金属氧化物半导体元件(Complementary Metal-Oxide Semiconductor,CMOS)的图像传感器或者其他任一类型的图像传感器。
在一种可能的设计中,手机100拍摄高动态图像的功能时,处理器101获得短曝光量、以及拍摄帧数M,通过ISP103将端曝光量和M发送至摄像机105;并在用户发出拍摄指令后,由处理器101控制摄像机105根据短曝光量和M采集M帧短曝光图像;随后,处理器101对M帧短曝光图像进行多帧时域降噪、空域降噪、局部亮度调整等RAW图处理操作,得到一帧RAW图像;处理器101将该RAW图像发送至ISP103,ISP103将RAW图像转换为YUV图像,处理器101将YUV图像转换为目标图像,如JPEG图像。具体的,该可能的设计可参照图4或图5所示方案。
此外,在本申请各个实施例中,手机100还可以包括光传感器106。具体的,光传感器106可包括环境光传感器及接近传感器,其中,环境光传感器可以感知手机100周围环境光线的明暗,以便手机100根据环境光线的明暗来调节触摸屏104的显示器的亮度等。接近传感器可以感知手机100当前与人体耳朵的接近程度,手机100可以在其移动到耳边时,关闭显示器的电源。此外,手机100还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
手机100还可以包括给各个部件供电的电源装置107(比如电池和电源管理芯片),电池可以通过电源管理芯片与处理器101逻辑相连,从而通过电源装置107实现管理充电、放电、以及功耗管理等功能。
尽管图3未示出,手机100还可以包括蓝牙装置、定位装置、音频电路、扬声器、麦克风、WI-FI装置、近场通信(near field communication,NFC)装置等,在此不再赘述。
以下实施例均可以在具有上述硬件的电子设备(例如手机100)中实现。
如图4或图5所示,为本申请实施例提供的一种拍摄方法的流程图,其中,该方法可以由图3所示手机100执行,以拍摄高动态图像。以图5为例,该方法可以包括S501~S506。
S501:手机的处理器在检测到开机后,自动开启手机中执行本申请提供的用于拍摄高动态图像的功能;或者,手机的处理器在接收到用户发出的开启本申请提供的拍摄功能的操作后,开启手机中执行本申请提供的用于拍摄高动态图像的功能。
比如,在黑夜监控时可以开启本申请实施例提供的拍摄方法,以实施监控。
S502:手机的处理器接收用户发送的打开拍照应用的请求,打开拍照应用,并控制摄像机启动图像预览功能,获取预览图像。
其中,预览图像可以指在用户所要拍摄的图像未成像之前,显示在手机的显示屏上的图像。如:当手机的处理器检测到用户以点击桌面图标或在解锁界面滑动相机快捷图标等方式请求开机相机应用时,手机的处理器控制摄像机对该图像进行捕获、对焦等操作,获取预览图像,进一步的,还可以将捕获到的预览图像显示在手机的显示屏上,供用户预览。
其中,预览图像可以包括多个像素,每个像素对应一个灰度值,该灰度值可以用于表示该像素的亮度,其取值范围可以为0~255,像素的灰度值越大,表示该像素越亮,像素的灰度值越小,表示该像素越暗。
S503:若手机的处理器确定该预览图像为高动态图像,则手机的处理器根据预览图像计算短曝光量,以及拍摄帧数M,其中,M为大于等于2的整数。
具体的,可以获取预览图像的灰度直方图,根据预览图像的灰度直方图,计算预览图像中过曝像素的比例值和欠曝像素的比例值,若过曝像素的比例值大于第一预设值和/或欠曝像素的比例值大于第二预设值,则确定预览图像为高动态范围图像。
其中,过曝像素的比例值大于第一预设值和/或欠曝像素的比例值大于第二预设值可以指:过曝像素的比例值大于第一预设值,或者欠曝像素的比例值大于第二预设值,或者过曝像素的比例值大于第一预设值以及欠曝像素的比例值大于第二预设值。
其中,灰度直方图是对预览图像中像素的亮度级分布的统计,其将预览图像中的所有像素,按照灰阶值灰度值的大小,统计其出现的概率,并以横轴代表预览图像的亮度、纵轴代表预览图像中处于该亮度范围内的像素的相对数量,以形成灰度直方图。通常,横轴从左到右,灰度值从小到大。
过曝像素可以指:灰度值大于过曝阈值的像素;欠曝像素可以指灰度值小于欠曝阈值的像素,过曝阈值、欠曝阈值可以根据需要进行设置,不予限制。通常,对于灰度值的取值范围[0-255]而言,可以定义过曝阈值Tover=235,欠曝阈值Tunder=35,即灰度值为235~255的像素为过曝像素,灰度值为0~35的像素为欠曝像素。
过曝像素的比例值可以指:灰度直方图中[过曝阈值Tover,255]之间的像素占预览图像包括的所有像素的比例,记为Ratio_over;欠曝像素的比例指可以指:灰度直方图中[0,欠曝阈值]之间的像素占预览图像包括的所有像素的比例,记为Ratio_under。通常情况下,为了提高拍摄效果,如果Ratio_over超过第一预设值(比如设置为5%),则表示预览图像存在过曝现象,预览图像的整体亮度反差比较大;反之,Ratio_under超过第二预设值(比如40%),则表示预览图像存在欠曝现象,预览图像的整体亮度反差比较大。例如,如图5a所示,为本申请实施例提供的预览图像的灰度直方图,其中,灰度值低于30的像素的比例值约为0.6+0.18=0.78,显著高于预设值(40%),因此该图像为高动态图像。
具体的,可以计算预览图像的高光区域的亮度平均值,根据高光区域的亮度平均值、预览图像的曝光值、以及目标亮度值,确定短曝光量。其中,高光区域的亮度平均值可以指该高光区域中所有像素的灰度值的总和与该高光区域中所有像素的数量的比值,目标亮度值可以指用户期望达到的亮度。其中,高光区域可以指预览图像中过曝像素所组成的区域,该区域还可称为预览图像的过曝区域,高光区域的亮度平均值大于目标亮度平均值。
示例性的,可以计算目标亮度值与高光区域的亮度平均值的比值,将预览图像的曝光值与该比值的乘积作为短曝光量。例如,如下公式所示,假设高光区域的亮度平均值为Mover,目标亮度值为210,则目标亮度值与平均值Mover的比值Rover作为所要对高光区域进行亮度补偿的下降比率,此时,可以在预览图像的曝光值上E1的基础上,乘以Rover得到短曝光量Etarget:
Etarget=E1*Rover。
具体的,可以计算预览图像中过暗区域的亮度平均值,根据过暗区域的亮度平均值与拍摄帧数间的对应关系,确定拍摄帧数M。其中,过暗区域的亮度平均值可以指该过暗区域中所有像素的灰度值的总和与该过暗区域中所有像素的数量的比值,过暗区域可以指预览图像中欠曝像素所组成的区域,该区域还可称为预览图像的欠曝区域。该对应关系可以为预设的函数关系式。
例如,假设灰度值在[0,64]区间的像素组成的区域为过暗区域,此时,可以计算灰度值在[0,64]区间的像素的亮度平均值Munder,然后,根据下面的公式来设置M,可选的,当平均值Munder小于等于阈值40时,M为6,当Munder大于阈值20小于等于40时,M为4;当Munder大于阈值40时,M为2。
还可以参考拍摄场景来确定拍摄帧数M,所述拍摄场景可以包括白天拍摄、夜晚拍摄、逆光拍摄、夜景拍摄、暗光拍摄、点光源拍摄等任一拍摄场景,当前拍摄场景越亮,设置的拍摄帧数M越小,反之,因图像中噪声水平高,M越大。典型的,M可以设置为2帧或者4帧或者6帧等,如:夜景拍摄时M为6帧,白天拍摄时M为2帧,大逆光拍摄时M设置为4帧等等。
具体的,可以根据当前预览图像的曝光时间ET和感光度ISO的比值、以及预览图像来确定当前拍摄处于哪种拍摄场景,如:当曝光时间ET和ISO的比值R小于某个预设比值(如0.9)时,表明当前拍摄场景为白天拍摄,反之,为夜景拍摄;如果是白天拍摄,并且预览图像中欠曝像素的比例值超过一定阈值(较大的阈值),那么,当前拍摄场景可能为逆光场景;如果是夜景拍摄,并且预览图像中过曝像素的比例值超过一定阈值T1(阈值较小)且小于一定阈值T2(阈值较大),则当前拍摄场景可能为点光源拍摄;如果是夜景拍摄,并且预览图像中过曝像素的比例值小于上述T1,那么可以认为是暗光拍摄。其中,曝光时间ET一般为真实时间的倒数,比如,若当前曝光量为80ms,那么曝光时间ET=1000ms/80ms=12。
S504:手机的控制器将短曝光量和拍摄帧数M通过ISP下发摄像机,当手机的控制器接收到用户发出的拍照指令后,手机的处理器控制摄像机根据短曝光量和拍摄帧数M,拍摄M帧短曝光图像。
具体的,当用户按下手机中摄像机快门的瞬间,手机的处理器控制摄像机基于短曝光量和其他参数(感光度、光圈系数等)采集M帧短曝光图像。
S505:手机的处理器对M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像。
具体的,该步骤中的各个处理过程可参照下面所述。
S506:手机的处理器将RAW图像传输至手机的ISP,手机的ISP对RAW图像进行格式转换得到YUV图像,手机的处理器对IPS处理后的YUV图像进行JPEG编码,得到目标图像。
其中,YUV是一种编码格式,Y代表亮度,U和V是色度。ISP对RAW图像进行格式转换得到YUV图像可以包括:ISP先通过demosaic生成RGB三通道的数据,然后根据下述公式进行RGB到YUV的转换得到YUV图像:Y=0.299R+0.587G+0.115b,U=-0.147R-0.289G+0.436B,V=0.615R-0.515G-0.100B。
其中,将YUV图像进行JPEG编码的可以包括细节回叠、边缘裁剪等处理。具体的,其过程可参照现有技术,不再赘述。
与现有技术相比,图5所示方案中,可以在拍摄高动态图像时,根据预览图像实时地确定出高光区域需要进行补偿的短曝光量以及拍摄帧数,基于确定出的短曝光量和拍摄帧数采集多帧短曝光图像,并对多帧短曝光在RAW域进行多帧降噪处理以及局部亮度调整等处理,得到一帧RAW图;然后,再将得到的RAW图回灌至ISP进行处理,得到YUV图像,并对ISP处理后的YUV图像进行处理得到JPEG图像。首先,本实施例提供的技术方案中,基于当前拍摄的预览图像进行短曝光量和帧数M的计算,保证每一个拍摄场景都可以控制曝光,其次,对多帧短曝光帧在RAW域进行降噪、局部亮度调整等处理,不仅具有更好的噪声表现,而且,通过局部亮度调整使得高光细节保留;此外,该方案中,将处理后的RAW图回灌至ISP处理,由于ISP的处理比较快,大大提高了拍摄效率。
例如,如图6a所示,左图为预览图像的效果图,右图为执行图5所示方案之后拍摄出的图像的效果图,由图6a可以看出,执行图5所示方案之后,高光区域以及过暗区域的细节均得到了改善。
具体的,图5所示方案中,S505可以包括下面(1)~(6)所示过程,其中,(1)~(3)为多帧降噪过程,(4)~(6)为局部亮度调整过程。
(1)从M帧短曝光图像中选出一帧参考图像R。
示例性的,可以获取M帧短曝光图像中每帧图像的对比度,将对比度最高的一帧图像作为参考图像R,以便提升图像融合后的清晰度。
其中,图像的对比度可以用于表征图像的清晰度,对比度越高,图像越清晰。通常,可以计算图像的拉普拉斯(laplacian)梯度的平均值,将该平均值作为图像的对比度。具体的,可以参照现有技术来计算图像的laplacian梯度的平均值,不再赘述。
(2)将第二帧图像与参考图像R进行像素值求差,对匹配的像素点进行逐点平均,得到新的参考图像R1,同时,记录不匹配的像素的位置,存入mask中;
(3)将第三帧图像与R1进行像素值求差,对匹配的像素点进行逐点平均,得到新的参考图像R2,同时,记录不匹配的像素的位置,存入mask中;
(4)对剩余帧重复执行上述动作(3),直至所有帧全部融合,得到时域降噪后的图像R和mask。
其中,第二帧图像可以为除M帧短曝光图像中除参考图像R之外的任一图像,第三帧图像可以为M帧图像中未与参考图像进行像素值求差的的任一图像。
示例性的,设参考图像为R,第二帧图像为M,首先检测R中的特征点,以及M图像中的特征点,将R和M中的特征点进行匹配;然后,计算warp矩阵,利用warp矩阵对M进行变换得到配准后的M′,将R和M′中的特征点进行匹配。其中,特征点可以为R中灰度值发生剧烈变化的像素点或者在图像边缘上曲率较大的点。典型的,特征点可以为SURF特征点。Warp矩阵可称为变换矩阵,或者其他能够将图像进行平移、旋转、缩放等操作,以对图像进行变形的矩阵。
在R和M′中的特征点进行匹配的过程中,如果图像拍摄时存在运动物体,在不同帧的图像中运动物体位置不同,此时,需要通过图像间像素点求差的方式检测出运动的区域,形成鬼影mask,首先进行逐个像素点的亮度差异值diff的计算:
diffxy=abs(Rxy-M′xy)
如果diff超过设定的阈值(比如10),则认为R和M′中处于同一位置(x,v)的两个点并不匹配,将其位置记录下来,生成模板mask,mask中大于0的位置为不匹配的位置。然后对R和M′其余的区域进行平均:
Oxy=(Rxy+M′xy)/2
如此,在融合前进行差异检测,对于差异较小的区域进行平均,降低噪声;对于差异较大的区域(不匹配的区域)不进行平均降噪,此处噪声较大,需要在下一步中空域降噪进行噪声滤除,即步骤(2)中得到的mask可以用于指导后面空域降噪处理的强度。
(3)对单帧图像进行空域降噪,得到空域降噪后的图像。
具体的,可以使用现有常用的非局部均值去噪(Non-Local Means,NLM)等空域降噪方法对时域降噪后的图像进行空域降噪,不再赘述。
对于2)中的鬼影mask,由于没有时域降噪残留噪声较大,需要对该区域加大降噪强度,其降噪强度可以根据需要进行设置,不予限制。
需要说明的是,当预览图像中存在运动区域时,可以执行上述步骤(3)以去除鬼影,当预览图像中不存在运动区域时,可以不需要执行步骤(3),而仅执行步骤(1)~(2)来实现多种降噪处理。本申请实施例中,仅以预览图像中存在运动区域为例进行说明。
(4)对空域降噪后的图像进行高光恢复处理,得到高光恢复图像。
具体的,如图5b所示,可以获取校正矩阵C,根据校正矩阵C对空域降噪后的图像I进行校正处理(即镜头畸变矫正(Lens Shading Correction,LSC)处理),得到校正后图像I′;将图像I与图像I′进行曝光融合,得到高光恢复图像O。
其中,C中每个元素对应一个校正系数r(r>1,越远离中心,r值越大),根据校正矩阵C对空域降噪后的图像I进行校正处理,得到校正后图像I′可以指:将每一个像素Iij乘以C对应点Cij的矫正系数r,得到矫正后的图像I′。
将图像I与图像I′进行曝光融合,得到高光恢复图像O可以包括:根据Of=Wij*Iij+Wij*I′ij计算得到高光恢复图像O中每个像素点的灰度值。其中,Wij为融合权重,其计算过程可参照下述计算权重的过程,只不过,在计算权重Wij时,其权重中心设置为210。
如此,当图像I中某点亮度较高,I′中对应点有可能出现亮度过曝时,可以通过高光恢复的方法保留I中未过曝的细节,或者保留I′中过曝区域的细节。
(5)对空域降噪后的图像进行局部亮度增强处理,得到增强图像。
由于,本申请实施例为了保留过曝部分细节,在曝光计算的时候降低了曝光,因此空域降噪后的图像中的暗部细节信息可能不足,鉴于此,可以采用gamma曲线提亮、Retinex方法等提亮方式对空域降噪后的图像进行提亮,将提亮的图像后与高光恢复图像进行曝光融合,得到暗处、亮度细节都丰富的图像。具体的,其处理如图5c所示,包括:
根据转换公式Gray=R*0.299+G*0.587+B*0.114将空域降噪后的图像转换成灰度图Gray。其中,R\G\B分别指图像的红/绿/蓝通道。
对灰度图Gray进行细节分离,得到基础层(Base层)和细节层D;如:可以通过高斯滤波方法将灰度图Gray分离为Base和细节层D。
对Base层进行动态范围压缩(或称作亮度增强),得到增强的灰度图。具体的,可以通过Retinex方法增强得到增强的灰度图。
如:根据数学模型:r(x,y)=logS(x,y)-log(F(x,y)*S(x,y))得到增强的灰度图,其中,S为空域降噪后的图像,r为增强的结果;F为中心环绕函数,一般定义为一个高斯算子,如:
根据增强的灰度图的图像平均亮度以及预设提亮幅度,确定提亮增益(Gain)。其中,预设提亮幅度可以根据需要进行设置,不予限制。假设图像平均亮度MG,预设提亮幅度为128,此时,可以将MG与128做比较,得到Gain值,如:Gain=128/MG。
根据Gain值对增强的灰度图进行图像提亮,得到提亮的图像。具体的,可以将增强的灰度图中每个像素乘以Gain值,或者根据Gain值直接换算一条gamma曲线进行逐点查表(gamma曲线根据经验预设),提亮图像中的各个像素,得到提亮的图像G_bright。
将Base层、提亮的图像G_bright、以及高光恢复图像O进行曝光融合,得到局部亮度增强的图像B_enhance。
利用分离的细节层D对局部亮度增强的图像B_enhance进行细节增强(即图像相加),得到最终的增强灰度图Genhance。其中,图像相加可以指:将两个图像的处于同一位置上的像素的灰度值进行相加。
根据Gray和Genhance,计算每个像素的增益(gain)系数,并对降噪后的图像中每一个RGGB格式的四通道乘以对应的增益系数,得到最终的增强图像Ienhance。例如,如图5d所示,R\G\B通道每四个构成一组,可以计算得到一个单个的Gray;下面灰度图增强计算后,得到增益系数Ratio=Genhance/Gray,然后,将Ratio乘在R,G,B各通道上。
其中,该步骤中的曝光融合技术可参照下述。
(6)对增强图像Ienhance进行细节回叠。
其中,细节回叠的核心是将原图像表示为基本分量(base layer)与细节分量(detail layer)之和,在此基础上单独增强细节分量并得到增强图像,如将细节分量乘以一个系数后回叠到原图上,其关键在于基本分量的获取。具体的,如图5e所示:
将上述(5)中得到的Ienhance进行高斯滤波得到低频图像I;
根据公式Idetail=Ienhance-I得到细节图像;
设置回叠系数α;得到细节回叠图像Ienhance+I_detail*α
其中,回叠系数α为经验值,一般大于1,通常情况下,图像的锐度越低,回叠系数α越高;图像的锐度越高,回叠系数α越低。
需要说明的是,图5e中每个操作都是对图像每个像素逐点操作。
进一步的,在图5所示方案中,如果预览图像中存在特征区域,如:人脸区域,人像区域,花朵区域,食物等用户期望拍摄到的图像拍摄主体,为了提亮该特征区域成像时的亮度,需要增大短曝光量,即曝光量的时间较长一点,使得预览图像成像时的曝光较高,特征区域中的物体较亮。
以特征区域为人脸为例,可以计算人脸区域的平均亮度值Mface;
计算目标亮度值与高光区域的亮度平均值的比值:
根据计算出的Rover、以及对特征区域进行亮度补偿的最小下降比率Rmin重新设置Rover,然后,在预览图像的曝光值上E1的基础上,乘以设置后的Rover得到短曝光量Etarget。其中,人脸区域的平均亮度值Mface可以指:人脸区域的所有像素的灰度值的总和人脸区域的所有像素的数量的比值;通常情况下,人脸区域的平均亮度值越低,Rover越大(Rover一般小于1)。例如:Rover的最终结果将根据下述Rover和设置的Rmin来确定,就是说,比较Rover是不是比最小值Rmin还小,如果还小就设置为最小值Rmin,不能再小了;如果比最小值Rmin大,那么就是计算出的Rover。
其中,Rmin可以根据不同的人脸区域的平均亮度值Mface进行设置,如下所示,x表示人脸的平均亮度值:
例如,如图6b所示,为拍摄人物的示意图,其中,图6b中左图为预览图像,右图为提亮人脸的曝光值得到的图像,明显的提亮很多。
进一步的,在图5所示方案中,若ISP包括空域降噪模块、镜头畸变矫正LSC模块、以及用于调整亮度的DRC等模块,则在ISP对RAW图像进行YUV格式转换时,还需要关闭这些模块,以避免ISP对图像的重复处理。
进一步的,若预览图像中欠曝像素的比例值大于预设阈值,则表示预览图像中的过暗区域比较大,此时,可以确定长曝光量,根据长曝光量控制摄像机采集一帧长曝光图像,将M帧短曝光图像和该长曝光图像融合,以改善暗区细节。例如,如图7所示,为多帧短曝光图像与长曝光图像的流程示意图。
具体的,可以计算预览图像的过暗区域的亮度平均值,根据过暗区域的亮度平均值、预览图像的曝光值、以及目标亮度值,确定长曝光量。其中,过暗区域的亮度平均值可以指该过暗区域中所有像素的灰度值的总和与该过暗区域中所有像素的数量的比值,过暗区域的亮度平均值小于目标亮度值。
如:可以计算目标亮度值与过暗区域的亮度平均值的比值,将预览图像的曝光值与该比值的乘积作为长曝光量。例如,假设过暗区域的亮度平均值为Munder,目标亮度值为210,则目标亮度值与平均值Munder的比值Runder作为所要对欠曝区域提亮进行的升高比率,为补偿值,此时,可以在预览图像的曝光值E1上乘以Runder得到长曝光量Etarget。
Etarget=E1*Runder
例如,如图7a所示,左图为单纯多帧短曝光效果图,右图为多帧短曝光图像和一帧长曝光图像融合后的效果图,由图7a可以看出,增加一帧长曝光图像后,过暗区域的细节得到了改善。
其中,在图7所示方案中,对长曝光图像的多帧时域降噪、空域降噪的过程可参照图5中对短曝光图像的多帧时域降噪、空域降噪过程,不再赘述。
具体的,上述提及的曝光融合,以及图7所示方案中对长曝光图像空域降噪后的图像和局部亮度调整后的图像进行曝光融合可参照下述:
定义权重中心。优选的,可以设置c=128。
例如,如图7b所示,灰度值越靠近128,权重越接近1,越远离128的区域(比如过曝255或者死黑区域0的地方)权重越小,对最终结果共享越小。
根据权重对多张图像进行加权求和,其中ij表示像素点位置,k表示不同的亮度的图像。
例如,如图7c所示,左上三列分别为短曝光输入图,中曝光输入图,长曝光输入图;左下三列分别为短曝光权重图,中曝光权重图,长曝光权重图;最后侧大图为左侧不同曝光图像根据他们各自的权重加权图进行曝光融合的结果,由图7c可知,图像和其权重加权图像进行曝光融合后,该图像的亮部和暗部细节均得到了很好的展现。
进一步的,在多帧短曝光图像和一帧长曝光图像融合的过程中,当长曝光图像出现模糊或者重影等问题,则丢弃长曝光图像,仅对多帧短曝光图像进行融合处理(即执行图5所示方案),以便将质量较差的长曝光图像融合影响整个图像的质量。
需要说明的是,在预览图像中,一旦存在过曝像素,或者存在典型的过曝像素的时候,可以选择图4或图5所示的多帧短曝光融合方案,以提高图像的高光部分的细节;反之,如果图像不存在任何过曝像素,而是预览图像的整张图像都是欠曝的(比如漆黑的夜晚),则可以确定长曝光量,执行下述长曝光图像的融合方案。换言之,就是预览图像太亮时,采用图4或图5所示的多帧短曝光融合的拍摄方案,预览图像太黑时,采用多帧长曝光融合的拍摄方案;预览图像有亮有黑,可以采用图7所示多帧短曝光融合+一帧长曝光图像融合的拍摄方案。
其中,多帧长曝光融合的拍摄方案为:用户打开拍照应用后,启动摄像机的预览功能,根据预览图像确定拍摄参数(长曝光量、以及拍摄帧数N),并通过拍摄设备内部设置的图像信号处理器(INage Signal Processor,ISP)将确定的拍摄参数传输至摄像机,控制摄像机采集N帧长曝光图像;后续,对N帧长曝光帧在RAW域进行处理(如多帧降噪、局部亮度增强等)得到一帧动态范围高、噪声少的RAW图,并将该RAW图发送至ISP,由ISP处理得到YUV图像;最后,对YUV图像进行联合图像专家小组(Joint Photographic Experts Group,JPEG)编码得到目标图像。如此,可以快速地得到一张高质量的JPEG图像,改善多种应用场景下的拍摄效果。改善拍摄的噪声、动态范围等效果。具体的,该方案中的多帧降噪、局部亮度增强等过程可参照上述,不再赘述。
其中,根据预览图像确定拍摄参数(长曝光量、以及拍摄帧数N)的过程可参照上述S503。如:对于图像整体欠曝的情况(比如夜景无光源的时候),亮度范围在[210,225]之间的像素的亮度平均值Mover可能小于预设目标值210,此时,可以设置新的目标值Tnew,将目标值Tnew与亮度平均值Mover的比值Rover作为所要对高光区域进行亮度补偿的上升比率Rover,Rover可能大于1,也就是说设定的曝光将比预览图像的曝光时间更长,随后,在预览图像的曝光值E1上的基础上,乘以Rover得到长曝光量Etarget:
Etarget=E1*Rover
可以理解的是,为了实现上述功能,电子设备包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备、服务器进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本申请实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图8示出了上述实施例中涉及的电子设备的一种可能的组成示意图,如图8所示,该电子设备80可以包括:计算单元801、拍摄控制单元802和图像处理单元803。
其中,计算单元801,用于根据预览图像计算短曝光量,以及拍摄帧数M,以支持电子设备执行S503。
拍摄控制单元802,用于将所述短曝光量和所述拍摄帧数M通过所述ISP下发至摄像机,并控制所述摄像机根据所述短曝光量和所述拍摄帧数M采集M帧短曝光图像;以支持电子设备执行S504。
图像处理单元803,用于对所述M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像,将所述RAW图像发送至所述ISP进行处理,得到YUV图像,对所述YUV图像进行压缩编码,得到目标图像。以支持电子设备执行S505和S506。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。本申请实施例提供的电子设备,用于执行上述拍摄方法,因此可以达到与上述拍摄方法相同的效果。
在采用集成的单元的情况下,可将上述计算单元801、拍摄控制单元802和图像处理单元803集成为处理模块,其中,处理模块用于对电子设备的动作进行控制管理,例如,处理模块用于支持电子设备执行图5中的步骤S501~S506,和/或用于本文所描述的技术的其它过程。此外,上述电子设备还可以包括显示模块和存储模块。
存储模块用于存储电子设备的程序代码、录制的视频以及视频的各项参数信息。
其中,处理模块可以是处理器或控制器,例如可以是CPU,图形处理器(graphicsprocessing unit,GPU),通用处理器,数字信号处理器(digital signal processor,DSP),专用集成电路(application-specific integrated circuit,ASIC),FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等等。
显示模块可以为显示器,可以用于显示由用户输入的信息、提供给用户的信息以及终端的各种菜单的设备,具体可以采用液晶显示器、有机发光二极管等形式来配置显示器。另外,显示器上还可以集成触控板,用于采集在其上或附近的触摸事件,并将采集到的触摸信息发送给其他器件(例如处理器等)。
存储模块可以是存储器,该存储器可以包括高速RAM,还可以包括非易失存储器,例如磁盘存储器件、闪存器件或其他易失性固态存储器件等。
此外,电子设备还可以包括通信模块,可以用于支持电子设备与其他网络实体的通信,例如与服务器之间的通信。该通信模块具体可以为射频电路、蓝牙芯片、WIFI芯片等与其他电子设备交互的设备。
在一种具体实现中,当处理模块为处理器,显示模块为触摸屏,存储模块为存储器时,本申请实施例所涉及的电子设备具体可以为图3所示的手机。
本申请实施例还提供一种计算机存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,该电子设备执行上述相关方法步骤实现上述实施例中的拍摄方法。
本申请实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关方法步骤,以实现上述实施例中的拍摄方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的拍摄方法。
其中,本申请实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上内容,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种拍摄方法,应用于包括摄像机和图像信号处理器ISP的电子设备,其特征在于,所述方法包括:
根据预览图像计算短曝光量,以及拍摄帧数M,其中,所述预览图像为高动态范围图像,所述M为大于等于2的整数;
将所述短曝光量和所述拍摄帧数M通过所述ISP下发至摄像机,并控制所述摄像机根据所述短曝光量和所述拍摄帧数M采集M帧短曝光图像;
对所述M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像;
将所述RAW图像发送至所述ISP进行处理,得到YUV图像;
对所述YUV图像进行压缩编码,得到目标图像。
2.根据权利要求1所述的方法,其特征在于,所述根据预览图像计算短曝光量,包括:
计算所述预览图像的高光区域的亮度平均值;其中,所述高光区域指所述预览图像中过曝像素所组成的区域;
根据所述高光区域的亮度平均值、所述预览图像的曝光值、以及目标亮度值,确定所述短曝光量;其中,所述高光区域的亮度平均值为所述高光区域中所有像素的灰度值的总和与该高光区域中所有像素的数量的比值,所述目标亮度值为用户期望达到的亮度,所述高光区域的亮度平均值大于所述目标亮度平均值。
3.根据权利要求1所述的方法,其特征在于,若所述预览图像包括特征区域,则所述根据预览图像计算短曝光量,包括:
计算所述预览图像的特征区域的亮度平均值;其中,所述特征区域指所述预览图像用户期望拍摄到的图像拍摄主体;
根据所述特征区域的亮度平均值和目标亮度值计算所述特征区域的第一亮度下降比率;其中,所述目标亮度值为用户期望达到的亮度;
根据计算出的所述第一亮度下降比率、以及预设的对所述特征区域进行亮度补偿的最小下降比率,确定所述特征区域的第二亮度下降比率;所述第二亮度下降比率大于等于所述最小下降比率;
根据所述预览图像的曝光值、以及所述第二亮度下降比率,确定所述短曝光量。
4.根据权利要求1-3任一项所述的方法,其特征在于,对所述M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像,包括:
当所述预览图像中欠曝像素的比例值大于预设阈值时,计算所述预览图像的过暗区域的亮度平均值;
根据所述过暗区域的亮度平均值、所述预览图像的曝光值、以及所述目标亮度值,确定长曝光量;其中,所述过暗区域的亮度平均值指该过暗区域中所有像素的灰度值的总和与该过暗区域中所有像素的数量的比值,所述过暗区域的亮度平均值小于目标亮度值;
控制所述摄像机采集一帧长曝光图像;
将对所述M帧短曝光图像进行多帧降噪处理、局部亮度调整的图像与所述长曝光图像进行曝光融合,得到一帧RAW图像。
5.一种电子设备,所述电子设备包括摄像机和图像信号处理器ISP,其特征在于,所述电子设备还包括:
计算单元,用于根据预览图像计算短曝光量,以及拍摄帧数M,其中,所述预览图像为高动态范围图像,所述M为大于等于2的整数;
拍摄控制单元,用于将所述短曝光量和所述拍摄帧数M通过所述ISP下发至摄像机,并控制所述摄像机根据所述短曝光量和所述拍摄帧数M采集M帧短曝光图像;
图像处理单元,用于对所述M帧短曝光图像进行多帧降噪处理、局部亮度调整,得到一帧RAW图像;将所述RAW图像发送至所述ISP进行处理,得到YUV图像;对所述YUV图像进行压缩编码,得到目标图像。
6.根据权利要求5所述的电子设备,其特征在于,所述计算单元,具体用于:
计算所述预览图像的高光区域的亮度平均值;其中,所述高光区域指所述预览图像中过曝像素所组成的区域;
根据所述高光区域的亮度平均值、所述预览图像的曝光值、以及目标亮度值,确定所述短曝光量;其中,所述高光区域的亮度平均值为所述高光区域中所有像素的灰度值的总和与该高光区域中所有像素的数量的比值,所述目标亮度值为用户期望达到的亮度,所述高光区域的亮度平均值大于所述目标亮度平均值。
7.根据权利要求5所述的电子设备,其特征在于,所述计算单元,具体用于:
若所述预览图像包括特征区域,计算所述预览图像的特征区域的亮度平均值;其中,所述特征区域指所述预览图像用户期望拍摄到的图像拍摄主体;
根据所述特征区域的亮度平均值和目标亮度值计算所述特征区域的第一亮度下降比率;其中,所述目标亮度值为用户期望达到的亮度;
根据计算出的所述第一亮度下降比率、以及预设的对所述特征区域进行亮度补偿的最小下降比率,确定所述特征区域的第二亮度下降比率;所述第二亮度下降比率大于等于所述最小下降比率;
根据所述预览图像的曝光值、以及所述第二亮度下降比率,确定所述短曝光量。
8.根据权利要求5-7任一项所述的电子设备,其特征在于,
所述计算单元,还用于当所述预览图像中欠曝像素的比例值大于预设阈值时,计算所述预览图像的过暗区域的亮度平均值;
所述拍摄控制单元,还用于根据所述过暗区域的亮度平均值、所述预览图像的曝光值、以及所述目标亮度值,确定长曝光量;其中,所述过暗区域的亮度平均值指该过暗区域中所有像素的灰度值的总和与该过暗区域中所有像素的数量的比值,所述过暗区域的亮度平均值小于目标亮度值;控制所述摄像机采集一帧长曝光图像;
所述图像处理单元,具体用于将对所述M帧短曝光图像进行多帧降噪处理、局部亮度调整的图像与所述长曝光图像进行曝光融合,得到一帧RAW图像。
9.一种电子设备,其特征在于,包括一个或多个处理器和一个或多个存储器;
所述一个或多个存储器与所述一个或多个处理器耦合,所述一个或多个存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,当所述一个或多个处理器执行所述计算机指令时,所述电子设备执行如权利要求1-4任一项所述的拍摄方法。
10.一种计算机存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1-4任一项所述的拍摄方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2018/080734 WO2019183813A1 (zh) | 2018-03-27 | 2018-03-27 | 一种拍摄方法及设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111418201A CN111418201A (zh) | 2020-07-14 |
CN111418201B true CN111418201B (zh) | 2021-10-15 |
Family
ID=68060880
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880077221.5A Active CN111418201B (zh) | 2018-03-27 | 2018-03-27 | 一种拍摄方法及设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN111418201B (zh) |
WO (1) | WO2019183813A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116847204A (zh) * | 2023-08-25 | 2023-10-03 | 荣耀终端有限公司 | 一种目标识别方法、电子设备及存储介质 |
Families Citing this family (58)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112819702B (zh) * | 2019-11-15 | 2024-02-20 | 北京金山云网络技术有限公司 | 图像增强方法、装置、电子设备及计算机可读存储介质 |
CN112907454B (zh) * | 2019-11-19 | 2023-08-08 | 杭州海康威视数字技术股份有限公司 | 获取图像的方法、装置、计算机设备和存储介质 |
CN112991188B (zh) * | 2019-12-02 | 2023-06-27 | RealMe重庆移动通信有限公司 | 图像处理方法及装置、存储介质、电子设备 |
CN113037988B (zh) * | 2019-12-09 | 2022-10-25 | Oppo广东移动通信有限公司 | 变焦方法、电子装置和计算机可读存储介质 |
CN111127529B (zh) * | 2019-12-18 | 2024-02-02 | 浙江大华技术股份有限公司 | 图像配准方法及装置、存储介质、电子装置 |
CN111145151B (zh) * | 2019-12-23 | 2023-05-26 | 维沃移动通信有限公司 | 一种运动区域确定方法及电子设备 |
CN111242860B (zh) * | 2020-01-07 | 2024-02-27 | 影石创新科技股份有限公司 | 超级夜景图像的生成方法、装置、电子设备及存储介质 |
CN111310727B (zh) * | 2020-03-13 | 2023-12-08 | 浙江大华技术股份有限公司 | 对象检测方法及装置、存储介质、电子装置 |
CN111405205B (zh) * | 2020-03-24 | 2023-02-24 | 维沃移动通信有限公司 | 图像处理方法和电子设备 |
CN111915505B (zh) * | 2020-06-18 | 2023-10-27 | 北京迈格威科技有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN113873178B (zh) * | 2020-06-30 | 2024-03-22 | Oppo广东移动通信有限公司 | 多媒体处理芯片、电子设备和图像处理方法 |
CN111866407A (zh) * | 2020-07-30 | 2020-10-30 | 深圳市阿达视高新技术有限公司 | 一种基于运动数码摄像机的图像处理方法及装置 |
CN112017137B (zh) * | 2020-08-19 | 2024-02-27 | 深圳市锐尔觅移动通信有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
CN112381836B (zh) * | 2020-11-12 | 2023-03-31 | 贝壳技术有限公司 | 图像处理方法和装置、计算机可读存储介质、电子设备 |
CN112598609A (zh) * | 2020-12-09 | 2021-04-02 | 普联技术有限公司 | 一种动态图像的处理方法及装置 |
CN112804464B (zh) * | 2020-12-30 | 2023-05-09 | 北京格视科技有限公司 | 一种hdr图像生成方法、装置、电子设备及可读存储介质 |
CN112580385B (zh) * | 2020-12-31 | 2022-05-10 | 杭州荣旗科技有限公司 | 一种基于多帧图像融合和非局部均值滤波的条码解码方法 |
CN114760480A (zh) * | 2021-01-08 | 2022-07-15 | 华为技术有限公司 | 图像处理方法、装置、设备及存储介质 |
CN112950489B (zh) * | 2021-01-12 | 2023-11-03 | 辽宁省视讯技术研究有限公司 | 一种基于多次曝光的三维场降噪的方法 |
US11671715B2 (en) | 2021-01-14 | 2023-06-06 | Qualcomm Incorporated | High dynamic range technique selection for image processing |
CN112651899A (zh) * | 2021-01-15 | 2021-04-13 | 北京小米松果电子有限公司 | 图像处理方法及装置、电子设备、存储介质 |
CN114827430A (zh) * | 2021-01-19 | 2022-07-29 | Oppo广东移动通信有限公司 | 一种图像处理方法、芯片及电子设备 |
CN112785537A (zh) * | 2021-01-21 | 2021-05-11 | 北京小米松果电子有限公司 | 图像处理方法、装置以及存储介质 |
CN113012081A (zh) * | 2021-01-28 | 2021-06-22 | 北京迈格威科技有限公司 | 图像处理方法、装置和电子系统 |
CN112954136B (zh) * | 2021-01-29 | 2023-05-19 | 中国科学院长春光学精密机械与物理研究所 | 抑制航空斜视远距离成像遥感图像散粒噪声的方法及装置 |
CN114979500B (zh) * | 2021-02-26 | 2023-08-08 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理装置、电子设备及可读存储介质 |
CN112969055B (zh) * | 2021-03-01 | 2022-11-08 | 天地伟业技术有限公司 | 一种针对全局监控的多曝光方法 |
CN115514876B (zh) * | 2021-06-23 | 2023-09-01 | 荣耀终端有限公司 | 图像融合方法、电子设备、存储介质及计算机程序产品 |
CN113473014B (zh) * | 2021-06-30 | 2022-11-18 | 北京紫光展锐通信技术有限公司 | 一种图像数据处理方法和电子设备 |
CN115696059A (zh) * | 2021-07-28 | 2023-02-03 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN113810603B (zh) * | 2021-08-12 | 2022-09-09 | 荣耀终端有限公司 | 点光源图像检测方法和电子设备 |
CN114095666B (zh) * | 2021-08-12 | 2023-09-22 | 荣耀终端有限公司 | 拍照方法、电子设备和计算机可读存储介质 |
CN115706870B (zh) * | 2021-08-12 | 2023-12-26 | 荣耀终端有限公司 | 视频处理方法、装置、电子设备和存储介质 |
CN113706495B (zh) * | 2021-08-23 | 2022-11-22 | 广东奥普特科技股份有限公司 | 一种在传送带上自动检测锂电池参数的机器视觉检测系统 |
CN113747062B (zh) * | 2021-08-25 | 2023-05-26 | Oppo广东移动通信有限公司 | Hdr场景检测方法与装置、终端及可读存储介质 |
CN113835462A (zh) * | 2021-09-13 | 2021-12-24 | 星宸科技股份有限公司 | 影像传感器的控制电路及控制方法 |
CN113962884B (zh) * | 2021-10-10 | 2023-03-24 | 杭州知存智能科技有限公司 | Hdr视频获取方法、装置、电子设备以及存储介质 |
CN113822819B (zh) * | 2021-10-15 | 2023-10-27 | Oppo广东移动通信有限公司 | Hdr场景检测方法与装置、终端及可读存储介质 |
CN113905185B (zh) * | 2021-10-27 | 2023-10-31 | 锐芯微电子股份有限公司 | 图像处理方法和装置 |
CN114264835B (zh) * | 2021-12-22 | 2023-11-17 | 上海集成电路研发中心有限公司 | 一种测量风扇转速的方法、装置和芯片 |
CN116437222B (zh) * | 2021-12-29 | 2024-04-19 | 荣耀终端有限公司 | 图像处理方法与电子设备 |
CN116416122B (zh) * | 2021-12-31 | 2024-04-16 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
CN116452475A (zh) * | 2022-01-10 | 2023-07-18 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
CN114022484B (zh) * | 2022-01-10 | 2022-04-29 | 深圳金三立视频科技股份有限公司 | 一种点光源场景的图像清晰度值计算方法及终端 |
CN115526786B (zh) * | 2022-01-25 | 2023-10-20 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
CN116723409A (zh) * | 2022-02-28 | 2023-09-08 | 荣耀终端有限公司 | 自动曝光方法与电子设备 |
WO2023160220A1 (zh) * | 2022-02-28 | 2023-08-31 | 荣耀终端有限公司 | 一种图像处理方法和电子设备 |
CN114666512B (zh) * | 2022-03-25 | 2023-06-27 | 四川创安微电子有限公司 | 一种快速自动曝光的调节方法及系统 |
CN114511469B (zh) * | 2022-04-06 | 2022-06-21 | 江苏游隼微电子有限公司 | 一种图像智能降噪先验检测方法 |
CN115278046A (zh) * | 2022-06-15 | 2022-11-01 | 维沃移动通信有限公司 | 拍摄方法、装置、电子设备和存储介质 |
CN114897745B (zh) * | 2022-07-14 | 2022-12-20 | 荣耀终端有限公司 | 一种扩展图像动态范围的方法及电子设备 |
CN115002356A (zh) * | 2022-07-19 | 2022-09-02 | 深圳市安科讯实业有限公司 | 基于数字视频摄影用夜视方法 |
CN116095517B (zh) * | 2022-08-31 | 2024-04-09 | 荣耀终端有限公司 | 虚化方法、终端设备和可读存储介质 |
CN115767262B (zh) * | 2022-10-31 | 2024-01-16 | 华为技术有限公司 | 拍照方法及电子设备 |
CN116389898B (zh) * | 2023-02-27 | 2024-03-19 | 荣耀终端有限公司 | 图像处理方法、设备及存储介质 |
CN117278864B (zh) * | 2023-11-15 | 2024-04-05 | 荣耀终端有限公司 | 图像拍摄方法、电子设备及存储介质 |
CN117499779A (zh) * | 2023-12-27 | 2024-02-02 | 荣耀终端有限公司 | 一种图像预览方法、设备以及存储介质 |
CN117714890A (zh) * | 2024-02-18 | 2024-03-15 | 荣耀终端有限公司 | 一种曝光补偿方法、电子设备及存储介质 |
Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101399924A (zh) * | 2007-09-25 | 2009-04-01 | 展讯通信(上海)有限公司 | 基于亮度直方图的自动曝光方法和装置 |
JP2009153046A (ja) * | 2007-12-21 | 2009-07-09 | Sanyo Electric Co Ltd | ぶれ補正装置及び方法並びに撮像装置 |
CN102131056A (zh) * | 2010-01-15 | 2011-07-20 | 奥林巴斯映像株式会社 | 摄像装置和摄像方法 |
CN102724400A (zh) * | 2011-03-28 | 2012-10-10 | 佳能株式会社 | 图像处理设备及其控制方法 |
CN102741883A (zh) * | 2010-02-04 | 2012-10-17 | 微软公司 | 高动态范围图像生成和渲染 |
US8482620B2 (en) * | 2008-03-11 | 2013-07-09 | Csr Technology Inc. | Image enhancement based on multiple frames and motion estimation |
US9064313B2 (en) * | 2012-09-28 | 2015-06-23 | Intel Corporation | Adaptive tone map to a region of interest to yield a low dynamic range image |
CN104917973A (zh) * | 2014-03-11 | 2015-09-16 | 宏碁股份有限公司 | 动态曝光调整方法及其电子装置 |
CN105578068A (zh) * | 2015-12-21 | 2016-05-11 | 广东欧珀移动通信有限公司 | 一种高动态范围图像的生成方法、装置及移动终端 |
CN105812670A (zh) * | 2016-05-12 | 2016-07-27 | 珠海市魅族科技有限公司 | 一种拍照的方法及终端 |
CN105872148A (zh) * | 2016-06-21 | 2016-08-17 | 维沃移动通信有限公司 | 一种高动态范围图像的生成方法及移动终端 |
CN106791475A (zh) * | 2017-01-23 | 2017-05-31 | 上海兴芯微电子科技有限公司 | 曝光调整方法及所适用的车载摄像装置 |
CN107483836A (zh) * | 2017-09-27 | 2017-12-15 | 维沃移动通信有限公司 | 一种拍摄方法及移动终端 |
CN107592453A (zh) * | 2017-09-08 | 2018-01-16 | 维沃移动通信有限公司 | 一种拍摄方法及移动终端 |
KR20180027047A (ko) * | 2016-09-05 | 2018-03-14 | 엘지전자 주식회사 | Hdr 영상 촬영 장치 및 그 제어 방법 |
CN107809593A (zh) * | 2017-11-13 | 2018-03-16 | 广东欧珀移动通信有限公司 | 拍摄图像的方法、装置、终端和存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102075688B (zh) * | 2010-12-28 | 2012-07-25 | 青岛海信网络科技股份有限公司 | 单帧双曝光图像宽动态处理方法 |
-
2018
- 2018-03-27 WO PCT/CN2018/080734 patent/WO2019183813A1/zh active Application Filing
- 2018-03-27 CN CN201880077221.5A patent/CN111418201B/zh active Active
Patent Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101399924A (zh) * | 2007-09-25 | 2009-04-01 | 展讯通信(上海)有限公司 | 基于亮度直方图的自动曝光方法和装置 |
JP2009153046A (ja) * | 2007-12-21 | 2009-07-09 | Sanyo Electric Co Ltd | ぶれ補正装置及び方法並びに撮像装置 |
US8482620B2 (en) * | 2008-03-11 | 2013-07-09 | Csr Technology Inc. | Image enhancement based on multiple frames and motion estimation |
CN102131056A (zh) * | 2010-01-15 | 2011-07-20 | 奥林巴斯映像株式会社 | 摄像装置和摄像方法 |
CN102741883A (zh) * | 2010-02-04 | 2012-10-17 | 微软公司 | 高动态范围图像生成和渲染 |
CN102724400A (zh) * | 2011-03-28 | 2012-10-10 | 佳能株式会社 | 图像处理设备及其控制方法 |
US9064313B2 (en) * | 2012-09-28 | 2015-06-23 | Intel Corporation | Adaptive tone map to a region of interest to yield a low dynamic range image |
CN104917973A (zh) * | 2014-03-11 | 2015-09-16 | 宏碁股份有限公司 | 动态曝光调整方法及其电子装置 |
CN105578068A (zh) * | 2015-12-21 | 2016-05-11 | 广东欧珀移动通信有限公司 | 一种高动态范围图像的生成方法、装置及移动终端 |
CN105812670A (zh) * | 2016-05-12 | 2016-07-27 | 珠海市魅族科技有限公司 | 一种拍照的方法及终端 |
CN105872148A (zh) * | 2016-06-21 | 2016-08-17 | 维沃移动通信有限公司 | 一种高动态范围图像的生成方法及移动终端 |
KR20180027047A (ko) * | 2016-09-05 | 2018-03-14 | 엘지전자 주식회사 | Hdr 영상 촬영 장치 및 그 제어 방법 |
CN106791475A (zh) * | 2017-01-23 | 2017-05-31 | 上海兴芯微电子科技有限公司 | 曝光调整方法及所适用的车载摄像装置 |
CN107592453A (zh) * | 2017-09-08 | 2018-01-16 | 维沃移动通信有限公司 | 一种拍摄方法及移动终端 |
CN107483836A (zh) * | 2017-09-27 | 2017-12-15 | 维沃移动通信有限公司 | 一种拍摄方法及移动终端 |
CN107809593A (zh) * | 2017-11-13 | 2018-03-16 | 广东欧珀移动通信有限公司 | 拍摄图像的方法、装置、终端和存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116847204A (zh) * | 2023-08-25 | 2023-10-03 | 荣耀终端有限公司 | 一种目标识别方法、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111418201A (zh) | 2020-07-14 |
WO2019183813A1 (zh) | 2019-10-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111418201B (zh) | 一种拍摄方法及设备 | |
CN109345485B (zh) | 一种图像增强方法、装置、电子设备及存储介质 | |
US9077913B2 (en) | Simulating high dynamic range imaging with virtual long-exposure images | |
EP2368226B1 (en) | High dynamic range image combining | |
WO2020034737A1 (zh) | 成像控制方法、装置、电子设备以及计算机可读存储介质 | |
CN110033418B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
US9131201B1 (en) | Color correcting virtual long exposures with true long exposures | |
CN111028189A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
US8208039B2 (en) | Image processing apparatus and computer-readable medium | |
CN110198417A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
KR20150099302A (ko) | 전자 장치와, 그의 제어 방법 | |
WO2020034702A1 (zh) | 控制方法、装置、电子设备和计算机可读存储介质 | |
US11601600B2 (en) | Control method and electronic device | |
CN110047060B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN113810590A (zh) | 图像处理方法、电子设备、介质和系统 | |
JP6873679B2 (ja) | 撮像装置、撮像装置の制御方法及びプログラム | |
WO2022151852A1 (zh) | 图像处理方法、装置、系统、电子设备以及存储介质 | |
CN112950499B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
EP3889883A1 (en) | Image processing method and device, mobile terminal, and storage medium | |
JP6534780B2 (ja) | 撮像装置、撮像方法、およびプログラム | |
JP2015139082A (ja) | 画像処理装置、画像処理方法、プログラム、および電子機器 | |
US9288461B2 (en) | Apparatus and method for processing image, and computer-readable storage medium | |
JP6492452B2 (ja) | 制御システム、撮像装置、制御方法およびプログラム | |
CN112785537A (zh) | 图像处理方法、装置以及存储介质 | |
CN116055855B (zh) | 图像处理方法及其相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |