CN115696066A - 图像处理方法及电子设备 - Google Patents

图像处理方法及电子设备 Download PDF

Info

Publication number
CN115696066A
CN115696066A CN202110862047.9A CN202110862047A CN115696066A CN 115696066 A CN115696066 A CN 115696066A CN 202110862047 A CN202110862047 A CN 202110862047A CN 115696066 A CN115696066 A CN 115696066A
Authority
CN
China
Prior art keywords
image
images
motion
determining
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110862047.9A
Other languages
English (en)
Inventor
郑耀国
吴天航
杨坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202110862047.9A priority Critical patent/CN115696066A/zh
Publication of CN115696066A publication Critical patent/CN115696066A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

本申请涉及一种图像处理方法及电子设备,应用于电子设备,所述方法包括:判断被摄对象和所述电子设备之间是否存在相对运动;当所述被摄对象和所述电子设备之间存在相对运动时,所述电子设备生成一帧第二图像和至少一帧第三图像,所述第二图像对应的曝光参数为第一曝光参数,所述第一曝光参数包括第二快门速度和第二感光度,所述第二快门速度为第一快门速度的1/N,所述第二感光度为所述第一感光度的N倍,所述第三图像对应的曝光参数为所述初始曝光参数;将一帧所述第二图像和至少一帧所述第三图像融合为第四图像。本申请的图像处理方法可以保证被摄对象和电子设备之间存在相对运动时,电子设备可以拍摄到清晰度高且噪声小的图像。

Description

图像处理方法及电子设备
技术领域
本申请实施例涉及终端技术领域,尤其涉及一种图像处理方法及电子设备。
背景技术
当前电子设备基本都配置了摄像头,可以通过相机应用启动摄像头实现拍摄照片的功能。当用户拍摄场景亮度欠佳,摄像头的拍摄范围内存在处于正在运动的物体,即拍摄场景为运动场景时,照片会存在不同程度的模糊,电子设备的抖动也会使拍摄的照片出现模糊的情况。
由于电子设备的摄像头通常具有固定的光圈。在摄像头的光圈固定的情况下,根据成像原理,如果要获取物体在运动状态下更清晰的图像照片,需要降低曝光时间(相当于提高快门速度),使单位曝光时间内的运动累积更小,这样照片图像记录单位曝光时间内的物体的运动变化也越少,进而照片图像会更加清晰。
但是降低曝光时间会使照片图像的亮度相应的降低,在此基础上为了提高照片图像亮度,需要提高曝光ISO(International Organization for Standardization,光感度),但是提高曝光ISO会显著增加照片图像的噪声。也就是说,通过提高曝光ISO,会得到一张运动模糊程度降低但图像噪声加重的照片图像,对于单帧输入图像无法从根本上同时解决照片模糊及噪声问题。
发明内容
本申请实施例提供一种图像处理方法及电子设备。本申请的图像处理方法可以保证被摄对象和电子设备之间存在相对运动时,电子设备可以拍摄到清晰度高且噪声小的图像。
第一方面,提供一种图像处理方法,应用与电子设备,所述方法包括:
所述显示屏显示预览界面,所述预览界面包括第一图像,所述第一图像为在初始曝光参数下通过所述摄像头采集的被摄对象的图像,所述摄像头的初始曝光参数为第一快门速度和第一感光度;
判断所述被摄对象和所述电子设备之间是否存在相对运动;
当所述被摄对象和所述电子设备之间存在相对运动时,所述电子设备生成一帧第二图像和至少一帧第三图像,所述第二图像对应的曝光参数为第一曝光参数,所述第一曝光参数包括第二快门速度和第二感光度,所述第二快门速度为第一快门速度的1/N,所述第二感光度为所述第一感光度的N倍,所述第三图像对应的曝光参数为所述初始曝光参数;
将一帧所述第二图像和至少一帧所述第三图像融合为第四图像。
本申请实施例利用多帧融合的方法,保证被摄对象和电子设备之间存在相对运动时,电子设备可以拍摄到清晰度高且噪声小的图像。
在一种可能的设计中,为了便于确定是否存在相对运动,所述判断被摄对象和所述电子设备之间是否存在相对运动的步骤包括:获取预览流;根据所述预览流,判断被摄对象和所述电子设备之间是否存在相对运动。
在一种可能的设计中,所述根据所述预览流,判断被摄对象和所述电子设备之间是否存在相对运动的步骤包括:
所述预览流包括至少两个所述第一图像;
判断所述预览流中相邻的两帧第一图像之间是否发生变化;
统计所述预览流中发生变化的第一图像的数量;
计算所述预览流中发生变化的第一图像的数量占可发生变化第一图像数量的图像比例;
判断所述图像比例是否大于预设图像比例;
如果所述图像比例大于预设图像比例,则确定所述被摄对象和所述电子设备之间存在相对运动;
如果所述图像比例不大于预设图像比例,则确定所述被摄对象和所述电子设备之间不存在相对运动。
在一种可能的设计中,所述判断所述预览流中相邻的两帧第一图像之间是否发生变化的步骤包括:
判断两帧第一图像中的像素点之间是否发生变化;
统计发生变化的像素点的数量;
计算发生变化的像素点的数量占第一图像像素点的总个数的像素点比例;
判断所述像素点比例是否大于预设像素点比例;
如果所述像素点比例大于预设像素点比例,则确定两帧第一图像之间发生变化;
如果所述像素点比例不大于预设像素点比例,则确定两帧第一图像之间未发生变化。
在一种可能的设计中,所述判断两帧第一图像中的像素点之间是否发生变化的步骤包括:
将所述预览流中相邻的两帧第一图像转换为灰度图像;
对两个灰度图像中每个对应的像素点的灰度值做差后取绝对值,得到灰度差;
判断灰度差是否大于灰度阈值;
如果所述灰度差大于灰度阈值,则确定两帧第一图像中的像素点之间发生变化;
如果所述灰度差不大于灰度阈值,则确定两帧第一图像中的像素点之间未发生变化。
在一种可能的设计中,为了降低图像的噪音,将一帧所述第二图像和至少一帧所述第三图像通过降噪,融合为第四图像。
在一种可能的设计中,所述降噪的方法包括时域降噪,可以利用多帧图像的特征去除噪声。
在一种可能的设计中,为了达到更好的降噪效果,所述时域降噪的步骤包括依次执行的对齐和时域融合步骤。
在一种可能的设计中,为了便于分辨噪声,所述对齐的步骤包括:以所述第二图像为基准帧,所述第三图像向基准帧对齐。
在一种可能的设计中,为了实现多帧图像对齐的目的,所述对齐的步骤包括:对图像提取SURF特征,对所述第二图像和第三图像执行配准操作。
在一种可能的设计中,为了使图像更加清晰,所述时域融合的步骤包括:
根据所述第二图像和所述第三图像,确定第三图像的非运动区域;
将所述第二图像和所述第三图像中非运动区域进行融合,得到第四图像。
在一种可能的设计中,所述根据第二图像和所述第三图像,确定第三图像的非运动区域的步骤包括:
将所述第二图像和第三图像中的每个对应像素的灰度值做差值后取绝对值,得到灰度差;
判断所述灰度差是否大于运动灰度阈值;
如果所述灰度差不大于运动灰度阈值,则确定所述第三图像中的像素为非运动区域。
在一种可能的设计中,所述将第二图像和所述第三图像中非运动区域进行融合,得到第四图像的步骤包括:根据所述第二图像和所述第三图像中非运动区域的对应像素的灰度值,确定第四图像中的每个像素的灰度值。
在一种可能的设计中,为了去除单帧图像的噪声,所述降噪方法还包括:将所述时域降噪后的图像,进行空域降噪。
在一种可能的设计中,为了提高降噪效果,所述空域降噪的方法是包括NLM方法。
在一种可能的设计中,准确调整曝光参数,在所述电子设备生成一帧第二图像和至少一帧第三图像之前,所述方法还包括:
确定所述被摄对象和所述电子设备之间的运动变化程度;
根据所述运动变化程度,确定第二图像对应的第一曝光参数。
在一种可能的设计中,所述确定被摄对象和所述电子设备之前的运动变化程度的步骤包括:
获取生成所述第二图像和第三图像之前的相邻两帧图像;
判断两帧所述图像中的像素点之前是否发生变化;
统计发生变化的像素点的数量;
计算发生变化的像素点的数量占所述图像像素点的总个数的像素点比例。
第二方面提供一种电子设备,所述电子设备包括:
处理器和存储器,所述存储器用于存储至少一条指令,所述指令由所述处理器加载并执行时以实现所述方法。
第三方面提供一种计算机可读存储介质,包括计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行所述的方法。
第四方面提供一种计算机程序产品,所述计算机程序产品在计算机上运行时,使得所述计算机执行所述方法。
附图说明
图1为本申请实施例提供的一种拍摄转动风车照片的示意图;
图2为本申请实施例提供的一种拍摄球场场景照片的示意图;
图3(a)为本申请实施例提供的一种手机的主界面;
图3(b)为本申请实施例提供的一种相机的拍摄界面;
图3(c)为本申请实施例提供的显示有未执行本申请实施例提供的图像处理方法时拍摄的照片的用户界面;
图3(d)为本申请实施例提供的显示有执行本申请实施例提供的图像处理方法时拍摄的照片的用户界面;
图4为本申请实施例提供的一种运动场景拍照方法的流程框图;
图5为本申请实施例提供的一种图像处理方法的流程图;
图6为本申请实施例提供的又一种图像处理方法的流程图;
图7为本申请实施例提供的又一种图像处理方法的流程图;
图8为本申请实施例提供的又一种图像处理方法的流程图;
图9为本申请实施例提供的又一种图像处理方法的流程图;
图10为本申请实施例提供的运动变化程度和降曝光倍数的关系示意图;
图11为本申请实施例提供的另一种图像处理方法的流程图;
图12为本申请实施例提供的电子设备1000的示例性组成示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例的技术方案进行清楚地描述。
本申请以下实施例中所使用的术语只是为了描述特定实施例的目的,而并非旨在作为对本申请实施例的限制。如在本申请实施例的说明书和所附权利要求书中所使用的那样,单数表达形式“一个”、“一种”、“所述”、“上述”、“该”和“这一”旨在也包括复数表达形式,除非其上下文中明确地有相反指示。还应当理解,尽管在以下实施例中可能采用术语第一、第二等来描述某一类对象,但所述对象不应限于这些术语。这些术语仅用来将该类对象的具体对象进行区分。例如,以下实施例中可能采用术语第一、第二等来描述窗口,但窗口不应限于这些术语。这些术语仅用来将显示屏所显示的不同窗口进行区分。以下实施例中可能采用术语第一、第二等来描述的其他类对象同理,此处不再赘述。此外,术语“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系;例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。
随着电子设备的发展,电子设备具有越来越多的功能。例如,当前电子设备基本都配置了摄像头,同时在电子设备上安装用于拍照录像的相机应用,可以通过相机应用启动摄像头实现拍摄照片的功能。当拍摄场景亮度欠佳且摄像头的拍摄范围内存在处于正在运动的物体时,用户发现照片会存在不同程度的模糊,例如,人物运动、车辆运动以及草木的抖动都可以造成照片模糊的情况出现。图1中示出了拍摄的转动风车照片的示意图,可以看出风车的最外一层风页由于快速旋转的原因,导致照片中出现了模糊的情况。图2中示出了拍摄的球场场景照片的示意图,可以看出照片中的人物由于正在运动的原因,同样出现了模糊的情况。另外,电子设备的抖动也会使拍摄的照片出现模糊的情况。
出现上述问题的原因是由于在摄像头单位曝光时间内正在运动的物体存在运动累积,导致照片出现模糊。可以理解为,拍摄范围内的正在运动的物体在单位曝光时间内会出现位置变化,而照片记录此时间段内像素点上的累积信息量,所以照片出现模糊情况。当摄像头的帧率越低或者运动物体的运动速度越快时,照片模糊的程度越明显。
相关技术中,针对具有专业设备的摄影者,可以通过调整单反相机的光圈及曝光时间等操作获得较好的拍照效果,但针对已经固定摄像头的电子设备,摄像头中的光圈通常无法调整,即使可调整也需要特定的传感器(sensor)或者更专业的拍照技巧,对于普通用户操作上不具备可行性。
在摄像头的光圈固定的情况下,根据成像原理,如果要获取物体在运动状态下更清晰的照片,需要降低曝光时间,即提高快门速度,使单位曝光时间内的运动累积更小,这样照片记录单位曝光时间内的物体的运动变化也越少,进而照片会更加清晰。但是提高快门速度会使照片的亮度相应的降低,降低用户观看照片的感受。在此基础上为了提高照片亮度,需要提高感光度(曝光ISO),但是对应着会显著增加照片图像的噪声,通过上述操作,会得到一张运动模糊程度降低但图像噪声加重的照片,所以单一操作无法从根本上同时解决照片模糊及噪声问题。
对于已经固定摄像头的电子设备,在不需要增加额外硬件的基础上,本申请实施例通过软件算法改善拍照效果。
除了上述提到的拍摄范围内存在正在运动的物体,会出现照片模糊的情况,当用户持有电子设备的手部出现抖动时,也会出现照片模糊的问题。本申请实施例中提供的一种图像处理方法,适用于包括但不限于以上会造成照片模糊的情况。
本申请实施例提供的一种图像处理方法,可应用于手机、平板电脑、桌面型、膝上型、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、手持计算机、上网本、个人数字助理(personal digital assistant,PDA)、可穿戴电子设备、虚拟显示设备等具备拍照功能的电子设备,本申请实施例对电子设备的具体类型不作任何限制。所述电子设备包括至少一个摄像头和显示屏。所述显示屏显示预览界面,所述预览界面包括第一图像,所述第一图像为在初始曝光参数下通过所述摄像头采集的被摄对象的图像,所述摄像头的初始曝光参数为第一快门速度和第一感光度。
本申请以下实施例将以手机为例,以下结合手机的用户界面(user interface,UI),对本申请实施例提供的图像处理方法进行具体阐述。
其中,如图3(a)所示的GUI,该GUI中示出了手机的屏幕显示系统的当前输出界面内容301,该界面内容301为手机的主界面。该界面内容301显示了多款应用程序(application,App),例如文件管理、电子邮件、音乐、计算器、信息、通讯录、电话和相机。应理解,界面内容301还可以包括其他更多的应用程序,本申请对此不作限定。
本申请实施例涉及的UI是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。应用程序的用户界面是通过java、可扩展标记语言(extensible markup language,XML)等特定计算机语言编写的源代码,界面源代码在终端设备上经过解析,渲染,最终呈现为用户可以识别的内容,比如图像、文本、音视频文件、控件(control)等界面元素。控件(control)也称为部件(widget),是用户界面的基本元素,典型的控件有工具栏(toolbar)、菜单栏(menu bar)、文本框(text box)、按钮(button)、滚动条(scrollbar)等。上述界面元素的属性和内容是通过标签或者节点来定义的,比如XML通过<Textview>、<ImgView>、<VideoView>等节点来规定界面元素的文本类型。一个节点对应界面中一个界面元素或属性,节点经过解析和渲染之后呈现为用户可视的内容。此外,很多应用程序,比如混合应用(hybrid application)的界面中通常还包含有网页。网页,也称为页面,可以理解为内嵌在应用程序界面中的一个特殊的控件,网页是通过特定计算机语言编写的源代码,例如超文本标记语言(hyper textmarkup language,HTML),层叠样式表(cascading style sheets,CSS),java脚本(JavaScript,JS)等,网页源代码可以由浏览器或与浏览器功能类似的网页显示组件加载和显示为用户可识别的内容。网页所包含的具体内容也是通过网页源代码中的标签或者节点来定义的,比如HTML通过<p>、<img>、<video>、<canvas>来定义网页的元素和属性。
用户界面常用的表现形式是图形用户界面(graphic user interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
当手机检测到用户点击主界面上的相机应用的图标302的操作后,可以启动相机应用,显示如图3(b)所示的GUI,该GUI为相机的拍摄界面303。该拍摄界面303上可以包括取景框304、相册图标305、拍摄控件306和摄像头旋转控件307等。
其中,取景框用于获取拍摄预览的第一图像,实时显示第一图像。拍摄控件306用于拍摄照片或者录像,当手机检测到用户点击拍摄控件306后,手机执行拍照操作,并将拍摄的照片保存下来;或者,当手机处于录像模式时,用户点击拍摄控件306后,手机执行录像操作,并将录制的视频保存下来。摄像头旋转控件307用于控制前置摄像头和后置摄像头的切换。相册图标305用于快捷进入相册,当手机检测到用户点击相册图标305后,可以在触摸屏上展示已经拍摄的照片或者视频等。
如图3(c)所示的GUI,该GUI中显示有在未执行本申请实施例提供的图像处理方法时拍摄的照片,可以看出拍摄正在旋转的风车时,照片中风车的最外一层风页出现模糊。因此,本申请提供一种图像处理方法,在实现识别到被摄对象和所述电子设备之间存在相对运动时,能拍摄出清晰的照片。
如图3(d)所示的GUI,该GUI中显示在执行本申请实施例提供的图像处理方法时拍摄的照片,需要说明的是,图3(d)和图3(c)的拍摄条件均相同,是在风车转速相同的条件下拍摄的照片。可以看出图3(d)中旋转风车的最外一层风页的清晰度与图3(c)中旋转风车的最外一层风页的清晰度相比,得到很大的提高。本申请实施例的方法中,电子设备获取亮度相同的多帧图像,其中多帧图像包括提高快门速度且提高感光度的第二图像,位于第二图像之后的第三图像,需说明,第三图像对应的曝光参数为初始曝光参数,并未改变快门速度和感光度。将多帧图像进行融合处理,得到照片308。
上述结合图3(a)、图3(b)和图3(d)描述了本申请实施例提供的图像处理的过程中人机交互实施例,为了更好的理解本申请提供的图像处理方法的方法,下面从实现层面介绍具体的实现过程和算法。
图4是本申请实施例提供的一种图像处理方法的流程框图,如图4所示,本申请实施例首先获取预览流,对所述预览流进行运动检测。通过执行运动检测的步骤,判断所述被摄对象和所述电子设备之间是否存在相对运动。当所述被摄对象和所述电子设备之间存在相对运动时,确定运动变化程度。根据所述被摄对象和所述电子设备之间是否存在相对运动,以及运动变化程度,通过自动曝光控制(AE控制),调整自动曝光参数。该内容在下文有具体介绍,在此不再赘述。传感器将调整自动曝光参数后获取的光信号,转化得到RAW数据。将RAW数据输入ISP(Image Signal Processing,图像信号处理)模块中,在IPS模块中实现多帧融合降噪,最终将降噪后的RAW数据,转换为YUV格式的图像数据,进而转存为JPEG格式图像,得到清晰度高且噪声小的照片。
图5是本申请实施例提供的一种图像处理方法的流程图。需要说明的是,本申请实施例中图像处理方法适用于拍摄范围环境较暗的情况下,原因是当拍摄范围环境较暗时为了照片的拍摄效果良好,自动将快门速度减慢,但是快门速度越慢,摄像头单位曝光时间越长,存在运动累积的程度越大,进而对照片清晰度的影响越大。本申请实施例中的方法致力于解决照片清晰度的问题。
在具体实现过程中,图像处理方法,应用于电子设备,可以包括步骤S401-S404:
S401、判断被摄对象和所述电子设备之间是否存在相对运动。
由于被摄对象和所述电子设备之间存在相对运动,被摄对象在拍摄照片时会出现模糊的现象,所以需要在后续步骤中对被摄对象和所述电子设备之间存在相对运动的情况下获得的图像进行处理,使得拍摄的照片清晰度提高且噪声减小。
一些实施例中,所述判断被摄对象和所述电子设备之间是否存在相对运动的步骤包括:获取预览流;根据所述预览流,判断被摄对象和所述电子设备之间是否存在相对运动。
电子设备通过相机应用启用摄像头,摄像头持续获取第一图像,将该过程得到的相机数据称为预览流。例如,当用户点击相机应用的图标302,启用摄像头,此时摄像头持续获取第一图像,产生预览流。预览流中的第一图像可以通过取景框展示。
一些实施例中,可以将获得的预览流做下采样处理,这样利用下采样处理后的预览流判断被摄对象和所述电子设备之间是否存在相对运动时,可以减少计算量。
示例性的,可以4倍下采样或者16倍下采样。需要说明的是,下采样还称为缩小图像或降采样,示例性的,图像尺寸为M*N,对其进行s倍下采样,即得到(M/s)*(N/s)尺寸的分辨率图像。采用下采样方法处理的预览流中的图像比直接从摄像头中原比例获取到的图像所占内存小,这样可以减小后续步骤中的计算量。
一些实施例中,所述根据预览流,判断被摄对象和所述电子设备之间是否存在相对运动的步骤包括:
所述预览流包括至少两个所述第一图像,对相邻的两帧第一图像进行对比,确定第一图像之间的差异,最终判断被摄对象和所述电子设备之间是否存在相对运动。具体步骤包括步骤S4011-S4016,如图6所示。
S4011、判断预览流中相邻的两帧第一图像之间是否发生变化。
本申请实施例中,通过所述预览流中第一图像之间的变化,确定被摄对象和所述电子设备之间是否存在相对运动。本申请实施例中在判断所述被摄对象和所述电子设备之间是否存在相对运动时不限于包括步骤S4011-S4016的方法,任何能判断摄像头的拍摄范围内存在处于正在运动的物体的方法均可,示例性的,可以利用传感器判断摄像头的拍摄范围内是否存在正在运动的物体,接收传感器发送的信号,根据该信号确定被摄对象和所述电子设备之间是否存在相对运动。所述传感器可以内置在电子设备中,也可以与电子设备外接。
一实施例中,为了准确的了解预览流中第一图像之间的变化情况,步骤S4011、判断预览流中相邻的两帧第一图像之间是否发生变化的步骤包括S40111-S40116,如图7所示。
S40111、判断两帧第一图像中的像素点之间是否发生变化。
本申请实施例中,电子设备可以通过判断相邻两帧第一图像对应像素点之间是否发生变化,来确定相邻的两帧第一图像之间是否发生变化。
一实施例中,S40111、判断两帧第一图像中的像素点之间是否发生变化的步骤包括S40111-1至S40111-5,如图8所示。
S40111-1、将所述预览流中相邻的两帧第一图像转换为灰度图像。
本实施例中,从摄像头中获取的第一图像的格式为YUV格式,将YUV格式的第一图像转换为灰度图像,便于后续比较两帧第一图像中像素点的像素值。本申请实施例中,并不限制YUV图像转换为灰度图像的具体方法,任何可以实现转换目的的方法均可。
S40111-2、对两个灰度图像中每个对应的像素点的灰度值做差后取绝对值,得到灰度差。
例如,一帧第一图像对应灰度图像的最右上角的像素点的灰度值为255,与该第一图像相邻的另一帧第一图像的最右上角的像素点的灰度值为100,此时将两个灰度值做差并取绝对值,得到灰度差为155。
S40111-3、判断灰度差是否大于灰度阈值。
本实施例中,灰度阈值为针对不同的感光度下噪声制定的不同的灰度阈值,当感光度越高,灰度阈值设定越高。由于在不同的感光度下图像的噪声不同,当感光度越高,噪声越大,当感光度越低,噪声越小,所以为了避免感光度较高的情况下,噪声影响判定是否拍被摄对象和电子设备相对位置是否发生变化的结果,所以根据不同感光度制定灰度阈值。
S40111-4、如果所述灰度差大于灰度阈值,则确定两帧第一图像中的像素点之间发生变化。
当灰度差大于灰度阈值,则说明相邻两帧第一图像对应的像素点的灰度变化已经超出了噪声引起的变化,说明不是由于噪声产生的,此时确定两帧第一图像中的像素点之间发生变化。
S40111-5、如果所述灰度差不大于灰度阈值,则确定两帧第一图像中的像素点之间未发生变化。
当灰度差不大于灰度阈值,则说明相邻两帧第一图像对应的像素点的灰度变化不大,此时确定两帧第一图像中的像素点之间未发生变化。
S40112、统计发生变化的像素点的数量。
为了确定预览流中第一图像之间的变化情况,需要逐个判断预览流中相邻两帧第一图像之前的变化情况,本申请实施例中通过发生变化的像素点的数量情况,确定两帧第一图像之间的变化情况。
示例性的,当确定像素点为发生变化的像素点,输出标志位1;当确定像素点为未发生变化的像素点,输出标志位0。统计标志位1的个数为发生变化的像素点的数量。
S40113、计算发生变化的像素点的数量占第一图像像素点的总个数的像素点比例。
可理解,相邻两帧第一图像像素点的总个数相同,所以所述第一图像像素点的总个数可以为任一帧第一图像像素点的总个数。将发生变化的像素点的数量除以第一图像像素点的总个数,计算得到像素点比例。例如,两帧第一图像的像素点均为4800万个,一帧第一图像中发生变化的像素点的数量为3840个,此时像素点比例为3840/4800=0.8。
示例性的,利用上文中提到的利用标志位1的数量作为发生变化的像素点的数量,标志位0的数量作为未发生变化的像素点的数量。计算发生变化的像素点的数量占第一图像像素点的总个数的像素点比例,可以通过标志位1的个数作为被除数,标志位1的个数和标志位0的个数总和作为除数,得到像素点比例。
S40114、判断所述像素点比例是否大于预设像素点比例。
由于一些特殊情况下,例如,电子设备本身原因,会导致相邻两帧第一图像中对应的像素点发生变化,所以本实施例中设定有预设像素点比例,该预设像素点比例可以根据实际情况设定。将像素点比例与预设像素点比例比较,可以提高本实施例方法的容错率,避免因为一些特殊情况导致像素点的变化,认定为是被摄对象和所述电子设备之间存在相对运动的原因导致的。
S40115、如果所述像素点比例大于预设像素点比例,则确定两帧第一图像之间发生变化。
由于第一图像由多个像素点组成,当像素点比例较高时,说明两帧第一图像中发生变化的像素点的数量较高,当大于预设像素点比例,则认为两帧第一图像之间发生变化。
S40116、如果所述像素点比例不大于预设像素点比例,则确定两帧第一图像之间未发生变化。
当像素点比例不大于预设像素点比例时,此时认为两帧第一图像对应的像素点发生变化是由于存在一些特殊情况造成的,所以认为两帧第一图像之间未发生变化。
S4012、统计预览流中发生变化的第一图像的数量。
需要说明的是,本实施例中,确定两帧第一图像之间发生变化,此时确定发生变化的第一图像的数量为1个。例如,当预览流包括五帧第一图像,包括按照先后拍摄顺序排列的第一帧第一图像、第二帧第一图像、第三帧第一图像、第四帧第一图像和第五帧第一图像。判断相邻两帧第一图像之间是否发生变化,包括判断第一帧第一图像和第二帧第一图像之间是否发生变化,第二帧第一图像和第三帧第一图像之间是否发生变化,第三帧第一图像和第四帧第一图像之间是否发生变化,第四帧第一图像和第五帧第一图像之间是否发生变化,则预览流包括五帧第一图像时,预览流中发生变化的第一图像的数量最多为四个。
S4013、计算预览流中发生变化的第一图像的数量占可发生变化第一图像数量的图像比例。
其中,可发生变化第一图像并非是指预览流中所有第一图像的总数量,而是所有第一图像的总数量减一,例如,当预览流包括五帧第一图像,则可发生变化第一图像为四帧。将预览流中发生变化的第一图像的数量除以可发生变化第一图像数量,计算得到图像比例。例如,当预览流中发生变化的第一图像的数量为三帧,可发生变化第一图像数量为四帧,则图像比例为3/4。
S4014、判断所述图像比例是否大于预设图像比例。
本实施例中,为了提高方法的容错率,可以设定预设图像比例。该预设图像比例可以根据实际情况设定。
S4015、如果所述图像比例大于预设图像比例,则确定所述被摄对象和所述电子设备之间存在相对运动。
S4016、如果所述图像比例不大于预设图像比例,则确定所述被摄对象和所述电子设备之间不存在相对运动。
本实施例中,所述预设图像比例可以根据实际需要设定,在此不做限制。当所述图像比例大于预设图像比例,说明发生变化的第一图像的数量较多,此时所述被摄对象和所述电子设备之间存在相对运动。当图像比例不大于预设图像比例,说明发生变化的第一图像的数量较少,此时所述被摄对象和所述电子设备之间不存在相对运动。
S402、一些实施例中,如果所述被摄对象和所述电子设备之间不存在相对运动,采用初始曝光参数获取图像。
需要说明的是,在所述被摄对象和所述电子设备之间不存在相对运动时,利用初始曝光参数拍摄图像。
S403、当所述被摄对象和所述电子设备之间存在相对运动时,所述电子设备生成一帧第二图像和至少一帧第三图像,所述第二图像对应的曝光参数为第一曝光参数,所述第一曝光参数包括第二快门速度和第二感光度,所述第二快门速度为第一快门速度的1/N,所述第二感光度为所述第一感光度的N倍,所述第三图像对应的曝光参数为所述初始曝光参数。
S404、将一帧所述第二图像和至少一帧所述第三图像融合为第四图像。
值得注意的是,本申请实施例需要保证第二图像,与第三图像的亮度相同。这是因为为了增加第四图像的清晰度,本实施例将第二图像的快门速度缩短,使图像的清晰度增加,但是同时图像的亮度会降低,为了改变亮度低的问题,本实施例中还增大感光度,将亮度提高,最终会得到一张清晰度高,但是图像噪声加重的第二图像,之后为了使第二图像的噪声降低,将第三图像与第二图像进行融合,最终达到改善第四图像噪声的目的。可想而知,如果多帧图像的亮度不同,将多张图像融合得到第四图像的过程中,噪声无法被准确判别,可能将亮度的差异确定为噪声,对噪声处理的过程中,影响最终第四图像的效果。
本申请实施例中,图像亮度根据快门速度和感光度确定,为了保证第二图像与利用初始曝光参数拍摄的第三图像的亮度相同,所述第二快门速度设置为第一快门速度的1/N,所述第二感光度设置为所述第一感光度的N倍。
示例性的,所述第三图像的图像为三帧,所述初始曝光参数中的第一快门速度为1/250,第一感光度为200。N取2,此时第二图像对应的第二快门速度为1/500,第二感光度为400,三帧所述第三图像对应的快门速度均为1/250,感光度均为200。
在一些实施例中,当接收用户的拍摄操作,例如,用户的拍摄操作可以通过用户点击拍摄控件306来完成。响应于所述拍摄操作,所述电子设备生成一帧第二图像和至少一帧第三图像。所述第四图像为拍摄得到的照片。
另外,需要说明的是,为了最大程度上保证第四图像与接收用户的拍摄操作的瞬间对应的图像相近,本实施例将接收用户的拍摄操作后的第一个获取到的图像作为第二图像,作为获取最终照片的基准,该第二图像是调整曝光参数后拍摄的。该第二图像与第三图像融合,由于以第二图像为基准,所以最终得到的照片既能与接收用户的拍照操作的瞬间最为贴近,同时还能保证图像的清晰度且噪声小。
本实施例中,电子设备在生成第二图像和第三图像之前,调整电子设备的曝光参数。例如,如图3(a)所示,用户可以点击拍摄控件,响应于该拍摄操作,调整电子设备的曝光参数。在获取图像时,第二图像对应的曝光参数为调整后的曝光参数。除了获取多帧图像的首帧图像是按照调整曝光参数后拍摄的,第三图像是按照摄像头的原有曝光参数拍摄获得。
一实施例中,在所述电子设备生成一帧第二图像和至少一帧第三图像之前,所述方法还包括:S4031-S4032,如图9所示。
S4031、确定所述被摄对象和所述电子设备之间的运动变化程度。本实施例,在获取第二图像和第三图像前,调整曝光参数至第一曝光参数。为了更准确的调整曝光参数,使第二图像在提高清晰度的同时噪声最小,所以在具体调整曝光参数时先确定所述被摄对象和所述电子设备之间的运动变化程度,该运动变化程度最贴近获取第二图像对应的被摄对象的运动情况。
运动变化程度和上文中像素点比例的计算方法相同,即运动变化程度为发生变化的像素点的数量占图像像素点的总个数的比例。可选的,可以将像素点比例存储,当接收用户的拍摄操作时,直接获取存储的用户的拍摄操作之前相邻两帧图像的像素点比例。可选的,当接收用户的拍摄操作时,重新根据接收用户的拍摄操作之前相邻两帧图像,计算像素点比例。在一示例中,所述确定被摄对象和所述电子设备之前的运动变化程度的步骤包括:获取生成所述第二图像和第三图像之前的相邻两帧图像;判断两帧所述图像中的像素点之前是否发生变化;统计发生变化的像素点的数量;计算发生变化的像素点的数量占所述图像像素点的总个数的像素点比例。
S4032、根据所述运动变化程度,确定第二图像对应的第一曝光参数。
为了调整电子设备的曝光参数,本实施例中预存有运动变化程度,以及与所述运动变化程度对应的降曝光倍数N。通过降曝光倍数N,重新确定快门速度和感光度。
一些实施例中所述快门速度和曝光时间成正比,利用曝光时间替换快门速度。重新确定曝光时间和曝光ISO的过程包括:在原有曝光时间的基础上除以降曝光倍数得到曝光时间,在原有曝光ISO的基础上乘以降曝光倍数得到曝光ISO,例如,原有曝光时间1/30,原有曝光ISO为100,降曝光倍数为2倍,则调整后的曝光时间为1/60,曝光ISO为200。
示例性的,图10中示出了运动变化程度和降曝光倍数的关系示意图。图10中,当运动变化程度为0时,不降低曝光时间,当运动变化程度在0和r1之间(运动变化程度不包括0,但包括r1),降曝光倍数为t1,当运动变化程度在r1和r2之间(运动变化程度不包括r1,但包括r2),降曝光倍数为t2,当运动变化程度在r2和r3之间(运动变化程度不包括r2,但包括r3),降曝光倍数为t3,当运动变化程度大于r3,不降低曝光时间。其中,t1、t2、t3及r1、r2、r3的值可以根据噪声程度和对运动清晰度的要求进行适配。
需理解,当相邻两帧第一图像的运动变化程度为0时,说明两帧第一图像没有变化,因此不重新确定曝光时间和曝光ISO,维持原有摄像头的曝光参数。当运动变化程度大于r3时,运动变化程度过大,同样不重新确定曝光时间和曝光ISO,维持原有摄像头的曝光参数,是因为过大的运动幅度已经超过帧间图像配准的容纳范围,图像间无法配准无法进行图像融合。
一些实施例中,为了减少后续步骤对多帧图像融合的时间,同时又可以使用户看到清晰度高的第四图像,设定获取的多帧图像的数量为四帧。
其中第一帧图像是在曝光参数调整后得到的第二图像,其余曝光参数未改变的三帧图像为第三图像。通过上述调整曝光参数的方法,得到四帧亮度一致的图像。
一些实施例中,将一帧所述第二图像和至少一帧所述第三图像通过降噪,融合为第四图像。
一实施例中,所述降噪的方法包括时域降噪。
一些实施例中,所述时域降噪中包括两个步骤,分别是对齐和时域融合。在一示例中,以所述第二图像为基准帧,所述第三图像向基准帧对齐。其中对齐用以下例子便于理解说明,将四帧图像对齐,以第一帧图像为基准帧,其余三张帧图像向基准帧对齐。示例性的,第一帧图像中特定物体的中心轴与水平线的角度为5度,第二帧图像中特定物体的中心轴与水平线的角度为5.5度,第三帧图像中特定物体的中心轴与水平线的角度为6度,第四帧图像中特定物体的中心轴与水平线的角度为6.5度,此时分别将第二帧图像,第三帧图像和第四帧图像分别旋转对应的角度,使其与第一帧图像中的特定物体对齐,这样在对齐之后可以更好的分辨图像中的噪声后,进行时域融合。
一些实施例中,可以根据对图像提取的SURF(speed up robust features)特征,对第二图像和第三图像执行配准操作,实现多帧图像对齐的目的,对配准后的图像进行时域融合。
一些实施例中,所述时域融合的步骤包括S4041-S4042,如图11所示:
S4041、根据所述第二图像和所述第三图像,确定第三图像的非运动区域。
本申请实施例中,所述第三图像的数量可能为多个,将多个第三图像分别与第二图像作比较,确定每个第三图像的非运动区域。
一些实施例中,所述根据第二图像和所述第三图像,确定第三图像的非运动区域的步骤包括:
将所述第二图像和第三图像中的每个对应像素的灰度值做差值后取绝对值,得到灰度差;判断所述灰度差是否大于运动灰度阈值;如果所述灰度差不大于运动灰度阈值,则确定所述第三图像中的像素为非运动区域。
由于非运动区域为第二图像和第三图像比较时变化不大的像素,所以将像素对应的灰度值作为融合成为第四图像的灰度值。而对于灰度差大于运动灰度阈值,确定对应的像素为运动区域,由于运动区域的灰度值变化较大,可能为噪声,所以对第三图像中的运动区域进行舍弃。
S4042、将所述第二图像和所述第三图像中非运动区域进行融合,得到第四图像。
示例性的,当存在三帧第三图像,其中第一帧第三图像中的某一像素点为运动区域,而另外两帧第三图像中的该像素点为非运动区域,则将第三图像中被认定为非运动区域的像素点,与第二图像中对应的像素融合。
一些实施例中,所述将第二图像和所述第三图像中非运动区域进行融合,得到第四图像的步骤包括:根据所述第二图像和所述第三图像中非运动区域的对应像素的灰度值,确定第四图像中的每个像素的灰度值。在一种可以实现的方式中,将每个图像设定权重值,将每个图像中对应像素的灰度值,乘以该图像的权重,确定第四图像中像素的灰度值。
所述时域降噪可以利用多帧图像的特征去除噪声。所述时域降噪可以不限制与本申请中公开的方法,其他可以实现本申请目的方法均可。
一实施例中,为了进一步加强去噪效果,所述降噪方法还包括:将所述时域降噪后的图像,进行空域降噪。空域降噪是针对单帧图像的特征去除噪声。本实施例中,在对多帧图像进行融合得到照片得到过程中,先后使用了时域降噪和空域降噪两个步骤,在多帧图像的维度上和单帧图像的维度上都进行了降噪处理,使最终得到照片的噪声极小。
一实施例中,所述空域降噪的方法包括NLM方法。
需要说明的是,空域降噪为现有技术,目前空域降噪包括BM3D、NLM、神经网络及小波神经网络等方法。本实施例中,采用RAW域的NLM方法进行空域噪声处理,主要利用一个较大区域内的相近块之间的相似性进行加权噪声去除。空域降噪可以在RAW域进行处理,也可以在YUV域进行处理,RAW域噪声形态较为单一处理效果较好。
一实施例中,所述对多帧图像进行融合包括人工智能AI处理。
人工智能技术(artificial intelligence,AI),可以自动处理多帧图像,将多帧图像融合,实现去除噪声的效果。
本申请实施例的图像处理方法过程简单,不存在复杂的操作。
可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本实施例可以根据上述方法示例对电子设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块可以采用硬件的形式实现。需要说明的是,本实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,图12示出了上述实施例中涉及的电子设备1000的一种可能的组成示意图,如图12所示,该电子设备1200可以包括:判断单元1201、生成单元1202和融合单元1203。
其中,判断单元1201可以用于支持电子设备1200执行上述步骤S401等,和/或用于本文所描述的技术的其他过程。
生成单元1202可以用于支持电子设备1200执行上述步骤S402等,和/或用于本文所描述的技术的其他过程。
融合单元1203可以用于支持电子设备1200执行上述步骤S404等,和/或用于本文所描述的技术的其他过程。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本实施例提供的电子设备,用于执行上述运动场景拍照方法,因此可以达到与上述实现方法相同的效果。
在采用集成的单元的情况下,电子设备可以包括处理模块、存储模块和通信模块。其中,处理模块可以用于对电子设备的动作进行控制管理,例如,可以用于支持电子设备执行上述第一获取单元1001、第二获取单元1002和融合单元1003执行的步骤。存储模块可以用于支持电子设备执行存储程序代码和数据等。通信模块,可以用于支持电子设备与其他设备的通信。
其中,处理模块可以是处理器或控制器。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,数字信号处理(digital signal processing,DSP)和微处理器的组合等等。存储模块可以是存储器。通信模块具体可以为射频电路、蓝牙芯片、Wi-Fi芯片等与其他电子设备交互的设备。
本实施例还提供一种计算机存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的运动场景拍照方法。
本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的运动场景拍照方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的运动场景拍照方法。
其中,本实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上内容,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (20)

1.一种图像处理方法,其特征在于,应用于电子设备,所述电子设备包括至少一个摄像头和显示屏,所述方法包括:
所述显示屏显示预览界面,所述预览界面包括第一图像,所述第一图像为在初始曝光参数下通过所述摄像头采集的被摄对象的图像,所述摄像头的初始曝光参数为第一快门速度和第一感光度;
判断所述被摄对象和所述电子设备之间是否存在相对运动;
当所述被摄对象和所述电子设备之间存在相对运动时,所述电子设备生成一帧第二图像和至少一帧第三图像,所述第二图像对应的曝光参数为第一曝光参数,所述第一曝光参数包括第二快门速度和第二感光度,所述第二快门速度为第一快门速度的1/N,所述第二感光度为所述第一感光度的N倍,所述第三图像对应的曝光参数为所述初始曝光参数;
将一帧所述第二图像和至少一帧所述第三图像融合为第四图像。
2.根据权利要求1所述的方法,其特征在于,所述判断被摄对象和所述电子设备之间是否存在相对运动的步骤包括:
获取预览流;
根据所述预览流,判断被摄对象和所述电子设备之间是否存在相对运动。
3.根据权利要求2所述的方法,其特征在于,所述根据所述预览流,判断被摄对象和所述电子设备之间是否存在相对运动的步骤包括:
所述预览流包括至少两个所述第一图像;
判断所述预览流中相邻的两帧第一图像之间是否发生变化;
统计所述预览流中发生变化的第一图像的数量;
计算所述预览流中发生变化的第一图像的数量占可发生变化第一图像数量的图像比例;
判断所述图像比例是否大于预设图像比例;
如果所述图像比例大于预设图像比例,则确定所述被摄对象和所述电子设备之间存在相对运动;
如果所述图像比例不大于预设图像比例,则确定所述被摄对象和所述电子设备之间不存在相对运动。
4.根据权利要求3所述的方法,其特征在于,所述判断所述预览流中相邻的两帧第一图像之间是否发生变化的步骤包括:
判断两帧第一图像中的像素点之间是否发生变化;
统计发生变化的像素点的数量;
计算发生变化的像素点的数量占第一图像像素点的总个数的像素点比例;
判断所述像素点比例是否大于预设像素点比例;
如果所述像素点比例大于预设像素点比例,则确定两帧第一图像之间发生变化;
如果所述像素点比例不大于预设像素点比例,则确定两帧第一图像之间未发生变化。
5.根据权利要求4所述的方法,其特征在于,所述判断两帧第一图像中的像素点之间是否发生变化的步骤包括:
将所述预览流中相邻的两帧第一图像转换为灰度图像;
对两个灰度图像中每个对应的像素点的灰度值做差后取绝对值,得到灰度差;
判断灰度差是否大于灰度阈值;
如果所述灰度差大于灰度阈值,则确定两帧第一图像中的像素点之间发生变化;
如果所述灰度差不大于灰度阈值,则确定两帧第一图像中的像素点之间未发生变化。
6.根据权利要求1所述的方法,其特征在于,将一帧所述第二图像和至少一帧所述第三图像通过降噪,融合为第四图像。
7.根据权利要求6所述的方法,其特征在于,所述降噪的方法包括时域降噪。
8.根据权利要求7所述的方法,其特征在于,所述时域降噪的步骤包括依次执行的对齐和时域融合步骤。
9.根据权利要求8所述的方法,其特征在于,所述对齐的步骤包括:以所述第二图像为基准帧,所述第三图像向基准帧对齐。
10.根据权利要求8所述的方法,其特征在于,所述对齐的步骤包括:对图像提取SURF特征,对所述第二图像和第三图像执行配准操作。
11.根据权利要求8所述的方法,其特征在于,所述时域融合的步骤包括:
根据所述第二图像和所述第三图像,确定第三图像的非运动区域;
将所述第二图像和所述第三图像中非运动区域进行融合,得到第四图像。
12.根据权利要求11所述的方法,其特征在于,所述根据第二图像和所述第三图像,确定第三图像的非运动区域的步骤包括:
将所述第二图像和第三图像中的每个对应像素的灰度值做差值后取绝对值,得到灰度差;
判断所述灰度差是否大于运动灰度阈值;
如果所述灰度差不大于运动灰度阈值,则确定所述第三图像中的像素为非运动区域。
13.根据权利要求11所述的方法,其特征在于,所述将第二图像和所述第三图像中非运动区域进行融合,得到第四图像的步骤包括:根据所述第二图像和所述第三图像中非运动区域的对应像素的灰度值,确定第四图像中的每个像素的灰度值。
14.根据权利要求7所述的方法,其特征在于,所述降噪的方法还包括:将所述时域降噪后的图像,进行空域降噪。
15.根据权利要求14所述的方法,其特征在于,所述空域降噪的方法包括NLM方法。
16.根据权利要求1所述的方法,其特征在于,在所述电子设备生成一帧第二图像和至少一帧第三图像之前,所述方法还包括:
确定所述被摄对象和所述电子设备之间的运动变化程度;
根据所述运动变化程度,确定第二图像对应的第一曝光参数。
17.根据权利要求16所述的方法,其特征在于,所述确定被摄对象和所述电子设备之前的运动变化程度的步骤包括:
获取生成所述第二图像和第三图像之前的相邻两帧图像;
判断两帧所述图像中的像素点之前是否发生变化;
统计发生变化的像素点的数量;
计算发生变化的像素点的数量占所述图像像素点的总个数的像素点比例。
18.一种电子设备,其特征在于,所述电子设备包括:
处理器和存储器,所述存储器用于存储至少一条指令,所述指令由所述处理器加载并执行时以实现如权利要求1-17中任意一项所述方法。
19.一种计算机可读存储介质,其特征在于,包括计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行如权利要求1至17中任一项所述的方法。
20.一种计算机程序产品,其特征在于,所述计算机程序产品在计算机上运行时,使得所述计算机执行如权利要求1至17中任一项所述的方法。
CN202110862047.9A 2021-07-29 2021-07-29 图像处理方法及电子设备 Pending CN115696066A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110862047.9A CN115696066A (zh) 2021-07-29 2021-07-29 图像处理方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110862047.9A CN115696066A (zh) 2021-07-29 2021-07-29 图像处理方法及电子设备

Publications (1)

Publication Number Publication Date
CN115696066A true CN115696066A (zh) 2023-02-03

Family

ID=85057919

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110862047.9A Pending CN115696066A (zh) 2021-07-29 2021-07-29 图像处理方法及电子设备

Country Status (1)

Country Link
CN (1) CN115696066A (zh)

Similar Documents

Publication Publication Date Title
US9591237B2 (en) Automated generation of panning shots
AU2013334606B2 (en) Grouping related photographs
CN113592887A (zh) 视频拍摄方法、电子设备及计算机可读存储介质
JPWO2012176384A1 (ja) 表示プログラムおよび表示装置
CN109729274B (zh) 图像处理方法、装置、电子设备及存储介质
US9690980B2 (en) Automatic curation of digital images
US20180270445A1 (en) Methods and apparatus for generating video content
CN113706414A (zh) 视频优化模型的训练方法和电子设备
US9412042B2 (en) Interaction with and display of photographic images in an image stack
WO2021077141A2 (en) Highlight moment detection for slow-motion videos
CN115689963A (zh) 一种图像处理方法及电子设备
JP6230386B2 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
WO2019184719A1 (zh) 一种拍照的方法和装置
CN116916151B (zh) 拍摄方法、电子设备和存储介质
CN112672055A (zh) 拍照方法、装置及设备
US20140111678A1 (en) Method and system for capturing, storing and displaying animated photographs
CN115567783B (zh) 一种图像处理方法
CN115696066A (zh) 图像处理方法及电子设备
CN115883958A (zh) 一种人像拍摄方法
CN115134532A (zh) 图像处理方法、装置、存储介质及电子设备
CN115776615A (zh) 曝光量调整方法和装置
CN111563956A (zh) 一种二维图片的三维显示方法、装置、设备及介质
CN116757963B (zh) 图像处理方法、电子设备、芯片系统及可读存储介质
WO2016044983A1 (zh) 一种图像处理方法、装置及电子设备
WO2023246844A1 (zh) 视频处理方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination