CN109819163A - 一种图像处理控制方法、终端及计算机可读存储介质 - Google Patents

Abstract

本发明公开了一种图像处理控制方法、终端及计算机可读存储介质，通过在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，其中N大于等于3，确定出该N帧图像中各帧图像的运动区域，进而从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进一步基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像，解决了现有技术中对图像运动区域仅进行原始帧和空间降噪后的原始帧的叠加处理，得到图像不够清晰、效果较差，用户体验度低的问题。本发明还公开了一种终端及计算机可读存储介质，通过实施上述方案，实现了利用多帧图像信息对图像运动区域进行处理，使得拍摄得到的图像效果更好，大大提升了用户的体验满意度。

Description

一种图像处理控制方法、终端及计算机可读存储介质

技术领域

本发明涉及图像处理技术领域，更具体地说，涉及一种图像处理控制方法、终端及计算机可读存储介质。

背景技术

随着移动终端技术及互联网技术的发展，移动终端已经成为人们生活中不可或缺的一部分，用户在移动终端上安装各种各样的第三方应用和服务软件来满足日常生活需求。为方便描述，上述移动终端以手机为例，其中，拍摄作为手机的一个重要功能深受人们的喜爱，人们也越发关注拍摄得到的图像的效果。目前，为了提高拍摄得到的图像的效果，多采用了多帧降噪算法，使得拍摄的图像较单帧算法处理的噪声明显变少，视觉体验更优，其中，在多帧降噪算法中对图像的运动区域和非运动区域进行了不同的处理，大致为：1、对不同帧先进性对齐；2、通过计算帧间差异判断出运动区域和非运动区域；3、非运动区域综合考虑同一帧空间降噪和原始帧的叠加以及帧间叠加，对运动区域只进行原始帧和对其进行空间降噪后二者的叠加。但是，仅对运动区域进行原始帧和对其进行空间降噪后二者的叠加，得到的图像不够清晰，效果较差，降低了用户的体验满意度。

发明内容

本发明要解决的技术问题在于现有技术中对图像运动区域仅进行原始帧和空间降噪后的原始帧的叠加处理，得到图像不够清晰、效果较差，用户体验度低的问题。针对该技术问题，提供一种图像处理控制方法、终端及计算机可读存储介质。

为解决上述技术问题，本发明提供一种图像处理控制方法，所述图像处理控制方法包括：

在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，所述N大于等于3；

确定出所述N帧图像中各帧图像的运动区域；

从所述N帧图像中依次选取两帧图像；

计算出各所述两帧图像运动区域对应的像素点的位移量；

基于计算出的所述位移量将所述N帧图像进行合成，得到此次的拍摄图像。

可选的，所述计算出各所述两帧图像运动区域对应的像素点的位移量，包括：

将所述两帧图像的其中一帧作为基准帧，另一帧作为参考帧，通过光流法计算所述参考帧中与所述基准帧中运动区域的同一像素点的位移量。

可选的，所述基于计算出的所述位移量将所述N帧图像进行合成，得到此次的拍摄图像，包括：

基于所述基准帧中的各像素点的坐标位置和所述位移量确定在所述参考帧中与所述基准帧中对应的各像素点的坐标位置；

根据确定出的所述参考帧中的坐标位置与所述基准帧中的坐标位置进行合成，得到此次的拍摄图像。

可选的，所述将所述两帧图像的其中一帧作为基准帧，另一帧作为参考帧，包括：

将所述两帧图像的拍摄时间在前的一帧作为基准帧，拍摄时间在后的一帧作为参考帧；

或，

将所述两帧图像的拍摄时间在后的一帧作为基准帧，拍摄时间在前的一帧作为参考帧。

可选的，所述从所述N帧图像中依次选取两帧图像，包括：

按照拍摄时间顺序从所述N帧图像中依次选取相邻的两帧图像。

可选的，所述计算出各所述两帧图像运动区域对应的像素点的位移量之前，还包括：

对各所述两帧图像进行滤波处理。

可选的，所述针对同一拍摄场景拍摄N帧图像，包括：

针对同一拍摄场景拍摄N帧图像，所述N根据预设时间和摄像头曝光时间确定。

可选的，所述基于计算出的各所述位移量将各所述两帧图像依次进行合成，得到此次的拍摄图像之后，包括：

将所述拍摄图像进行显示。

进一步地，本发明还提供了一种终端，所述终端包括处理器、存储器及通信总线；

所述通信总线用于实现所述处理器和所述存储器之间的连接通信；

所述处理器用于执行所述存储器中存储的一个或者多个程序，以实现如上述任一项所述的图像处理控制方法的步骤。

进一步地，本发明还提供了一种计算机可读存储介质，所述计算存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如上述所述的图像处理控制方法的步骤。

有益效果

本发明提出的图像处理控制方法、终端及计算机可读存储介质，该图像处理控制方法通过在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，其中N大于等于3，确定出该N帧图像中各帧图像的运动区域，进而从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进一步基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像，解决了现有技术中对图像运动区域仅进行原始帧和空间降噪后的原始帧的叠加处理，得到图像不够清晰、效果较差，用户体验度低的问题。也即在本发明中，通过从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进而基于计算出的位移量将N帧图像进行合成，实现了多帧图像的运动区域的合成，与现有技术相比，本发明中对图像运动区域的处理利用到了多帧图像信息，使得拍摄得到的图像更加清晰、效果更好，大大提升了用户的体验满意度。

附图说明

下面将结合附图及实施例对本发明作进一步说明，附图中：

图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意图；

图2为如图1所示的移动终端的无线通信系统示意图；

图3为本发明第一实施例提供的一种图像处理控制方法的基本流程示意图；

图4为本发明第一实施例提供的基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像的基本流程示意图；

图5为本发明第二实施例提供的一种具体的图像处理控制方法的基本流程示意图；

图6为本发明第三实施例提供的终端的结构示意图。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身没有特定的意义。因此，“模块”、“部件”或“单元”可以混合地使用。

终端可以以各种形式来实施。例如，本发明中描述的终端可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant，PDA)、便捷式媒体播放器(Portable Media Player，PMP)、导航装置、可穿戴设备、智能手环、计步器等移动终端，以及诸如数字TV、台式计算机等固定终端。

后续描述中将以移动终端为例进行说明，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本发明的实施方式的构造也能够应用于固定类型的终端。

请参阅图1，其为实现本发明各个实施例的一种移动终端的硬件结构示意图，该移动终端100可以包括：RF(Radio Frequency，射频)单元101、WiFi模块102、音频输出单元103、A/V(音频/视频)输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解，图1中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

下面结合图1对移动终端的各个部件进行具体的介绍：

射频单元101可用于收发信息或通话过程中，信号的接收和发送，具体的，射频单元101可以将上行信息发送给基站，另外也可以将基站发送的下行信息接收后，发送给移动终端的处理器110处理，基站向射频单元101发送的下行信息可以是根据射频单元101发送的上行信息生成的，也可以是在检测到移动终端的信息更新后主动向射频单元101推送的，例如，在检测到移动终端所处的地理位置发生变化后，基站可以向移动终端的射频单元101发送地理位置变化的消息通知，射频单元101在接收到该消息通知后，可以将该消息通知发送给移动终端的处理器110处理，移动终端的处理器110可以控制该消息通知显示在移动终端的显示面板1061上；通常，射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元101还可以通过无线通信与网络和其他设备通信，具体的可以包括：通过无线通信与网络系统中的服务器通信，例如，移动终端可以通过无线通信从服务器中下载文件资源，比如可以从服务器中下载应用程序，在移动终端将某一应用程序下载完成之后，若服务器中该应用程序对应的文件资源更新，则该服务器可以通过无线通信向移动终端推送资源更新的消息通知，以提醒用户对该应用程序进行更新。上述无线通信可以使用任一通信标准或协议，包括但不限于GSM(Global System ofMobile communication，全球移动通讯系统)、GPRS(General Packet Radio Service，通用分组无线服务)、CDMA2000(Code Division Multiple Access 2000，码分多址2000)、WCDMA(Wideband Code Division Multiple Access,宽带码分多址)、TD-SCDMA(Time Division-Synchronous Code Division Multiple Access，时分同步码分多址)、FDD-LTE(FrequencyDivision Duplexing-Long Term Evolution，频分双工长期演进)和TDD-LTE(TimeDivision Duplexing-Long Term Evolution，分时双工长期演进)等。

WiFi属于短距离无线传输技术，移动终端通过WiFi模块102可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图1示出了WiFi模块102，但是可以理解的是，其并不属于移动终端的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。

音频输出单元103可以在移动终端100处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时，将射频单元101或WiFi模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元103还可以提供与移动终端100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元103可以包括扬声器、蜂鸣器等等。

A/V输入单元104用于接收音频或视频信号。A/V输入单元104可以包括图形处理器(Graphics Processing Unit，GPU)1041和麦克风1042，图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或WiFi模块102进行发送。麦克风1042可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风1042接收声音(音频数据)，并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。麦克风1042可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。

移动终端100还包括至少一种传感器105，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度，接近传感器可在移动终端100移动到耳边时，关闭显示面板1061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于手机还可配置的指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板1061。

用户输入单元107可用于接收输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元107可包括触控面板1071以及其他输入设备1072。触控面板1071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)，并根据预先设定的程式驱动相应的连接装置。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器110，并能接收处理器110发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071，用户输入单元107还可以包括其他输入设备1072。具体地，其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种，具体此处不做限定。

进一步的，触控面板1071可覆盖显示面板1061，当触控面板1071检测到在其上或附近的触摸操作后，传送给处理器110以确定触摸事件的类型，随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图1中，触控面板1071与显示面板1061是作为两个独立的部件来实现移动终端的输入和输出功能，但是在某些实施例中，可以将触控面板1071与显示面板1061集成而实现移动终端的输入和输出功能，具体此处不做限定。比如，当通过射频单元101接收到某一应用程序的消息通知时，处理器110可以控制将该消息通知显示在显示面板1061的某一预设区域内，该预设区域与触控面板1071的某一区域对应，通过对触控面板1071某一区域进行触控操作，可以对显示面板1061上对应区域内显示的消息通知进行控制。

接口单元108用作至少一个外部装置与移动终端100连接可以通过的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端100和外部装置之间传输数据。

存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器109可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器110是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器109内的软件程序和/或模块，以及调用存储在存储器109内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。处理器110可包括一个或多个处理单元；优选的，处理器110可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器110中。

移动终端100还可以包括给各个部件供电的电源111(比如电池)，优选的，电源111可以通过电源管理系统与处理器110逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

尽管图1未示出，移动终端100还可以包括蓝牙模块等，在此不再赘述。

为了便于理解本发明实施例，下面对本发明的移动终端所基于的通信网络系统进行描述。

请参阅图2，图2为本发明实施例提供的一种通信网络系统架构图，该通信网络系统为通用移动通信技术的LTE系统，该LTE系统包括依次通讯连接的UE(User Equipment，用户设备)201，E-UTRAN(Evolved UMTS Terrestrial Radio Access Network，演进式UMTS陆地无线接入网)202，EPC(Evolved Packet Core，演进式分组核心网)203和运营商的IP业务204。

具体地，UE201可以是上述终端100，此处不再赘述。

E-UTRAN202包括eNodeB2021和其它eNodeB2022等。其中，eNodeB2021可以通过回程(backhaul)(例如X2接口)与其它eNodeB2022连接，UE201与eNodeB2021连接后，可以接收到由eNodeB2021发送的通知消息通知，eNodeB2021可以连接到EPC203，eNodeB2021可以提供UE201到EPC203的接入。

EPC203可以包括MME(Mobility Management Entity，移动性管理实体)2031，HSS(Home Subscriber Server，归属用户服务器)2032，其它MME2033，SGW(Serving Gate Way，服务网关)2034，PGW(PDN Gate Way，分组数据网络网关)2035和PCRF(Policy andCharging Rules Function，政策和资费功能实体)2036等。其中，MME2031是处理UE201和EPC203之间信令的控制节点，提供承载和连接管理。HSS2032用于提供一些寄存器来管理诸如归属位置寄存器(图中未示)之类的功能，并且保存有一些有关服务特征、数据速率等用户专用的信息。所有用户数据都可以通过SGW2034进行发送，PGW2035可以提供UE 201的IP地址分配以及其它功能，PCRF2036是业务数据流和IP承载资源的策略与计费控制策略决策点，它为策略与计费执行功能单元(图中未示)选择及提供可用的策略和计费控制决策。

IP业务204可以包括因特网、内联网、IMS(IP Multimedia Subsystem，IP多媒体子系统)或其它IP业务等。

虽然上述以LTE系统为例进行了介绍，但本领域技术人员应当知晓，本发明不仅仅适用于LTE系统，也可以适用于其他无线通信系统，例如GSM、CDMA2000、WCDMA、TD-SCDMA以及未来新的网络系统等，此处不做限定。

基于上述移动终端硬件结构以及通信网络系统，提出本发明各个实施例。

第一实施例

为了解决现有技术中对图像运动区域仅进行原始帧和空间降噪后的原始帧的叠加处理，得到图像不够清晰、效果较差，用户体验度低的问题。本实施例提供一种图像处理控制方法，该图像处理控制方法通过在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，其中N大于等于3，确定出该N帧图像中各帧图像的运动区域，进而从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进一步基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像。具体参见图3所示，图3为本实施例提供的图像处理控制方法的基本流程图：

S301：在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，N大于等于3。

在本实施例中，在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，其中，N大于等于3，例如N可以取3、4、5等，也就是说，在接收到拍照指令后，针对同一拍摄场景拍摄至少3帧图像。值得注意的是，在实际应用中，N的具体取值由开发人员根据实验或经验进行灵活设置。可以理解的是，本实施例中针对同一拍摄场景拍摄N帧图像，可以通过一个摄像头针对同一拍摄场景拍摄N帧图像，也可以通过终端同一面设置的2个及其2个以上的摄像头针对同一拍摄场景拍摄的N帧图像。

应当明确的是，本实施例中N的具体值还可以根据预设时间和摄像头曝光时间确定，其中，N＝预设时间/曝光时间，例如，设曝光时间为0.1秒，预设时间为1秒，则N为10，即在接收到拍照指令后，针对同一拍摄场景拍摄10帧图像。值得注意的是，预设时间由开发人员根据实验或经验进行灵活设置，当然也可以由用户进行自定义设置，例如在接收到拍照指令后，拍摄时间过长会让用户体验不佳，因此，预设时间可以设置为1秒，2秒等。同时还值得注意的是，曝光时间同样由开发人员根据实验或经验进行灵活设置，当然也可以由用户进行自定义设置，例如设置为0.2秒、0.3秒等，可以理解的是，曝光时间还可以根据周围环境亮度进行调节，环境亮度越低，曝光时间越长。

S302：确定出N帧图像中各帧图像的运动区域。

在本实施例中，首先需确定出各帧图像的运动区域与非运动区域，以便后续针对确定出的运动区域计算位移量，具体的，可通过帧间差分法确定出N帧图像中的各帧图像的运动区域与非运动区域。值得注意的是，这里所列举的只是一种确定出各帧图像的运动区域与非运动区域的算法，本发明并不局限于这一种算法，事实上，只要能是实现确定出各帧图像的运动区域与非运动区域的算法均在本发明的保护范畴内，在实际应用中，由开发人员根据具体场景需求进行算法的灵活选取。

S303：从N帧图像中依次选取两帧图像。

在本实施例中，在确定出N帧图像中各帧图像的运动区域后，需从N帧图像中依次选取两帧图像。例如，设拍摄得到6帧图像，分别为F1、F2、F3、F4、F5、F6，此时从该6帧图像中依次选取F1、F2和F3、F4和F5、F6，或者依次选取F1、F6和F2、F5和F3、F4，或者依次选取F1、F4和F2、F5和F3、F6，或者依次选取F1、F2和F1、F3和F1、F4和F1、F5和F1、F6等。

应当明确的是，在本实施例中，还可以按照拍摄时间顺序从N帧图像中依次选取相邻的两帧图像。例如，设拍摄得到6帧图像，按照拍摄时间顺序分别为F1、F2、F3、F4、F5、F6，此时可从该6帧图像中依次选取F1、F2和F2、F3和F3、F4和F4、F5和F5、F6，或者依次选取F1、F2和F3、F4和F5、F6等。

值得注意的是，这里所列举的只是几种常见的从N帧图像中依次选取两帧图像的示例说明，在实际应用中，由开发人员根据具体场景需求做灵活选取。

S304：计算出各两帧图像运动区域对应的像素点的位移量。

在本实施例中，可将两帧图像的其中一帧作为基准帧，另一帧作为参考帧，通过光流法计算参考帧中与基准帧中运动区域的同一像素点的位移量。

应当明确的是，本实施例中将两帧图像的其中一帧作为基准帧，另一帧作为参考帧包括至少以下两种方式：

方式一：将两帧图像的拍摄时间在前的一帧作为基准帧，拍摄时间在后的一帧作为参考帧。

为了更好的理解，这里以示例进行说明，例如设拍摄得到6帧图像，按照拍摄时间顺序分别为F1、F2、F3、F4、F5、F6，依次选取的两帧图像分别为F1、F2和F3、F4和F5、F6，此时将F1、F3、F5分别作为基准帧，F2、F4、F6分别作为参考帧。

方式二：将两帧图像的拍摄时间在后的一帧作为基准帧，拍摄时间在前的一帧作为参考帧。

为了更好的理解，这里以示例进行说明，例如设拍摄得到6帧图像，按照拍摄时间顺序分别为F1、F2、F3、F4、F5、F6，依次选取的两帧图像分别为F1、F2和F3、F4和F5、F6，此时将F2、F4、F6分别作为基准帧，F1、F3、F5分别作为参考帧。

值得注意的是，这里所列举的只是两种将两帧图像的其中一帧作为基准帧，另一帧作为参考帧的示例方式，在实际应用中，需由开发人员根据具体场景需求做灵活调整。

应当明确的是，本实施例中可通过光流法计算参考帧中与基准帧中运动区域的同一像素点的位移量，例如承接上述方式一所列举示例，通过光流法计算出F1运动区域中的像素点a在F2中的位移量(x1，y1)，计算出F3运动区域中的像素点a在F4中的位移量(x2，y2)，计算出F5运动区域中的像素点a在F6中的位移量(x3，y3)。值得注意的是，这里仅是以计算基准帧运动区域中一个像素点与参考帧中的位移量为示例进行的说明，在实际应用中，必然是计算基准帧运动区域中的所有像素点或者预设个数的像素点在参考帧中的位移量。同时还值得注意的是，这里所列举的只是通过光流法计算参考帧中与基准帧中运动区域的的同一像素点的位移量，本发明并不局限于光流法这一种方式，事实上，只要能实现计算参考帧中与基准帧中运动区域的的同一像素点的位移量的方式均在本发明的保护范畴内，在实际应用中，由开发人员根据具体应用场景需求进行灵活选取。

在本实施例中，在计算出各两帧图像运动区域对应的像素点的位移量之前，还对各两帧图像进行滤波处理，具体的，可进行低通滤波处理，以使得低频信号能正常通过，超过设定临界值的高频信号被阻隔、减弱，从而提高各图像帧的清晰度；当然了，也可进行高通滤波处理，以增强图像的边缘及灰度跳变的部分，从而提高各图像帧的清晰度。值得注意的是，还可以采用其他的提高各图像帧清晰度的方式，在实际应用中，由开发人员根据具体场景需求做灵活选择，本发明对此不做具体限定。

S305：基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像。

在本实施例中，基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像，包括至少以下步骤，参见图4所示：

S401：基于基准帧中的各像素点的坐标位置和位移量确定在参考帧中与基准帧中对应的各像素点的坐标位置。

为了更好的理解，这里以示例进行说明，例如承接上述示例进行说明，通过光流法计算出F1运动区域中的像素点a在F2中的位移量(x1，y1)，计算出F3运动区域中的像素点a在F4中的位移量(x2，y2)，计算出F5运动区域中的像素点a在F6中的位移量(x3，y3)，同时设像素点a在F1中的坐标位置为(x11，y11)，像素点a在F3中的坐标位置为(x21，y21)，像素点a在F5中的坐标位置为(x31，y31)，因此可确定出像素点a在F2的坐标位置为(x1+x11，y1+y11)，像素点a在F4的坐标位置为(x2+x21，y2+y21)，像素点a在F6的坐标位置为(x3+x31，y3+y31)。

S402：根据确定出的参考帧中的坐标位置与基准帧中的坐标位置进行合成，得到此次的拍摄图像。

承接上例，进一步的，根据像素点a在F1中的坐标位置(x11，y11)，在F2的坐标位置(x1+x11，y1+y11)，在F3中的坐标位置(x21，y21)，在F4的坐标位置(x2+x21，y2+y21)，在F5中的坐标位置(x31，y31)，在F6的坐标位置(x3+x31，y3+y31)依次将各帧图像F1、F2、F3、F4、F5、F6进行合成，得到此次的拍摄图像。值得注意的是，这里所列举的只是一个具体的示例，在实际应用中，需根据具体应用场景做灵活调整。

在本实施例中，在基于计算出的各位移量将各两帧图像依次进行合成，得到此次的拍摄图像之后，还需将拍摄图像进行显示，以便用户进行查看。

需要说明的是，本实施例中在拍摄图像时，针对图像运动区域的处理利用了拍摄得到的多帧图像，也即利用了多帧图像信息得到最终拍摄得到的图像，同样的，在拍摄视频时，可对拍摄的视频中的图像进行相同处理，其区别仅在于拍摄的视频中的图像数量更多，因此，由于采用本实施例中的图像处理控制方法可使得拍摄得到的图像更加清晰，进而也使得拍摄得到的视频更加清晰，提高了画质。

本实施例提供的图像处理控制方法，通过在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，其中N大于等于3，确定出该N帧图像中各帧图像的运动区域，进而从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进一步基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像，解决了现有技术中对图像运动区域仅进行原始帧和空间降噪后的原始帧的叠加处理，得到图像不够清晰、效果较差，用户体验度低的问题。即在本实施例中，通过从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进而基于计算出的位移量将N帧图像进行合成，实现了多帧图像的运动区域的合成，也即本实施例中对图像运动区域的处理利用到了多帧图像信息，使得拍摄得到的图像更加清晰、效果更好，大大提升了用户的体验满意度。

第二实施例

本实施例是在第一实施例的基础上，以一种具体的图像处理控制方法为例对本发明作进一步的示例说明，具体参见图5所示：

S501：在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，N大于等于3。

设用户开启摄像头进行拍摄，点击了拍照按钮，也即此时接收到拍照指令，设此时针对同一拍摄场景拍摄了4帧图像。

S502：按照拍摄时间顺序从N帧图像中依次选取两帧图像。

承接上例，进一步的，设4帧图像按照拍摄时间由前至后的顺序分别为F1、F2、F3、F4，此时选取图像F1、F2和F1、F3和F1、F4。

S503：将相邻两帧图像帧的拍摄时间在前的一帧作为基准帧，拍摄时间在后的一帧作为参考帧。

承接上例，进一步的，将图像F1作为基准帧，将图像F2、F3、F4作为参考帧。

S504：对各两帧图像进行滤波处理。

承接上例，进一步的，对各图像帧F1、F2、F3、F4分别进行滤波处理，具体的，可采用低通滤波处理，以提高各图像帧F1、F2、F3、F4的清晰度。

S505：通过光流法计算参考帧中与基准帧中运动区域的同一像素点的位移量。

承接上例，进一步的，设通过光流法计算得到基准帧F1中运动区域的像素点b在参考帧F2的位移量为(x2，y2)，像素点b在参考帧F3的位移量为(x3，y3)，像素点b在参考帧F4的位移量为(x4，y4)。

S506：基于基准帧中的各像素点的坐标位置和位移量确定在参考帧中与基准帧中对应的各像素点的坐标位置。

承接上例，进一步的，设像素点b在基准帧F1中的坐标位置为(x1，y1)，此时像素点b在参考帧F2的坐标位置为(x1+x2，y1+y2)，像素点b在参考帧F3的坐标位置为(x1+x3，y1+y3)，像素点b在参考帧F4的坐标位置为(x1+x4，y1+y4)。

S507：根据确定出的参考帧中的坐标位置与基准帧中的坐标位置进行合成，得到此次的拍摄图像。

承接上例，进一步的，根据像素点b在基准帧F1中的坐标位置(x1，y1)，在参考帧F2的坐标位置(x1+x2，y1+y2)，在参考帧F3的坐标位置(x1+x3，y1+y3)，在参考帧F4的坐标位置(x1+x4，y1+y4)进行合成，得到此次的拍摄图像。

值得注意的是，这里仅是以计算基准帧运动区域中一个像素点b在参考帧中的位移量为示例进行的说明，在实际应用中，必然是计算基准帧运动区域中的所有像素点或者预设个数的像素点在参考帧中的位移量，进而将各图像帧进行合成，以提高拍摄得到的图像的清晰度。

S508：将拍摄图像进行显示。

承接上例，进一步的，将拍摄得到的图像进行显示，以供用户查看。

本实施例提供的图像处理控制方法，通过在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，其中N大于等于3，确定出该N帧图像中各帧图像的运动区域，进而从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进一步基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像，解决了现有技术中对图像运动区域仅进行原始帧和空间降噪后的原始帧的叠加处理，得到图像不够清晰、效果较差，用户体验度低的问题。即在本实施例中，通过从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进而基于计算出的位移量将N帧图像进行合成，实现了多帧图像的运动区域的合成，也即本实施例中利用了多帧图像信息对图像运动区域进行处理，使得拍摄得到的图像更加清晰、效果更好，大大提升了用户的体验满意度。

第三实施例

本实施例提供一种终端，请参见图6所示，本实施例提供的终端包括处理器601、存储器602及通信总线603。

其中，本实施例中的通信总线603用于实现处理器601与存储器602之间的连接通信，处理器601则用于执行存储器602中存储的一个或者多个程序，以实现以下步骤：

在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，N大于等于3；

确定出N帧图像中各帧图像的运动区域；

从N帧图像中依次选取两帧图像；

计算出各两帧图像运动区域对应的像素点的位移量；

基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像。

在本实施例中，处理器601可按照拍摄时间顺序从N帧图像中依次选取相邻的两帧图像。

在本实施例中，处理器601可将两帧图像的其中一帧作为基准帧，另一帧作为参考帧，通过光流法计算参考帧中与基准帧中的同一像素点的位移量。

在本实施例中，处理器601将两帧图像的其中一帧作为基准帧，另一帧作为参考帧包括至少以下两种方式：

方式一：处理器601将两帧图像的拍摄时间在前的一帧作为基准帧，拍摄时间在后的一帧作为参考帧。

方式二：处理器601将两帧图像的拍摄时间在后的一帧作为基准帧，拍摄时间在前的一帧作为参考帧。

在本实施例中，处理器601在计算出各两帧图像运动区域对应的像素点的位移量之前，还包括对各两帧图像进行滤波处理。

在本实施例中，处理器601基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像，包括至少以下步骤：

基于基准帧中的各像素点的坐标位置和位移量确定在参考帧中与基准帧中对应的各像素点的坐标位置；

根据确定出的参考帧中的坐标位置与基准帧中的坐标位置进行合成，得到此次的拍摄图像。

应当明确的是，在基于计算出的各位移量将各两帧图像依次进行合成，得到此次的拍摄图像之后，处理器601还需将拍摄图像进行显示，以供用户进行查看。

值得注意的是，为了不累赘说明，在本实施例中并未完全阐述实施例一、二中的所有示例，应当明确的是，实施例一、二中的所有示例均适用于本实施例。

本实施例还提供一种计算机可读存储介质，计算机可读存储介质存储有一个或者多个程序，一个或者多个程序可被一个或者多个处理器执行，以实现如上述的图像处理控制方法的步骤。

本实施例提供的终端和计算机可读存储介质通过通过在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，其中N大于等于3，确定出该N帧图像中各帧图像的运动区域，进而从N帧图像中依次选取两帧图像，计算出各两帧图像运动区域对应的像素点的位移量，进一步基于计算出的位移量将N帧图像进行合成，得到此次的拍摄图像，解决了现有技术中对图像运动区域仅进行原始帧和空间降噪后的原始帧的叠加处理，得到图像不够清晰、效果较差，用户体验度低的问题。所以和现有技术相比，本实施例提供的终端实现了利用多帧图像信息对图像运动区域进行处理，使得拍摄得到的图像更加清晰、效果更好，大大提升了用户的体验满意度。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。

Claims (10)

1.一种图像处理控制方法，其特征在于，所述图像处理控制方法包括：

在接收到拍照指令后，针对同一拍摄场景拍摄N帧图像，所述N大于等于3；

确定出所述N帧图像中各帧图像的运动区域；

从所述N帧图像中依次选取两帧图像；

计算出各所述两帧图像运动区域对应的像素点的位移量；

基于计算出的所述位移量将所述N帧图像进行合成，得到此次的拍摄图像。

2.如权利要求1所述的图像处理控制方法，其特征在于，所述计算出各所述两帧图像运动区域对应的像素点的位移量，包括：

将所述两帧图像的其中一帧作为基准帧，另一帧作为参考帧，通过光流法计算所述参考帧中与所述基准帧中运动区域的同一像素点的位移量。

3.如权利要求2所述的图像处理控制方法，其特征在于，所述基于计算出的所述位移量将所述N帧图像进行合成，得到此次的拍摄图像，包括：

基于所述基准帧中的各像素点的坐标位置和所述位移量确定在所述参考帧中与所述基准帧中对应的各像素点的坐标位置；

根据确定出的所述参考帧中的坐标位置与所述基准帧中的坐标位置进行合成，得到此次的拍摄图像。

4.如权利要求3所述的图像处理控制方法，其特征在于，所述将所述两帧图像的其中一帧作为基准帧，另一帧作为参考帧，包括：

将所述两帧图像的拍摄时间在前的一帧作为基准帧，拍摄时间在后的一帧作为参考帧；

或，

将所述两帧图像的拍摄时间在后的一帧作为基准帧，拍摄时间在前的一帧作为参考帧。

5.如权利要求1-4任一项所述的图像处理控制方法，其特征在于，所述从所述N帧图像中依次选取两帧图像，包括：

按照拍摄时间顺序从所述N帧图像中依次选取相邻的两帧图像。

6.如权利要求1-4任一项所述的图像处理控制方法，其特征在于，所述计算出各所述两帧图像运动区域对应的像素点的位移量之前，还包括：

对各所述两帧图像进行滤波处理。

7.如权利要求1-4任一项所述的图像处理控制方法，其特征在于，所述针对同一拍摄场景拍摄N帧图像，包括：

针对同一拍摄场景拍摄N帧图像，所述N根据预设时间和摄像头曝光时间确定。

8.如权利要求1-4任一项所述的图像处理控制方法，其特征在于，所述基于计算出的各所述位移量将各所述两帧图像依次进行合成，得到此次的拍摄图像之后，包括：

将所述拍摄图像进行显示。

9.一种终端，其特征在于，所述终端包括处理器、存储器及通信总线；

所述通信总线用于实现所述处理器和所述存储器之间的连接通信；

所述处理器用于执行所述存储器中存储的一个或者多个程序，以实现如权利要求1-8任一项所述的图像处理控制方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如权利要求1-8任一项所述的图像处理控制方法的步骤。