CN108886561A - 一种应用于终端的拍摄图像的方法及终端设备 - Google Patents

Abstract

一种应用于终端拍摄图像的方法及终端设备，以改善摩尔纹对拍摄的图像质量的影响。该方法包括：终端设备获取待拍摄对象的第一图像，确定所述第一图像中存在摩尔纹时，移动自身的镜头，并在移动所述镜头的过程中获取所述待拍摄对象的至少一个第二图像，根据所述至少一个第二图像修复所述第一图像的摩尔纹区域，输出修复后的图像。

Description

一种应用于终端的拍摄图像的方法及终端设备

本申请要求在2017年5月23日提交中国专利局、申请号为201710369480.2、发明名称为“一种拍照的方法和终端”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。

技术领域

本申请涉及图像处理技术领域，尤其涉及一种应用于终端的拍摄图像的方法及终端设备。

背景技术

在拍摄图像过程中，若电荷耦合元件(charge-coupled device，CCD)、互补金属氧化物半导体(complementary metal oxide semiconductor，CMOS)等感光元件像素的空间频率与被拍摄对象中周期性的图案(如格子、条纹等)的空间频率接近，就会产生摩尔纹，使得拍摄的图像中出现彩色的高频率条纹，影响图像的质量，如图1所示。

目前，主要采用以下两种方法改善拍摄的图像中的摩尔纹效应：

一、通过低通滤波器滤掉图像中的高空间频率部分，从而消除拍摄图像过程中可能产生的摩尔纹。其中，该方法包括硬件滤波和软件滤波两种方式。

硬件滤波是指在终端设备上安装低通滤镜，滤掉图像中的高空间频率部分。但是安装低通滤镜的成本较高，无法灵活选择应用场景，并且降低了终端设备的成像锐度，影响拍摄的图像的质量。

软件滤波是指通过专用影像修饰软件，滤掉图像中的高空间频率部分，但是软件滤波无法还原拍摄的图像中的细节。

二、采用新型的图像传感器，通过增加图像传感器中感光单元阵列的无序性，减少摩尔纹的产生。例如，如图2a所示的6×6的感光单元阵列的传感器，相比于如图2b所示的2×2感光单元阵列的传感器，增加了感光单元阵列的无序性，其中，R表示红色(red)，G表示绿色(green)，B表示蓝色(blue)。

由于新型图像传感器中感光单元阵列较复杂，导致生成图像的算法也变得复杂。

发明内容

本申请实施例提供了一种应用于终端的拍摄图像的方法及终端设备，以改善摩尔纹对拍摄的图像质量的影响。

第一方面，本申请实施例提供了一种应用于终端的拍摄图像的方法，该方法包括：终端设备获取待拍摄对象的第一图像，在确定该第一图像中存在摩尔纹时，移动自身的镜头，并在移动镜头的过程中获取该待拍摄对象的至少一个第二图像，然后根据获得的至少一个第二图像修复该第一图像中的摩尔纹区域，输出修复后的图像。

通过上述方法，终端设备在确定获取到的待拍摄对象的第一图像中存在摩尔纹时，移动自身的镜头，在移动镜头的过程中获取到的该待拍摄对象的至少一个第二图像，并使用至少一个第二图像修复该第一图像中的摩尔纹区域，输出修复后的图像，从而改善终端设备拍摄的图像中的摩尔纹效应，以提高终端设备拍摄图像的质量。并且，终端设备在确定获取到的待拍摄对象的第一图像中存在摩尔纹时，才移动自身的镜头以修复该第一图像中的摩尔纹区域，即终端设备能够自动选择应用场景，可以减少修复图像的相关操作。

一个可能的实施方式中，终端设备在确定该第一图像中存在摩尔纹时，通过自身的光学防抖系统OIS移动镜头。通过该方法，终端设备不需要增加新的硬件即可控制自身的镜头进行移动，可以降低终端设备的复杂度和成本。

一个可能的实施方式中，终端设备通过以下几种方式中的任意一种修复该第一图像的摩尔纹区域：方式一、若终端设备在自身镜头移动的过程中获取到一个第二图像，则将该第一图像中包含摩尔纹的区域替换为该第二图像中的相应区域；方式二、若终端设备在自身镜头移动的过程中获取到多个第二图像，则选择该多个第二图像中频率小于设定阈值的一个第二图像，将该第一图像中存在摩尔纹的区域替换为选择的第二图像中的相应区域；方式三、若终端设备在自身镜头移动的过程中获取到多个第二图像，则对该第一图像以及该多个第二图像进行图像融合。

通过该方法，终端设备能够该第一图像的摩尔纹区域进行修复，改善第一图像中的摩尔纹效应，且修复方法简单。并且，终端设备通过对存在摩尔纹的第一图像以及在自身镜头移动的过程中获取到的多个第二图像进行图像融合，修复第一图像的摩尔纹区域，不会降低第一图像的锐度，从而可以保证修复后的第一图像的质量。

一个可能的实施方式中，终端设备对获取到的第一图像以及多个第二图像进行图像融合，包括以下步骤：针对该多个第二图像中的任一第二图像，终端设备根据该任一第二图像、以及获取该任一第二图像时自身镜头相对于获取该第一图像时镜头的移动方向和移动距离，确定该任一第二图像中与该第一图像的摩尔纹区域相对应的目标融合区域，使用该任一第二图像的目标融合区域中包括的各个像素块的像素值，对该第一图像的摩尔纹区域中包括的相应像素块的像素值进行插值。

通过该方法，终端设备根据获取到的多个第二图像对该第一图像的摩尔纹区域进行插值处理，可以提高该第一图像的摩尔纹区域的分辨率，进而达到修复该第一图像的摩尔纹区域的目的。

一个可能的实施方式中，终端设备可以在自身镜头移动一次时对该待拍摄对象拍摄一个或多个第二图像。

一个可能的实施方式中，终端设备可以通过以下两种方式中的任意一种，在自身镜头移动的过程中获取该待拍摄对象的至少一个第二图像：方式一、终端设备在自身镜头移动一次时对该待拍摄对象拍摄一个第二图像，通过移动N次该镜头获取该待拍摄对象的至少一个第二图像，其中，N为大于或等于1的整数；方式二、终端设备在自身镜头移动一次时对该待拍摄对象拍摄多个第二图像，通过移动N次该镜头获取该待拍摄对象的多个第二图像。

一个可能的实施方式中，终端设备若确定获取的第一图像中不存在摩尔纹，则可以直接输出所述第一图像。

第二方面，本申请实施例还提供了一种终端设备，该终端设备具有实现第一方面所述方法实例中终端设备行为的功能。所述功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块。

一种可能的实施方式中，所述终端设备的结构中包括图像获取单元、图像处理单元和图象显示单元等，这些单元可以执行第一方面方法示例中的相应功能，具体参见第一方面所述方法示例中的详细描述，此处不做赘述。

一种可能的实施方式中，所述终端设备的结构中包括拍摄系统、处理器、存储器、收发器以及显示器等组件，所述存储器中存储有支持所述终端设备执行第一方面所述方法中相应功能的软件程序，所述存储器与所述处理器耦合，所述拍摄系统可以拍摄待拍摄对象形成图像，所述处理器可以调用存储器中存储的软件程序并执行，以对所述拍摄系统拍摄待拍摄对象获得的图像进行摩尔纹区域的消除处理，所述显示器可以显示处理器处理后的图像。

第三方面，本申请实施例中还提供一种计算机存储介质，该存储介质中存储有软件程序，该软件程序在被一个或多个处理器读取并执行时可实现任一方面的任意一种实施方式提供的方法。

第四方面，本申请实施例中还提供一种计算机程序产品，该计算机程序产品在被一个或多个处理器读取并执行时可实现任一方面的任意一种实施方式提供的方法。

本申请实施例提供的方案中，终端设备在确定获取到的待拍摄对象的第一图像中存在摩尔纹时，移动自身的镜头，在镜头移动的过程中获取到的该待拍摄对象的至少一个第二图像，并使用至少一个第二图像修复该第一图像中的摩尔纹区域，输出修复后的图像，从而改善终端设备拍摄的图像中的摩尔纹效应，以提高终端设备拍摄图像的质量。并且，终端设备在确定获取到的待拍摄对象的第一图像中存在摩尔纹时，才移动自身的镜头以修复该第一图像中的摩尔纹区域，即终端设备能够自动选择应用场景，可以减少修复图像的相关操作。

附图说明

图1为终端设备拍摄的图像中摩尔纹示意图；

图2a为现有技术中6×6的感光单元阵列的传感器的示意图；

图2b为现有技术中2×2的感光单元阵列的传感器的示意图；

图3为本申请实施提供的终端设备中拍摄系统的结构示意图；

图4为本申请实施例提供的第一种终端设备的结构图；

图5为本申请实施例提供的一种应用于终端的拍摄图像方法的流程示意图；

图6为本申请实施例中获取第二图像的示意图；

图7为本申请实施例中对第一图像进行插值处理过程的示意图；

图8为本申请实施例提供的第二种终端设备的结构示意图；

图9为本申请实施例提供的第三种终端设备的结构示意图。

具体实施方式

本申请提供一种应用于终端的拍摄图像的方法及终端设备，以改善摩尔纹对拍摄的图像质量的影响。其中，本申请方法和终端设备基于同一发明构思，由于该方法和终端设备解决问题的原理相似，因此该终端设备与方法的实施例可以相互参见，重复之处不再赘述。

本申请实施例提供的应用于终端的拍摄图像的方法可以应用于终端设备通过自身的拍摄系统，拍摄得到的图像中存在摩尔纹的场景。终端设备确定获取到的待拍摄对象的第一图像中存在摩尔纹时，可以通过移动自身的镜头，并在镜头移动过程中获取该待拍摄对象的至少一个第二图像，根据获取到的该待拍摄对象的至少一个第二图像，来修复该第一图像中的摩尔纹区域，输出修复后的图像。终端设备在自身镜头移动过程中拍摄待拍摄对象的第二图像，相当于对待拍摄对象的图像进行了一定程度的模糊，因此，相较于第一图像，第二图像中的高频成分较少，即第二图像受摩尔纹效应影响较小，使得终端设备可以根据至少一个第二图像修复该第一图像的摩尔纹区域，进而可以改善终端设备拍摄的图像中的摩尔纹效应。

基于上述方法，终端设备利用自身镜头移动的过程中获取到的待拍摄对象的至少一个第二图像，修复该待拍摄对象的第一图像中的摩尔纹区域，进而可以改善终端设备拍摄的图像中的摩尔纹效应，以提高终端设备拍摄的图像的质量。并且，终端设备在确定获取到的待拍摄对象的第一图像中存在摩尔纹时，才移动自身的镜头以修复该第一图像中的摩尔纹区域，即终端设备能够自动选择应用场景，且可以避免进行不必要的修复图像的相关操作。

以下，对本申请实施例中涉及的部分术语进行解释说明，以便于本领域技术人员理解。

1)终端设备，为含有内置的拍摄系统，可以实现拍摄图像(视频)功能的设备，该终端设备可以为手机、平板电脑、或数码照相机等。

2)摩尔纹，就是手机、数码照相机、扫描仪等设备的感光元件在拍摄、扫描的过程中受到高频干扰，从而在通过该感光元件获得的图像上出现的形状不规律的彩色条纹。

3)图像融合，指将多源信道所采集到的关于同一目标的图像数据经过图像处理和计算机技术等，最大限度地提取各自信道中的有利信息，最后综合成高质量的图像，以提高图像信息的利用率、改善计算机解译精度和可靠性、提升原始图像的空间分辨率和光谱分辨率。

4)多个，是指两个或两个以上。

5)和/或，描述关联对象的关联关系，表示可以存在三种关系。例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

另外，需要理解的是，在本申请描述中，“第一”、“第二”等词汇，仅用于区分描述，而不能理解为指示或暗示相对重要性，也不能理解为指示或暗示顺序。

本申请实施例提供了一种拍摄图像的方法及终端设备，适用于终端设备中。图3示出了终端设备中一种可能的拍摄系统的结构，该拍摄系统300主要包括：镜头301、图像传感器302、模数转换模块303、图像处理模块304以及存储模块305。其中，镜头301用于捕获待拍摄对象反射的光，将捕获到的光聚焦到图像传感器302上；图像传感器302用于将镜头301捕获的光转换为待拍摄对象的图像对应的模拟信号，可以为CCD传感器或COMS传感器；模数转换模块303用于将图像传感器302输出的模拟信号转换为数字信号；图像处理模块304用于对模数转换模块303输出的待拍摄对象的图像对应的数字信号进行色彩校正、白平衡等处理，并将处理后的数据编码为该终端设备所支持的图像格式；存储模块305用于保存图像处理模块输出的图像文件。

尽管图3中未示出，但是图3所示的拍摄系统300还可以包括信号处理模块，用于对图像传感器输出的模拟信号进行信号处理，如放大、滤波等。

图4示出了一种可能的终端设备的结构图，该终端设备具有如图3所示的拍摄系统300。参阅图4所示，所述终端设备400包括：处理器410、存储器420、摄像头430和显示单元440等部件。本领域技术人员可以理解，图4中示出的终端设备结构并不构成对终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

下面结合图4对终端设备400的各个构成部件进行具体的介绍：

存储器420可用于存储软件程序以及数据，处理器410通过运行存储在存储器420的软件程序以及数据，从而执行终端设备400的各种功能应用以及数据处理。存储器420可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、各种应用程序(比如拍照应用)等；存储数据区可存储根据终端设备400的使用所创建的数据(比如拍摄的图像、视频文件等)等，实现拍摄系统300中存储模块305的功能。此外，存储器420可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器410是终端设备400的控制中心，利用各种接口和线路连接各个部件，通过运行或执行存储在存储器420内的软件程序和/或模块，以及调用存储在所述存储器420内的数据，执行终端设备400的各种功能和处理数据，从而实现基于该终端设备的多种业务。处理器410可以包括一个或多个通用处理器，还可包括一个或多个数字信号处理器(digital signal processor，DSP)，也可以包括一个或者多个图像信号处理器(imagesignal processor，ISP)，用于执行相关操作，以实现本申请实施例所提供的技术方案。例如，处理器410可以通过DSP实现拍摄系统300中模数转换模块303以及图像处理模块304的功能。

摄像头430，用于实现终端设备400的拍摄功能，拍摄图片或视频。摄像头430可以是普通摄像头，也可以是对焦摄像头。其中，摄像头430包括镜头301和图像传感器302。

显示单元440，包括的显示面板441，用于显示由用户输入的信息或提供给用户的信息以及终端设备400的各种菜单界面等，在本申请实施例中主要用于显示终端设备400中摄像头拍摄的图像。可选的，显示面板441可以采用液晶显示器(liquid crystal display，LCD)或有机发光二极管(organic light-emitting diode，OLED)等形式来配置显示面板441。

终端设备400还可以包括输入单元450，用于接收输入的数字信息、字符信息或接触式触摸操作/非接触式手势，以及产生与终端设备400的用户设置以及功能控制有关的信号输入等。具体地，本申请实施例中，输入单元450可以包括触控面板451。触控面板451，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板451上或在触控面板451的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板451可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器410，并能接收处理器410发来的命令并加以执行。例如，用户在触控面板451上用手指单击用于拍摄图像的图标，触摸检测装置检测到此次单击带来的这个信号，然后将该信号传送给触摸控制器，触摸控制器再将这个信号转换成坐标发送给处理器410，处理器410根据该坐标和该信号的类型(单击或双击)确定对该图标所执行的操作(开启)。

触控面板451可以采用电阻式、电容式、红外线以及表面声波等多种类型实现。除了触控面板451，输入单元450还可以包括其他输入设备452，其他输入设备452可以包括但不限于物理键盘、功能键(比如拍照控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

进一步的，触控面板451可覆盖显示面板441，当触控面板441检测到在其上或附近的触摸操作后，传送给处理器410以确定触摸事件的类型，随后处理器410根据触摸事件的类型在显示面板441上提供相应的视觉输出。

除以上之外，终端设备400还可以包括用于给其他模块供电的电源460。终端设备400还可以包括一个或多个传感器470，例如红外传感器、激光传感器、位置传感器或镜头指向角度传感器等。终端设备400还可以包括无线射频(radio frequency,RF)电路480，用于通信或通话过程中，数据的接收和发送。特别地，RF电路480在接收到基站的下行数据后，发送给所述处理器410处理；另外，将待发送的上行数据发送给基站。通常，RF电路480包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low Noise Amplifier，LNA)、双工器等。此外，RF电路480还可以通过无线通信与网络和其他设备通信。终端设备400还可以包括WiFi模块490，用于与其他设备进行WiFi通信，获取其他设备传输的图像或者数据等。

本申请实施例提供了一种应用于终端的拍摄图像的方法，该方法适用于具有上述图3所示的拍摄系统300的如图4所示的终端设备400。在本申请实施例中，以所述终端设备400为例进行描述，当然本发明实施例方案还可以应用于其他结构的设备中，比如摄像设备、照相机等设备。参阅图5所示，该方法的具体流程包括：

S501：终端设备400获取待拍摄对象的第一图像。

具体地，终端设备400可以通过以下步骤获取待拍摄对象的第一图像：终端设备400中的输入单元450接收用户输入的用于开启拍摄功能的手势，产生开启拍摄功能的指令，并将该指令发送给终端设备400中的处理器410；处理器410根据该指令，开启拍摄功能，并控制终端设备400中的拍摄系统300对该待拍摄对象进行拍摄，得到该待拍摄对象的第一图像。

S502：终端设备400确定该第一图像中存在摩尔纹时，移动自身的镜头，并在移动该镜头的过程中获取该待拍摄对象的至少一个第二图像。

其中，由于终端设备400的镜头前后移动时对焦不准，终端设备400获得的第二图像的成像质量差，无法用于修复该第一图像的摩尔纹区域，因此终端设备400控制自身的镜头在与该镜头的光轴垂直的平面内移动，例如控制自身的镜头相对于获取该第一图像时所在的位置，向上、下、左或右移动。

具体地，终端设备400可以通过以下步骤执行S502：终端设备400中的处理器410确定该第一图像中存在摩尔纹时，向终端设备400中的拍摄系统300发送移动拍摄系统300中镜头301的控制指令，控制镜头301进行移动；拍摄系统300根据该控制指令移动镜头301，并在移动镜头301的过程中对该待拍摄对象进行拍摄，得到该待拍摄对象的至少一个第二图像。

一个具体的实施方式中，终端设备400确定该第一图像中存在摩尔纹时，可以通过下述过程实现：

对该第一图像进行傅里叶变换，得到该第一图像的频域信息，当该第一图像的频域信息中存在频率大于第一设定值，且该频率对应的幅值大于第二设定值的频域信息时，则确定该第一图像中存在摩尔纹，其中，该第一设定值根据该终端设备400中图像传感器的感光单元像素的空间频率确定，第二设定值根据经验值或仿真结果确定。

可选地，终端设备400可以通过自身的光学防抖(optical image stabilization，OIS)系统移动该镜头。终端设备400通过自身的OIS系统移动该镜头，不需要在终端设备400中增加新的硬件来控制镜头的移动，可以降低终端设备400的复杂度和成本。

一个具体的实施方式中，终端设备400确定获取到的第一图像中存在摩尔纹时，在自身镜头移动一次时对该待拍摄对象拍摄一个或多个第二图像，从而获得该待拍摄对象的至少一个第二图像。

具体地，终端设备400可以通过但不限于以下两种方式中的任意一种，在移动自身镜头的过程中获取该待拍摄对象的至少一个第二图像：

方式一、终端设备400在自身镜头移动一次时对该待拍摄对象拍摄一个第二图像，通过移动N次该镜头获取该待拍摄对象的至少一个第二图像，其中，N为大于或等于1的整数。

方式二、终端设备400在自身镜头移动一次时对该待拍摄对象拍摄多个第二图像，通过移动N次该镜头获取该待拍摄对象的多个第二图像。

需要说明的是，本申请实施例并不对终端设备400的镜头相对于拍摄该第一图像移动时该镜头的移动方向和移动距离进行限定。终端设备400可以在相对于拍摄该第一图像时该镜头的同一个方向上移动N次该镜头，每次移动不同的距离，或者，可以在相对于拍摄该第一图像时该镜头的不同方向上移动N次该镜头，每次移动的距离可以相同也可以不同。例如，如图6所示，终端设备400在确定该第一图像中存在摩尔纹时，控制自身的镜头相对于获取该第一图像时镜头所在的位置，分别向上、下、左、右移动，得到待拍摄对象的四个第二图像。

S503：终端设备400根据该至少一个第二图像修复该第一图像的摩尔纹区域，输出修复后的图像。

具体地，终端设备400可以通过以下步骤执行S503：终端设备400中的处理器410调用终端设备400中的处理器420中存储的程序，执行：根据该至少一个第二图像修复该第一图像的摩尔纹区域，输出修复后的图像。

具体地，终端设备400可以将修复后的图像输出到显示单元440进行显示，和/或将修复后的图像保存到存储器420。或者，终端设备400可以将修复后的图像输出到与该终端设备400连接的其他设备上进行显示和/或保存，其中，终端设备400可以通过WiFi模块490与其他设备连接。

可选地，终端设备400通过但不限于以下几种方式中的任意一种修复该第一图像的摩尔纹区域：

方式A、若终端设备400在自身镜头移动的过程中获取到一个第二图像，则将该第一图像中包含摩尔纹的区域替换为该第二图像中的相应区域。

方式B、若终端设备400在自身镜头移动的过程中获取到多个第二图像，则选择该多个第二图像中的任一第二图像或者频率均小于设定阈值的一个第二图像，将该第一图像中存在摩尔纹的区域替换为选择的第二图像中的相应区域。其中，该设定阈值根据终端设备400中图像传感器的感光单元像素的空间频率确定，当第二图像的频率均小于该设定阈值时，该第二图像中的摩尔纹较少。

上述方式A和方式B中，终端设备400通过将待拍摄对象的第一图像中存在摩尔纹的区域替换为镜头移动过程中获取到的第二图像中的相应区域，实现对该第一图像中摩尔纹区域的修复，方法简单，容易实现。

方式C、若终端设备400在自身镜头移动的过程中获取到多个第二图像，则对该第一图像以及该多个第二图像进行图像融合。其中，终端设备400可以通过以下几种算法中的一种对该第一图像以及该多个第二图像进行图像融合：比值(Brovey)变换图像融合算法、梯度金字塔(gradient pyramid，GP)变换图像融合算法、HIS(其中H表示色调(hue)，I表示亮度(intensity)，S表示饱和度(saturation))彩色空间变换图像融合算法、超分辨率图像融合(super-resolution image fusion)以及插值算法等。

一个具体的实施方式中，终端设备400对获取到的第一图像以及多个第二图像进行图像融合，包括以下步骤：针对该多个第二图像中的任一第二图像，终端设备400根据该任一第二图像、以及获取该任一第二图像时自身镜头相对于获取该第一图像时镜头的移动方向和移动距离，确定该任一第二图像中与所述第一图像的摩尔纹区域相对应的目标融合区域，使用该任一第二图像的目标融合区域中包括的各个像素块的像素值，对该第一图像的摩尔纹区域中包括的相应像素块的像素值进行插值，可以提高该第一图像的摩尔纹区的分辨率，进而达到修复该第一图像的摩尔纹区域的目的。

其中，终端设备400对该第一图像的摩尔纹区域中包括的相应像素块的像素值进行插值时，所使用的差值算法可以是双线性差值算法、最邻近差值算法或立方卷积差值算法等。需要说明的是，此处仅为举例说明，并不对本发明实施例中终端设备400根据获取到的多个第二图像，对该第一图像的摩尔纹区域中包括的相应像素块的像素值进行插值时所使用的具体算法进行限定。

例如，如图7所示，终端设备400获取的待拍摄对象的第一图像的摩尔纹区域的第一像素模块的像素值为a，获取到的该待拍摄对象的一个第二图像中对应的该第一像素块的像素值为b，则根据像素值a、像素值b以及设定的插值算法，对第一图像中的第一像素块进行差值，依次类推得到利用该第二图像插值处理后的第一图像。

实施中，终端设备400采用上述方式C修复该第一图像中的摩尔纹区域，不会降低修复后图像的锐度，从而可以保证修复后的图像的质量。

可选地，终端设备400若确定该待拍摄对象的第一图像中不存在摩尔纹，则可以直接输出该第一图像，即终端设备400在获取到的第一图像之后可以进行应用场景的判断，若确定该第一图像中存在摩尔纹，则移动自身的镜头，在该镜头移动过程中获取该待拍摄对象的多个第二图像，根据该多个第二图像修复该第一图像中的摩尔纹区域，否则，直接输出该第一图像，不进行修复图像相关的操作。

通过上述方法，终端设备400确定待拍摄对象的第一图像中存在摩尔纹时，利用自身镜头移动的过程中获取到的该待拍摄对象的至少一个第二图像，修复该第一图像中的摩尔纹区域，从而改善终端设备400拍摄的图像中的摩尔纹效应，以提高终端设备400拍摄的图像的质量。并且，终端设备400在确定获取到的待拍摄对象的第一图像中存在摩尔纹时，才移动自身的镜头以修复该第一图像中的摩尔纹区域，即终端设备400能够自动选择应用场景，可以减少修复图像的相关操作。

基于同一发明构思，本申请实施例还提供了一种终端设备，该终端设备用于实现上述实施例中的拍摄图像的方法。参阅图8所示，该终端设备800包括：图像获取单元801和图像处理单元802。

图像获取单元801，用于获取拍摄系统拍摄的待拍摄对象的第一图像，以及在图像处理单元802控制该拍摄系统中的镜头移动的过程中，获取该拍摄系统拍摄的该待拍摄对象的至少一个第二图像。

图像处理单元802，用于确定该第一图像中存在摩尔纹时，控制该拍摄系统中的镜头进行移动，以及根据图像获取单元801获取到的至少一个第二图像修复该第一图像的摩尔纹区域，输出修复后的图像。

可选地，图像处理单元802具体用于：通过自身的OIS系统控制该拍摄系统中镜头进行移动。

可选地，图像处理单元802具体用于：

若图像获取单元801在该拍摄系统中的镜头移动的过程中获取到一个第二图像，则将该第一图像中包含摩尔纹的区域替换为该第二图像中的相应区域；或者

若图像获取单元801在该拍摄系统中的镜头移动的过程中获取到多个第二图像，则选择该多个第二图像中频率小于设定阈值的一个第二图像，将该第一图像中存在摩尔纹的区域替换为选择的第二图像中的相应区域；或者

若图像获取单元801在该拍摄系统中的镜头移动的过程中获取到多个第二图像，则对该第一图像以及该多个第二图像进行图像融合。

可选地，图像处理单元802具体用于：

根据任一第二图像、以及获取该任一第二图像时该镜头相对于获取该第一图像时所述镜头的移动方向和移动距离，确定该任一第二图像中与该第一图像的摩尔纹区域相对应的目标融合区域；

使用该任一第二图像的目标融合区域中包括的各个像素块的像素值，对该第一图像的摩尔纹区域中包括的相应像素块的像素值进行插值。

可选地，图像获取单元801具体用于：获取该拍摄系统中的镜头移动一次时对该待拍摄对象拍摄的一个或多个第二图像。

可选地，图像处理单元802还用于：若确定该第一图像中不存在摩尔纹，则输出该第一图像。

可选地，终端设备800还包括图像显示单元803，用于显示图像处理单元802输出的第一图像以及修复后的第一图像。

本申请实施例提供了一种终端设备，该终端设备在确定获取到的待拍摄对象的第一图像中存在摩尔纹时，可以对该第一图像的摩尔纹区域进行修复，以改善摩尔纹效应对拍摄的图像的质量的影响，可以提高拍摄的图像的质量。

需要说明的是，本申请实施例中对单元的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。在本申请的实施例中的各功能模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

基于同一发明构思，本申请实施例还提供了一种终端设备，该终端设备用于实现上述实施例中的拍摄图像的方法，具有如图8所示的终端设备800的功能。参阅图9所示，所述终端设备900包括：拍摄系统901和处理器902，其中，拍摄系统901中包括镜头。

拍摄系统901，用于通过该镜头拍摄待拍摄对象的第一图像；以及在处理器902的指示下，移动拍摄系统901中的镜头并在该镜头移动的过程中，通过该镜头拍摄该待拍摄对象的至少一个第二图像。可选地，拍摄系统901的具体结构如图3所示。

处理器902，用于在确定拍摄系统901拍摄的第一图像中存在摩尔纹时，向拍摄系统901发送指令，指示拍摄系统901通过移动中的镜头拍摄该待拍摄对象的至少一个第二图像，以及并根据拍摄系统901拍摄的至少一个第二图像修复该第一图像的摩尔纹区域，输出修复后的图像。

可选的，拍摄系统901和处理器902通过总线903相互连接；总线903可以是外设部件互连标准(peripheral component interconnect，PCI)总线或扩展工业标准结构(extended industry standard architecture，EISA)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图9中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

可选地，拍摄系统901移动镜头时，具体用于：通过拍摄系统901中的OIS系统移动该镜头。

可选地，处理器902在根据该至少一个第二图像修复该第一图像的摩尔纹区域时，具体用于：

若拍摄系统901在该镜头移动的过程中拍摄到一个第二图像，则将该第一图像中包含摩尔纹的区域替换为该第二图像中的相应区域；或者

若拍摄系统901在该镜头移动的过程中拍摄到多个第二图像，则选择该多个第二图像中频率小于设定阈值的一个第二图像，将该第一图像中存在摩尔纹的区域替换为选择的第二图像中的相应区域；或者

若拍摄系统901在该镜头移动的过程中拍摄到多个第二图像，则对该第一图像以及该多个第二图像进行图像融合。

可选地，处理器902在对该第一图像以及该多个第二图像进行图像融合时，具体用于：

根据任一第二图像、以及拍摄系统901拍摄得到该任一第二图像时该镜头相对于拍摄得到该第一图像时该镜头的移动方向和移动距离，确定该任一第二图像中与该第一图像的摩尔纹区域相对应的目标融合区域；

使用该任一第二图像的目标融合区域中包括的各个像素块的像素值，对该第一图像的摩尔纹区域中包括的相应像素块的像素值进行插值。

可选地，拍摄系统901在移动该镜头并在该镜头移动的过程中，通过该镜头拍摄该待拍摄对象的至少一个第二图像时，具体用于：在拍摄系统901的镜头移动一次时通过该镜头对该待拍摄对象拍摄一个或多个第二图像。

可选地，处理器902还用于：若确定拍摄系统901拍摄的第一图像中不存在摩尔纹，则输出该第一图像。

可选的，终端设备900还包括存储器904，与拍摄系统901和处理器902互相连接，存储器904用于存放程序、拍摄系统901拍摄的图像以及处理器902输出的修复后的图像等。具体地，程序可以包括程序代码，该程序代码包括指令。存储器904可能包含RAM，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。处理器902执行存储器904所存放的应用程序，实现上述功能，从而实现如图5所示的拍摄图像的方法。

可选地，终端设备900还包括显示器905，用于显示处理器902输出的不存在摩尔纹的第一图像或者处理器902修复的图像。

可选的，终端设备900还可以包括收发器906，与处理器902以及存储器904相互连接，用于接收和发送数据。例如，收发器906在处理器902的控制下，将修复后的图像发送到其他设备。

本申请实施例提供了一种终端设备，该终端设备在确定获取到的待拍摄对象的第一图像中存在摩尔纹时，可以对该第一图像的摩尔纹区域进行修复，以改善摩尔纹效应对该终端设备拍摄的图像的质量的影响，可以提高终端设备拍摄的图像的质量。

综上所述，本申请实施例提供了一种拍摄图像的方法及终端设备，在该方法中，终端设备获取待拍摄对象的第一图像；确定该第一图像中存在摩尔纹时，控制自身的镜头进行移动，并在该镜头移动的过程中获取该待拍摄对象的至少一个第二图像；根据该至少一个第二图像修复该第一图像中的摩尔纹区域，输出修复后的图像，从而改善摩尔纹效应对该终端设备拍摄的图像的质量的影响，可以提高拍摄的图像的质量。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本申请实施例进行各种改动和变型而不脱离本申请实施例的精神和范围。这样，倘若本申请实施例的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (14)

1.一种应用于终端的拍摄图像的方法，其特征在于，包括：

获取待拍摄对象的第一图像；

确定所述第一图像中存在摩尔纹时，移动所述终端的镜头，并在移动所述镜头的过程中获取所述待拍摄对象的至少一个第二图像；

根据所述至少一个第二图像修复所述第一图像的摩尔纹区域，输出修复后的图像。

2.如权利要求1所述的方法，其特征在于，所述移动所述终端的镜头，包括：

通过所述终端的光学防抖OIS系统移动所述镜头。

3.如权利要求1或2所述的方法，其特征在于，根据所述至少一个第二图像修复所述第一图像的摩尔纹区域，包括：

若在所述镜头移动的过程中获取到一个第二图像，则将所述第一图像中包含摩尔纹的区域替换为所述第二图像中的相应区域；或者

若在所述镜头移动的过程中获取到多个第二图像，则选择所述多个第二图像中频率均小于设定阈值的一个，将所述第一图像中存在摩尔纹的区域替换为选择的第二图像中的相应区域；或者

若在所述镜头移动的过程中获取到多个第二图像，则对所述第一图像以及所述多个第二图像进行图像融合。

4.如权利要求3所述的方法，其特征在于，对所述第一图像以及所述多个第二图像进行图像融合，包括：

针对所述多个第二图像中的任一第二图像，执行：

根据该任一第二图像、以及获取该任一第二图像时所述镜头相对于获取所述第一图像时所述镜头的移动方向和移动距离，确定该任一第二图像中与所述第一图像的摩尔纹区域相对应的目标融合区域；

使用该任一第二图像的目标融合区域中包括的各个像素块的像素值，对所述第一图像的摩尔纹区域中包括的相应像素块的像素值进行插值。

5.如权利要求1-4任一所述的方法，其特征在于，在所述镜头移动一次时对所述待拍摄对象拍摄一个或多个第二图像。

6.如权利要求1-5任一所述的方法，其特征在于，所述方法还包括：

若确定所述第一图像中不存在摩尔纹，则输出所述第一图像。

7.一种终端设备，其特征在于，包括拍摄系统和处理器，所述拍摄系统中包括镜头，其中：

所述拍摄系统，用于通过所述镜头拍摄待拍摄对象的第一图像；以及在所述处理器的指示下，移动所述拍摄系统中的镜头并在所述镜头移动的过程中，通过所述镜头拍摄所述待拍摄对象的至少一个第二图像；

所述处理器，用于在确定所述拍摄系统拍摄的第一图像中存在摩尔纹时，向所述拍摄系统发送指令，指示所述拍摄系统通过移动中的镜头拍摄所述待拍摄对象的至少一个第二图像，以及并根据所述拍摄系统拍摄的所述至少一个第二图像修复所述第一图像的摩尔纹区域，输出修复后的图像。

8.如权利要求7所述的终端设备，其特征在于，所述拍摄系统移动所述镜头时，具体用于：

通过所述拍摄系统中的光学防抖OIS系统移动所述镜头。

9.如权利要求7或8所述的终端设备，其特征在于，所述处理器在根据所述至少一个第二图像修复所述第一图像的摩尔纹区域时，具体用于：

若所述拍摄系统在所述镜头移动的过程中拍摄到一个第二图像，则将所述第一图像中包含摩尔纹的区域替换为所述第二图像中的相应区域；或者

若所述拍摄系统在所述镜头移动的过程中拍摄到多个第二图像，则选择所述多个第二图像中频率小于设定阈值的一个第二图像，将所述第一图像中存在摩尔纹的区域替换为选择的第二图像中的相应区域；或者

若所述拍摄系统在所述镜头移动的过程中拍摄到多个第二图像，则对所述第一图像以及所述多个第二图像进行图像融合。

10.如权利要求9所述的终端设备，其特征在于，所述处理器在对所述第一图像以及所述多个第二图像进行图像融合时，具体用于：

根据任一第二图像、以及所述拍摄系统拍摄得到该任一第二图像时所述镜头相对于拍摄得到所述第一图像时所述镜头的移动方向和移动距离，确定该任一第二图像中与所述第一图像的摩尔纹区域相对应的目标融合区域；

使用该任一第二图像的目标融合区域中包括的各个像素块的像素值，对所述第一图像的摩尔纹区域中包括的相应像素块的像素值进行插值。

11.如权利要求7-10任一项所述的终端设备，其特征在于，所述拍摄系统在移动所述镜头并在所述镜头移动的过程中，通过所述镜头拍摄所述待拍摄对象的至少一个第二图像时，具体用于：

在所述镜头移动一次时通过所述镜头对所述待拍摄对象拍摄一个或多个第二图像。

12.如权利要求7-11任一项所述的终端设备，其特征在于，所述处理器还用于：

若确定所述拍摄系统拍摄的第一图像中不存在摩尔纹，则输出所述第一图像。

13.如权利要求7-12任一项所述的终端设备，其特征在于，还包括显示器，用于显示所述处理器输出的修复后的图像。

14.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有软件程序，所述软件程序在被一个或多个处理器读取并执行时可实现如权利要求1～6任一项所述的方法。