CN110881103B - 对焦控制方法和装置、电子设备、计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种对焦控制方法、装置、电子设备、计算机可读存储介质，包括：首先经过主体检测提取出目标主体区域，其次，对目标主体区域进行划分出目标主体和背景区域，对背景区域进行图像预处理，得到预处理后的目标主体区域，从而在根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体的过程中，最终减少目标主体区域的背景区域给对焦至目标主体的过程造成的干扰。从而，提高了拍照过程中对焦的准确性。

Description

对焦控制方法和装置、电子设备、计算机可读存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种对焦控制方法和装置、电子设备、计算机可读存储介质。

背景技术

随着摄像技术的不断发展，人们对电子设备摄像头的拍照要求日益提高。在通过摄像头拍照图像过程中，可以通过自动对焦技术确定被拍摄场景的对焦位置，以根据该对焦位置进行对焦后拍摄图像。然而，传统的对焦方法对焦的准确性较低，以至于不能很好的捕捉到用户所需要对焦的物体。

发明内容

本申请实施例提供一种对焦控制方法、装置、电子设备、计算机可读存储介质，可以提高拍照过程中对焦的准确性。

一种对焦控制方法，应用于电子设备，包括：

对原始图像进行主体检测，得到目标主体区域；

从所述原始图像中提取出所述目标主体区域，所述目标主体区域中包括目标主体和背景区域；

对所述目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域；

根据所述预处理后的目标主体区域，控制摄像头对焦至所述原始图像中的目标主体。

一种对焦控制装置，包括：

主体检测模块，用于对原始图像进行主体检测，得到主体检测结果；

主体分割模块，用于根据所述主体检测结果对所述原始图像进行主体分割，得到所述原始图像中的主体图像；

对焦模块，用于根据所述主体图像对所述原始图像进行对焦控制。

一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如上方法的步骤。

一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现如上方法的步骤。

上述对焦控制方法、装置、电子设备、计算机可读存储介质，对原始图像进行主体检测，得到目标主体区域。从原始图像中提取出目标主体区域，目标主体区域中包括目标主体和背景区域。对目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域，根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体。该对焦控制方法，首先经过主体检测提取出目标主体区域，其次，对目标主体区域进行划分出目标主体和背景区域，对背景区域进行图像预处理，得到预处理后的目标主体区域，从而在根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体的过程中，最终减少目标主体区域的背景区域给对焦至目标主体的过程造成的干扰。从而，提高了拍照过程中对焦的准确性。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中对焦控制方法的应用环境图；

图2为一个实施例中对焦控制方法的流程图；

图3为一个实施例中对焦控制方法的流程图；

图4A为一个实施例中对焦过程的流程图；

图4B为一个实施例中对焦过程的流程图；

图5A为一个实施例中主体检测过程的流程图；

图5B为一个实施例中图像处理效果示意图；

图6为一个实施例中对目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域的效果示意图；

图7为一个具体的实施例中像处理方法的流程图；

图8为一个实施例中对焦控制装置的结构框图；

图9为一个实施例中电子设备的内部结构示意图；

图10为一个实施例中对焦控制电路的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一摄像头称为第二摄像头，且类似地，可将第二摄像头称为第一摄像头。第一摄像头和第二摄像头两者都是摄像头，但其不是同一摄像头。

图1为一个实施例中对焦控制方法的应用环境示意图。如图1所示，该应用环境包括电子设备100。电子设备100包含有至少一个第一摄像头110和至少一个第二摄像头120。电子设备100可以对从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域，对周围区域进行主体检测，得到第一主体检测结果。当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像，将新的预览图像进行显示。可以理解的是，上述电子设备100可以不限于是各种手机、电脑、可携带设备等。

图2为一个实施例中对焦控制方法的流程图，应用于电子设备，如图2所示，对焦控制方法包括步骤220至步骤280。

步骤220，对原始图像进行主体检测，得到目标主体区域。

原始图像指的是由电子设备的摄像模组对拍摄场景进行拍摄获取的RGB图像，该原始图像的显示范围与摄像模组所能够捕获到的图像信息的范围是一致的。电子设备对原始图像进行主体检测，可以采用经过训练过的深度学习神经网络模型来对原始图像进行主体检测。对原始图像进行主体检测的具体过程包括以下步骤：首先，获取原始图像的可见光图；其次，生成与原始图像的可见光图对应的中心权重图；然后，将可见光图、中心权重图输入到主体检测模型中，得到主体区域置信度图；最后，根据主体区域置信度图确定原始图像中的目标主体区域。当然，在本实施例中还可以采用其他方法进行主体检测，得到目标主体区域。本申请对此不做限定。

步骤240，从原始图像中提取出目标主体区域，目标主体区域中包括目标主体和背景区域。

当对原始图像进行主体检测，得到了目标主体区域之后，从原始图像中提取出目标主体区域。对原始图像进行主体分割，得到目标主体区域，目标主体区域中包括目标主体和背景区域。对于较为规则的目标主体，对原始图像进行主体分割所得到的目标主体区域中包含的背景区域较少。例如，对人、猫、狗之类较为规则的目标主体，对原始图像进行主体分割所得到的目标主体区域多为矩形或沿着目标主体边缘进行分割所得的区域；对于非规则的目标主体，因为目标主体的边缘不规则，所以对原始图像进行主体分割所得到的目标主体区域中一般包含的背景区域较多。例如，对于蜘蛛这类不规则的目标主体，对目标主体的边缘进行分割的难度较大，所以对原始图像进行主体分割所得到的目标主体区域多为矩形，此时矩形的目标主体区域内所包含的背景区域较多。当在对目标主体区域中的目标主体进行对焦的时候，当背景区域较多时，则背景区域会对对焦的准确性造成一定程度的影响。

步骤260，对目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域。

目标主体区域中包括目标主体和背景区域，可以对主体区域中的背景区域进行图像预处理，以减少背景区域对目标主体的干扰。图像预处理可以是对背景区域进行擦除、减低清晰度等操作，使得目标主体区域中的目标主体更加突出、更加清晰，以便后续对目标主体进行对焦的时候，可以更准确地对焦到目标主体上。

步骤280，根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体。

在对目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域之后，控制摄像头自动对焦至原始图像中的目标主体。在控制摄像头自动对焦至原始图像中的目标主体的过程中，可以采用多种自动对焦方式进行对焦。例如，可以采用飞行时间自动对焦(Time offlight Auto Focus，TOFAF)、相位检测自动对焦(Phase Detection AutoFocus，PDAF)、对比度自动对焦(Contrast Auto Focus，CAF)、激光对焦等方式，也可以采用混合对焦方式，即采用上述多种对焦方式任意组合来共同进行对焦。具体的，可以先采用TOF进行粗略对焦，然后再采用CAF进行精准对焦；或先采用PDAF进行粗略对焦，然后再采用CAF进行精准对焦等。其中，先采用PDAF进行粗略对焦，然后再采用CAF进行精准对焦这种自动对焦方式，可以把相位自动对焦的速度和对比度自动对焦的精确度进行结合。首先，相位自动对焦快速调整距离设置，此时所拍摄的物体已经比较清晰。随后由对比度对焦进行微调，由于对焦位置的预先调整，因此可以在较少的时间内确定出最大对比度，从而能够更准确地对焦。

本申请实施例中，对原始图像进行主体检测，得到目标主体区域。从原始图像中提取出目标主体区域，目标主体区域中包括目标主体和背景区域。对目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域，根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体。该对焦控制方法，首先经过主体检测提取出目标主体区域，其次，对目标主体区域进行划分出目标主体和背景区域，对背景区域进行图像预处理，得到预处理后的目标主体区域，从而在根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体的过程中，最终减少目标主体区域的背景区域给对焦至目标主体的过程造成的干扰。

在一个实施例中，如图3所示，步骤260，对目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域，包括：

步骤262，将目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域；

步骤280，根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体，包括：

步骤282，根据纯色背景的目标主体区域，控制摄像头对焦至原始图像中的目标主体。

具体的，将目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域。具体的，从目标主体区域进行抠图提取出目标主体，对于不规则主体(如蜘蛛)可以是根据主体的最左、最右、最上、最下四个点来进行截取出目标主体。对目标主体区域中的背景区域进行替换为纯色背景，且该纯色背景应该与目标主体的颜色形成一定的色差，例如，一般纯色背景可以选择为白色、浅灰色等能够让目标主体更加突出的颜色。如当目标主体为黑色等深色时，则可以选择纯色背景为白色等浅色；当目标主体为白色等浅色时，则可以选择纯色背景为深色；尽量使得纯色背景和目标主体行程鲜明的对比，以突出目标主体。

在根据目标主体区域，控制摄像头对焦至原始图像中的目标主体的时候，目标主体区域中的背景区域会对对焦过程造成干扰，以至于未准确对焦至目标主体，而造成目标主体不清晰的情况发生。因此，为了减少背景区域对对焦过程造成的干扰，可以将目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域。例如，对于蜘蛛这类不规则的目标主体，对原始图像进行主体分割所得到的目标主体区域中一般包含的背景区域较多，且背景区域不连续，即目标主体和背景区域相互交织。若对焦过程中稍有偏差，就会从目标主体对焦至背景区域上。所以为了提高对焦过程的准确性，可以将目标主体区域上的背景区域替换为纯色背景，根据纯色背景的目标主体区域，控制摄像头对焦至原始图像中的目标主体。这样纯色背景与目标主体之间存在明显的区别，在自动对焦的时候若对焦至纯色背景，则就非常容易发现对焦失误，而重新调整对焦位置至目标主体上，从而提高对焦过程的精确性。

本申请实施例中，在对目标主体区域中的背景区域进行图像预处理的时候，将目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域。这样纯色背景与目标主体之间存在明显的区别，在自动对焦的时候若对焦至纯色背景，则就非常容易发现对焦失误，而重新调整对焦位置至目标主体上，从而提高对焦过程的精确性。

在一个实施例中，步骤260，对目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域，包括：

将目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域；

步骤280，根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体，包括：

根据透明背景的目标主体区域，控制摄像头对焦至原始图像中的目标主体。

具体的，首先，电子设备对原始图像进行主体检测，得到目标主体区域。其次，从原始图像中提取出目标主体区域，目标主体区域中包括目标主体和背景区域。然后，将目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域。最后，根据透明背景的目标主体区域，控制摄像头对焦至原始图像中的目标主体。

将目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域。具体的，从目标主体区域进行抠图提取出目标主体，对目标主体区域中的背景区域进行替换为透明背景，该透明背景能够更加突出目标主体，不会对目标主体造成干扰。

在根据目标主体区域，控制摄像头对焦至原始图像中的目标主体的时候，目标主体区域中的背景区域会对对焦过程造成干扰，以至于未准确对焦至目标主体，而造成目标主体不清晰的情况发生。因此，为了减少背景区域对对焦过程造成的干扰，可以将目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域。例如，对于蜘蛛这类不规则的目标主体，对原始图像进行主体分割所得到的目标主体区域中一般包含的背景区域较多，且背景区域不连续，即目标主体和背景区域相互交织。若对焦过程中稍有偏差，就会从目标主体对焦至背景区域上。所以为了提高对焦过程的准确性，可以将目标主体区域上的背景区域替换为透明背景，根据透明背景的目标主体区域，控制摄像头对焦至原始图像中的目标主体。这样透明背景与目标主体之间存在明显的区别，在自动对焦的时候若对焦至透明背景，则就非常容易发现对焦失误，而重新调整对焦位置至目标主体上，从而提高对焦过程的精确性。

本申请实施例中，在对目标主体区域中的背景区域进行图像预处理的时候，将目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域。这样透明背景与目标主体之间存在明显的区别，在自动对焦的时候若对焦至透明背景，则就非常容易发现对焦失误，而重新调整对焦位置至目标主体上，从而提高对焦过程的精确性。

在一个实施例中，如图4A所示，步骤280，根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体，包括：

步骤282，对预处理后的目标主体区域计算相位差。

步骤284，将所计算出的相位差输入至自动对焦算法中，计算出目标主体区域中目标主体的第一对焦位置，控制摄像头移动至第一对焦位置。

步骤286，对预处理后的目标主体区域计算对比度。

步骤288，将所计算出的对比度输入至自动对焦算法中，计算出目标主体区域中目标主体的第二对焦位置，控制摄像头从第一对焦位置移动至第二对焦位置，以对焦至原始图像中的目标主体。

具体的，在控制摄像头自动对焦至原始图像中的目标主体的过程中，可以采用多种自动对焦方式进行对焦。其中，先采用PDAF进行粗略对焦，然后再采用CAF进行精准对焦这种自动对焦方式，可以把相位自动对焦的速度和对比度自动对焦的精确度进行结合。结合图4B所示，相位差计算的过程为：自动对焦算法(AF algorithm)将预处理后的目标主体区域(AF ROI)输入至PD计算模块(pd calculation module)进行计算相位差，将所计算出的结果PD result输出给自动对焦算法(afalgorithm)。在自动对焦算法中根据相位差计算出目标主体区域中目标主体的第一对焦位置，控制摄像头移动至第一对焦位置。其中，AFROI为Auto Focus Region Of Interest的缩写。预处理后的目标主体区域可以是将目标主体区域中的背景区域替换为纯色背景，所得到的纯色背景的目标主体区域。也可以是将目标主体区域中的背景区域替换为透明背景，所得到的透明背景的目标主体区域。当然，还可以是能够突出目标主体的其他方式，本申请对此不做限定。

对比度计算的过程为：自动对焦算法(AF algorithm)将预处理后的目标主体区域(AF ROI)输入至对比度计算模块(Contrast calculationmodule)进行计算对比度，将所计算出的对比度结果Contrast result输出给自动对焦算法(AF algorithm)。在自动对焦算法中根据对比度计算出目标主体区域中目标主体的第二对焦位置，控制摄像头从第一对焦位置移动至第二对焦位置，以对焦至原始图像中的目标主体。

相位差计算和对比度计算的过程可以同时进行，也可以不同时进行，本申请对此不做限定。当然，在其他的实施例中也可以不采用混合对焦的方式，而单独采用PD对焦或对比度对焦的方式进行对焦。如单独采用PD对焦，则自动对焦算法将预处理后的目标主体区域输入至PD计算模块进行计算相位差，将所计算出的PD结果输出给自动对焦算法。在自动对焦算法中根据相位差计算出目标主体区域中目标主体的第一对焦位置，控制摄像头移动至第一对焦位置完成对焦至原始图像中的目标主体。

如单独采用对比度对焦，则自动对焦算法将预处理后的目标主体区域输入至对比度计算模块进行计算对比度，将所计算出的对比度结果输出给自动对焦算法。在自动对焦算法中根据对比度计算出目标主体区域中目标主体的第二对焦位置，控制摄像头从第一对焦位置移动至第二对焦位置，以对焦至原始图像中的目标主体。

本申请实施例中，自动对焦算法将预处理后的目标主体区域分别输入至对比度计算模块进行计算对比度，输入至相位差计算模块计算相位差，然后将所计算出的对比度和相位差反馈至自动对焦算法，自动对焦算法根据对比度和相位差来控制摄像头实现混合对焦(对比度和相位差对焦)。一方面是对预处理后的目标主体区域进行计算对比度和相位差进而实现对焦，预处理后的图像的背景与目标主体之间存在明显的区别，在自动对焦的时候若对焦至背景，则就非常容易发现对焦失误，而重新调整对焦位置至目标主体上，从而提高对焦过程的精确性。另一方面采用混合对焦的方式，可以把相位自动对焦的速度和对比度自动对焦的精确度进行结合。在提高对焦的准确性的同时，提高对焦速度。

在一个实施例中，如图5A所示，步骤220，对原始图像进行主体检测，得到目标主体区域，包括：

步骤222，获取原始图像的可见光图。

其中，主体检测(salient object detection)是指面对一个场景时，自动地对感兴趣区域进行处理而选择性的忽略不感兴趣区域。感兴趣区域称为主体区域。可见光图是指RGB(Red、Green、Blue)图像。可通过彩色摄像头拍摄任意场景得到彩色图像，即RGB图像。该可见光图可为电子设备本地存储的，也可为其他设备存储的，也可以为从网络上存储的，还可为电子设备实时拍摄的，不限于此。具体地，电子设备的ISP处理器或中央处理器可从本地或其他设备或网络上获取可见光图，或者通过摄像头拍摄一场景得到可见光图。

步骤224，生成与原始图像的可见光图对应的中心权重图。

该中心权重图所表示的权重值从中心到边缘逐渐减小。中心权重图是指用于记录可见光图中各个像素点的权重值的图。中心权重图中记录的权重值从中心向四边逐渐减小，即中心权重最大，向四边权重逐渐减小。通过中心权重图表征可见光图的图像中心像素点到图像边缘像素点的权重值逐渐减小。

ISP处理器或中央处理器可以根据可见光图的大小生成对应的中心权重图。该中心权重图所表示的权重值从中心向四边逐渐减小。中心权重图可采用高斯函数、或采用一阶方程、或二阶方程生成。该高斯函数可为二维高斯函数。

步骤226，将可见光图、中心权重图输入到主体检测模型中，得到主体区域置信度图。

其中，主体检测模型是预先根据同一场景的可见光图、深度图、中心权重图及对应的已标注的主体掩膜图进行训练得到的模型。主体检测模型是预先采集大量的训练数据，将训练数据输入到包含有初始网络权重的主体检测模型进行训练得到的。每组训练数据包括同一场景对应的可见光图、中心权重图及已标注的主体掩膜图。其中，可见光图和中心权重图作为训练的主体检测模型的输入，已标注的主体掩膜(mask)图作为训练的主体检测模型期望输出得到的真实值(groundtruth)。主体掩膜图是用于识别图像中主体的图像滤镜模板，可以遮挡图像的其他部分，筛选出图像中的主体。主体检测模型可训练能够识别检测各种主体，如人、花、猫、狗、背景等。

具体地，ISP处理器或中央处理器可将该可见光图和中心权重图输入到主体检测模型中，进行检测可以得到主体区域置信度图。主体区域置信度图是用于记录主体属于哪种能识别的主体的概率，例如某个像素点属于人的概率是0.8，花的概率是0.1，背景的概率是0.1。

步骤228，根据主体区域置信度图确定原始图像中的目标主体区域。

其中，主体是指各种对象，如人、花、猫、狗、牛、蓝天、白云、背景等。目标主体是指需要的主体，可根据需要选择。具体地，ISP处理器或中央处理器可根据主体区域置信度图选取置信度最高或次高等作为可见光图中的主体区域，若存在一个主体，则将该主体的区域作为目标主体区域；若存在多个主体，可根据需要选择其中一个或多个主体区域作为目标主体区域。

图5B为一个实施例中图像处理效果示意图。如图5B所示，RGB图502中存在一只蝴蝶，将RGB图输入到主体检测模型后得到主体区域置信度图504，然后对主体区域置信度图504进行滤波和二值化得到二值化掩膜图506，再对二值化掩膜图506进行形态学处理和引导滤波实现边缘增强，得到主体掩膜图508。

本申请实施例中，获取原始图像的可见光图，生成与原始图像的可见光图对应的中心权重图。将可见光图、中心权重图输入到主体检测模型中，得到主体区域置信度图，根据主体区域置信度图确定原始图像中的目标主体区域。经过上述方法所得到的目标主体区域的置信度更高，更加准确。

在一个实施例中，所述对原始图像进行主体检测，得到目标主体区域，包括：

对原始图像进行主体检测，得到目标主体在所述原始图像中的位置；

根据所述目标主体在所述原始图像中的位置，获取所述目标主体在上下左右四个不同方向上的顶点；

根据所述顶点所构成的封闭图形，从所述原始图像中提取出目标主体区域。

具体的，对于原始图像，当原始图像中的目标主体与背景交错设置，或目标主体与背景的分割不是很明显时，尤其对于不规则主体(如蜘蛛包含多条伸出去的腿)，若采用传统的沿着目标主体的边缘来提取出目标主体区域，则难度太大、可操作性太低。所以可以采用先对原始图像进行主体检测，得到目标主体在所述原始图像中的位置，再根据所述目标主体在所述原始图像中的位置，获取所述目标主体在上下左右四个不同方向上的顶点，根据所述顶点所构成的封闭图形，从所述原始图像中提取出目标主体区域，目标主体区域中包括目标主体和背景区域。对所述目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域。根据所述预处理后的目标主体区域，控制摄像头对焦至所述原始图像中的目标主体。

如图6所示，首先，电子设备对原始图像(a)进行主体检测，得到目标主体在所述原始图像中的位置(见图6(a)中的白色圆圈)。其次，根据所述目标主体在所述原始图像中的位置，获取所述目标主体在上下左右四个不同方向上的顶点(见图6(b)中的白点)。根据所述顶点所构成的封闭图形，从所述原始图像中提取出目标主体区域(b)。目标主体区域(b)中包括目标主体(蜘蛛)和背景区域(树叶)。然后，将目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域(c)。最后，根据纯色背景的目标主体区域(c)，控制摄像头对焦至原始图像中的目标主体。

本申请实施例中，对于原始图像，当原始图像中的目标主体与背景交错设置，或目标主体与背景的分割不是很明显时，尤其对于不规则主体可以采用获取所述目标主体在上下左右四个不同方向上的顶点，根据所述顶点所构成的封闭图形，从所述原始图像中提取出目标主体区域。从而，可以精准地从原始图像中提取出目标主体区域、且提取过程的计算量较小、速度较快。从而为后续对所述目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域。再根据所述预处理后的目标主体区域，控制摄像头对焦至所述原始图像中的目标主体做了铺垫。

在一个实施例中，对原始图像进行主体检测，得到目标主体区域，包括：

第一步，对原始图像进行主体检测，得到至少两个主体区域。

一般情况下，原始图像的显示范围是大于或等于显示在电子设备的图像显示界面上的预览图像的范围。该预览图像一般与电子设备最终输出的图像的显示范围一致，所以原始图像的显示范围也是大于或等于电子设备最终输出的图像的显示范围，以上图像均是在同比例的情况下进行比较。

在获取到电子设备拍摄所得到的原始图像之后，采用主体检测网络模型对该原始图像进行主体检测，得到至少两个主体区域。原始图像中包含几个主体，则经过主体检测之后就会对应生成几个主体区域。一个主体区域可以是指原始图像中包含一个主体的全部区域的检测框，例如，包含一只狗的全身的矩形检测框，当然，该检测框还可以是圆形、椭圆形、梯形等其他平面图形。也可以是指原始图像中主体出现的全部区域，例如，一只狗的全身在原始图像中所占的区域，除去该只狗的全身所占区域之外的其他区域不属于这只狗的主体区域。

第二步，获取拍摄原始图像的拍摄数据和电子设备的图像显示界面的尺寸信息，根据原始图像的拍摄数据、电子设备的图像显示界面的尺寸信息，确定原始图像中目标主体区域的尺寸范围。

因为拍摄原始图像的拍摄数据和电子设备的图像显示界面的尺寸信息都会影响原始图像中目标主体区域的尺寸范围，所以根据这两个参数信息来确定原始图像中目标主体区域的尺寸范围。其中，拍摄原始图像的拍摄数据可以包括拍摄原始图像时的焦距、光圈大小等参数。电子设备的图像显示界面的尺寸信息包括电子设备显示屏的尺寸信息、显示画面的比例信息(例如1：1或4：3等)。

例如，当拍摄原始图像时所采用的镜头为长焦镜头时，则原始图像的显示比例较小，此时原始图像中目标主体区域的尺寸范围也就相应的较小。当拍摄原始图像时所采用的镜头为短焦镜头时，则原始图像的显示比例较大，此时原始图像中目标主体区域的尺寸范围也就相应的较大。同一个摄像头在不同变焦倍数下拍摄并呈现在CCD上的原始图像的都是相同的。

当拍摄原始图像时所采用的镜头为短焦镜头时，且从1倍变焦切换为2倍变焦，则从原始图像中截取的预览图像的范围就会变小，将预览图像放大至适应电子设备的图像显示界面尺寸以进行显示。因此，2倍变焦时原始图像中目标主体的尺寸范围也会相应变小。

而当电子设备的显示屏的尺寸信息较小时，则原始图像中目标主体的尺寸范围也就相应的较小，并且原始图像中目标主体区域的尺寸范围还与电子设备显示画面的比例信息相关。

第三步，从至少两个主体区域中筛选出符合尺寸范围的目标主体区域。

在获取到电子设备拍摄所得到的原始图像之后，采用主体检测网络模型对该原始图像进行主体检测，得到至少两个主体区域。且在根据原始图像的拍摄数据、电子设备的图像显示界面的尺寸信息，确定了原始图像中目标主体区域的尺寸范围。就可以从多个主体区域中筛选出符合尺寸范围的主体区域，将符合尺寸范围的主体检测结果作为目标主体区域。

本申请实施例中，原始图像中可能存在多个主体，为了准确地从原始图像中得到目标主体区域。因此，首先对原始图像进行主体检测；其次，确定原始图像中目标主体区域的尺寸范围。最后，从原始图像的至少两个主体区域中，筛选出尺寸范围符合的目标主体区域。在将目标主体区域输入自动对焦算法中进行计算对比度和相位差，以对目标主体进行对焦。因为拍摄原始图像的拍摄数据和电子设备的图像显示界面的尺寸信息都会影响原始图像中目标主体区域的尺寸范围，所以根据这两个参数信息来确定原始图像中目标主体区域的尺寸范围。如此，则所得到的目标主体区域的准确性更高。

在一个实施例中，原始图像的拍摄数据包括拍摄原始图像时的焦距，尺寸信息包括尺寸大小及长宽比；

根据原始图像的拍摄数据、电子设备的图像显示界面的尺寸信息，计算原始图像中目标主体区域的尺寸范围，包括：

根据拍摄原始图像时的焦距、电子设备的图像显示界面的尺寸大小及长宽比，计算原始图像中目标主体区域的尺寸范围。

具体的，对于同一电子设备来说，同一个摄像头在不同变焦倍数下拍摄并呈现在CCD上的原始图像都是相同的。且当电子设备的图像显示界面的尺寸大小及长宽比固定时，则就可以根据原始图像的拍摄数据、电子设备的图像显示界面的尺寸信息，计算出原始图像中目标主体区域的尺寸范围。

其中一种计算出原始图像中目标主体区域的尺寸范围的方法是：通过大量原始图像样本来进行统计学分析，得出同一电子设备的同一个摄像头，在同一拍摄焦距、同一图像显示界面的尺寸和比例下原始图像中目标主体区域的尺寸。对这些原始图像中目标主体区域的尺寸进行概率分析，就可以得出概率超过阈值的目标主体区域的尺寸范围。该尺寸范围即为在该拍摄焦距、该图像显示界面的尺寸和比例下原始图像中目标主体区域的尺寸范围。例如，对于同一电子设备的同一个摄像头来说，在拍摄焦距为变焦2倍时，在固定的图像显示界面的尺寸和比例下，原始图像中目标主体区域的高的阈值为A，宽的阈值为B，面积的阈值为C；而当拍摄焦距为变焦3倍时，在固定的图像显示界面的尺寸和比例下，原始图像中目标主体区域的高的阈值为D，宽的阈值为E，面积的阈值为F。

对于同一电子设备的同一个摄像头来说，若拍摄所得的原始图像中目标主体区域的尺寸范围的阈值，与原始图像的拍摄焦距、图像显示界面的尺寸和比例呈线性关系，则上述高的阈值A与高的阈值D呈同一线性关系，以此类推至宽的阈值B与宽的阈值E，面积的阈值C与面积的阈值F。当然，原始图像中目标主体区域的尺寸范围的阈值，与原始图像的拍摄焦距、图像显示界面的尺寸和比例也可呈指数关系或其他数学关系。

另一种计算出原始图像中目标主体区域的尺寸范围的方法是：对于同一电子设备的同一个摄像头，在同一拍摄焦距、同一图像显示界面的尺寸和比例下设置原始图像中目标主体区域的尺寸。例如，对于同一电子设备的同一个摄像头，当前拍摄焦距为变焦2倍时，已知图像显示界面的尺寸大小为W*H，直接将H*a作为高的阈值(a为系数，如a为0.7)，将W*b作为宽的阈值(b为系数，如b为0.6)；同理可以将W*H*c作为面积的阈值(c为系数，如c为0.65)。当然，这里的系数a、b、c可以是自定义设置。

本申请实施例中，对于同一电子设备的同一个摄像头，根据拍摄原始图像时的焦距、电子设备的图像显示界面的尺寸大小及长宽比，就可以计算出原始图像中目标主体区域的尺寸范围。进而根据该尺寸范围就可以从多个主体区域中筛选出符合尺寸范围的目标主体区域。

在一个具体的实施例中，如图7所示，提高了一种对焦控制方法，步骤如下：

步骤702，对原始图像进行主体检测，得到至少两个主体区域；

步骤704，获取拍摄原始图像的拍摄数据和电子设备的图像显示界面的尺寸信息，根据原始图像的拍摄数据、电子设备的图像显示界面的尺寸信息，确定原始图像中目标主体区域的尺寸范围；

步骤706，从至少两个主体区域中筛选出符合尺寸范围的目标主体区域；

步骤708，从原始图像中提取出目标主体区域，目标主体区域中包括目标主体和背景区域；

步骤710，将目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域；

步骤712，根据纯色背景的目标主体区域，计算相位差；将所计算出的相位差输入至自动对焦算法中，计算出目标主体区域中目标主体的第一对焦位置，控制摄像头移动至第一对焦位置；

步骤714，根据纯色背景的目标主体区域，计算对比度；将所计算出的对比度输入至自动对焦算法中，计算出目标主体区域中目标主体的第二对焦位置，控制摄像头从第一对焦位置移动至第二对焦位置，以对焦至原始图像中的目标主体。

本申请实施例中，因为拍摄原始图像的拍摄数据和电子设备的图像显示界面的尺寸信息都会影响原始图像中目标主体区域的尺寸范围，所以根据这两个参数信息来确定原始图像中目标主体区域的尺寸范围。如此，则所得到的目标主体区域的准确性更高。在对目标主体区域中的背景区域进行图像预处理的时候，将目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域。这样透明背景与目标主体之间存在明显的区别，在自动对焦的时候若对焦至透明背景，则就非常容易发现对焦失误，而重新调整对焦位置至目标主体上，从而提高对焦过程的精确性。

应该理解的是，虽然图7的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图7中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

在一个实施例中，如图8所示，提供了一种对焦控制装置800，包括：主体检测模块820、目标主体区域提取模块840、图像预处理模块860及目标主体对焦模块880。其中，

主体检测模块820，用于对原始图像进行主体检测，得到目标主体区域；

目标主体区域提取模块840，用于从原始图像中提取出目标主体区域，目标主体区域中包括目标主体和背景区域；

图像预处理模块860，用于对目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域；

目标主体对焦模块880，用于根据预处理后的目标主体区域，控制摄像头对焦至原始图像中的目标主体。

在一个实施例中，图像预处理模块860，还用于将目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域；目标主体对焦模块，还用于根据纯色背景的目标主体区域，控制摄像头对焦至原始图像中的目标主体。

在一个实施例中，图像预处理模块860，还用于将目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域；目标主体对焦模块，还用于根据透明背景的目标主体区域，控制摄像头对焦至原始图像中的目标主体。

在一个实施例中，目标主体对焦模块880，包括：

相位差计算单元，用于对预处理后的目标主体区域计算相位差；

第一对焦位置单元，用于将所计算出的相位差输入至自动对焦算法中，计算出目标主体区域中目标主体的第一对焦位置，控制摄像头移动至第一对焦位置；

对比度计算单元，用于对预处理后的目标主体区域计算对比度；

第二对焦位置单元，用于将所计算出的对比度输入至自动对焦算法中，计算出目标主体区域中目标主体的第二对焦位置，控制摄像头从第一对焦位置移动至第二对焦位置，以对焦至原始图像中的目标主体。

在一个实施例中，主体检测模块820，还用于获取原始图像的可见光图；生成与原始图像的可见光图对应的中心权重图；将可见光图、中心权重图输入到主体检测模型中，得到主体区域置信度图；根据主体区域置信度图确定原始图像中的目标主体区域。

在一个实施例中，主体检测模块820，还用于对原始图像进行主体检测，得到至少两个主体区域；获取拍摄原始图像的拍摄数据和电子设备的图像显示界面的尺寸信息，根据原始图像的拍摄数据、电子设备的图像显示界面的尺寸信息，确定原始图像中目标主体区域的尺寸范围；从至少两个主体区域中筛选出符合尺寸范围的目标主体区域。

在一个实施例中，主体检测模块820，还用于根据拍摄原始图像时的焦距、电子设备的图像显示界面的尺寸大小及长宽比，计算原始图像中目标主体区域的尺寸范围。

上述对焦控制装置中各个模块的划分仅用于举例说明，在其他实施例中，可将对焦控制装置按照需要划分为不同的模块，以完成上述对焦控制装置的全部或部分功能。

图9为一个实施例中电子设备的内部结构示意图。如图9所示，该电子设备包括通过系统总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种对焦控制方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的对焦控制装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图10为一个实施例中图像处理电路的示意图。如图10所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图10所示，图像处理电路包括第一ISP处理器1030、第二ISP处理器1040和控制逻辑器1050。第一摄像头1010包括一个或多个第一透镜1012和第一图像传感器1014。第一图像传感器1014可包括色彩滤镜阵列(如Bayer滤镜)，第一图像传感器1014可获取用第一图像传感器1014的每个成像像素捕捉的光强度和波长信息，并提供可由第一ISP处理器1030处理的一组图像数据。第二摄像头1020包括一个或多个第二透镜1022和第二图像传感器1024。第二图像传感器1024可包括色彩滤镜阵列(如Bayer滤镜)，第二图像传感器1024可获取用第二图像传感器1024的每个成像像素捕捉的光强度和波长信息，并提供可由第二ISP处理器1040处理的一组图像数据。

第一摄像头1010采集的第一图像传输给第一ISP处理器1030进行处理，第一ISP处理器1030处理第一图像后，可将第一图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器1050，控制逻辑器1050可根据统计数据确定第一摄像头1010的控制参数，从而第一摄像头1010可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过第一ISP处理器1030进行处理后可存储至图像存储器1060中，第一ISP处理器1030也可以读取图像存储器1060中存储的图像以对进行处理。另外，第一图像经过ISP处理器1030进行处理后可直接发送至显示器1070进行显示，显示器1070也可以读取图像存储器1060中的图像以进行显示。

其中，第一ISP处理器1030按多种格式逐个像素地处理图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，第一ISP处理器1030可对图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度计算精度进行。

图像存储器1060可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(DirectMemoryAccess，直接直接存储器存取)特征。

当接收到来自第一图像传感器1014接口时，第一ISP处理器1030可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器1060，以便在被显示之前进行另外的处理。第一ISP处理器1030从图像存储器1060接收处理数据，并对处理数据进行RGB和YCbCr颜色空间中的图像数据处理。第一ISP处理器1030处理后的图像数据可输出给显示器1070，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，第一ISP处理器1030的输出还可发送给图像存储器1060，且显示器1070可从图像存储器1060读取图像数据。在一个实施例中，图像存储器1060可被配置为实现一个或多个帧缓冲器。

第一ISP处理器1030确定的统计数据可发送给控制逻辑器1050。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、第一透镜1012阴影校正等第一图像传感器1014统计信息。控制逻辑器1050可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定第一摄像头1010的控制参数及第一ISP处理器1030的控制参数。例如，第一摄像头1010的控制参数可包括增益、曝光控制的积分时间、防抖参数、闪光控制参数、第一透镜1012控制参数(例如聚焦或变焦用焦距)、或这些参数的组合等。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及第一透镜1012阴影校正参数。

同样地，第二摄像头1020采集的第二图像传输给第二ISP处理器1040进行处理，第二ISP处理器1040处理第一图像后，可将第二图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器1050，控制逻辑器1050可根据统计数据确定第二摄像头1020的控制参数，从而第二摄像头1020可根据控制参数进行自动对焦、自动曝光等操作。第二图像经过第二ISP处理器1040进行处理后可存储至图像存储器1060中，第二ISP处理器1040也可以读取图像存储器1060中存储的图像以对进行处理。另外，第二图像经过ISP处理器1040进行处理后可直接发送至显示器1070进行显示，显示器1070也可以读取图像存储器1060中的图像以进行显示。第二摄像头1020和第二ISP处理器1040也可以实现如第一摄像头1010和第一ISP处理器1030所描述的处理过程。

电子设备实现该对焦控制方法的过程如上述实施例，在此不再赘述。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当计算机可执行指令被一个或多个处理器执行时，使得处理器执行对焦控制方法的步骤。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行对焦控制方法。

本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种对焦控制方法，应用于电子设备，其特征在于，包括：

对原始图像进行主体检测，得到目标主体区域；

从所述原始图像中提取出所述目标主体区域，所述目标主体区域中包括目标主体和背景区域；

对所述目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域；其中，对所述目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域，包括：将所述目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域；

对所述预处理后的目标主体区域计算相位差；

将所计算出的相位差输入至自动对焦算法中，计算出所述目标主体区域中目标主体的第一对焦位置，控制摄像头移动至第一对焦位置；

对所述预处理后的目标主体区域计算对比度；

将所计算出的对比度输入至自动对焦算法中，计算出所述目标主体区域中目标主体的第二对焦位置，根据所述纯色背景的目标主体区域，控制所述摄像头从所述第一对焦位置移动至第二对焦位置，以对焦至所述原始图像中的目标主体；所述第二对焦位置的精确度大于所述第一对焦位置。

2.根据权利要求1所述的方法，其特征在于，对所述目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域，还包括：

将所述目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域；

所述根据所述预处理后的目标主体区域，控制摄像头对焦至所述原始图像中的目标主体，包括：

根据所述透明背景的目标主体区域，控制摄像头对焦至所述原始图像中的目标主体。

3.根据权利要求1所述的方法，其特征在于，所述对原始图像进行主体检测，得到目标主体区域，包括：

获取所述原始图像的可见光图；

生成与所述原始图像的可见光图对应的中心权重图；

将所述可见光图、所述中心权重图输入到主体检测模型中，得到主体区域置信度图；

根据所述主体区域置信度图确定所述原始图像中的目标主体区域。

4.根据权利要求1所述的方法，其特征在于，所述对原始图像进行主体检测，得到目标主体区域，包括：

对原始图像进行主体检测，得到目标主体在所述原始图像中的位置；

根据所述目标主体在所述原始图像中的位置，获取所述目标主体在上下左右四个不同方向上的顶点；

根据所述顶点所构成的封闭图形，从所述原始图像中提取出目标主体区域。

5.根据权利要求1所述的方法，其特征在于，所述对原始图像进行主体检测，得到目标主体区域，包括：

对原始图像进行主体检测，得到至少两个主体区域；

获取拍摄所述原始图像的拍摄数据和所述电子设备的图像显示界面的尺寸信息，根据所述原始图像的拍摄数据、所述电子设备的图像显示界面的尺寸信息，确定所述原始图像中目标主体区域的尺寸范围；

从所述至少两个主体区域中筛选出符合所述尺寸范围的目标主体区域。

6.根据权利要求5所述的方法，其特征在于，所述原始图像的拍摄数据包括拍摄所述原始图像时的焦距，所述尺寸信息包括尺寸大小及长宽比；

所述根据所述原始图像的拍摄数据、所述电子设备的图像显示界面的尺寸信息，计算所述原始图像中目标主体区域的尺寸范围，包括：

根据拍摄所述原始图像时的焦距、所述电子设备的图像显示界面的尺寸大小及长宽比，计算所述原始图像中目标主体区域的尺寸范围。

7.一种对焦控制装置，其特征在于，包括：

主体检测模块，用于对原始图像进行主体检测，得到目标主体区域；

目标主体区域提取模块，用于从所述原始图像中提取出所述目标主体区域，所述目标主体区域中包括目标主体和背景区域；

图像预处理模块，用于对所述目标主体区域中的背景区域进行图像预处理，得到预处理后的目标主体区域；所述图像预处理模块，还用于将所述目标主体区域中的背景区域替换为纯色背景，得到纯色背景的目标主体区域；

目标主体对焦模块，用于根据对所述预处理后的目标主体区域计算相位差；将所计算出的相位差输入至自动对焦算法中，计算出所述目标主体区域中目标主体的第一对焦位置，控制摄像头移动至第一对焦位置；对所述预处理后的目标主体区域计算对比度；将所计算出的对比度输入至自动对焦算法中，计算出所述目标主体区域中目标主体的第二对焦位置，根据所述纯色背景的目标主体区域，控制所述摄像头从所述第一对焦位置移动至第二对焦位置，以对焦至所述原始图像中的目标主体；所述第二对焦位置的精确度大于所述第一对焦位置。

8.根据权利要求7所述的装置，其特征在于，所述目标主体区域提取模块，还用于将所述目标主体区域中的背景区域替换为透明背景，得到透明背景的目标主体区域；

所述目标主体对焦模块，还用于根据所述透明背景的目标主体区域，控制摄像头对焦至所述原始图像中的目标主体。

9.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，其特征在于，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至6中任一项所述的对焦控制方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的方法的步骤。

Images