CN108600628B - 图像抓拍方法、装置、终端及可读介质 - Google Patents

Abstract

本发明实施例公开了一种图像抓拍方法、装置、终端，其中所述方法包括：对当前环境进行预览拍摄，获取所述预览拍摄得到的预览图像；将所述预览图像与参考图像进行图像检测，根据检测结果确定所述预览图像中是否包括所述参考图像的指定图像区域内的目标对象；若所述预览图像中包括所述目标对象，则触发拍摄操作，以拍摄得到所述当前环境的环境图像。本实施例可以更好地进行图像抓拍。

Description

图像抓拍方法、装置、终端及可读介质

技术领域

本发明涉及图像处理技术领域，尤其涉及一种图像抓拍方法、装置、终端及可读介质。

背景技术

抓拍(Candid Photography)又名写实抓拍，是指在不干涉拍摄对象的情况下，拍摄到最自然的瞬间图像。通过抓拍可以捕捉到拍摄对象一瞬间的图像，例如足球比赛中的精彩入球。在很大情况下，通过抓拍得以保留很多精彩的用户瞬间。

用户在对目标对象进行图像抓拍时，可以预先设置拍照倒计时，终端检测到用户对拍摄按钮的点击指令后开始倒计时，倒计时结束则对目标对象进行拍摄。由于用户不能精确地预估拍照时机，设置的拍照倒计时的时长可能过长或者过短，导致终端很难抓拍到好的人物正面图像或者拍摄对象的特定角度的图像。因此，如何更好地进行图像抓拍成为研究的热点。

发明内容

本发明实施例提供了一种图像抓拍方法、装置、终端及可读介质，可更好地对进行图像抓拍。

一方面，本发明实施例提供了一种图像抓拍方法，包括：

对当前环境进行预览拍摄，获取所述预览拍摄得到的预览图像；

将所述预览图像与参考图像进行图像检测，根据检测结果确定所述预览图像中是否包括所述参考图像的指定图像区域内的目标对象；

若所述预览图像中包括所述目标对象，则触发拍摄操作，以拍摄得到所述当前环境的环境图像；

其中，所述参考图像为对所述当前环境进行所述预览拍摄前，在用户界面显示的图像；所述指定图像区域包括：在所述用户界面显示所述参考图像后，根据在所述用户界面上接收到的对显示的所述参考图像的选择指令确定的图像区域，所述指定图像区域内包括一个或多个目标对象。

另一方面，本发明实施例提供了一种图像抓拍装置，包括：

获取单元，用于对当前环境进行预览拍摄，获取所述预览拍摄得到的预览图像；

检测单元，用于将所述预览图像与参考图像进行图像检测，根据检测结果确定所述预览图像中是否包括所述参考图像的指定图像区域内的目标对象；

触发单元，用于若所述预览图像中包括所述目标对象，则触发拍摄操作，以拍摄得到所述当前环境的环境图像；

其中，所述参考图像为对所述当前环境进行所述预览拍摄前，在用户界面显示的图像；所述指定图像区域包括：在所述用户界面显示所述参考图像后，根据在所述用户界面上接收到的对显示的所述参考图像的选择指令确定的图像区域，所述指定图像区域内包括一个或多个目标对象。

再一方面，本发明实施例提供一种智能终端，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如下步骤：

对当前环境进行预览拍摄，获取所述预览拍摄得到的预览图像；

将所述预览图像与参考图像进行图像检测，根据检测结果确定所述预览图像中是否包括所述参考图像的指定图像区域内的目标对象；

若所述预览图像中包括所述目标对象，则触发拍摄操作，以拍摄得到所述当前环境的环境图像；

其中，所述参考图像为对所述当前环境进行所述预览拍摄前，在用户界面显示的图像；所述指定图像区域包括：在所述用户界面显示所述参考图像后，根据在所述用户界面上接收到的对显示的所述参考图像的选择指令确定的图像区域，所述指定图像区域内包括一个或多个目标对象。

再一方面，本发明实施例提供一种计算机存储介质，该计算机存储介质存储有计算机程序指令，该计算机程序指令被执行时用于实现上述的图像抓拍方法。

本发明实施例在进行图像抓拍的过程中，可以对当前环境图像的预览图像与预先设置好指定图像区域的参考图像进行图像检测，该指定图像区域包括一个或多个目标对象。若检测到预览图像中包括部分或者全部目标对象，则触发拍摄操作以得到该环境图像。通过上述操作，将检测到预览图像中包括目标对象的时间点作为抓拍时机，可以较准确地抓拍到好的人物正面图像或者拍摄对象的特定角度的图像。

附图说明

为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1a是本发明实施例提供的一种图像抓拍的应用场景示意图；

图1b是本发明实施例提供的一种跟随抓拍功能的操作流程示意图；

图2是本发明实施例提供的一种抓拍流程示意图；

图3是本发明实施例提供的一种初始化模块示意图；

图4a是本发明实施例提供的一种初始化前的参考图像的示意图；

图4b是本发明实施例提供的一种初始化后的参考图像的示意图；

图5是本发明实施例提供的一种图像抓拍方法的流程示意图；

图6是本发明另一实施例提供的一种图像抓拍方法的流程示意图；

图7是本发明实施例提供的一种光流跟踪检测算法的应用示意图；

图8是本发明实施例提供的一种确定旋转参数的方法示意图；

图9是本发明实施例提供的一种终端界面示意图；

图10是本发明实施例提供的一种终端应用示意图；

图11是本发明实施例提供的另一种终端界面示意图；

图12是本发明实施例提供的一种图像抓拍装置的结构示意图；

图13是本发明实施例提供的一种智能终端的结构示意图。

具体实施方式

在本发明实施例中，终端可以为用户提供一个跟随抓拍功能，用户通过该跟随抓拍功能进行图像抓拍时，可以较准确地抓拍到好的人物或者其他物体等目标对象的正面图像或者各种特定角度的图像。例如图1a所示，用户可以通过该跟随抓拍功能对行驶中的车辆进行拍摄，用户可以预先选取包含该车辆的参考图像，并打开终端的跟随抓拍功能，终端的摄像范围为图1a中的a点到b点。当车辆行驶至图1a中的c点时，此时未进入摄像范围内，终端不会进行拍摄。当车辆行驶至图1a中的a点到b点之间时，进入了摄像范围，此时，终端可以在摄像范围内检测到该车辆，并触发拍摄操作以拍摄得到包含该车辆的图像。再例如，用户还可以通过该跟随抓拍功能进行自拍，用户可以预先在终端中选择包含用户人脸图像的照片作为参考图像，并在参考图像中框选出包含自己人脸的指定图像区域。然后使用终端进行自拍，终端检测到用户的人脸即可进行拍摄。再例如，用户可以通过跟随抓拍功能捕捉足球比赛中的精彩入球，等等。

在一个实施例中，该跟随抓拍功能可以作为独立的拍摄功能模块添加到终端在出厂时所配置的照相机应用APP中，用户可以在该照相机APP中的设置界面打开该跟随抓拍功能。再一个实施例中，该跟随抓拍功能可以作为终端的独立的系统功能，用户可以在该终端的系统功能设置中打开该跟随抓拍功能后，再打开照相机后即可实现本发明实施例的图像抓拍功能。终端检测到跟随抓拍功能被开启、并检测到照相机的打开指令，则自动将照相机的工作模型切换到跟随抓拍模式。再一个实施例中，该跟随抓拍功能可以构成一个独立的应用APP，用户打开该应用APP后，即可进行图像抓拍。为了便于描述，本发明实施例后续提及到的跟随抓拍功能均以照相机APP中的拍摄功能为例进行描述。

用户想要抓拍一个或多个目标对象时，可以根据图1b所示的操作流程示意图进行操作。如图1b所示，用户可以在S101中进入设置界面，在S102中开启终端的跟随抓拍功能。然后在S103中返回到拍摄界面，在拍摄界面中选择参考图像，并通过S104在参考图像中确定指定图像区域以及该指定图像区域的位置，该指定图像区域可以包括该一个或多个目标对象。在一个实施例中，该参考图像可以是终端图库中已保存的图像，也可以是用户通过终端进行实时预览拍摄时确定的图像等等。在确定好指定图像区域以后，用户可以通过S105继续通过终端预览当前环境的预览图像。

终端可以实时获取预览图像，并实时对获取到的预览图像进行分析处理。若终端检测到预览界面中包括用户预先确定参考图像的指定图像区域中的目标对象，则可以自动触发拍摄操作，以拍摄得到当前的环境图像，当然，由于是检测到目标对象后拍摄得到的环境图像，则该拍摄得到的环境图像中也就包括了用户想要拍摄的目标对象了。本发明实施例在进行图像抓拍的过程中，可以自动检测预览图像中是否包括目标对象，并在S106中执行在预览图像检测到目标对象后，触发拍摄操作。将检测到预览图像中包括目标对象的时间点作为抓拍时机，可以较准确地抓拍到好的人物或者其他物体等目标对象的正面图像或者各种特定角度的图像。

在一个实施例中，本发明实施例提出了一种如图2所示的抓拍流程示意图。用户通过S201确定参考图像，并通过S202在参考图像中选择指定图像区域。终端检测到该选择指令后，可以通过S203调用图像框选模块在参考图像中框选出指定图像区域。具体的，可以调用图像框选模块根据该选择指令确定指定图像区域的参数信息，该指定图像区域的参数信息包括指定图像区域的大小及指定图像区域在参考图像中的位置。根据该指定图像区域的参数信息从参考图像中框选出该指定图像区域，将框选出指定图像区域的参考图像发送给跟踪模块。

终端可以在S204中调用跟踪模块进行初始化处理，具体的，跟踪模块在接收到该框选出指定图像区域的参考图像以后，可以进行初始化处理。如图3所示，跟踪模块可以调用初始化单元进行参考图像变量存储初始化、特征点检测器初始化、特征点描述器初始化以及特征点匹配器初始化等一系列初始化操作。其中，参考图像变量存储初始化是指初始化参考图像的特征点及其序号、指定图像区域的位置及指定图像区域的大小等信息，并将这些信息进行存储。所述特征点包括参考特征点和背景特征点，该参考特征点为指定图像区域内的特征点，该背景特征点为参考图像中除指定图像区域以外的其它图像区域内的特征点，将参考特征点与背景特征点构成数据集合并进行存储。例如，跟踪模块接收到的框选出指定图像区域的参考图像可以如图4a所示，跟踪模块对该参考图像进行一系列初始化处理后，初始化后的参考图像可以如图4b所示。

特征点检测器初始化包括对特征点检测器所采用的特征点检测算法进行初始化，该特征点检测算法可以包括但不限于：FAST(Features from accelerated segment test)算法、SIFT(Features from accelerated segment test)算法、SURF(Speeded-Up RobustFeatures)算法等等。特征点描述器初始化包括对特征点描述器所采用的特征点描述算法进行初始化，该特征点描述算法可以包括但不限于：BRISK(Binary Robust InvariantScalable Keypoints)算法、BRIEF(Binary Robust Independent Elementary Features)算法、ORB(ORiented Brief)算法等等。特征点匹配器初始化包括对特征点匹配器所采用的特征点匹配算法进行初始化，该特征点匹配算法可以包括但不限于：FAST(Features fromaccelerated segment test)算法、SIFT(Features from accelerated segment test)算法、ORB(ORiented Brief)算法等等。

用户在选择了指定图像区域以后，可以在S205中继续预览当前环境图像的预览图像。在用户预览的过程中，终端可以在S206中调用预览数据获取模块来获取该预览图像，并将获取到的预览图像发送给跟踪模块。终端可以在S207中调用跟踪模块对预览图像进行检测处理，得到检测结果，并在S208中进行检测结果分析。若预览图像中包括目标对象，则触发拍摄操作。

在一个实施例中，终端获取预览图像，并对预览图像进行一系列处理的方法可以参见图5所示的抓拍方法的流程示意图。本发明实施例的所述方法可以由一个智能终端来实现，例如智能手机、膝上型计算机或平板计算机等智能终端，还可以由一些具有摄像组件的设备来实现，例如单反相机、微单、数码相机以及监控器等等。

终端在检测到开启跟随抓拍功能的指令后，可以获取参考图像，并根据该参考图像进行初始化处理，得到参考图像的指定图像区域的第一参考特征点集合。终端可以调用摄像组件在S501中对当前环境进行预览拍摄，获取预览拍摄得到的预览图像。在一个实施例中，终端在对当前环境进行预览拍摄的过程中，获取到预览拍摄得到的预览图像后，可以在预览拍摄界面显示该预览图像。在一个实施例中，终端还可以获取与该预览拍摄相关联的显示图标，该显示图标可以包括拍摄图标和图像抓拍标识；在该预览拍摄界面显示该显示图标，以提示用户终端当前处于跟随抓拍模式中。

在获取到参考图像以后，终端可以在S502中对将该预览图像与参考图像进行图像检测，根据检测结果确定预览图像中是否包括参考图像的指定图像区域内的目标对象。其中，该参考图像为对当前环境进行预览拍摄前，在用户界面显示的图像；该指定图像区域包括：在用户界面显示参考图像后，根据在用户界面上接收到的对显示的参考图像的选择指令确定的图像区域，该指定图像区域内可以包括一个或多个目标对象。

在一个实施例中，对将该预览图像与参考图像进行图像检测的具体实施方式可以是：终端可以对预览图像进行特征点检测，得到预览图像的预览特征点集合。采用特征点匹配算法对预览图像的预览特征点集合与参考图像的第一特征点集合进行相似度匹配，得到预览特征点集合中的每一个预览特征点与第一特征集合中的参考特征点的相似度。此处的特征点匹配算法可以是：FAST算法、SIFT算法、ORB算法等等。将相似度大于预设阈值的所对应的预览特征点作为目标特征点，得到目标特征点集合，检测结果中包括该目标特征点集合。在根据检测结果确定预览图像中是否包括参考图像的指定图像区域内的目标对象时，可以根据检测结果包括的目标特征点集合中的目标特征点的数量确定预览图像中是否包括参考图像的指定图像区域内的目标对象。若该目标特征点的数量大于预设值，则确定预览图像中包括该目标对象；若该目标特征点的数量小于或等于预设值，则确定预览图像中未包括该目标对象。

终端通过S502确定预览图像中包括该目标对象以后，可以在S503中执行若预览图像中包括目标对象，则触发拍摄操作，以拍摄得到该当前环境的环境图像的步骤。在一个实施例中，终端在确定预览图像中包括该目标对象以后，还可以输出提示信息，以提示用户该目标对象在预览图像中被成功识别到。该提示信息可以包括语音提示信息和/或图像提示信息，例如，语音提示信息可以是“在预览图像中成功检测到目标对象，即将进行拍摄”，图像提示信息可以是在预览拍摄界面显示提示框，所述提示框用于预览图像中检测到的目标对象。在一个实施例中，终端在触发拍摄操作时，可以改变预览界面中拍摄图标的状态，以提示用户正在进行图像拍摄，该拍摄图标的状态可以包括拍摄图标的形状、尺寸和/或颜色。例如，在触发拍摄操作时，将拍摄图标的尺寸变大，或者将拍摄图像的颜色从黑色变为红色闪烁，等等。

本发明实施例在进行图像抓拍的过程中，可以对当前环境图像的预览图像与预先设置好指定图像区域的参考图像进行图像检测，该指定图像区域包括一个或多个目标对象。若检测到预览图像中包括该目标对象，则触发拍摄操作以得到该环境图像。通过上述操作，将检测到预览图像中包括目标对象的时间点作为抓拍时机，可以较准确地抓拍到好的人物或者其他物体等目标对象的正面图像或者各种特定角度的图像。

再一个实施例中，本发明实施例在图6中提出了另一种图像抓拍方法的流程示意图。终端可在S601中对当前环境进行预览拍摄，获取预览拍摄得到的预览图像。在获取到预览图像之后，可以在S602中检测预览图像的图像格式，预览图像的图像格式可能是彩色图像，也可能是灰度图像。若检测到预览图像的图像格式为非灰度图像格式，则可以在S603中执行若预览图像的图像格式为非灰度图像格式，则对预览图像进行格式转换，使得转换后的预览图像的图像格式为灰度图像格式。

由于图像可分为彩色图像和灰度图像，所述彩色图像是指图像中包括多种采样颜色的图像，灰度图像是指图像中的每个像素只有一个采样颜色的图像。本发明实施例是通过计算参考图像与预览图像之间的特征点相似度来实现图像抓拍的，而在相似度计算时，可以不需要特征点的颜色信息。由此可见，由于灰度图像只有一个采样颜色，在计算处理过程中，可以减少对颜色信息等数据的处理，可以提高图像检测、特征点匹配等处理效率。需要说明的是，若获取到的预览图像的图像格式实际就是灰度图像格式，则无需执行步骤S602-S603，即在S601中得到预览图像以后，即可执行S604。在一个实施例中，若参考图像的图像格式也非灰度图像格式，则对参考图像进行格式转换，使得转换后的参考图像的图像格式为灰度图像格式。

在获取到预览图像，且预览图像的图像格式为灰度图像格式之后，终端可以在S604中对将该预览图像与参考图像进行图像检测，根据检测结果确定预览图像中是否包括参考图像的指定图像区域内的目标对象。在一个实施例中。终端可以采用特征点检测算法对预览图像进行特征点检测，得到预览特征点集合，此处的特征点检测算法可以是FAST算法、SIFT算法等等。在一个实施例中，采用特征点检测算法对所述预览图像进行特征点检测之前，还可以检测所述参考图像的指定图像区域内的目标对象是否为人脸图像；若是，则采用人脸识别算法对所述预览图像进行图像检测；若否，则执行采用特征点检测算法对所述预览图像进行特征点检测的步骤。若目标对象为人脸图像，直接采用人脸识别算法对预览图像进行图像检测，不需要对预览特征点进行检测、描述以及相似度计算等操作，可以提高检测效率。

在得到预览特征点集合之后，可以对预览特征点集合和参考图像的指定图像区域的第一参考特征点集合进行特征点相似度检测处理，得到初始特征点集合。在一个实施例中，在进行特征点相似度检测处理时，可以采用特征点描述算法对预览特征点集合中的预览特征点进行特征点描述，得到预览特征点描述子。同理，可以采用特征点描述算法对第一参考特征点集合中的特征点进行特征点描述，得到第一参考特征点集合的各个参考特征点描述子。对预览特征点描述子与第一参考特征点参考集合的各个参考特征点描述子进行相似度计算，将相似度高于预设阈值所对应的预览特征点作为初始特征点，多个初始特征点可以构成初始特征点集合。此处的特征点描述算法可以是BRISK算法、BRIEF算法、ORB算法等等。

在一个实施例中，可以基于光流跟踪检测算法对预览图像进行跟踪预测，确定出预览图像的补充特征点，确定出的补充特征点与第一参考特征点集合中的参考特征点相关联。在采用光流跟踪检测算法对预览图像进行跟踪预测时，可以先获取前一帧预览图像经过图像检测以及特征点匹配等一系列处理后得到的特征点集合。基于前一帧预览图像的特征点集合，采用光流跟踪检测算法对预览图像进行跟踪预测，获取成功跟踪到的特征点集合，如图7所示。根据该成功跟踪到的特征点集合确定出补充特征点，所述补充特征点与上述所提及的各个初始特征点不重复。初始特征点集合中还可包括所述补充特征点。本发明实施例采用光流跟踪检测算法确定出预览图像的补充特征点，用此补充特征点对初始特征点集合进行特征点补充，即初始特征点集合不仅包括初始特征点，还可包括此补充特征点，可以使得初始特征点集合中的特征点更加准确。

本发明实施例为了检测结果更加准确，还考虑了预览图像的参数(如预览图像的位置、旋转角度、尺寸等参数)与参考图像的参数不一致的情况。终端在得到初始特征点集合以后，还可以根据初始特征点集合得到调整参数。在一个实施例中，该调整参数可以包括旋转参数和/或缩放参数。其中，旋转参数是根据初始特征点集合中的任意两个初始特征点之间的连线与预览图像的图像坐标轴构成的角度确定的；所述缩放参数是根据所述初始特征点集合中的任意两个初始特征点之间的连线的长度确定的。

在一个实施例中，终端确定旋转参数的方法可以如图8所示。预览图像和参考图像处于同一个图像坐标系中，该图像坐标系包括横轴和纵轴。终端可以获取初始特征点集合中的任意一对初始特征点对，计算该初始特征点对的旋转角度，所述初始特征点对包括第一初始特征点与第二初始特征点，第一初始特征点与第二初始特征点均为预览图像中的任意初始特征点。计算第一初始特征点与第二初始特征点之间的连线与横轴构成的预览角度，并在参考图像中确定与第一初始特征点对应的第一参考特征点，以及与第二初始特征点对应的第二参考特征点。计算第一参考特征点与第二参考特征点之间的连线与横轴构成的参考角度，将预览角度与参考角度的差值作为该初始特征点对的旋转角度。通过此方法，计算初始特征点集合中的所有初始特征点对的旋转角度，对计算出的所有旋转角度进行平均值计算，得到旋转参数。需要说明的是，若预览图像和参考图像处于不同的图像坐标系中，则在计算初始角度和参考角度之前，需要进行坐标系转换，使得预览图像和参考图像处于同一个图像坐标系中。

在一个实施例中，终端确定缩放参数时，可以获取初始特征点集合中的任意一对初始特征点对，计算该初始特征点对之间的长度，所述初始特征点对包括第一初始特征点与第二初始特征点，第一初始特征点与第二初始特征点均为预览图像中的任意初始特征点。计算第一初始特征点与第二初始特征点之间的连线的预览长度，并在参考图像中确定与第一初始特征点对应的第一参考特征点，以及与第二初始特征点对应的第二参考特征点。计算第一参考特征点与第二参考特征点之间的连线的参考长度，将预览长度与参考长度的比值作为该初始特征点对的缩放值。通过此方法，计算初始特征点集合中的所有初始特征点对的缩放值，对计算出的所有缩放值进行平均值计算，得到缩放参数。

再一个实施例中，终端确定缩放参数时，还可以采用拟合算法来实现，此处的拟合算法可以包括但不限于：矩形拟合算法、直线拟合算法、圆拟合算法等等。在一个实施例中，可以采用矩形拟合算法根据初始特征点集合中的所有初始特征点拟合出一个预览矩形，并采用矩形拟合算法根据第一参考特征点集合中的所有参考特征点拟合成一个参考矩形。将预览矩形的面积与参考矩形的面积的比值作为缩放参数。

在得到调整参数以后，终端可以采用该调整参数对参考图像进行调整，获取调整后的参考图像中的指定图像区域的第二参考特征点集合。将预览特征点集合与第二参考特征点集合进行特征点相似度检测处理，得到目标特征点集合；检测结果包括所述目标特征点集合。采用调整参数对参考图像进行调整，可以保证调整后的参考图像的参数与预览图像的参数一致，从而可以保证得到的目标特征点集合更加准确。

在一种实施方式中，终端在将预览特征点集合与第二参考特征点集合进行特征点相似度检测处理，得到目标特征点集合时，可以根据预览特征点集合中的预览特征点与所述第二参考特征点集合中的参考特征点，进行相似度检测。然后根据相似度检测结果从所述预览特征点集合中确定目标特征点，以得到包括该目标特征点的目标特征点集合；所述目标特征点与所述第二参考特征点集合中的参考特征点的相似度大于预设阈值。

具体的，可以采用特征点描述算法对预览特征点集合中的预览特征点进行特征点描述，得到预览特征点描述子。同理，可以采用特征点描述算法对第二参考特征点集合中的特征点进行特征点描述，得到第二参考特征点集合的各个参考特征点描述子。将预览特征点描述子与第二参考特征点参考集合的各个参考特征点描述子进行成熟算法knnMatch匹配，若该预览特征点描述子在第二参考特征点集合中可以找到N个最佳匹配的参考特征点描述子，则将该预览特征点描述子所对应的预览特征点作为目标特征点，将得到的多个目标特征点做并集处理得到目标特征点集合。其中，最佳匹配的参考特征点描述子与该预览特征点描述子的相似度高于预设阈值，N为正整数，N的取值可以根据实际的业务需求确定，例如N等于2。

在得到包括目标特征点集合的检测结果后，可以根据检测结果确定预览图像中是否包括该参考图像的指定图像区域内的目标对象。在一个实施例中，终端可以根据目标特征点集合的目标特征点的数量进行确定。若该目标特征点的数量大于预设值，则确定预览图像中包括该目标对象；若该目标特征点的数量小于或等于预设值，则确定预览图像中未包括该目标对象。

在本发明实施例中，用户还可以选择拍摄得到一张或多张当前环境的环境图像。在一个实施例中，若终端检测到用户选择拍摄一张当前环境的环境图像，则终端可以在检测到预览图像中包括目标对象时，对环境图像进行一次拍摄操作，得到一张当前环境的环境图像。再一个实施例中，若终端检测到用户选择拍摄多张当前环境的环境图像，则终端可以在检测到预览图像中包括目标对象时，对环境图像进行多次拍摄操作，得到多张当前环境的环境图像。

若终端进行多次拍摄，则可以在S605中执行若预览图像中包括目标对象，则获取预设拍摄间隔值。并在S606中执行若检测到上一次触发拍摄操作的时间点到当前时间点之间的时间间隔大于所述预设拍摄间隔值，则触发拍摄操作，以拍摄得到所述当前环境的环境图像。

由于终端需要进行多次拍摄，若在一段时间内，终端一直检测到预览图像中包括目标对象，则可能会一直进行图像抓拍，从而可能导致拍摄得到大量相同的环境图像，这些大量相同的环境图像会占用终端的大量内存。因此，本发明实施例可以设置一个拍摄间隔值，在检测到预览图像中包括目标对象时，还可以检测上一次触发拍摄操作的时间点到当前时间点之间的时间间隔是否大于该预设拍摄间隔值。若大于，则触发拍摄操作。这样可以避免终端拍摄得到大量相同的环境图像，减少终端的内存占用。

本发明实施例在进行图像抓拍的过程中，可以对当前环境图像的预览图像与预先设置好指定图像区域的参考图像进行图像检测，该指定图像区域包括一个或多个目标对象。若检测到预览图像中包括该目标对象，则触发拍摄操作以得到该环境图像。通过上述操作，将检测到预览图像中包括目标对象的时间点作为抓拍时机，可以较准确地抓拍到好的人物或者其他物体等目标对象的正面图像或者各种特定角度的图像。

例如，用户想要对一支铅笔进行抓拍时，可以在拍照界面中开启跟随抓拍功能，如图9所示。在开启跟随抓拍功能以后，可以返回到拍摄预览界面。在拍摄预览界面中，可以显示跟随抓拍标识以提示用户终端正处于跟随抓拍模式中，该跟随抓拍标识可以如图10所示的“抓拍模式”。用户可以在拍摄预览界面中选择参考图像，该参考图像可以是终端图库中已保存的图像，也可以是用户实时通过摄像组件获取的图像。用户可以通过手去触摸用户界面并进行滑动。此时用户界面中可以显示一个框选框(例如矩形框)。用户通过拖动该矩形框以选定指定图像区域，如图10所示。用户抬起手后，选择框的大小及位置在参考图像中固定。终端检测到用户的手离开用户界面后，可以根据矩形框的大小以及在参考图像中的位置来确定参考图像中的指定图像区域以及该指定图像区域内的目标对象。并对该参考图像进行一系列初始化操作，得到该参考图像的特征点等数据，该特征点可包括参考特征点和背景特征点。

用户在选定指定图像区域以后，可以继续预览当前环境图像的预览图像。在用户继续预览图像的过程中，终端可以实时获取预览图像，并对获取到的预览图像进行图像检测、相似度计算等一系列操作，以检测预览图像中是否包括目标对象。若检测到预览图像中包括该目标对象，则触发拍摄操作，以得到该环境图像。终端检测到预览图像中包括目标图像时，可以在预览界面显示提示框，用此提示框将目标图像框选出来，以提示用户成功检测到目标图像。在触发拍摄操作时，终端还可以将预览界面中显示的拍摄图标变大，以此提醒用户正在进行图像拍摄。

基于上述方法实施例的描述，在一个实施例中，本发明实施例还提供了一种如图12所示的图像抓拍装置的结构示意图。如图12所示，本发明实施例中的图像抓拍装置可包括：

获取单元101，用于对当前环境进行预览拍摄，获取所述预览拍摄得到的预览图像。

检测单元102，用于将所述预览图像与参考图像进行图像检测，根据检测结果确定所述预览图像中是否包括所述参考图像的指定图像区域内的目标对象。

触发单元103，用于若所述预览图像中包括所述目标对象，则触发拍摄操作，以拍摄得到所述当前环境的环境图像。

其中，所述参考图像为对所述当前环境进行所述预览拍摄前，在用户界面显示的图像；所述指定图像区域包括：在所述用户界面显示所述参考图像后，根据在所述用户界面上接收到的对显示的所述参考图像的选择指令确定的图像区域，所述指定图像区域内包括一个或多个目标对象。

在一个实施例中，检测单元102可具体用于：采用特征点检测算法对预览图像进行特征点检测，得到预览特征点集合；对预览特征点集合和参考图像的所述指定图像区域的第一参考特征点集合进行特征点相似度检测处理，得到初始特征点集合；根据所述初始特征点集合得到调整参数；采用所述调整参数对所述参考图像进行调整，获取调整后的参考图像中的指定图像区域的第二参考特征点集合；将所述预览特征点集合与所述第二参考特征点集合进行特征点相似度检测处理，得到目标特征点集合；所述检测结果包括所述目标特征点集合。

在一个实施例中，该图像抓拍装置还可包括跟踪单元104，用于：基于光流跟踪检测算法对所述预览图像进行跟踪预测，确定出所述预览图像的补充特征点，确定出的补充特征点与所述第一参考特征点集合中的参考特征点相关联；所述初始特征点集合中包括所述补充特征点。

在一个实施例中，所述调整参数包括：旋转参数和/或缩放参数；其中，所述旋转参数是根据所述初始特征点集合中的任意两个初始特征点之间的连线与所述预览图像的图像坐标轴构成的角度确定的；所述缩放参数是根据所述初始特征点集合中的任意两个初始特征点之间的连线的长度确定的。

再一个实施例中，检测单元102可具体用于：根据所述预览特征点集合中的预览特征点与所述第二参考特征点集合中的参考特征点，进行相似度检测；根据相似度检测结果从所述预览特征点集合中确定目标特征点，以得到包括所述目标特征点的目标特征点集合；所述目标特征点与所述第二参考特征点集合中的参考特征点的相似度大于预设阈值。

再一个实施例中，检测单元102还可用于：检测参考图像的指定图像区域内的目标对象是否为人脸图像；若是，则采用人脸识别算法对预览图像进行图像检测；若否，则执行采用特征点检测算法对预览图像进行特征点检测的步骤。

再一个实施例中，获取单元101还可用于：在所述触发拍摄操作之前，获取预设拍摄间隔值；检测单元102还可用于：若检测到上一次触发拍摄操作的时间点到当前时间点之间的时间间隔大于所述预设拍摄间隔值，则执行所述触发拍摄操作的步骤。

再一个实施例中，检测单元102还可用于：检测所述预览图像的图像格式；该图像抓拍装置还可包括转换单元105，用于：若所述预览图像的图像格式为非灰度图像格式，则对所述预览图像进行格式转换，使得转换后的预览图像的图像格式为灰度图像格式。

本发明实施例在进行图像抓拍的过程中，可以对当前环境图像的预览图像与预先设置好指定图像区域的参考图像进行图像检测，该指定图像区域包括一个或多个目标对象。若检测到预览图像中包括部分或者全部目标对象，则触发拍摄操作以得到该环境图像。通过上述操作，将检测到预览图像中包括目标对象的时间点作为抓拍时机，可以较准确地抓拍到好的人物或者其他物体等目标对象的正面图像或者各种特定角度的图像。

请参见图13，是本发明实施例提供的一种智能终端的结构示意图。如图13所示的本实施例中的智能终端可以包括：一个或多个处理器201；一个或多个输入设备202，一个或多个输出设备203和存储器204。上述处理器201、输入设备202、输出设备203和存储器204通过总线205连接。存储器204用于存储计算机程序，所述计算机程序包括程序指令，处理器201用于执行所述存储器204存储的程序指令。

在一个实施例中，该处理器201可以是中央处理单元(Central Processing Unit，CPU)，该处理器还可以是其他通用处理器，即微处理器或者任何常规的处理器。该存储器204可以包括只读存储器和随机存取存储器，并向处理器201提供指令和数据。因此，在此对于处理器201和存储器204不作限定。

在本发明实施例中，由处理器201加载并执行计算机存储介质中存放的一条或一条以上指令，以实现上述相应实施例中的方法的相应步骤；具体实现中，计算机存储介质中的至少一条指令由处理器201加载并执行如下步骤：

对当前环境进行预览拍摄，获取该预览拍摄得到的预览图像；将该预览图像与参考图像进行图像检测，根据检测结果确定该预览图像中是否包括该参考图像的指定图像区域内的目标对象；若该预览图像中包括该目标对象，则触发拍摄操作，以拍摄得到该当前环境的环境图像；其中，该参考图像为对该当前环境进行该预览拍摄前，在用户界面显示的图像；该指定图像区域包括：在该用户界面显示该参考图像后，根据在该用户界面上接收到的对显示的该参考图像的选择指令确定的图像区域，该指定图像区域内包括一个或多个目标对象。

在一个实施例中，在将所述预览图像与参考图像进行图像检测时，该至少一条程序指令可由该处理器201加载并具体用于执行：

采用特征点检测算法对所述预览图像进行特征点检测，得到预览特征点集合；对所述预览特征点集合和所述参考图像的所述指定图像区域的第一参考特征点集合进行特征点相似度检测处理，得到初始特征点集合；根据所述初始特征点集合得到调整参数；采用所述调整参数对所述参考图像进行调整，获取调整后的参考图像中的指定图像区域的第二参考特征点集合；将所述预览特征点集合与所述第二参考特征点集合进行特征点相似度检测处理，得到目标特征点集合；所述检测结果包括所述目标特征点集合。

在一个实施例中，该至少一条程序指令可由该处理器201加载并用于执行：

基于光流跟踪检测算法对所述预览图像进行跟踪预测，确定出所述预览图像的补充特征点，确定出的补充特征点与所述第一参考特征点集合中的参考特征点相关联；所述初始特征点集合中包括所述补充特征点。

在一个实施例中，所述调整参数包括：旋转参数和/或缩放参数；其中，所述旋转参数是根据所述初始特征点集合中的任意两个初始特征点之间的连线与所述预览图像的图像坐标轴构成的角度确定的；所述缩放参数是根据所述初始特征点集合中的任意两个初始特征点之间的连线的长度确定的。

在一个实施例中，在将所述预览特征点集合与所述第二参考特征点集合进行特征点相似度检测处理，得到目标特征点集合时，该至少一条程序指令可由该处理器201加载并具体用于执行：

根据所述预览特征点集合中的预览特征点与所述第二参考特征点集合中的参考特征点，进行相似度检测；根据相似度检测结果从所述预览特征点集合中确定目标特征点，以得到包括所述目标特征点的目标特征点集合；所述目标特征点与所述第二参考特征点集合中的参考特征点的相似度大于预设阈值。

在一个实施例中，在采用特征点检测算法对所述预览图像进行特征点检测之前，该至少一条程序指令还可由该处理器201加载并用于执行：

检测所述参考图像的指定图像区域内的目标对象是否为人脸图像；若是，则采用人脸识别算法对所述预览图像进行图像检测；若否，则执行采用特征点检测算法对所述预览图像进行特征点检测的步骤。

在一个实施例中，该至少一条程序指令可由该处理器201加载并用于执行：

在所述触发拍摄操作之前，获取预设拍摄间隔值；若检测到上一次触发拍摄操作的时间点到当前时间点之间的时间间隔大于所述预设拍摄间隔值，则执行所述触发拍摄操作的步骤。

在一个实施例中，在将所述预览图像与参考图像进行图像检测之前，该至少一条程序指令还可由该处理器201加载并用于执行：

检测所述预览图像的图像格式；若所述预览图像的图像格式为非灰度图像格式，则对所述预览图像进行格式转换，使得转换后的预览图像的图像格式为灰度图像格式。

需要说明的是，上述描述的终端和单元的具体工作过程，可以参考前述各个实施例中的相关描述，在此不再赘述。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。

以上所揭露的仅为本发明的部分实施例而已，当然不能以此来限定本发明之权利范围，本领域普通技术人员可以理解实现上述实施例的全部或部分流程，并依本发明权利要求所作的等同变化，仍属于发明所涵盖的范围。

Claims (8)

1.一种图像抓拍方法，其特征在于，包括：

对当前环境进行预览拍摄，获取所述预览拍摄得到的预览图像；并在预览拍摄界面显示所述预览图像以及与所述预览拍摄相关联的显示图标，所述显示图标包括拍摄图标和图像抓拍标识，以提示用户终端当前处于跟随抓拍模式中；

检测参考图像的指定图像区域内的目标对象是否为人脸图像；

若是，则采用人脸识别算法对所述预览图像进行图像检测；

若否，则执行以下处理：采用特征点检测算法对所述预览图像进行特征点检测，得到预览特征点集合；对所述预览特征点集合和所述参考图像的所述指定图像区域的第一参考特征点集合进行特征点相似度检测处理，得到初始特征点集合；根据所述初始特征点集合得到调整参数，所述调整参数包括：旋转参数和/或缩放参数；所述旋转参数是根据任意两个初始特征点之间的第一连线与图像坐标系中的横轴构成的角度，与所述任意两个初始特征点对应的两个参考特征点之间的第二连线与所述横轴构成的角度之间的差值确定的；所述缩放参数是根据所述第一连线的长度与所述第二连线的长度之间的比值确定的；采用所述调整参数对所述参考图像进行调整，获取调整后的参考图像中指定图像区域的第二参考特征点集合；将所述预览特征点集合与所述第二参考特征点集合进行特征点相似度检测处理，得到包括目标特征点集合的检测结果；

根据检测结果确定所述预览图像中是否包括所述参考图像的指定图像区域内的目标对象；

若所述预览图像中包括所述目标对象，则输出提示信息，所述提示信息包括语音提示信息和/或图像提示信息，以提示用户所述目标对象在所述预览图像中被成功识别到；同时改变所述预览拍摄界面中的所述拍摄图标的状态，以提示用户所述终端正在进行图像拍摄，并触发拍摄操作，以拍摄得到所述当前环境的环境图像；

其中，所述参考图像为对所述当前环境进行所述预览拍摄前，在用户界面显示的图像；所述指定图像区域包括：在所述用户界面显示所述参考图像后，根据在所述用户界面上接收到的对显示的所述参考图像的选择指令确定的图像区域，所述指定图像区域内包括一个或多个目标对象。

2.如权利要求1所述的方法，其特征在于，所述方法还包括：

基于光流跟踪检测算法对所述预览图像进行跟踪预测，确定出所述预览图像的补充特征点，确定出的补充特征点与所述第一参考特征点集合中的参考特征点相关联；

所述初始特征点集合中包括所述补充特征点。

3.如权利要求1所述的方法，其特征在于，所述将所述预览特征点集合与所述第二参考特征点集合进行特征点相似度检测处理，得到包括目标特征点集合的检测结果，包括：

根据所述预览特征点集合中的预览特征点与所述第二参考特征点集合中的参考特征点，进行相似度检测；

根据相似度检测结果从所述预览特征点集合中确定目标特征点，以得到包括所述目标特征点的目标特征点集合；

所述目标特征点与所述第二参考特征点集合中的参考特征点的相似度大于预设阈值。

4.如权利要求1所述的方法，其特征在于，所述方法还包括：

在所述触发拍摄操作之前，获取预设拍摄间隔值；

若检测到上一次触发拍摄操作的时间点到当前时间点之间的时间间隔大于所述预设拍摄间隔值，则执行所述触发拍摄操作的步骤。

5.如权利要求1所述的方法，其特征在于，在对所述预览图像进行图像检测之前，所述方法还包括：

检测所述预览图像的图像格式；

若所述预览图像的图像格式为非灰度图像格式，则对所述预览图像进行格式转换，使得转换后的预览图像的图像格式为灰度图像格式。

6.一种图像抓拍装置，其特征在于，包括：

获取单元，用于对当前环境进行预览拍摄，获取所述预览拍摄得到的预览图像；并在预览拍摄界面显示所述预览图像以及与所述预览拍摄相关联的显示图标，所述显示图标包括拍摄图标和图像抓拍标识，以提示用户终端当前处于跟随抓拍模式中；

检测单元，用于检测参考图像的指定图像区域内的目标对象是否为人脸图像；若是，则采用人脸识别算法对所述预览图像进行图像检测；若否，则执行以下处理：采用特征点检测算法对所述预览图像进行特征点检测，得到预览特征点集合；对所述预览特征点集合和所述参考图像的所述指定图像区域的第一参考特征点集合进行特征点相似度检测处理，得到初始特征点集合；根据所述初始特征点集合得到调整参数，所述调整参数包括：旋转参数和/或缩放参数；所述旋转参数是根据任意两个初始特征点之间的第一连线与图像坐标系中的横轴构成的角度，与所述任意两个初始特征点对应的两个参考特征点之间的第二连线与所述横轴构成的角度之间的差值确定的；所述缩放参数是根据所述第一连线的长度与所述第二连线的长度之间的比值确定的；采用所述调整参数对所述参考图像进行调整，获取调整后的参考图像中指定图像区域的第二参考特征点集合；将所述预览特征点集合与所述第二参考特征点集合进行特征点相似度检测处理，得到包括目标特征点集合的检测结果；

所述检测单元，还用于根据检测结果确定所述预览图像中是否包括所述参考图像的指定图像区域内的目标对象；

触发单元，用于若所述预览图像中包括所述目标对象，则输出提示信息，所述提示信息包括语音提示信息和/或图像提示信息，以提示用户所述目标对象在所述预览图像中被成功识别到；同时改变所述预览拍摄界面中的所述拍摄图标的状态，以提示用户所述终端正在进行图像拍摄，并触发拍摄操作，以拍摄得到所述当前环境的环境图像；

其中，所述参考图像为对所述当前环境进行所述预览拍摄前，在用户界面显示的图像；所述指定图像区域包括：在所述用户界面显示所述参考图像后，根据在所述用户界面上接收到的对显示的所述参考图像的选择指令确定的图像区域，所述指定图像区域内包括一个或多个目标对象。

7.一种智能终端，其特征在于，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如权利要求1-5任一项所述的图像抓拍方法。

8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序指令，所述计算机程序指令适于由处理器加载并执行如权利要求1-5任一项所述的图像抓拍方法。

Images