CN109783680B - 图像推送方法、图像获取方法、装置及图像处理系统 - Google Patents

Abstract

本发明提供了一种图像推送方法、图像获取方法、装置及图像处理系统，涉及图像处理技术领域，应用于图像采集设备的图像推送方法包括：获取待检测的帧图像；对帧图像进行目标检测，得到帧图像中包含的目标对象的包围框；基于包围框在帧图像中的位置，生成包围框的位置参数；将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。本发明能够有效降低抓拍识别机的硬件资源占用率和带宽负载量。

Description

图像推送方法、图像获取方法、装置及图像处理系统

技术领域

本发明涉及图像处理技术领域，尤其是涉及一种图像推送方法、图像获取方法、装置及图像处理系统。

背景技术

抓拍识别机是一种智能摄像机前端，主要用于从拍摄的图像中检测诸如人、物体等目标对象，将拍摄图像中所包含的所有目标对象所在的图像抠取出来，再将所有抠取出来的包含有目标对象的图像(均为小图)和整幅拍摄图像均上传至服务器进行保存。但是，如果一张图像中所包含的目标对象较多，抓拍识别机不仅需要占用大量的硬件资源抠取多张小图，而且在向服务器推送多张小图的过程中也会加大带宽负载量。

发明内容

有鉴于此，本发明的目的在于提供一种图像推送方法、图像获取方法、装置及图像处理系统，能够有效降低抓拍识别机的硬件资源占用率和带宽负载量。

为了实现上述目的，本发明实施例采用的技术方案如下：

第一方面，本发明实施例提供了一种图像推送方法，所述方法应用于图像采集设备，所述方法包括：获取待检测的帧图像；对所述帧图像进行目标检测，得到所述帧图像中包含的目标对象的包围框；基于所述包围框在所述帧图像中的位置，生成所述包围框的位置参数；将所述帧图像和所述包围框的位置参数推送至服务器，以使所述服务器基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像。

进一步，所述帧图像的数量为多张；所述方法还包括：为每张帧图像中所包含的包围框均设置跟踪标签；其中，包含有同一目标对象的包围框的跟踪标签相同，包含有不同目标对象的包围框的跟踪标签不同；所述将所述帧图像和所述包围框的位置参数推送至服务器的步骤，包括：从具有相同跟踪标签的包围框中选取目标包围框；将所述目标包围框所在的帧图像和所述目标包围框的位置参数推送至服务器；或者，为所述目标包围框的位置参数标注所述目标包围框所在的帧图像的帧号，将每张帧图像和标注有帧号的所述目标包围框的位置参数推送至服务器。

进一步，所述从具有相同跟踪标签的包围框中选取目标包围框的步骤，包括：按照预设的图像质量评价因素，从具有相同跟踪标签的包围框中选取目标包围框；其中，所述图像质量评价因素包括以下中的一种或多种：包围框清晰度因素、包围框中的目标对象的姿态因素、包围框中的目标对象的遮挡因素和包围框尺寸因素。

进一步，所述包围框的位置参数包括所述包围框的多个关键点坐标；或者，所述包围框的位置参数包括所述包围框的一个关键点坐标以及所述包围框的长度值和宽度值；其中，所述关键点坐标包括顶点坐标或中心点坐标。

第二方面，本发明实施例还提供一种图像获取方法，所述方法应用于服务器，所述方法包括：接收图像采集设备上传的帧图像和包围框的位置参数；基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像。

进一步，所述帧图像的数量为多张；所述接收图像采集设备上传的帧图像和包围框的位置参数的步骤，包括：接收图像采集设备上传的每张帧图像，以及标注有帧号的目标包围框的位置参数；其中，所述帧号为所述目标包围框所在的帧图像的帧号；所述基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像的步骤，包括：根据为目标包围框的位置参数标注的帧号，从每张所述帧图像中提取出所述目标包围框所在的帧图像；从提取的所述帧图像中抠取所述位置参数确定的图像。

进一步，所述帧图像的数量为多张；所述接收图像采集设备上传的帧图像和包围框的位置参数的步骤，包括：接收图像采集设备上传的目标包围框所在的帧图像和所述目标包围框的位置参数；根据所述目标包围框的位置参数，从所述目标包围框所在的帧图像中抠取所述位置参数确定的图像。

第三方面，本发明实施例提供了一种图像推送装置，所述装置设置于图像采集设备，所述装置包括：图像获取模块，用于获取待检测的帧图像；目标检测模块，用于对所述帧图像进行目标检测，得到所述帧图像中包含的目标对象的包围框；框参数生成模块，用于基于所述包围框在所述帧图像中的位置，生成所述包围框的位置参数；推送模块，用于将所述帧图像和所述包围框的位置参数推送至服务器，以使所述服务器基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像。

第四方面，本发明实施例提供了一种图像获取装置，所述装置设置于服务器，所述装置包括：接收模块，用于接收图像采集设备上传的帧图像和包围框的位置参数；抠取模块，用于基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像。

第五方面，本发明实施例提供了一种图像处理系统，所述系统包括图像采集设备和服务器；其中，所述图像采集设备，用于执行如第一方面任一项所述的图像推送方法；所述服务器，用于执行如第二方面任一项所述的图像获取方法。

第六方面，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行上述第一方面任一项所述的图像推送方法，或者执行上述第二方面任一项所述的图像获取方法的步骤。

本发明实施例提供了一种应用于图像采集设备的图像推送方法及装置，能够首先获取待检测的帧图像中包含的目标对象的包围框；然后基于包围框在帧图像中的位置，生成包围框的位置参数；最后将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。与现有技术中通过图像采集设备从原图像中抠取包含目标对象的小图像并推送小图像和原图像的方式相比，本实施例提供的上述方式仅使图像采集设备推送包围框的位置参数和帧图像，能够有效降低抠取小图像过程中的硬件资源占用率，以及推送图像过程中的带宽负载量。

本发明实施例提供了一种应用于服务器的图像获取方法及装置，能够首先接收图像采集设备上传的帧图像和包围框的位置参数；然后基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。本实施例提供的上述方式利用服务器抠取位置参数确定的图像，在提升抠取效率的同时，也能够有效缓解图像采集设备在抠取小图像过程中硬件资源占用过高的压力，以及降低传输图像过程中的带宽负载量。

本发明实施例提供了一种图像处理系统，通过图像采集设备仅将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。本实施例提供的上述方式能够仅使图像采集设备推送包围框的位置参数和帧图像，能够有效缓解图像采集设备在抠取小图像时的硬件资源占用过高的压力，以及有效降低图像采集设备推送图像过程中的带宽负载量。

本发明的其他特征和优点将在随后的说明书中阐述，或者，部分特征和优点可以从说明书推知或毫无疑义地确定，或者通过实施本公开的上述技术即可得知。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了本发明实施例所提供的一种电子设备的结构示意图；

图2示出了本发明实施例所提供的一种应用于图像采集设备的图像推送方法的流程图；

图3示出了本发明实施例所提供的一种应用于服务器的图像获取方法的流程图；

图4示出了本发明实施例所提供的一种图像处理交互图；

图5示出了本发明实施例所提供的一种图像推送装置的结构框图；

图6示出了本发明实施例所提供的一种图像获取装置的结构框图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

发明人在研究过程中发现对于含有目标对象数量较多的图像，现有抓拍识别机存在抠取小图像时硬件资源占用过高，假设每张帧图像的抠取时间设置为40ms，如果一张帧图像包含有较多的目标对象，当前硬件资源(如CPU)的处理能力无法在40ms内完成对该帧图像中全部目标对象所在小图像的抠取，使得总抠取时间超过了40ms，则会对其它帧图像的处理造成影响，容易出现丢图、推送图像延迟等问题。此外，将抠取出的多张包含有目标对象的小图推送给服务器时，也存在带宽负载量过高等问题。基于此，本发明实施例提供了一种图像推送方法、图像获取方法、装置及图像处理系统，可以应用于各种涉及目标抓拍的领域，例如电子商务、银行业务、安全监控等领域的人脸抓拍，交通监控领域的车辆或车牌抓拍等。为便于理解，以下对本发明实施例进行详细介绍。

实施例一：

首先，参照图1来描述用于实现本发明实施例的图像推送方法、图像获取方法、装置及图像处理系统的示例电子设备100。

如图1所示的一种电子设备的结构示意图，电子设备100包括一个或多个处理器102、一个或多个存储装置104、输入装置106、输出装置108以及图像采集装置110，这些组件通过总线系统112和/或其它形式的连接机构(未示出)互连。应当注意，图1所示的电子设备100的组件和结构只是示例性的，而非限制性的，根据需要，所述电子设备也可以具有其他组件和结构。

所述处理器102可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元，并且可以控制所述电子设备100中的其它组件以执行期望的功能。

所述存储装置104可以包括一个或多个计算机程序产品，所述计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令，处理器102可以运行所述程序指令，以实现下文所述的本发明实施例中(由处理器实现)的客户端功能以及/或者其它期望的功能。在所述计算机可读存储介质中还可以存储各种应用程序和各种数据，例如所述应用程序使用和/或产生的各种数据等。

所述输入装置106可以是用户用来输入指令的装置，并且可以包括键盘、鼠标、麦克风和触摸屏等中的一个或多个。

所述输出装置108可以向外部(例如，用户)输出各种信息(例如，图像或声音)，并且可以包括显示器、扬声器等中的一个或多个。

所述图像采集装置110可以拍摄用户期望的图像(例如照片、视频等)，并且将所拍摄的图像存储在所述存储装置104中以供其它组件使用。

示例性地，用于实现根据本发明实施例的一种图像推送方法、图像获取方法、装置及图像处理系统的示例电子设备可以被实现为诸如智能手机、平板电脑、计算机、抓拍识别机和服务器等智能终端上。

实施例二：

参照图2所示的一种应用于图像采集设备的图像推送方法的流程图，该方法可由图像采集设备执行，该图像采集设备可以是手机、抓拍识别机等设备，该方法具体包括如下步骤：

步骤S202，获取待检测的帧图像。上述帧图像可以是图像采集设备(诸如抓拍识别机)采集到的单张帧图像，也可以是图像采集设备采集到的视频流中的多张帧图像。

步骤S204，对帧图像进行目标检测，得到帧图像中包含的目标对象的包围框。帧图像中可能包含有目标对象，在实际应用中，目标对象可以为人、动物或者车辆等其它对象。

在一种可选实施方式中，可以基于R-CNN(Region with CNN feature，具有卷积神经网络的区域)网络对帧图像进行目标检测，本实施例给出一种示例性的目标检测方式，可参考如下具体步骤：

第一步，将输入至R-CNN网络的帧图像，采用选择性搜索的区域建议方法提取帧图像中的多个候选区域。第二步，将提取到的多个候选区域进行区域大小的修正，以适配CNN网络的输入，再通过CNN网络对区域修正后的候选区域进行特征提取，得到与候选区域对应的特征图。第三步，采用SVM(Support Vector Machine，支持向量机)对特征图进行分类评分，得到多个初始包围框。第四步，采用非极大值抑制方法去除部分重叠程度较高的初始包围框，最终得到帧图像中每个目标对象的包围框。

步骤S206，基于包围框在帧图像中的位置，生成包围框的位置参数。

在本实施例中，基于上述包围框的检测方式，该包围框的位置参数也可以通过CNN网络输出。包围框的位置参数(也即包围框的属性值)可以通过不同的参数组成，可具有多种表达方式。为便于理解，可参照如下两种方式：方式一，包围框的位置参数可以包括包围框的多个关键点坐标(x，y)。其中，关键点可以为包围框的四个顶点中的至少三个顶点，也可以为包围框的中心点以及四个顶点中的至少两个顶点。方式二，包围框的位置参数还可以包括包围框的一个关键点坐标(x，y)以及包围框的长度值h和宽度值w，可以表示为(x，y，w，h)。诸如包括包围框的左上顶点坐标(x，y)以及包围框的长度值h和包围框的宽度值w。

在以上两种方式中，关键点坐标包括顶点坐标和中心点坐标，仅为对包围框的位置参数的示例性说明，当然也可以设定其它坐标，诸如包围框的每条边的中点。在实际应用中，还可以包括其它表达方式的包围框的位置参数，在此不进行限制。

步骤S208，将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。

在实际应用中，图像采集设备可以采用同步通信机制将帧图像和包围框的位置参数推送至服务器，这样既可以具有较高的传输频率，又能够确保帧图像和包围框的位置参数是以相同的时钟频率推送至服务器的，也即通过公共的时钟信号将帧图像和包围框的位置参数建立关联关系。

本发明实施例提供的一种应用于图像采集设备的图像推送方法，能够首先获取待检测的帧图像中包含的目标对象的包围框；然后基于包围框在帧图像中的位置，生成包围框的位置参数；最后将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。与现有技术中通过图像采集设备从原图像中抠取包含目标对象的小图像并推送小图像和原图像的方式相比，本实施例提供的上述方式仅使图像采集设备推送包围框的位置参数和帧图像，能够有效降低抠取小图像过程中的硬件资源占用率，以及推送图像过程中的带宽负载量。

进一步，当帧图像的数量为多张时，本实施例提供的图像推送方法还包括：为每张帧图像中所包含的包围框均设置跟踪标签；其中，包含有同一目标对象的包围框的跟踪标签相同，包含有不同目标对象的包围框的跟踪标签不同。该跟踪标签是为了区分不同的目标对象而被赋予的编号，诸如可以按照目标对象出现的顺序并采用累加的方式为第一个目标对象赋予跟踪标签为01，为第二个目标对象赋予跟踪标签为02，以此类推。如果一个目标对象一直出现在连续的帧图像中，则对这段连续的帧图像每一张进行目标检测的结果均可得到相同的跟踪标签，即同一个目标对象的跟踪标签在这些帧图像中是同一个数值，并没有改变，如果在一张帧图像中有跟踪标签消失了，则表征该跟踪标签对应的目标对象在这一张帧图像中没有出现或者被遮挡。

基于为包围框设置的跟踪标签，本实施例给出将帧图像和包围框的位置参数推送至服务器的实现方式，具体可参考如下步骤1、步骤2.1和步骤2.2(其中，步骤2.1和步骤2.2任选其一执行即可)：

步骤1，从具有相同跟踪标签的包围框中选取目标包围框。在一种可能的实现方式中，可以首先获取一组帧图像，诸如：将预设张数(诸如15张)的帧图像设为一组，或者将跟踪标签首次出现直至该跟踪标签最后一次出现的连续多张帧图像设为一组。然后从每组帧图像中抽取具有相同跟踪标签的多个包围框。最后按照预设的图像质量评价因素，从具有相同跟踪标签的多个包围框中选取目标包围框；其中，图像质量评价因素包括以下中的一种或多种：包围框清晰度因素、包围框中的目标对象的姿态因素、包围框中的目标对象的遮挡因素和包围框尺寸因素。

为便于理解，以下以包围框中的目标对象为人脸为例给出一种选取目标包围框的具体实现方式。首先对具有相同跟踪标签的多个包围框的人脸姿态进行计算，得到欧拉角(Yaw，Pitch，Roll)；Pitch为俯仰角，Yaw为偏航角，Roll为翻滚角。然后，在多个包围框中选取欧拉角在预设欧拉角范围内的部分包围框；其中，预设欧拉角范围诸如为：-30≤Yaw≤30，-5≤Pitch≤5和-6≤Roll≤6。接着，对选取的部分包围框进行清晰度评价，得到清晰度评分值。最后，将最高清晰度评分值所对应的包围框确定为目标包围框。当然，以上仅为对目标包围框的选取方式的示例性说明，不应理解为限制。

基于得到的目标包围框和包围框的位置参数，接下来可以执行步骤S2.1，或者执行步骤S2.2。

步骤2.1，将目标包围框所在的帧图像和目标包围框的位置参数推送至服务器。采用这种推送方式时，图像采集设备待推送的数据(也即目标包围框所在的帧图像和目标包围框的位置参数)数量较少，能够有效的降低了宽带负载量。

步骤2.2，为目标包围框的位置参数标注目标包围框所在的帧图像的帧号，将每张帧图像和标注有帧号的目标包围框的位置参数推送至服务器。采用这种推送方式，图像采集设备将全部的帧图像和标注有帧号的目标包围框的位置参数推送至服务器，在降低了矿带负载量的基础上，还可以基于全部的帧图像提高存留信息的全面性，有利于后期信息的调用和查询。

综上所述，通过上述应用于图像采集设备的图像推送方法，可以仅将帧图像和帧图像中目标对象的包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像，能够有效降低图像采集设备在抠取小图像过程中的硬件资源占用率，以及在推送图像过程中的带宽负载量。

实施例三：

结合前述实施例二，参照图3所示的一种应用于服务器的图像获取方法的流程图，该方法可以由服务器执行，该服务器又可称为后台服务器或平台服务器，该方法包括：

步骤S302，接收图像采集设备上传的帧图像和包围框的位置参数。其中，帧图像是图像采集设备采集到的至少一张帧图像或者在视频流中提取的帧图像，帧图像中包含有至少一个目标对象。包围框的位置参数是图像采集设备对帧图像进行目标检测，并基于检测到的包含目标对象的包围框生成的，图像位置参数诸如包括包围框的一个关键点坐标(x，y)以及包围框的长度值h和宽度值w。

步骤S304，基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。具体实现时，可以是根据包围框的位置参数定位包围框所在帧图像中的位置，从而从帧图像中将已定位的图像抠取出来。

具体实施时，可以采用诸如OpenCv(Open Source Computer Vision Library，开源计算机视觉库)中的CvRect函数对包围框的位置参数(x，y，w，h)进行运算，确定ROI(Region Of Interest，感兴趣)区域；然后将ROI区域输出，得到位置参数确定的图像，该图像即为包含目标对象的小图。

本发明实施例提供的一种应用于服务器的图像获取方法，能够首先接收图像采集设备上传的帧图像和包围框的位置参数；然后基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。本实施例提供的上述方式利用服务器抠取小图像，在提升抠取效率的同时，也能够有效缓解图像采集设备在抠取小图像过程中硬件资源占用过高的压力，以及降低传输图像过程中的带宽负载量。

基于上一实施例中对于帧图像的数量为多张的情况，图像采集设备采用的不同推送方式(如前述实施例中的步骤2.1或步骤2.2)，本实施例中，服务器接收图像采集设备上传的帧图像和包围框的位置参数的方式也可以包括如下两种方式：

方式一：服务器接收图像采集设备上传的每张帧图像，以及标注有帧号的目标包围框的位置参数；其中，帧号为目标包围框所在的帧图像的帧号。

基于此方式，服务器从帧图像上抠取包围框时，需要根据为目标包围框的位置参数标注的帧号，从每张帧图像中提取出目标包围框所在的帧图像；然后从提取的帧图像中抠取位置参数确定的图像。

方式二：服务器接收图像采集设备上传的目标包围框所在的帧图像和目标包围框的位置参数。基于此方式，服务器可以直接根据目标包围框的位置参数，从目标包围框所在的帧图像中抠取位置参数确定的图像。

综上所述，上述应用于服务器的图像获取方法，通过服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像；在提升抠取效率的同时，也能够有效缓解图像采集设备在抠取小图像过程中硬件资源占用过高的压力，以及降低传输图像过程中的带宽负载量。

实施例四：

结合实施例二和实施例三，本实施例给出了一种图像处理方法的具体应用示例，参照图4所示的一种图像处理交互图，主要示意出了图像采集设备与服务器的交互过程，具体包括如下交互步骤：

步骤S402，图像采集设备采集待检测的帧图像。

步骤S404，图像采集设备对帧图像进行目标检测，得到帧图像中包含的目标对象的包围框。

步骤S406，图像采集设备基于包围框在帧图像中的位置，生成包围框的位置参数。

步骤S408，图像采集设备将帧图像和包围框的位置参数推送至服务器。

步骤S410，服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。

本发明实施例提供的上述图像处理方法，通过图像采集设备将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像，能够有效缓解图像采集设备在抠取小图像时的硬件资源占用过高的压力，以及有效降低图像采集设备推送图像过程中的带宽负载量。

为了便于理解，以下站在图像采集设备侧为例进行示意性说明。当图像采集设备获取的帧图像的数量为多张时，还为每张帧图像中所包含的包围框均设置跟踪标签；其中，包含有同一目标对象的包围框的跟踪标签相同，包含有不同目标对象的包围框的跟踪标签不同。

基于此，上述步骤S408包括：从具有相同跟踪标签的包围框中选取目标包围框；将目标包围框所在的帧图像和目标包围框的位置参数推送至服务器；或者，为目标包围框的位置参数标注目标包围框所在的帧图像的帧号，将每张帧图像和标注有帧号的目标包围框的位置参数推送至服务器。

为便于理解，本实施例给出一种从具有相同跟踪标签的包围框中选取目标包围框的实现方式，可以参照如下具体步骤：按照预设的图像质量评价因素，从具有相同跟踪标签的包围框中选取目标包围框；其中，图像质量评价因素包括以下中的一种或多种：包围框清晰度因素、包围框中的目标对象的姿态因素、包围框中的目标对象的遮挡因素和包围框尺寸因素。

综上所述，上述实施例提供的上述图像处理方法，通过图像采集设备将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数从帧图像中抠取位置参数确定的图像，能够有效缓解图像采集设备在抠取小图像时的硬件资源占用过高的压力，以及有效降低图像采集设备推送图像过程中的带宽负载量。

实施例五：

对于实施例二中所提供的图像推送方法，本发明实施例提供了一种图像推送装置，参见如图5所示的一种图像推送装置的结构框图，该装置设置于图像采集设备，该装置包括：

图像获取模块502，用于获取待检测的帧图像。

目标检测模块504，用于对帧图像进行目标检测，得到帧图像中包含的目标对象的包围框。

框参数生成模块506，用于基于包围框在帧图像中的位置，生成包围框的位置参数。

推送模块508，用于将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。

本发明实施例提供的上述图像推送装置，能够首先获取待检测的帧图像中包含的目标对象的包围框；然后基于包围框在帧图像中的位置，生成包围框的位置参数；最后将帧图像和包围框的位置参数推送至服务器，以使服务器基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。与现有技术中通过图像采集设备从原图像中抠取包含目标对象的小图像并推送小图像和原图像的方式相比，本实施例提供的上述方式仅使图像采集设备推送包围框的位置参数和帧图像，能够有效降低抠取小图像过程中的硬件资源占用率，以及推送图像过程中的带宽负载量。

在一种实施方式中，帧图像的数量为多张；图像推送装置还包括：为每张帧图像中所包含的包围框均设置跟踪标签；其中，包含有同一目标对象的包围框的跟踪标签相同，包含有不同目标对象的包围框的跟踪标签不同；上述推送模块508还用于从具有相同跟踪标签的包围框中选取目标包围框；将目标包围框所在的帧图像和目标包围框的位置参数推送至服务器；或者，为目标包围框的位置参数标注目标包围框所在的帧图像的帧号，将每张帧图像和标注有帧号的目标包围框的位置参数推送至服务器。

在一种实施方式中，上述推送模块508还用于按照预设的图像质量评价因素，从具有相同跟踪标签的包围框中选取目标包围框；其中，图像质量评价因素包括以下中的一种或多种：包围框清晰度因素、包围框中的目标对象的姿态因素、包围框中的目标对象的遮挡因素和包围框尺寸因素。

在一种实施方式中，包围框的位置参数包括包围框的多个关键点坐标；或者，包围框的位置参数包括包围框的一个关键点坐标以及包围框的长度值和宽度值；其中，关键点坐标包括顶点坐标或中心点坐标。

本实施例所提供的装置，其实现原理及产生的技术效果和前述实施例二相同，为简要描述，本实施例部分未提及之处，可参考前述实施例二中相应内容。

实施例六：

对于实施例三中所提供的图像获取方法，本发明实施例提供了一种图像获取装置，参见如图6所示的一种图像获取装置的结构框图，该装置设置于服务器，该装置包括：

接收模块602，用于接收图像采集设备上传的帧图像和包围框的位置参数。

抠取模块604，用于基于包围框的位置参数，从帧图像中抠取位置参数确定的图像。

本发明实施例提供的上述图像获取装置，通过服务器基于包围框的位置参数从帧图像中抠取位置参数确定的图像，在提升抠取效率的同时，也能够有效缓解图像采集设备在抠取小图像过程中硬件资源占用过高的压力，以及降低传输图像过程中的带宽负载量。

在一种实施方式中，帧图像的数量为多张；接收模块602还用于：接收图像采集设备上传的每张帧图像，以及标注有帧号的目标包围框的位置参数；其中，帧号为目标包围框所在的帧图像的帧号；抠取模块604还用于：根据为目标包围框的位置参数标注的帧号，从每张帧图像中提取出目标包围框所在的帧图像；从提取的帧图像中抠取位置参数确定的图像。

在一种实施方式中，帧图像的数量为多张；接收模块602还用于：接收图像采集设备上传的目标包围框所在的帧图像和目标包围框的位置参数；根据目标包围框的位置参数，从目标包围框所在的帧图像中抠取位置参数确定的图像。

本实施例所提供的装置，其实现原理及产生的技术效果和前述实施例三相同，为简要描述，本实施例部分未提及之处，可参考前述实施例三中相应内容。

实施例七：

基于前述实施例，本实施例给出了一种图像处理系统，包括通信连接的图像采集设备和服务器；

图像采集设备用于，用于执行实施例二提供的图像推送方法。

服务器，用于执行实施例三提供的图像获取方法。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

进一步，本实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器运行时执行上述实施例二提供的图像推送方法，或者执行上述实施例三提供的图像获取方法的步骤。

本发明实施例所提供的一种图像推送方法、图像获取方法、装置及图像处理系统的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行前面方法实施例中所述的方法，具体实现可参见方法实施例，在此不再赘述。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (9)

1.一种图像推送方法，其特征在于，所述方法应用于图像采集设备，所述方法包括：

获取待检测的帧图像；

对所述帧图像进行目标检测，得到所述帧图像中包含的目标对象的包围框；

基于所述包围框在所述帧图像中的位置，生成所述包围框的位置参数；

将所述帧图像和所述包围框的位置参数推送至服务器，以使所述服务器基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像；

所述帧图像的数量为多张；所述方法还包括：

为每张帧图像中所包含的包围框均设置跟踪标签；其中，包含有同一目标对象的包围框的跟踪标签相同，包含有不同目标对象的包围框的跟踪标签不同；

所述将所述帧图像和所述包围框的位置参数推送至服务器的步骤，包括：

从具有相同跟踪标签的包围框中选取目标包围框；

将所述目标包围框所在的帧图像和所述目标包围框的位置参数推送至服务器；或者，为所述目标包围框的位置参数标注所述目标包围框所在的帧图像的帧号，将每张帧图像和标注有帧号的所述目标包围框的位置参数推送至服务器。

2.根据权利要求1所述的方法，其特征在于，所述从具有相同跟踪标签的包围框中选取目标包围框的步骤，包括：

按照预设的图像质量评价因素，从具有相同跟踪标签的包围框中选取目标包围框；其中，所述图像质量评价因素包括以下中的一种或多种：包围框清晰度因素、包围框中的目标对象的姿态因素、包围框中的目标对象的遮挡因素和包围框尺寸因素。

3.根据权利要求1所述的方法，其特征在于，所述包围框的位置参数包括所述包围框的多个关键点坐标；或者，所述包围框的位置参数包括所述包围框的一个关键点坐标以及所述包围框的长度值和宽度值；其中，所述关键点坐标包括顶点坐标或中心点坐标。

4.一种图像获取方法，其特征在于，所述方法应用于服务器，所述方法包括：

接收图像采集设备上传的帧图像和包围框的位置参数；

基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像；

所述帧图像的数量为多张；所述接收图像采集设备上传的帧图像和包围框的位置参数的步骤，包括：

接收图像采集设备上传的每张帧图像，以及标注有帧号的目标包围框的位置参数；其中，所述帧号为所述目标包围框所在的帧图像的帧号；

所述基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像的步骤，包括：

根据为目标包围框的位置参数标注的帧号，从每张所述帧图像中提取出所述目标包围框所在的帧图像；

从提取的所述帧图像中抠取所述位置参数确定的图像。

5.根据权利要求4所述的方法，其特征在于，所述帧图像的数量为多张；所述接收图像采集设备上传的帧图像和包围框的位置参数的步骤，包括：

接收图像采集设备上传的目标包围框所在的帧图像和所述目标包围框的位置参数；

根据所述目标包围框的位置参数，从所述目标包围框所在的帧图像中抠取所述位置参数确定的图像。

6.一种图像推送装置，其特征在于，所述装置设置于图像采集设备，所述装置包括：

图像获取模块，用于获取待检测的帧图像；

目标检测模块，用于对所述帧图像进行目标检测，得到所述帧图像中包含的目标对象的包围框；

框参数生成模块，用于基于所述包围框在所述帧图像中的位置，生成所述包围框的位置参数；

推送模块，用于将所述帧图像和所述包围框的位置参数推送至服务器，以使所述服务器基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像；

帧图像的数量为多张；图像推送装置还包括：为每张帧图像中所包含的包围框均设置跟踪标签；其中，包含有同一目标对象的包围框的跟踪标签相同，包含有不同目标对象的包围框的跟踪标签不同；推送模块还用于从具有相同跟踪标签的包围框中选取目标包围框；将目标包围框所在的帧图像和目标包围框的位置参数推送至服务器；或者，为目标包围框的位置参数标注目标包围框所在的帧图像的帧号，将每张帧图像和标注有帧号的目标包围框的位置参数推送至服务器。

7.一种图像获取装置，其特征在于，所述装置设置于服务器，所述装置包括：

接收模块，用于接收图像采集设备上传的帧图像和包围框的位置参数；

抠取模块，用于基于所述包围框的位置参数，从所述帧图像中抠取所述位置参数确定的图像；

帧图像的数量为多张；接收模块还用于：接收图像采集设备上传的每张帧图像，以及标注有帧号的目标包围框的位置参数；其中，帧号为目标包围框所在的帧图像的帧号；抠取模块还用于：根据为目标包围框的位置参数标注的帧号，从每张帧图像中提取出目标包围框所在的帧图像；从提取的帧图像中抠取位置参数确定的图像。

8.一种图像处理系统，其特征在于，所述系统包括图像采集设备和服务器；其中，所述图像采集设备，用于执行如权利要求1至3任一项所述的图像推送方法；

所述服务器，用于执行如权利要求4至5任一项所述的图像获取方法。

9.一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，其特征在于，所述计算机程序被处理器运行时执行上述权利要求1至3任一项所述的图像推送方法，或者执行上述权利要求4至5任一项所述的图像获取方法的步骤。

Images