CN111160283A

CN111160283A - 一种数据接入方法、装置、设备和介质

Info

Publication number: CN111160283A
Application number: CN201911410247.XA
Authority: CN
Inventors: 周赢; 李松儒; 黄霁
Original assignee: Zhejiang Uniview Technologies Co Ltd
Current assignee: Zhejiang Uniview Technologies Co Ltd
Priority date: 2019-12-31
Filing date: 2019-12-31
Publication date: 2020-05-15
Anticipated expiration: 2039-12-31
Also published as: CN111160283B

Abstract

本发明公开了一种数据接入方法、装置、设备和介质。该方法应用于数据接入系统，包括：根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源；根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源；根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，并通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。本发明实施例提供的技术方案，保证了数据接入分析的时效性以及对接入资源负载均衡的动态管理。

Description

一种数据接入方法、装置、设备和介质

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种数据接入方法、装置、设备和介质。

背景技术

随着智能人脸抓拍相机的普及以及组网的扩张，智能人脸分析系统中每天会接收海量的人脸抓拍数据，这些数据都通过数据接入服务器接入后分发给相关的智能分析板卡实现人脸识别。

在目前的人脸抓拍系统中，当摄像机接入的人脸数据超过服务器的资源缓存后，服务器进行动态的资源扩容，将超出的数据资源分配给空闲资源，保证数据的正常接入。

然而，通常情况下，只有在数据缓冲区存储满负载后才能执行相对应的操作，从而产生一定的数据延迟，不能保证数据的实时入库和实时分析。

发明内容

本发明提供一种数据接入方法、装置、设备和介质，基于实况采集设备的人数统计功能及时的为人脸采集设备分配即将接入分析的数据接入资源，以保障数据接入和分析的时效性。

第一方面，本发明实施例提供了一种数据接入方法，应用于数据接入系统，该方法包括：

根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源；

根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源；

根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，用于通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。

第二方面，本发明实施例还提供了一种数据接入装置，配置于数据接入系统的调度服务器，该装置包括：

需要的当前数据资源确定模块，用于根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源；

可用接入资源确定模块，用于根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源；

调整模块，用于根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，用于通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。

第三方面，本发明实施例还提供了一种设备，该设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例中任一所述的一种数据接入方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例中任一所述的一种数据接入方法。

本发明根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源，以及根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源，进而根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，并通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。本发明实施例提供的技术方案，通过实况采集设备可以及时的为人脸采集设备分配好数据接入资源，从而保证了数据接入分析的时效性以及对接入资源负载均衡的动态管理。

附图说明

图1为本发明实施例提供的一种数据接入方法的流程图；

图2为本发明实施例提供的一种数据接入系统的组网图；

图3为本发明实施例提供的另一数据接入方法的流程图；

图4为本发明实施例提供的又一数据接入方法的流程图；

图5为本发明实施例提供的一种数据接入装置的结构示意图；

图6为本发明实施例提供的一种设备的结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

图1为本发明实施例提供的一种数据接入方法的流程图，本实施例可适用于分析系统对待分析数据或资源进行接入的情况，该方法可以由数据接入装置来执行，该装置可配置于数据接入系统的调度服务器中，该装置可由软件和/或硬件的方式实现。参照图1，该方法具体包括如下步骤：

步骤110、根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源。

其中，实况采集设备用于实时的采集监控场景中的人流量；人脸采集设备用于采集监控场景中的人脸数据。参照图2，图2为本发明实施例提供的一种数据接入系统的组网图，该系统包括：智能分析服务器21、实况采集设备22、调度服务器23、数据接入服务器24以及人脸采集设备25。智能分析服务器21根据实况采集设备22采集的总人数以及采集时间，确定当前时间段内的人流量。调度服务器23用于根据当前时间段内的人流量所需的接入资源，以及数据接入系统的可用接入资源，通过调整数据接入服务器24的接入数量来分配数据接入系统的接入资源。

本实施例中，根据当前时间段内实况采集设备采集的人流量，以及人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源，包括：

将所述当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率的乘积，作为需要的当前数据资源；

具体的，若实况采集设备22在Tn时间内采集的人流总数为Z，那么当前时间段Tn内实况采集设备22采集的人流量为Q＝Z/Tn(总人数/每秒)。

其中，设置人脸采集设备25的位置坐标为A(x1,y1)，实况采集设备22的位置坐标为B(x2,y2)，

T＝S/V。

其中，S为人脸采集设备25的位置坐标到实况采集设备22的距离，采用如下的计算公式：

V为人的步行的平均速度，示例性的，可以取0.5m/s。

T为单个人脸采集设备25的采集时间与单个实况采集设备22的采集时间之差。

Tn＝(T1+T2+T3+…TN)/N，

其中N是实况采集设备22所对应的人脸采集设备25个数，示例性的，若某个通道处设置有1个实况采集设备用于采集该通道的人流量，该实况相机的周围固定设置N＝3个人脸采集设备来采集该处人流的人脸图像信息，那么时间T1、T2、T3分别为3个人脸采集设备与实况采集设备的采集时间之差，Tn为这3个采集时间差的平均值。

若当前人脸采集设备25的数量为a，对应分辨率下采集的数据整体的像素值大小为I，则当前需要的数据接入资源为X，

X＝I*a*Q。

需要说明的是，实况采集设备22和人脸采集设备25的位置根据人流方向进行设置，采用实况采集设备22采集动作在先，人脸采集设25备采集动作在后的方式进行设置，以保证数据接入系统能够提前为人脸采集设备25采集的数据分配充足的数据接入资源。

步骤120、根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源。

继续参见图2，数据接入系统中包含若干数量的数据接入服务器24，数据接入服务器24为数据接入系统提供数据接入资源，根据数据接入系统中数据接入服务器24的接入数量，可以确定数据接入系统的可用接入资源。

步骤130、根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。

本实施例中，数据接入系统的可用接入资源用于对人脸采集设备采集的数据资源进行接入，当某一时段实况采集设备采集的人流量突然增多时，此时待接入数据所需要的当前数据资源大于数据接入系统的可用接入资源时，调度服务器根据需要的当前数据资源和数据接入系统的可用接入资源的差值，适当的增加数据接入系统的数据接入服务器的数量，使得总的数据接入服务器的数量大于或等于需要的当前数据资源。本实施例中，实况采集设备采用实况采集相机，通过实况采集相机以及数据分析服务器进行人数分析来提前获取当前路过人数，从而保证人脸采集设备在抓拍时有足够多的数据接入服务器，保障数据接入分析的时效性。

当某一时间段内时实况采集相机采集的人流量减少，此时待接入数据所需的当前数据资源小于数据接入系统的可用接入资源，调度服务器根据数据接入系统可用接入资源和需要的当前数据资源的差值，减少数据接入系统中接入服务器的接入数量，保证当前待接入数据有足够的可用接入资源的同时将多余的接入资源进行释放，当前释放的接入资源可以被其他的应用所使用，实现接入资源的均衡分布，提高资源的利用率。

本发明实施例的技术方案，通过根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源，以及根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源，进而根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，并通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。通过实况采集设备可以提前为人脸采集设备分配好数据接入资源，从而保证了数据接入分析的时效性以及对接入资源负载均衡的动态管理。

图3为本发明实施例提供的另一数据接入方法的流程图，本发明实施例是在上述实施例的基础上，对步骤130进行进一步的细化。参见图3，该方法具体包括：

步骤210、根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源。

步骤220、根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源。

步骤230、若所述数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值大于第一阈值，则减少所述数据接入系统中的数据接入服务器数量以得到新比值，使所述新比值小于所述第一阈值且大于第二阈值。

本实施例中，数据接入系统的可用接入资源略大于待接入数据所需的当前可用接入资源时，能够在保障数据处理实时性的基础上合理的实现资源的均衡分配。

可选的，上述第一阈值的取值为2，第二阈值的取值为1。

设数据接入系统的可用接入资源为Y，待接入数据所需的可用接入资源为X，当0<(Y-X)/X<＝1，即1<Y/X<＝2时，不需要进行资源调度；

当(Y-X)/X>1，即Y/X>2时，调度服务器通过减少当前数据接入服务器的接入数量来将多余的可用接入资源释放，使得接入资源释放之后的数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值大于1且小于2。

其中，第一阈值和第二阈值的取值可以根据实际场景的需求进行设置，不具备限定作用。

通过调度服务器的资源调度，可以及时将多余的数据接入服务器置于空闲状态，降低能耗，或者提醒用户接入资源过多，减少数据接入服务器的接入数量，降低建设成本。

本实施例的技术方案，在数据接入系统的可用接入资源与需要的当前数据资源之间的比值大于一定的阈值时，通过减少数据接入系统中的数据接入资源来对当前数据接入系统中的可用接入资源进行适当减少，节约了数据系统的接入资源。

在上述实施例的基础上，可选的，步骤130还可以为：若所述数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值小于第三阈值，则增加所述数据接入系统中的数据接入服务器数量以得到新比值，使所述新比值大于所述第三阈值且小于第四阈值。

其中，第三阈值小于上述第一阈值。

具体的，在数据接入系统中的可用接入资源小于需要的当前数据资源时，表明当前数据接入系统中的可用接入资源满足不了当前待接入数据的实时接入需求，调度服务器通过增加数据接入服务器的接入数量来增加数据接入系统的可用接入资源，以满足当前待接入数据的接入请求。

可选的，上述第三阈值的取值为1，第四阈值的取值为2，增加数据接入服务器的可用接入资源与需要的当前数据资源比值大于1且小于2。

可选的，当X>Y时，数据接入系统的接入资源不能够满足待接入数据所需的接入资源，数据接入系统需要接入新的接入资源，新接入资源为可用接入资源的(X-Y)/Y倍，若(X-Y)/Y的结果不足整数倍，则按照大于该比值结果的Y的整数倍进行接入资源的调度，使得数据接入系统的可用接入资源与所述需要的当前数据资源之间的新比值大于1且小于2。

本实施例的技术方案，在数据接入系统的可用接入资源与需要的当前数据资源之间的比值小于一定的阈值时，通过增加数据接入系统中的数据接入资源来对当前数据接入系统中的可用接入资源进行增加，能够及时的为待接入数据提供足够的接入资源。

图4为本发明实施例提供的又一数据接入方法的流程图，本发明实施例是在上述实施例的基础上，提供的一种优选的实施方式。参见图4，该方法具体包括：

步骤310、根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源。

步骤320、根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源。

步骤330、若所述数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值大于第一阈值，则减少所述数据接入系统中的数据接入服务器数量以得到新比值，使所述新比值小于所述第一阈值且大于第二阈值。

步骤340、若所述数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值小于第三阈值，则增加所述数据接入系统中的数据接入服务器数量以得到新比值，使所述新比值大于所述第三阈值且小于第四阈值。

需要说明的是，上述步骤之间并不代表先后顺序，不同的步骤之间的顺序可以根据实际的需求进行调整。本实施例的技术方案，通过根据数据接入系统的可用接入资源与需要的当前数据资源之间的比值，对数据接入服务器的接入资源进行调整，预先为数据接入系统待接入数据分配合适的可用接入资源，保障了数据接入分析的实时性，实现了接入资源分配的均衡分配。

图5为本发明实施例提供的一种数据接入装置的结构示意图，本发明实施例提供的一种数据接入装置可执行本发明任意实施例所提供的一种数据接入方法，该装置可以配置于数据接入系统的调度服务器中。参见图5，该装置具体可以包括：

需要的当前数据资源确定模块410，用于根据当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源；

可用接入资源确定模块420，用于根据所述数据接入系统中的数据接入服务器数量，确定数据接入系统的可用接入资源；

调整模块430，用于根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，用于通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。

其中，需要的当前数据资源确定模块410具体用于：

将所述当前时间段内实况采集设备采集的人流量，人脸采集设备的数量和人脸采集设备的分辨率的乘积，作为需要的当前数据资源。

调整模块430具体用于：若所述数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值大于第一阈值，则减少所述数据接入系统中的数据接入服务器数量以得到新比值，使所述新比值小于所述第一阈值且大于第二阈值。

调整模块430还具体用于：若所述数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值小于第三阈值，则增加所述数据接入系统中的数据接入服务器数量以得到新比值，使所述新比值大于所述第三阈值且小于第四阈值。

本发明实施例所提供的一种数据接入装置可执行本发明任意实施例所提供的一种数据接入方法，具备执行方法相应的功能模块和有益效果。

图6为本发明实施例提供的一种设备的结构示意图。图6示出了适于用来实现本发明实施方式的示例性设备12的框图。图6显示的设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图6所示，设备12以通用计算设备的形式表现。设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。

总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。

设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该设备12交互的设备通信，和/或与使得该设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与设备12的其它模块通信。应当明白，尽管图中未示出，可以结合设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

处理单元16通过运行存储在系统存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的一种数据接入方法。

本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例中任一所述的一种数据接入方法。

其中，该方法包括：

本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims

1.一种数据接入方法，其特征在于，应用于数据接入系统，所述方法应用于数据接入系统，包括：

根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，并通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。

2.根据权利要求1所述的方法，其特征在于，根据当前时间段内实况采集设备采集的人流量，以及人脸采集设备的数量和人脸采集设备的分辨率，确定需要的当前数据资源，包括：

3.根据权利要求1或2所述的方法，其特征在于，根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，包括：

若所述数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值大于第一阈值，则减少所述数据接入系统中的数据接入服务器数量以得到新比值，使所述新比值小于所述第一阈值且大于第二阈值。

4.根据权利要求1或2所述的方法，其特征在于，根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，包括：

若所述数据接入系统的可用接入资源与所述需要的当前数据资源之间的比值小于第三阈值，则增加所述数据接入系统中的数据接入服务器数量以得到新比值，使所述新比值大于所述第三阈值且小于第四阈值。

5.一种数据接入装置，其特征在于，包括：

调整模块，用于根据所述需要的当前数据资源和数据接入系统的可用接入资源，对所述数据接入系统中的数据接入服务器数量进行调整，并通过调整后的数据接入服务器接入所述人脸采集设备采集的数据。

6.根据权利要求5所述的装置，其特征在于，所述需要的当前数据资源确定模块具体用于：

7.根据权利要求5或6所述的装置，其特征在于，所述调整模块具体用于：

8.根据权利要求5或6所述的装置，其特征在于，所述调整装置还具体用于：

9.一种设备，其特征在于，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-4中任一所述的一种数据接入方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-4中任一所述的一种数据接入方法。