CN107680374A - 一种过车数据的智能采集调度系统 - Google Patents

Abstract

本发明公开了一种过车数据的智能采集调度系统，用于提高对采集服务器资源的利用效率。该智能采集调度系统中设置有智能调度服务中心，通过该智能调度服务中心为多个采集服务器动态的分配所需要采集的前端过车抓拍设备，该智能调度服务中心可以根据过车大数据分析预测各个采集服务器的流量变化，对于过车数据量突然增加的采集服务器，可以将所采集的前端过车抓拍设备动态迁移到其它的采集服务器，各个采集服务器需要根据智能调度服务中心的调度指令，实时更新所需要采集的前端过车抓拍设备。因此实现了过车数据采集的智能调度，采集服务器可以根据过车数据量的变化，自动调整各自采集的点位数量，提高对采集服务器资源的利用效率。

Description

一种过车数据的智能采集调度系统

技术领域

本发明涉及智能交通技术领域，具体涉及一种过车数据的智能采集调度系统。

背景技术

过车数据是指车辆经过卡口时采集到的车辆信息，对于过车数据的采集，目前主要是在服务器一侧部署过车数据采集程序，该程序通过对接前端抓拍设备软件开发工具包(Software Development Kit，SDK)，实现从抓拍设备即时获取相关的过车信息及图片。

现有技术中，一台采集服务器固定配置一定数量的前端卡口，但随着卡口数量的急速增长，特别是近年来微卡口建设的提速，这种一台服务器固定采集几条路段的方式渐显弊端。例如，有的服务器负载较高，有的服务器负载较低，同样是接入16路的卡口，不同卡口过车数据量显然是不一样的，而且在不同时段，相同卡口的过车数据流量显然是不一样，因此无法实现对采集服务器资源的充分利用。因此，迫切需要一种新的过车数据采集方案，以实现对采集服务器资源的充分利用。

发明内容

本发明的目的在于提供一种过车数据的智能采集调度系统，用于提高对采集服务器资源的利用效率。

为了达到上述目的，本发明采用这样的如下技术方案：

本发明提供一种过车数据的智能采集调度系统，所述过车数据的智能采集调度系统，包括：智能调度服务中心、第一采集服务器、第二采集服务器、第一前端过车抓拍设备、第二前端过车抓拍设备、第三前端过车抓拍设备和第四前端过车抓拍设备；

所述智能调度服务中心，用于在所述第一采集服务器和所述第二采集服务器上线之前，根据所述第一采集服务器的主机性能预测所述第一采集服务器的负载能力，根据所述第二采集服务器的主机性能预测所述第二采集服务器的负载能力；根据所述第一采集服务器的负载能力为其分配所述第一前端过车抓拍设备和所述第二前端过车抓拍设备，根据所述第二采集服务器的负载能力为其分配所述第三前端过车抓拍设备和所述第四前端过车抓拍设备；

所述第一采集服务器，用于在所述第一采集服务器上线之后，采集所述第一前端过车抓拍设备产生的过车数据和所述第二前端过车抓拍设备产生的过车数据；

所述第二采集服务器，用于在所述第二采集服务器上线之后，采集所述第三前端过车抓拍设备产生的过车数据和所述第四前端过车抓拍设备产生的过车数据；

所述智能调度服务中心，还用于根据过车大数据分析预测所述第一采集服务器的流量变化和所述第二采集服务器的流量变化；当所述第二采集服务器采集的过车数据量超过所述第二采集服务器的负载能力、且所述第一采集服务器采集的过车数据量没有超过所述第一采集服务器的负载能力时，将所述第三前端过车抓拍设备从所述第二采集服务器调度到所述第一采集服务器，并向所述第一采集服务器和所述第二采集服务器发送调度命令；

所述第一采集服务器，用于按照所述智能调度服务中心的调度指令，采集所述第一前端过车抓拍设备产生的过车数据、所述第二前端过车抓拍设备产生的过车数据和所述第三前端过车抓拍设备产生的过车数据；

所述第二采集服务器，用于按照所述智能调度服务中心的调度指令，采集所述第四前端过车抓拍设备产生的过车数据。

采用上述技术方案后，本发明提供的技术方案将有如下优点：

本发明实施例提供的过车数据的智能采集调度系统中设置有智能调度服务中心，通过该智能调度服务中心为多个采集服务器动态的分配所需要采集的前端过车抓拍设备，该智能调度服务中心可以根据过车大数据分析预测各个采集服务器的流量变化，对于过车数据量突然增加的采集服务器，可以将所采集的前端过车抓拍设备动态迁移到其它的采集服务器，各个采集服务器需要根据智能调度服务中心的调度指令，实时更新所需要采集的前端过车抓拍设备。因此实现了过车数据采集的智能调度，通过引入智能调度服务中心，实现前端过车数据在不同采集服务器的智能调度，这些服务器可以根据过车数据量的变化，自动调整各自采集的点位数量，提高对采集服务器资源的利用效率。

附图说明

图1为本发明实施例提供一种过车数据的智能采集调度系统的组成结构方框示意图；

图2为本发明实施例提供的面向过车数据采集智能调度的逻辑结构示意图。

具体实施方式

本发明实施例提供了一种过车数据的智能采集调度系统，用于提高对采集服务器资源的利用效率。

为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部实施例。基于本发明中的实施例，本领域的技术人员所获得的所有其他实施例，都属于本发明保护的范围。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换，这仅仅是描述本发明的实施例中对相同属性的对象在描述时所采用的区分方式。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，以便包含一系列单元的过程、方法、系统、产品或设备不必限于那些单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它单元。

以下分别进行详细说明。

本发明实施例提供的过车数据的智能采集调度系统的一个实施例，可应用于对前端过车抓拍设备产生的过车数据进行智能采集调度。请参阅图1和图2所示，本发明提供的过车数据的智能采集调度系统中可以包括：智能调度服务中心、N个采集服务器、M个前端过车抓拍设备，其中，N和M为正整数，通常情况下M的取值大于N。本发明实施例中智能调度服务中心可以提供对采集服务器的智能服务调度，使得采集服务器所采集的前端过车抓拍设备能够实时可控，该采集服务器也可以称为采集转发服务器，前端过车抓拍设备也可以简称为前端设备。本发明实施例可实现过车数据采集的智能调度。通过引入智能调度服务中心，实现前端过车数据在不同采集服务器的智能调度，这些服务器可以根据过车数据量的变化，自动调整各自采集的点位数量。

在本发明实施例中，以过车数据的智能采集调度系统包括两类采集服务器、四类前端过车抓拍设备为例，则过车数据的智能采集调度系统中可以包括：智能调度服务中心、第一采集服务器、第二采集服务器、第一前端过车抓拍设备、第二前端过车抓拍设备、第三前端过车抓拍设备和第四前端过车抓拍设备；

智能调度服务中心，用于在第一采集服务器和第二采集服务器上线之前，根据第一采集服务器的主机性能预测第一采集服务器的负载能力，根据第二采集服务器的主机性能预测第二采集服务器的负载能力；根据第一采集服务器的负载能力为其分配第一前端过车抓拍设备和第二前端过车抓拍设备，根据第二采集服务器的负载能力为其分配第三前端过车抓拍设备和第四前端过车抓拍设备；

第一采集服务器，用于在第一采集服务器上线之后，采集第一前端过车抓拍设备产生的过车数据和第二前端过车抓拍设备产生的过车数据；

第二采集服务器，用于在第二采集服务器上线之后，采集第三前端过车抓拍设备产生的过车数据和第四前端过车抓拍设备产生的过车数据；

智能调度服务中心，还用于根据过车大数据分析预测第一采集服务器的流量变化和第二采集服务器的流量变化；当第二采集服务器采集的过车数据量超过第二采集服务器的负载能力、且第一采集服务器采集的过车数据量没有超过第一采集服务器的负载能力时，将第三前端过车抓拍设备从第二采集服务器调度到第一采集服务器，并向第一采集服务器和第二采集服务器发送调度命令；

第一采集服务器，用于按照智能调度服务中心的调度指令，采集第一前端过车抓拍设备产生的过车数据、第二前端过车抓拍设备产生的过车数据和第三前端过车抓拍设备产生的过车数据；

第二采集服务器，用于按照智能调度服务中心的调度指令，采集第四前端过车抓拍设备产生的过车数据。

在本发明实施例中，智能调度服务中心在第一采集服务器和第二采集服务器上线之前，可以为在第一采集服务器和第二采集服务器进行初始分配前端过车抓拍设备，该智能调度服务中心还可以预测各个采集服务器的流量变化，对于流量突然增加的采集服务器，可以动态迁移前端过车抓拍设备，从而解决现有技术中采集服务器与前端过车抓拍设备的固定采集关系，对于过车数据量没有超过负载能力的采集服务器，可以进一步的动态调度新的前端过车抓拍设备，因此可以提高对采集服务器资源的利用效率。

需要说明的是，本发明实施例中智能调度服务中心所使用的过车大数据可以根据历史过车数据进行大量统计，从而可以预测采集服务器的流量变化规律。

在本发明的一些实施例中，如图1所示，过车数据的智能采集调度系统，包括：智能调度服务中心与若干采集服务器组成，其中调度中心至少由两台调度服务器构成：调度服务器1和调度服务器2，每个调度服务器上部署智能调度服务，这些调度服务器构成热备关系，当任意一台调度服务器发生故障时，也不影响智能调度服务的正常运行。前端过车抓拍设备在接入数据采集网络后，由用户在传输管理平台输入前端设备的IP地址、账号、密码，系统自动分配合理的采集服务器，用户无需指定专门的采集服务器。

在本发明的一些实施例中，智能调度服务中心根据第一采集服务器的主机性能预测第一采集服务器的负载能力，包括：

智能调度服务中心通过模拟过车数据测试，采集主机的负载能力，得到第一采集服务器的最佳负载数据量与最高负载数据量。

其中，对于每一台采集服务器，因主机硬件配置不同，数据采集性能也不一样，每一台不同配置的服务器上线前，智能调度服务中心可以模拟采集数据测试其负载能力，每一台采集服务器，均有最佳负载数据量和最高负载数据量性能指标，最佳负载数据量指的是不超过这个数据量的情况下，主机数据采集能达到最佳状态，最高负载数据量指的是主机数据采集能达到的最大数据量，通过最佳负载数据量与最高负载数据量可以准确描述各个采集服务器的负载能力。

进一步的，在本发明的一些实施例中，智能调度服务中心根据第一采集服务器的负载能力为其分配第一前端过车抓拍设备和第二前端过车抓拍设备，包括：

在第一采集服务器上线之后，智能调度服务中心判断第一前端过车抓拍设备和第二前端过车抓拍设备的过车数据总量是否小于或等于第一采集服务器的最佳负载数据量；

若过车数据总量小于或等于第一采集服务器的最佳负载数据量时，智能调度服务中心将第一前端过车抓拍设备和第二前端过车抓拍设备分配给第一采集服务器。

其中，智能调度服务中心在为第一采集服务器分配前端过车抓拍设备时，需要参考第一采集服务器的最佳负载数据量，确保第一采集服务器尽量保持在最佳负载状态。需要说明的是，前述实施例智能调度服务中心以对第一采集服务器的前端过车抓拍设备的分配为例，智能调度服务中心对第二采集服务器的前端过车抓拍设备的分配也可以类似于对第一采集服务器的前端过车抓拍设备的分配，此处不再赘述。

进一步的，在本发明的一些实施例中，当过车数据的智能采集调度系统中增加新的前端过车抓拍设备，或者第二采集服务器产生故障时，智能调度服务中心，还用于采集第一采集服务器的当前负载数据量；根据当前负载数据量和最高负载数据量计算第一采集服务器的剩余负载数据量；根据第一采集服务器的剩余负载数据量为第一采集服务器分配前端过车抓拍设备。

当某台采集服务器出现故障时，智能调度服务中心会为该采集服务器接入的点位智能分配合理的采集服务器。对于数据采集服务因故停止，智能调度中心会依据服务的恢复情况决定原前端设备的分配。一般情况下，智能调度服务中心默认给主机分配的数据量不高于最佳负载数据量，但当其它采集服务器发生故障，或者前端点位增加时，采集服务器资源在最佳负载状态下无法满足过车数据量的采集需求后，智能调度中心会依次选择负载较低的主机，根据主机能承载的剩余性能，均衡分配点位到这些主机。

前端点位在不同时段的过车流量不一样，智能调度中心依据海量大数据分析，总结过车数据量在不同时段的变化规律。当过车数据量在某一时段将有较为明显的增长时，采集服务器的负载将超过最佳负载数据量时，此时智能调度中心会按照其它采集服务器的剩余性能，调度当前采集服务器上的部分点位到其它采集服务器。通过这种动态调整的机制，确保所有采集服务器尽量保持在最佳负载状态。

在本发明的一些实施例中，智能调度服务中心，还用于对第一采集服务器进行在线状态监测；当第一采集服务器不在线时，将第一前端过车抓拍设备和第二前端过车抓拍设备从第一采集服务器调度到第二采集服务器，并向第一采集服务器和第二采集服务器发送调度命令；

第二采集服务器，用于按照智能调度服务中心的调度指令，采集第一前端过车抓拍设备产生的过车数据、第二前端过车抓拍设备产生的过车数据、第三前端过车抓拍设备产生的过车数据和第四前端过车抓拍设备产生的过车数据。

在本发明的一些实施例中，智能调度服务中心，还用于对第一采集服务器进行运行状态监测；当第一采集服务器停止服务时，重新启动第一采集服务器，实时监测第一采集服务器的运行状态，当第一数据采集服务恢复到正常运行状态时，重新将第一前端过车抓拍设备和第二前端过车抓拍设备分配给第一采集服务器。

接下来以智能调度服务中心进行主机状态监测为例进行说明，主要针对采集服务器的在线状态与采集服务的运行状态进行监测。当采集服务器不在线，智能调度服务中心根据各采集服务器的负载情况，智能为原接入的点位分配合理的采集服务器。对于数据采集服务因故停止服务，数据采集服务器会尝试重新启动服务，智能调度服务中心实时监测采集服务器的健康状态，当数据采集服务恢复到健康状态时，智能调度服务中心会重新分配前端设备给该采集服务器。本发明实施例可以智能调度不同时段的数据采集，充分利用采集服务器资源。

在本发明的一些实施例中，智能调度服务中心，还用于判断第一采集服务器和第二采集服务器是否具有区域共享授权；当第一采集服务器和第二采集服务器对相同区域内的前端过车抓拍设备具有授权共享时，触发执行如下步骤：将第三前端过车抓拍设备从第二采集服务器调度到第一采集服务器。

接下来以智能调度服务中心进行区域共享授权为例进行说明，考虑不同区域对其所属的服务器有共享权利，比如某个县区自行购买了5台采集服务器，虽然目前该县区只用到其中的4台，但它可希望预留1台服务器以备不时之需，并不想把这台服务器分享给其他县区，而有的县区在服务器资源过剩的情况下，它希望把服务器共享给其他县区使用，因此，不同区域对共享开放的需求并不一样，智能调度服务为此引入区域共享授权。

考虑不同区域对其所属的服务器有共享权利，智能调度服务中心还可以引入区域共享授权，默认情况下采集服务器只在所属区域内共享使用，当所属区域管理员对该区域的采集服务器授权共享后，这些采集服务器将能在其授权的范围内实现共享。

对比传统的数据采集系统，本发明实施例的重点是引入智能调度服务，通过使用智能调度算法，实现过车数据在不同采集服务器的智能调度。智能调度算法综合考虑了主机负载监测、流量变化预测、主机状态监测、区域共享授权等因素。智能调度服务中心实现对过车数据在不同采集服务器的智能调度。

通过引入智能调度服务中心，实现前端过车数据在不同采集服务器的智能调度，这些服务器可以根据过车数据量的变化，自动调整各自采集的点位数量。当某台服务器出现故障时，智能调度服务器会为该服务器接入的点位智能分配合理的采集服务器。对于数据采集服务因故停止，智能调度中心会依据服务的恢复情况决定原前端设备的分配。考虑不同区域对其所属的服务器有专属权利，智能调度服务中心还引入区域共享授权。

另外需说明的是，以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外，本发明提供的装置实施例附图中，模块之间的连接关系表示它们之间具有通信连接，具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，所属领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件的方式来实现，当然也可以通过专用硬件包括专用集成电路、专用CPU、专用存储器、专用元器件等来实现。一般情况下，凡由计算机程序完成的功能都可以很容易地用相应的硬件来实现，而且，用来实现同一功能的具体硬件结构也可以是多种多样的，例如模拟电路、数字电路或专用电路等。但是，对本发明而言更多情况下软件程序实现是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在可读取的存储介质中，如计算机的软盘、U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

综上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照上述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对上述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (7)

1.一种过车数据的智能采集调度系统，其特征在于，所述过车数据的智能采集调度系统，包括：智能调度服务中心、第一采集服务器、第二采集服务器、第一前端过车抓拍设备、第二前端过车抓拍设备、第三前端过车抓拍设备和第四前端过车抓拍设备；

所述智能调度服务中心，用于在所述第一采集服务器和所述第二采集服务器上线之前，根据所述第一采集服务器的主机性能预测所述第一采集服务器的负载能力，根据所述第二采集服务器的主机性能预测所述第二采集服务器的负载能力；根据所述第一采集服务器的负载能力为其分配所述第一前端过车抓拍设备和所述第二前端过车抓拍设备，根据所述第二采集服务器的负载能力为其分配所述第三前端过车抓拍设备和所述第四前端过车抓拍设备；

所述第一采集服务器，用于在所述第一采集服务器上线之后，采集所述第一前端过车抓拍设备产生的过车数据和所述第二前端过车抓拍设备产生的过车数据；

所述第二采集服务器，用于在所述第二采集服务器上线之后，采集所述第三前端过车抓拍设备产生的过车数据和所述第四前端过车抓拍设备产生的过车数据；

所述智能调度服务中心，还用于根据过车大数据分析预测所述第一采集服务器的流量变化和所述第二采集服务器的流量变化；当所述第二采集服务器采集的过车数据量超过所述第二采集服务器的负载能力、且所述第一采集服务器采集的过车数据量没有超过所述第一采集服务器的负载能力时，将所述第三前端过车抓拍设备从所述第二采集服务器调度到所述第一采集服务器，并向所述第一采集服务器和所述第二采集服务器发送调度命令；

所述第一采集服务器，用于按照所述智能调度服务中心的调度指令，采集所述第一前端过车抓拍设备产生的过车数据、所述第二前端过车抓拍设备产生的过车数据和所述第三前端过车抓拍设备产生的过车数据；

所述第二采集服务器，用于按照所述智能调度服务中心的调度指令，采集所述第四前端过车抓拍设备产生的过车数据。

2.根据权利要求1所述的一种过车数据的智能采集调度系统，其特征在于，所述智能调度服务中心根据所述第一采集服务器的主机性能预测所述第一采集服务器的负载能力，包括：

所述智能调度服务中心通过模拟过车数据测试，采集主机的负载能力，得到所述第一采集服务器的最佳负载数据量与最高负载数据量。

3.根据权利要求2所述的一种过车数据的智能采集调度系统，其特征在于，所述智能调度服务中心根据所述第一采集服务器的负载能力为其分配所述第一前端过车抓拍设备和所述第二前端过车抓拍设备，包括：

在所述第一采集服务器上线之后，所述智能调度服务中心判断所述第一前端过车抓拍设备和所述第二前端过车抓拍设备的过车数据总量是否小于或等于所述第一采集服务器的最佳负载数据量；

若所述过车数据总量小于或等于所述第一采集服务器的最佳负载数据量时，所述智能调度服务中心将所述第一前端过车抓拍设备和所述第二前端过车抓拍设备分配给所述第一采集服务器。

4.根据权利要求2所述的一种过车数据的智能采集调度系统，其特征在于，当所述过车数据的智能采集调度系统中增加新的前端过车抓拍设备，或者所述第二采集服务器产生故障时，所述智能调度服务中心，还用于采集所述第一采集服务器的当前负载数据量；根据所述当前负载数据量和所述最高负载数据量计算所述第一采集服务器的剩余负载数据量；根据所述第一采集服务器的剩余负载数据量为所述第一采集服务器分配前端过车抓拍设备。

5.根据权利要求1所述的一种过车数据的智能采集调度系统，其特征在于，所述智能调度服务中心，还用于对所述第一采集服务器进行在线状态监测；当所述第一采集服务器不在线时，将所述第一前端过车抓拍设备和所述第二前端过车抓拍设备从所述第一采集服务器调度到所述第二采集服务器，并向所述第一采集服务器和所述第二采集服务器发送调度命令；

所述第二采集服务器，用于按照所述智能调度服务中心的调度指令，采集所述第一前端过车抓拍设备产生的过车数据、所述第二前端过车抓拍设备产生的过车数据、所述第三前端过车抓拍设备产生的过车数据和所述第四前端过车抓拍设备产生的过车数据。

6.根据权利要求1所述的一种过车数据的智能采集调度系统，其特征在于，所述智能调度服务中心，还用于对所述第一采集服务器进行运行状态监测；当所述第一采集服务器停止服务时，重新启动所述第一采集服务器，实时监测所述第一采集服务器的运行状态，当所述第一数据采集服务恢复到正常运行状态时，重新将所述第一前端过车抓拍设备和所述第二前端过车抓拍设备分配给所述第一采集服务器。

7.根据权利要求1所述的一种过车数据的智能采集调度系统，其特征在于，所述智能调度服务中心，还用于判断所述第一采集服务器和所述第二采集服务器是否具有区域共享授权；当所述第一采集服务器和所述第二采集服务器对相同区域内的前端过车抓拍设备具有授权共享时，触发执行如下步骤：将所述第三前端过车抓拍设备从所述第二采集服务器调度到所述第一采集服务器。