CN109743298A - 一种统一数据发布组件的控制系统及控制方法 - Google Patents

Abstract

本发明公开了一种统一数据发布组件的控制系统及控制方法，所述控制系统包括用于接入停车场异构数据的数据接入单元、用于采集所述停车场异构数据的数据采集单元、用于筛选所述停车场异构数据并输出有效数据的数据筛选单元、用于将所述有效数据进行扁平化处理并输出统一数据的数据统一单元、用于将所述统一数据提交至城市智能交互式共享停车系统云平台的数据发布单元。本发明能够将不同的停车场供应商数据以统一的数据格式集成到统一的数据平台、并且能够消除各停车场异构数据的“物理孤岛”现象和“逻辑孤岛”现象，并让不同停车场系统的数据可在同一平台框架下实现展现和接入。

Description

一种统一数据发布组件的控制系统及控制方法

技术领域

本发明涉及数据处理技术领域，特别涉及一种统一数据发布组件的控制方法。

背景技术

随着我国机动车保有量的持续增加，很多地方的停车位供需失衡越来越严重，加之多数停车场地分散、独立建设、独自管理，停车设备设施相对滞后，造成交通拥堵、车速缓慢的现象屡见不鲜，高峰时期，某些路段的占道停车、乱停乱放的情况更加明显。

对于城市中建设的停车场地而言，很多都已经建立了基本的停车环境和相应软硬件设备设施，但站在统一的城市建设管理高度，它们大多是各自经营，以单个“点”的形式出现在城市建设的规划上，停车信息、停车位情况、某时段的负载量和保有量等方面往往很难实现数据共享和信息发布。

城市智能交互式共享停车系统云平台(ActiveParkSpaceSys)以城市区域范围内的所有停车场(无论是公众的公共停车场、私有的营业停车场，或者小区、商业区、单位停车区等)为服务对象，在统一的资源调配、管理协调方式下，利用有限的停车资源，优化停车的时间和空间分布，为交通出行、车辆使用者提供实时的、动态分配的、合理的临时停车方案。使用人通过互联网终端(手机、车载识别设备等)，使用O2C、C2C等交互方式，实时查询、定位、确认需要的实际临时空车位，规划线路，进入场地，进入空位，停放车辆，出场付费，释放空位等动静结合的按需请求，逐步解决“停车难，难停车”的困境。

多数城市停车场中都配置有相应的管理系统，即：通过控制设备设施、网络、车辆管理设备搭建的对车辆出入、场内车流引导、收取停车费进行管理的系统。各车场通过采集记录车辆出入记录、场内位置，实现车辆出入和场内车辆的动态和静态的综合管理。不同停车场很多时候使用的都是不同供应商(或生产厂家)的产品，即使相同的停车场供应商，按照停车场的规模，也可能使用不同的数据采集方式和不同的数据存储结构。基础平台不统一、数据标准不一致、应用模式千差万别，使数字城市的停车信息互联互通很难实现。现有的停车场管理系统无法将这些众多的停车场供应商数据以统一的数据格式集成到统一的数据平台，从而难以消除各停车场异构数据的“物理孤岛”现象和“逻辑孤岛”现象，难以对各原始数据集中的异常信息、空信息、缺失信息、错误状态等进行补充，对内无法接入多格式的采集数据流，对外无法提供统一的数据服务发布接口，导致其无法让众多停车场系统的数据可在同一平台框架下实现展现和接入。

发明内容

针对上述现有技术中存在的缺陷，本发明要解决的技术问题是提供一种统一数据发布组件的控制系统及控制方法，解决现有技术中停车场管理系统无法将不同的停车场供应商的异构数据以统一的数据格式集成到统一的数据平台、难以消除各停车场异构数据的“物理孤岛”现象和“逻辑孤岛”现象、无法让不同停车场系统的数据可在同一平台框架下实现展现和接入的问题，能够将不同的停车场供应商数据以统一的数据格式集成到统一的数据平台、并且能够消除各停车场异构数据的“物理孤岛”现象和“逻辑孤岛”现象、让不同停车场系统的数据可在同一平台框架下实现展现和接入。

为了解决上述技术问题，本发明的技术方案是：

一种统一数据发布组件的控制系统，包括用于接入停车场异构数据的数据接入单元、用于采集所述停车场异构数据的数据采集单元、用于筛选所述停车场异构数据并输出有效数据的数据筛选单元、用于将所述有效数据进行扁平化处理并输出统一数据的数据统一单元、用于将所述统一数据提交至城市智能交互式共享停车系统云平台的数据发布单元。

优选地，所述统一数据发布组件的控制系统还包括编辑界面单元，所述编辑界面单元用于查询所述统一数据之间的关系、执行自定义脚本及导入或导出所述统一数据。

优选地，所述停车场异构数据包括不同停车场的停车数据、不同供应商的停车数据及不同应用环境下的停车数据。

优选地，所述数据接入单元包括异构数据管理系统接入工具及异构数据客户端驱动组件，所述数据接入单元与所述异构数据客户端驱动组件通信连接。

优选地，所述数据筛选单元包括用于筛选出异常数据的筛选模块、用于格式化所述异常数据的错误清理模块、用于对所述异常数据进行修正的异常修正模块及进行有效数据输出的输出模块。

优选地，所述数据统一单元包括用于按照统一格式配置所述有效数据格式的格式统一模块、用于按照统一结构配置所述有效数据结构的结构统一模块、用于按照统一规则配置所述有效数据规则的规则统一模块及用于输出所述统一数据的数据合并模块。

优选地，所述统一数据发布组件的控制系统还包括数据自检单元，所述数据自检单元用于实时分析所述有效数据，并根据分析结果自动处理所述有效数据。

为解决上述技术问题，本发明还提供一种统一数据发布组件的控制方法，包括以下步骤：

步骤S1：通过数据接入单元接入不同停车场的停车场异构数据，并通过数据采集单元采集所述停车场异构数据并将所述停车场异构数据提交至本地内存缓冲区中；

步骤S2：通过数据筛选单元筛选所述数据缓冲区中的停车场异构数据，并输出有效数据；

步骤S3：由数据统一单元按照统一扁平化数据集格式将所述有效数据进行扁平化处理，并输出统一数据；

步骤S4：通过数据发布单元将所述统一数据提交至城市智能交互式共享停车系统云平台。

优选地，在所述步骤S2中，所述通过数据筛选单元筛选所述数据缓冲区中的停车场异构数据包括：通过筛选模块从所述停车场异构数据中筛选出异常数据并通过错误清理模块格式化所述异常数据，并通过异常修正模块对所述异常数据进行修正。

优选地，在所述步骤S3中，所述扁平化处理包括：通过格式统一模块按照统一格式配置所述有效数据格式并通过结构统一模块按照统一结构配置所述有效数据，并通过规则统一模块按照统一规则配置所述有效数据规则。

采用上述技术方案，本发明提供的一种统一数据发布组件的控制系统及控制方法，该统一数据发布组件的控制系统通过数据接入单元来接入不同停车场的停车场异构数据，再通过数据采集单元采集该停车场异构数据并将该停车场异构数据提交至本地内存缓冲区中，之后通过数据筛选单元筛选该数据缓冲区中的停车场异构数据并输出有效数据，再由数据统一单元按照统一扁平化数据集格式将该有效数据进行扁平化处理后再输出统一数据，最后通过数据发布单元将该统一数据提交至城市智能交互式共享停车系统云平台，从而能够将不同的停车场供应商数据以统一的数据格式集成到统一的数据平台，进而能够消除各停车场异构数据的“物理孤岛”现象和“逻辑孤岛”现象，并且让不同停车场系统的数据可在同一平台框架下实现展现和接入。

附图说明

图1为本发明一种统一数据发布组件的控制系统的结构框图；

图2为本发明一种统一数据发布组件的控制方法的流程图；

图3为本发明一种统一数据发布组件的基本数据流程图；

图4为本发明一种统一数据发布组件的异构数据接入结构图；

图中，1-数据接入单元、2-数据采集单元、3-数据筛选单元、4-数据统一单元、5-数据发布单元。

具体实施方式

下面结合附图对本发明的具体实施方式作进一步说明。在此需要说明的是，对于这些实施方式的说明用于帮助理解本发明，但并不构成对本发明的限定。此外，下面所描述的本发明各个实施方式中所涉及的技术特征只要彼此之间未构成冲突就可以相互组合。

如图1所示，在本发明一种统一数据发布组件的控制系统的结构框图中，该统一数据发布组件的控制系统包括数据接入单元1、数据采集单元2、数据筛选单元3、数据统一单元4、数据发布单元5，该数据接入单元1的输出端与该数据采集单元2的输入端通信连接，该数据采集单元2的输出端与数据筛选单元3的输入端通信连接，该数据统一单元4分别与该数据筛选单元3及数据发布单元5通信连接。可以理解的，该数据接入单元1用于接入停车场异构数据，该数据采集单元2用于采集该停车场异构数据的数据采集单元，该数据筛选单元3用于筛选该停车场异构数据并输出有效数据，该数据统一单元4用于将该有效数据进行扁平化处理并输出统一数据，该数据发布单元5与城市智能交互式共享停车系统云平台通信连接，用于将该统一数据提交至城市智能交互式共享停车系统云平台。该统一数据发布组件的控制系统是城市智能交互式共享停车系统云平台的重要一环，是统一各停车场异构数据格式、消除各停车场采集数据缺陷的重要步骤和过程。该统一数据发布组件通过提取城市中不同停车场的离线数据、停车采集数据、统计数据、比对规则、补缺失缺陷、去除错误信息等，获取计算实际有效的停车信息，并将这些有效数据结构映射转化为统一的结构描述，实现不同停车场的统一格式、统一结构和统一发布。上述过程，按照实际处理的操作步骤在该统一数据发布组件可自动存储至本地或远程“机器学习库”，并应用至下一次的自动处理过程。该统一数据发布组件从各停车场中的获取不同供应商的异构数据采集开始，经过基础数据过滤、筛选和清洗，提交本地内存缓冲区，再按统一扁平化数据集格式，向城市智能交互式共享停车系统云平台提交信息，由此实现城市中不同区域、不同厂商、不同环境下的停车数据的统一合成。

具体地，该停车场异构数据包括不同停车场的停车数据、不同供应商的停车数据及不同应用环境下的停车数据。可以理解的，该停车数据包括实际停车场的停车状态信息、车位状态信息及收费状态信息等。该数据采集单元2整合采集过程的异同点，而不是回避实际的环境差异，对于不同性质(或类型)的数据集合可实现多样的接入，是该统一数据发布组件的控制系统提供良好扩充性的表现之一。该统一数据发布组件的控制系统的数据接入部分包含多种驱动格式和类型，即支持常用的商业数据模型，也支持部分工业自动化或物联网类型的数据格式。当需要使用未知的数据接口或第三方专用的接口时，无需修改或更新整个系统，而仅需在统一数据发布组件的数据驱动层中建立此接口的驱动程序、通讯协议、以及特定的(或特殊的)转换形式等；组件和上层关联的通讯形式、交互方式、操作方法等不会改变。

具体地，该统一数据发布组件的控制系统还包括编辑界面单元，该编辑界面单元用于查询该统一数据之间的关系、执行自定义脚本及导入或导出该统一数据；该数据接入单元包括异构数据管理系统接入工具及异构数据客户端驱动组件，该数据接入单元与该异构数据客户端驱动组件通信连接。可以理解的，该统一数据发布组件包含了通用的异构数据管理系统接入工具和异构数据客户端驱动组件，支持标准的SQL、MySQL、PostgreSQL、SQLite、NoSQL、XML、兼容ODBC/JDBC的商业数据系统，同时支持主流PCL数据接口，比如ABB、Siemens、Omron、MUDBUS和部分物联网数据接口；组件同时提供标准的编辑器界面用于查询关系、执行自定义脚本、导入导出数据等，可实现城市智能交互式共享停车系统云平台中不同产品供应商(或工程商)提供的商业数据产品或部分硬件产品的高度集成和统一。

具体地，该数据筛选单元3包括用于筛选出异常数据的筛选模块、用于格式化该异常数据的错误清理模块、用于对该异常数据进行修正的异常修正模块及进行有效数据输出的输出模块。可以理解的，对于采集到的不同停车场系统的数据，该数据筛选单元3并不是获取后就直接拿来使用，对获取的数据集合进行必要的数据清洗和修正是保持信息精确发布的重要手段，无论是自动运行的规则比对、去重数据、补空缺失数据、估算实际值，还是人工改正方法等，都是为真实反映各单位停车状态、空位状态、收费状态等重要信息提供有效的保障。数据的修正和清洗过程是一个渐进的过程，一次的结果可以为下一次的执行提供更多的选择手段或优化方法。同时，不同车场由此建立的规则库是可以共享的，即：A车场的筛选方式、执行方式、修改规则等可以应用到B车场，反之也是有效的。相同方式或规则的多次使用可以提高应用本身的扩展性，也可以降低某些环境下的人工工作量。本发明通过发现停车场现有采集系统中的数据错误、异常、跳停或不合理格式，按照规范的标准化规则(或方法)有针对性的格式化、校验、更改和补差补漏，以保障停车数据的一致性、完整性和合理性。在实际停车管理系统中，不规范、不完整、不合理的数据值或数据格式多种多样，比如：运行过程中出现的错误值、异常值、空值、无效值、重复值等；出现如此现象的原因可能各不相同，比如应用本身的问题、系统掉电、人工输入错误、不当删除或更改等；纵然，这些矛盾或缺陷不能完全避免，但一旦出现必将影响后续进程，比如，停车收费时可能会出现的金额计算错误，停车时间段计划不准确等。该数据筛选单元3通过提取不同停车场系统中某时间段的应用数据集合，按照统计、比对、分析、补缺、去重、去噪、去空、去重、修正、人工补充等手段或方法，完成不同格式或结构的数据筛选、错误清理、异常修正等任务，从而保障从各车场提取的停车系统数据的完整性和一致性。

具体地，该数据统一单元4包括用于按照统一格式配置该有效数据格式的格式统一模块、用于按照统一结构配置该有效数据结构的结构统一模块、用于按照统一规则配置该有效数据规则的规则统一模块及用于输出该统一数据的数据合并模块。为城市智能交互式共享停车系统云平台提供统一格式的数据接口、表现格式和发布形式。不同供应商(或工程商)提供的停车系统数据结构和实际软硬件产品是紧密关联的，很多情况下，产品本身或应用本身多着眼于具体车场的具体应用或具体功能，甚至有可能为满足特定应用或要求进行二次开发或集成。如此，即使相同的或类似的功能组件，也可能产生不同的应用版本，从而导致产生很多个体分散的、相互独立的使用环境，随之而来的是高维护量、高集成风险的信息孤岛。该数据统一单元4建立在组织中各种分散的基础数据之上，使用统一的格式、统一的结构、统一的输入输出过程，合并、转化、迁移、比较共性的数据或应用，协调不同系统中的数据规划和数据结构，保障信息标准输入输出的一致性，从而加快信息流的利用效率，提升数据流的使用价值。

具体地，该统一数据发布组件的控制系统还包括数据自检单元，该数据自检单元用于实时分析该有效数据，并根据分析结果自动处理该有效数据。可以理解的，本发明能够自动(或人工)迭代消除采集数据的质量缺陷、修补数据的不一致性，精简存储空间以适应网络下的快速传输，避免出现因数据不合规、不严谨、不完整等现象而引发的困惑和疑问，是统一数据发布组件中数据清洗修正阶段执行的主要作用。某些情况下，采集到的各类异构数据不可避免的会出现这样或那样的问题，直接使用这些带病信息来进行更高步骤的处理，无疑会进一步加深问题的深度和广度。由此，统一数据发布组件使用内存缓冲区的方式，将自动分析的结果(或人工干预的建议结果)进行必要的数据检查，诸如：缺失、重复、噪点、异常、超出范围等常见皆可自动处理。上述的自检(或人工)过程是可迭代循环的，并且已保存的自检方案可使用在不同的停车场应用系统中或统一同步至远程的数据终端。

图2为本发明一种统一数据发布组件的控制方法的流程图，结合图1和图2，该控制方法包括以下步骤：步骤S1：通过数据接入单,1接入不同停车场的停车场异构数据，并通过数据采集单元2采集该停车场异构数据并将该停车场异构数据提交至本地内存缓冲区中；步骤S2：通过数据筛选单元3筛选该数据缓冲区中的停车场异构数据，并输出有效数据；

步骤S3：由数据统一单元4按照统一扁平化数据集格式将该有效数据进行扁平化处理，并输出统一数据；

步骤S4：通过数据发布单元5将该统一数据提交至城市智能交互式共享停车系统云平台可以理解的，在步骤S2中，该通过数据筛选单元筛选该数据缓冲区中的停车场异构数据包括：通过筛选模块从该停车场异构数据中筛选出异常数据并通过错误清理模块格式化该异常数据，并通过异常修正模块对该异常数据进行修正。在步骤S3中，该扁平化处理包括：通过格式统一模块按照统一格式配置该有效数据格式并通过结构统一模块按照统一结构配置该有效数据，并通过规则统一模块按照统一规则配置该有效数据规则。

可以理解的，对所有车辆使用者而言，都使用相同的应用展示界面、执行方法、数据表现和发布形式。对于使用人而言，他们并不在意停车场的具体设备情况、运行状态、人员结构、生产厂家等问题，而是关心怎样去停车场、线路可方便、是否有空位、收费价格是否合理等与用户体验有关的话题。该统一数据发布组件将停车系统中的各分散分布的停车场基础数据，按照统一的格式和方式，协调各单位、各系统的数据规划和结构，提取共性，向车辆使用者展现其在停车过程中关心的或关注的部分，透明化应用或数据本身的实现细节。该统一数据发布组件的运行方式可以手动、定时或在实际停车场中实时执行，可配置的运行方式增加了系统的灵活性，避免系统负载在某些时段或某个时刻过重的情况，也可以对系统的实时性方面提供帮助。比如：白天车辆出行频繁时，全负荷运行，设置较短的间隔时间，加快数据的刷新速度和实时发布频率；而在夜晚则可适当降低调整。

可以理解的，本发明应对异同的各停车场系统，提供广泛的接入支持服务，无论是常用的商业数据应用，还是主流的控制系统数据，统一数据发布组件皆可使用直接添加相应驱动或通讯协议的方式，将其加载进来，在数据类型、长度、取值范围等选项不统一的情况下，组件也提供了等价转换、兼容性转换、别名、直接引用(或指针引用)等机制将异构的采集数据收集至统一平台下，因此，方便的接入整合能力使得统一数据发布组件可以应对城市中不同供应商提供的不同产品。除了停车应用系统数据的接入，针对停车场中某些控制设备设施中存储的数据集合，比如，开关量、模拟值、报警等，组件也支持只读方式的采集和抓取，相对于软件形式的采集，从现场硬件控制设备中的数据采集时效性更高。在异构状态下，统一数据发布组件提取数据结构的共性，按客户群分门别类的建立不同数据结构的格式化视角，归整分散的独立的应用、统一数据格式之间的差异性，使用相同的存储格式和展现方式为不同停车场及不同车辆使用者提供融合性质的顶端应用(或人机界面)，从而达到“多种来源，一种形式”的目标。

本发明提供的统一数据发布组件的控制系统能够将众多不同的停车场供应商数据以统一的数据格式集成到统一的数据平台，从而消除各停车场异构数据的“物理孤岛”和“逻辑孤岛”，并将多样化、异构化、复杂化的多维数据整合为可维护框架内的一种中间数据服务层，同时对各原始数据集中的异常信息、空信息、缺失信息、错误状态等进行补充，对内可接入多格式的采集数据流，对外提供统一的数据服务发布接口，让众多停车场系统的数据可在同一平台框架下实现展现和接入。

以上结合附图对本发明的实施方式作了详细说明，但本发明不限于所描述的实施方式。对于本领域的技术人员而言，在不脱离本发明原理和精神的情况下，对这些实施方式进行多种变化、修改、替换和变型，仍落入本发明的保护范围内。

Claims (10)

1.一种统一数据发布组件的控制系统，其特征在于：包括用于接入停车场异构数据的数据接入单元、用于采集所述停车场异构数据的数据采集单元、用于筛选所述停车场异构数据并输出有效数据的数据筛选单元、用于将所述有效数据进行扁平化处理并输出统一数据的数据统一单元、用于将所述统一数据提交至城市智能交互式共享停车系统云平台的数据发布单元。

2.根据权利要求1所述的统一数据发布组件的控制系统，其特征在于：还包括编辑界面单元，所述编辑界面单元用于查询所述统一数据之间的关系、执行自定义脚本及导入或导出所述统一数据。

3.根据权利要求1所述的统一数据发布组件的控制系统，其特征在于：所述停车场异构数据包括不同停车场的停车数据、不同供应商的停车数据及不同应用环境下的停车数据。

4.根据权利要求1所述的统一数据发布组件的控制系统，其特征在于：所述数据接入单元包括异构数据管理系统接入工具及异构数据客户端驱动组件，所述数据接入单元与所述异构数据客户端驱动组件通信连接。

5.根据权利要求1所述的统一数据发布组件的控制系统，其特征在于：所述数据筛选单元包括用于筛选出异常数据的筛选模块、用于格式化所述异常数据的错误清理模块、用于对所述异常数据进行修正的异常修正模块及进行有效数据输出的输出模块。

6.根据权利要求1所述的统一数据发布组件的控制系统，其特征在于：所述数据统一单元包括用于按照统一格式配置所述有效数据格式的格式统一模块、用于按照统一结构配置所述有效数据结构的结构统一模块、用于按照统一规则配置所述有效数据规则的规则统一模块及用于输出所述统一数据的数据合并模块。

7.根据权利要求1所述的统一数据发布组件的控制系统，其特征在于：还包括数据自检单元，所述数据自检单元用于实时分析所述有效数据，并根据分析结果自动处理所述有效数据。

8.一种统一数据发布组件的控制方法，其特征在于：包括以下步骤：

步骤S1：通过数据接入单元接入不同停车场的停车场异构数据，并通过数据采集单元采集所述停车场异构数据并将所述停车场异构数据提交至本地内存缓冲区中；

步骤S2：通过数据筛选单元筛选所述数据缓冲区中的停车场异构数据，并输出有效数据；

步骤S3：由数据统一单元按照统一扁平化数据集格式将所述有效数据进行扁平化处理，并输出统一数据；

步骤S4：通过数据发布单元将所述统一数据提交至城市智能交互式共享停车系统云平台。

9.根据权利要求8所述的统一数据发布组件的控制方法，其特征在于：在所述步骤S2中，所述通过数据筛选单元筛选所述数据缓冲区中的停车场异构数据包括：通过筛选模块从所述停车场异构数据中筛选出异常数据并通过错误清理模块格式化所述异常数据，并通过异常修正模块对所述异常数据进行修正。

10.根据权利要求8所述的统一数据发布组件的控制方法，其特征在于：在所述步骤S3中，所述扁平化处理包括：通过格式统一模块按照统一格式配置所述有效数据格式并通过结构统一模块按照统一结构配置所述有效数据，并通过规则统一模块按照统一规则配置所述有效数据规则。