CN113949522A - 一种实现智能数据通讯转发的系统及方法 - Google Patents
一种实现智能数据通讯转发的系统及方法 Download PDFInfo
- Publication number
- CN113949522A CN113949522A CN202110987004.3A CN202110987004A CN113949522A CN 113949522 A CN113949522 A CN 113949522A CN 202110987004 A CN202110987004 A CN 202110987004A CN 113949522 A CN113949522 A CN 113949522A
- Authority
- CN
- China
- Prior art keywords
- data
- filtering
- protocol
- module
- filtered
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
- H04L63/0227—Filtering policies
- H04L63/0245—Filtering by information in the payload
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/9035—Filtering based on additional data, e.g. user or group profiles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2212/00—Encapsulation of packets
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明涉及智能交通技术领域,具体涉及一种实现智能数据通讯转发的系统及方法,包括人工配置模块,由业务逻辑编辑、变量输入和变量输出组成,用于配置数据库连接、数据过滤协议、转发设备信息或其他基础信息;数据转换模块,用于将电警卡口设备产生的过车数据,转换为符合GA/T1400协议的标准化数据;数据过滤器,用于在获取所述数据转换模块中待过滤清洗的原数据,利用预设目标条件对所述待过滤原数据进行清洗过滤,并返回过滤时出现的错误信息到前端设备。本发明实现了统一收集处理前端设备产生的标准化数据,并在国产服务器上实现了智能交通数据的汇聚转发。
Description
技术领域
本发明涉及智能交通技术领域,具体涉及一种实现智能数据通讯转发的系统及方法。
背景技术
城市智能交通优化需要基础前端数据的支撑,电警卡口设备产生大量行人及过车数据,为各类交通综合管理系统提供数据,以便进一步分析应用。
随着信创国产化的推广,传统电警卡口数据转发系统,无法根据《GA/T 1400.x(所有部分)公安视频图像信息应用系统》(简称GA/T 1400协议)系列标准,实现统一收集处理前端设备产生的标准化数据,并在国产服务器上实现智能交通数据的汇聚转发。
但是现有的方案均不能在国产服务器上实现智能交通数据的汇聚转发,因此本申请提出了一种实现智能数据通讯转发的系统及方法。
发明内容
针对现有技术的不足,本发明公开了一种实现智能数据通讯转发的系统及方法,用于实现统一收集处理前端设备产生的标准化数据,并在国产服务器上实现智能交通数据的汇聚转发。
本发明通过以下技术方案予以实现:
第一方面,本发明提供了一种实现智能数据通讯转发的系统,包括
人工配置模块,由业务逻辑编辑、变量输入和变量输出组成,用于配置数据库连接、数据过滤协议、转发设备信息或其他基础信息;
数据转换模块,用于将电警卡口设备产生的过车数据,转换为符合GA/T1400协议的标准化数据;
数据过滤器,用于在获取所述数据转换模块中待过滤清洗的原数据,利用预设目标条件对所述待过滤原数据进行清洗过滤,并返回过滤时出现的错误信息到前端设备。
更进一步的,所述系统中的数据接口协议结构采用REST架构进行定义,REST服务通过HTTP的方法实现,消息体采用JSON进行封装。
更进一步的,所述数据过滤器为1400过滤器,所述1400过滤器将收集到所述数据转换模块的符合国标GA/T1400协议标准的各类数据进行清洗,删除重复信息、纠正存在的错误,并提供数据一致性。
更进一步的,所述数据过滤器包括数据处理模块和数据过滤模块。
更进一步的,所述数据处理模块,用于实时更新人工配置模块中配置的数据过滤协议。
更进一步的,所述数据过滤模块,用于接收串口设备将要发送给交通综合管理系统应用程序的数据,通过人工配置模块获取数据过滤协议,根据数据过滤协议过滤所述数据,得到过滤后的数据,向交通综合管理系统应用程序发送过滤后的数据。
更进一步的,所述业务逻辑编辑包含有用于表达一场景或功能的业务逻辑规则,以用于对输入数据依据所述业务逻辑规则进行逻辑加工得到输出数据。
更进一步的,所述输入变量,作为所述人工配置模块的输入数据;其为通过数据引擎从业务数据库中按照取数业务逻辑读取的业务变量数据;
所述输出变量,作为所述人工配置模块的输出数据;其为所述人工配置模块对输入变量进行逻辑加工所输出的变量数据。
更进一步的,所述系统将过滤后的标准数据,根据配置转发到对应的应用平台,并在本地记录原始数据。
第二方面,本发明提供了一种实现智能数据通讯转发的方法,所述方法使用第一方面所述的实现智能数据通讯转发的系统,包括以下步骤:
S1获取电警卡口设备产生的过车数据,并转换为符合GA/T1400协议的标准化数据;
S2将标准化数据利用预设目标条件对所述待过滤原数据进行清洗过滤,并返回过滤时出现的错误信息到前端设备;
S3将过滤后的标准数据,根据配置转发到对应的应用平台,并在本地记录原始数据。
本发明的有益效果为:
本发明使用符合信创要求的国产服务器作为硬件载体,实现接收、汇聚电警卡口设备产生的符合GA/T 1400协议的标准化数据以及宝康公司卡口设备产生的过车数据;统一转化为GA/T1400协议的标准化数据进行转发;配套一个人工配置网站,方便运维人员日常维护;实现了统一收集处理前端设备产生的标准化数据,并在国产服务器上实现了智能交通数据的汇聚转发。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一种实现智能数据通讯转发的系统总体构架图;
图2是本发明实施例人工配置模块图;
图3是本发明实施例注册接口方法原理图;
图4是本发明实施例注销接口方法原理图;
图5是本发明实施例其他数据接口方法原理图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1
参照图1所示,本实施例提供了一种实现智能数据通讯转发的系统,包括人工配置模块(参见图2所示),由业务逻辑编辑、变量输入和变量输出组成,用于配置数据库连接、数据过滤协议、转发设备信息或其他基础信息;
数据转换模块,用于将电警卡口设备产生的过车数据,转换为符合GA/T1400协议的标准化数据;
数据过滤器,用于在获取所述数据转换模块中待过滤清洗的原数据,利用预设目标条件对所述待过滤原数据进行清洗过滤,并返回过滤时出现的错误信息到前端设备。
本实施例可将宝康公司电警卡口设备产生的过车数据,通过宝康公司通讯协议《下位机通信协议规范-对外第三方接口_V5.2》以及国标《GA-T 1400.3公安视频图像信息应用系统第3部分:数据库技术要求》,转换为符合国标GA/T1400协议标准的机动车数据。
本实施例实现前端设备的注册、注销、保活、校时功能;接收、汇聚、转发实时机动车、非机动车、人脸、人员消息;处理接收的布控消息,并将产生的数据最终转发到交通综合管理系统。
本实施例系统已在上海市公安局松江分局实际进行了试用,实现了在符合信创要求的国产服务器上接收、汇聚转发国标GA/T1400各类数据,并已通过《公安部安全防范报警系统产品质量监督检验测试中心》检测。
实施例2
本实施例公开一种智能数据通讯转发设备,包括人工配置模块、宝康公司转换模块和1400过滤器,本实施例中,该转发设备中的数据接口协议结构采用REST架构进行定义,REST服务通过HTTP的方法实现,消息体采用JSON进行封装。
本实施例1400过滤器将收集到所述数据转换模块的符合国标GA/T1400协议标准的各类数据进行清洗,删除重复信息、纠正存在的错误,并提供数据一致性。
本实施例宝康公司转换模块包括数据处理模块和数据过滤模块。
本实施例数据处理模块,用于实时更新人工配置模块中配置的数据过滤协议。
本实施例数据过滤模块,用于接收串口设备将要发送给交通综合管理系统应用程序的数据,通过人工配置模块获取数据过滤协议,根据数据过滤协议过滤所述数据,得到过滤后的数据,向交通综合管理系统应用程序发送过滤后的数据。
本实施例人工配置模块包括业务逻辑编辑、变量输入和变量输出。
本实施例业务逻辑编辑包含有用于表达一场景或功能的业务逻辑规则,以用于对输入数据依据所述业务逻辑规则进行逻辑加工得到输出数据。
本实施例业务逻辑规则包括:可编写的条件列与可编写的动作列;所述条件列中通过条件信息和布尔运算符构成的条件表达式;所述动作列中通过动作编号或动作名称表征某一条件表达式成立时触发执行某一动作的程序。
本实施例输入变量,作为所述人工配置模块的输入数据;其为通过数据引擎从业务数据库中按照取数业务逻辑读取的业务变量数据;
本实施例输出变量,作为所述人工配置模块的输出数据;其为所述人工配置模块对输入变量进行逻辑加工所输出的变量数据。
本实施例转发设备将过滤后的标准数据,根据配置转发到对应的应用平台,并在本地记录原始数据。
实施例3
在具体实施层面,本实施例对一种实现智能数据通讯转发的系统中相关的各数据接口协议结构采用REST架构进行定义,REST服务通过HTTP的方法实现,消息体采用JSON进行封装。
其中,注册接口方法如图3所示,注销接口方法如图4所示,其他数据接口方法如图5所示。
本实施例系统使用符合信创要求的国产服务器,可适配曙光的海光服务器,将过滤后的标准数据,根据配置转发到对应的应用平台,并在本地记录原始数据。
本实施例实现1200条/秒结构化数据接入及转发能力;实现600条/秒包含Base64编码的图片数据(50K的小图)接入及转发能力。
实施例4
本实施例提供一种实现智能数据通讯转发的方法,所述方法使用一种实现智能数据通讯转发的系统,包括以下步骤:
S1获取电警卡口设备产生的过车数据,并转换为符合GA/T1400协议的标准化数据;
S2将标准化数据利用预设目标条件对所述待过滤原数据进行清洗过滤,并返回过滤时出现的错误信息到前端设备;
S3将过滤后的标准数据,根据配置转发到对应的应用平台,并在本地记录原始数据。
综上,本发明使用符合信创要求的国产服务器作为硬件载体,实现接收、汇聚电警卡口设备产生的符合GA/T 1400协议的标准化数据以及宝康公司卡口设备产生的过车数据;统一转化为GA/T1400协议的标准化数据进行转发;配套一个人工配置网站,方便运维人员日常维护;实现了统一收集处理前端设备产生的标准化数据,并在国产服务器上实现了智能交通数据的汇聚转发。
以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种实现智能数据通讯转发的系统,其特征在于,包括
人工配置模块,由业务逻辑编辑、变量输入和变量输出组成,用于配置数据库连接、数据过滤协议、转发设备信息或其他基础信息;
数据转换模块,用于将电警卡口设备产生的过车数据,转换为符合GA/T1400协议的标准化数据;
数据过滤器,用于在获取所述数据转换模块中待过滤清洗的原数据,利用预设目标条件对所述待过滤原数据进行清洗过滤,并返回过滤时出现的错误信息到前端设备。
2.根据权利要求1所述的一种实现智能数据通讯转发的系统,其特征在于,所述系统中的数据接口协议结构采用REST架构进行定义,REST服务通过HTTP的方法实现,消息体采用JSON进行封装。
3.根据权利要求1所述的一种实现智能数据通讯转发的系统,其特征在于,所述数据过滤器为1400过滤器,所述1400过滤器将收集到所述数据转换模块的符合国标GA/T1400协议标准的各类数据进行清洗,删除重复信息、纠正存在的错误,并提供数据一致性。
4.根据权利要求3所述的一种实现智能数据通讯转发的系统,其特征在于,所述数据过滤器包括数据处理模块和数据过滤模块。
5.根据权利要求4所述的一种实现智能数据通讯转发的系统,其特征在于,所述数据处理模块,用于实时更新人工配置模块中配置的数据过滤协议。
6.根据权利要求4所述的一种实现智能数据通讯转发的系统,其特征在于,所述数据过滤模块,用于接收串口设备将要发送给交通综合管理系统应用程序的数据,通过人工配置模块获取数据过滤协议,根据数据过滤协议过滤所述数据,得到过滤后的数据,向交通综合管理系统应用程序发送过滤后的数据。
7.根据权利要求1所述的一种实现智能数据通讯转发的系统,其特征在于,所述业务逻辑编辑包含有用于表达一场景或功能的业务逻辑规则,以用于对输入数据依据所述业务逻辑规则进行逻辑加工得到输出数据。
8.根据权利要求1所述的一种实现智能数据通讯转发的系统,其特征在于,所述输入变量,作为所述人工配置模块的输入数据;其为通过数据引擎从业务数据库中按照取数业务逻辑读取的业务变量数据;
所述输出变量,作为所述人工配置模块的输出数据;其为所述人工配置模块对输入变量进行逻辑加工所输出的变量数据。
9.根据权利要求1所述的一种实现智能数据通讯转发的系统,其特征在于,所述系统将过滤后的标准数据,根据配置转发到对应的应用平台,并在本地记录原始数据。
10.一种实现智能数据通讯转发的方法,所述方法使用如权利要求1-9任一项所述的实现智能数据通讯转发的系统,其特征在于,包括以下步骤:
S1获取电警卡口设备产生的过车数据,并转换为符合GA/T1400协议的标准化数据;
S2将标准化数据利用预设目标条件对所述待过滤原数据进行清洗过滤,并返回过滤时出现的错误信息到前端设备;
S3将过滤后的标准数据,根据配置转发到对应的应用平台,并在本地记录原始数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110987004.3A CN113949522A (zh) | 2021-08-26 | 2021-08-26 | 一种实现智能数据通讯转发的系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110987004.3A CN113949522A (zh) | 2021-08-26 | 2021-08-26 | 一种实现智能数据通讯转发的系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113949522A true CN113949522A (zh) | 2022-01-18 |
Family
ID=79327514
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110987004.3A Pending CN113949522A (zh) | 2021-08-26 | 2021-08-26 | 一种实现智能数据通讯转发的系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113949522A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114500650A (zh) * | 2022-01-25 | 2022-05-13 | 瀚云科技有限公司 | 一种交通数据处理方法、装置、服务器及系统 |
CN114979301A (zh) * | 2022-07-28 | 2022-08-30 | 成都锐菲网络科技有限公司 | 公安视图库与交警集指协议替身数据实时共享方法及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018113184A1 (zh) * | 2016-12-23 | 2018-06-28 | 浙江工商大学 | 基于ForCES协议的智能设备控制管理方法 |
CN110378824A (zh) * | 2019-06-26 | 2019-10-25 | 公安部交通管理科学研究所 | 一种公安交管数据大脑及构建方法 |
CN110968322A (zh) * | 2019-11-27 | 2020-04-07 | 北京旷视科技有限公司 | Json数据的处理方法、装置和电子系统 |
-
2021
- 2021-08-26 CN CN202110987004.3A patent/CN113949522A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018113184A1 (zh) * | 2016-12-23 | 2018-06-28 | 浙江工商大学 | 基于ForCES协议的智能设备控制管理方法 |
CN110378824A (zh) * | 2019-06-26 | 2019-10-25 | 公安部交通管理科学研究所 | 一种公安交管数据大脑及构建方法 |
CN110968322A (zh) * | 2019-11-27 | 2020-04-07 | 北京旷视科技有限公司 | Json数据的处理方法、装置和电子系统 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114500650A (zh) * | 2022-01-25 | 2022-05-13 | 瀚云科技有限公司 | 一种交通数据处理方法、装置、服务器及系统 |
CN114979301A (zh) * | 2022-07-28 | 2022-08-30 | 成都锐菲网络科技有限公司 | 公安视图库与交警集指协议替身数据实时共享方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113949522A (zh) | 一种实现智能数据通讯转发的系统及方法 | |
CN101778264B (zh) | 视频监控方法和系统 | |
CN110554856A (zh) | 一种微服务治理系统 | |
CN111752799A (zh) | 一种业务链路跟踪方法、装置、设备及储存介质 | |
CN110224865A (zh) | 一种基于流式处理的日志告警系统 | |
CN109460744B (zh) | 一种基于深度学习的视频监控系统 | |
CN101741615A (zh) | 基于服务器的告警过滤系统及方法 | |
CN105847083A (zh) | 一种业务集中监控方法及系统 | |
CN106254379B (zh) | 网络安全策略的处理系统及处理方法 | |
CN109639742B (zh) | 一种信息安全监控系统 | |
CN105786683A (zh) | 自定制的日志收集系统和方法 | |
CN102932195A (zh) | 一种基于网络协议分析的业务分析监控方法及系统 | |
CN105553700A (zh) | 一种智能化的设备故障识别检测和解决方案提供系统 | |
CN116580362B (zh) | 输电运维跨系统融合数据的采集方法及数字资产处理系统 | |
CN115002146A (zh) | 一种物模型在工业物联网的应用方法 | |
CN111818184B (zh) | 基于可视化便捷流计算的医疗物联网消息路由装置及方法 | |
CN103812676A (zh) | 一种实现日志数据实时关联装置及方法 | |
CN213126061U (zh) | 一种基于控制器的神经网络流量预测装置 | |
CN113986965A (zh) | 一种基于监控运维系统的数据处理方法和监控运维系统 | |
CN110071837B (zh) | 一种接入网的告警处理方法及系统 | |
CN106529783A (zh) | 一种电网调度自动化系统综合运维管理系统及方法 | |
CN113381997A (zh) | 物联网通用协议转换平台 | |
DE102019006356A1 (de) | System, Verfahren zur Digitalen Transformation von Industriesysteme | |
CN114302398B (zh) | 基于大数据的预留诈骗号码识别方法、装置及计算设备 | |
CN110071945B (zh) | 一种用户数据的订阅方法、装置及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |