CN113204694A - 一种应用于业务系统智能数据交换的方法 - Google Patents
一种应用于业务系统智能数据交换的方法 Download PDFInfo
- Publication number
- CN113204694A CN113204694A CN202110232857.6A CN202110232857A CN113204694A CN 113204694 A CN113204694 A CN 113204694A CN 202110232857 A CN202110232857 A CN 202110232857A CN 113204694 A CN113204694 A CN 113204694A
- Authority
- CN
- China
- Prior art keywords
- client
- service
- data
- http
- data exchange
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000005516 engineering process Methods 0.000 claims abstract description 12
- 238000001914 filtration Methods 0.000 claims description 12
- 238000004458 analytical method Methods 0.000 claims description 11
- 238000012544 monitoring process Methods 0.000 claims description 9
- 238000013507 mapping Methods 0.000 claims description 8
- 210000001503 joint Anatomy 0.000 abstract description 5
- 230000009545 invasion Effects 0.000 abstract 1
- 238000007405 data analysis Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000009193 crawling Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/26—Government or public services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Tourism & Hospitality (AREA)
- General Physics & Mathematics (AREA)
- Human Resources & Organizations (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Marketing (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Health & Medical Sciences (AREA)
- Development Economics (AREA)
- Educational Administration (AREA)
- Quality & Reliability (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Operations Research (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种应用于业务系统智能数据交换的方法，属于政务服务信息化应用技术领域。本发明的应用于业务系统智能数据交换的方法安装抓取工具客户端，应用网络抓包技术对源系统客户端浏览器发出的http请求进行分析，通过客户端将处理过的http数据推送到目标系统。该发明的应用于业务系统智能数据交换的方法无需源系统的改造、对接，无侵入式获取到源系统的办理数据，而且无需根据源系统做定制开发的通用性好，具有很好的推广应用价值。
Description
技术领域
本发明涉及服务信息化应用技术领域，具体提供一种应用于业务系统智能数据交换的方法。
背景技术
近几年来，实行自上而下顶层设计方式的政务服务制度改革及信息化系统改造建设。陆续建立了统一的政务服务平台，要求各地政务服务实施部门实行一门式、一窗式业务受理、后台分类审批，这样给政务服务工作人员带来的是需要在两个系统里录入业务数据，一个是在本部门的业务办理系统里录入，一个是在统一政务服务平台的统建业务办理系统里录入，给工作人员带来双倍的工作量，影响了工作效率。当前缺少应对这个“二次录入”问题的解决办法。人工导入导出数据报表的方法，存在着业务系统需要挨个对接的问题，没有通用的方法，成本比较高。
针对上述问题，急需一种对需要二次录入的系统，在业务系统网络互相连通、无需对现有系统改造的情况下，以相对更少的物力和人力成本实现一次录入同步数据到其他系统，提升工作人员工作效率的方式。
发明内容
本发明的技术任务是针对上述存在的问题，提供一种无需源系统的改造、对接，无侵入式获取到源系统的办理数据，而且无需根据源系统做定制开发的通用性好的应用于业务系统智能数据交换的方法。
为实现上述目的，本发明提供了如下技术方案：
一种应用于业务系统智能数据交换的方法，安装抓取工具客户端，应用网络抓包技术对源系统客户端浏览器发出的http请求进行分析，通过客户端将处理过的http数据推送到目标系统。
作为优选，该应用于业务系统智能数据交换的方法具体包括以下步骤：
S1、通过后台引擎配置源系统的抓取规则、业务映射、字段映射、数据字典解析；
S2、开启源系统客户端监听；
S3、客户端监听到数据包保存到客户端数据库；
S4、后台服务接收到数据后，由后台调用目标系统接口推送给目标系统。
作为优选，步骤S1中，定义源系统的http过滤规则，http过滤规则支持多条http请求配置，所有的规则匹配后捕获一条完整的业务记录。
采用http过滤技术实现对抓取http的过滤，提取符合抓取规则的http请求。
作为优选，所述匹配规则按照权重划分为系统级、业务及和请求级。
作为优选，步骤S2中，用户自由控制客户端监听的开启、停止、查看历史记录的操作，开启抓取后，所有http请求被客户端监听。
作为优选，基于浏览器代理技术完成对http请求的抓取，得到http请求的完整报文，包括请求和返回的内容。
作为优选，步骤S3中，客户端监听到数据包保存到客户端数据库，并根据配置采取手动或自动推送到后台服务。
作为优选，步骤S4中，调用解析引擎解析成符合目标系统的业务数据。
作为优选，采用http报文解析技术，完成http报文解析为业务数据，满足目标系统的数据交换格式要求。
该应用于业务系统智能数据交换的方法，通过后台引擎配置，定义源系统的http过滤规则：通过分析源系统，记录业务提交的整个过程经过了哪些http 请求，匹配规则支持多条http请求配置，只有所有的规则全部匹配之后，才认为捕获到一条完整的业务记录。匹配规则按权重分为系统级、业务级、请求级，每抓取到一条http请求，需要依次通过系统配置、业务配置和路径配置三种级别过滤。客户端开启抓取：用户可以自由控制客户端监听的开启、停止、查看历史记录等操作，开启抓取后即开启浏览器代理，所有的http请求都会被客户端监听。客户端推送数据包：成功抓取数据包之后，客户端可以按配置手动或自动推送数据包到后台服务，后台服务接收到数据包之后会调用数据解析引擎得到业务数据，然后推送到目标系统。
该应用于业务系统智能数据交换的方法可以在不同的业务系统网络连通的环境下，不依赖接口对接、前置库、数据交换平台等手段，在源系统不需要改造的情况下，仅需办事人员安装启动抓取工具客户端，然后正常操作源系统，客户端即可捕获到源系统HTTP数据，并可以通过客户端将处理过的HTTP数据推送到目标系统，从而实现源系统和目标系统的数据交换。具有适用大多数源系统的通用性、源系统无需改造的便捷性等特点。一次配置即可使用，业务变化时只需修改配置，无需重新开发，具有易应用、易部署、实施周期短等优点。
与现有技术相比，本发明的应用于业务系统智能数据交换的方法具有以下突出的有益效果：
(一)所述应用于业务系统智能数据交换的方法通用性好，无需源系统的改造、对接，无侵入式获取到源系统的办理数据，而且无需根据源系统做定制开发；
(二)部署快捷、性价比高。本方法只需一次配置可供所有用户使用，可在全省、全市范围内同时快速部署，可有效的解决二次录入的问题，减轻了政务服务审批人员的工作量，提高了工作效率，并且充实了政务服务统一平台的业务数据，为业务数据的监管提供了条件；
(三)操作便捷，易用性好。本方法操作简单，提供可视化界面，工作人员可以实时查看自己录入抓取的结果，具有良好的推广应用价值。
附图说明
图1是本发明所述应用于业务系统智能数据交换的方法的流程图。
具体实施方式
下面将结合附图和实施例，对本发明的应用于业务系统智能数据交换的方法作进一步详细说明。
实施例
如图1所示，本发明的应用于业务系统智能数据交换的方法，安装抓取工具客户端，应用网络抓包技术对源系统客户端浏览器发出的http请求进行分析，通过客户端将处理过的http数据推送到目标系统。
该应用于业务系统智能数据交换的方法具体包括以下步骤：
S1、通过后台引擎配置源系统的抓取规则、业务映射、字段映射、数据字典解析。
采用http过滤技术实现对抓取http的过滤，提取符合抓取规则的http请求。定义源系统的http过滤规则，http过滤规则支持多条http请求配置，所有的规则匹配后捕获一条完整的业务记录。匹配规则按照权重划分为系统级、业务及和请求级。
S2、开启源系统客户端监听。
用户自由控制客户端监听的开启、停止、查看历史记录的操作，开启抓取后，所有http请求被客户端监听。基于浏览器代理技术完成对http请求的抓取，得到http请求的完整报文，包括请求和返回的内容。
S3、客户端监听到数据包保存到客户端数据库。
客户端监听到数据包保存到客户端数据库，并根据配置采取手动或自动推送到后台服务。
S4、后台服务接收到数据后，由后台调用目标系统接口推送给目标系统。
调用解析引擎解析成符合目标系统的业务数据。采用http报文解析技术，完成http报文解析为业务数据，满足目标系统的数据交换格式要求。
具体实施过程中，通过后台引擎配置，定义源系统的http过滤规则：通过分析源系统，记录业务提交的整个过程经过了哪些http请求，匹配规则支持多条http请求配置，只有所有的规则全部匹配之后，才认为捕获到一条完整的业务记录。匹配规则按权重分为系统级、业务级、请求级，每抓取到一条http请求，需要依次通过三种级别过滤。客户端开启抓取：用户可以自由控制客户端监听的开启、停止、查看历史记录等操作，开启抓取后即开启浏览器代理，所有的http请求都会被客户端监听。客户端推送数据包：成功抓取数据包之后，客户端可以按配置手动或自动推送数据包到后台服务，后台服务接收到数据包之后会调用数据解析引擎得到业务数据，然后推送到目标系统。
政务服务大厅管理人员通过后台引擎配置源系统的抓取规则、业务映射、字段映射、数据字典解析等内容。工作人员开启源系统客户端监听，然后正常使用源系统办理业务。客户端监听到符合规则的数据包保存到客户端数据库，并根据配置决定手动或自动推送到后台服务。后台服务接收到数据后调用数据解析引擎解析成符合目标系统的业务数据，并由后台调用目标系统接口推送给目标系统。
该应用于业务系统智能数据交换的方法可以在不同的业务系统网络连通的环境下，不依赖接口对接、前置库、数据交换平台等手段，在源系统不需要改造的情况下，仅需办事人员安装启动抓取工具客户端，然后正常操作源系统，客户端即可捕获到源系统HTTP数据，并可以通过客户端将处理过的HTTP数据推送到目标系统，从而实现源系统和目标系统的数据交换。
以上所述的实施例，只是本发明较优选的具体实施方式，本领域的技术人员在本发明技术方案范围内进行的通常变化和替换都应包含在本发明的保护范围内。
Claims (9)
1.一种应用于业务系统智能数据交换的方法，其特征在于：安装抓取工具客户端，应用网络抓包技术对源系统客户端浏览器发出的http请求进行分析，通过客户端将处理过的http数据推送到目标系统。
2.根据权利要求1所述的应用于业务系统智能数据交换的方法，其特征在于：具体包括以下步骤：
S1、通过后台引擎配置源系统的抓取规则、业务映射、字段映射、数据字典解析；
S2、开启源系统客户端监听；
S3、客户端监听到数据包保存到客户端数据库；
S4、后台服务接收到数据后，由后台调用目标系统接口推送给目标系统。
3.根据权利要求2所述的应用于业务系统智能数据交换的方法，其特征在于：步骤S1中，定义源系统的http过滤规则，http过滤规则支持多条http请求配置，所有的规则匹配后捕获一条完整的业务记录。
4.根据权利要求3所述的应用于业务系统智能数据交换的方法，其特征在于：所述匹配规则按照权重划分为系统级、业务及和请求级。
5.根据权利要求4所述的应用于业务系统智能数据交换的方法，其特征在于：步骤S2中，用户自由控制客户端监听的开启、停止、查看历史记录的操作，开启抓取后，所有http请求被客户端监听。
6.根据权利要求5所述的应用于业务系统智能数据交换的方法，其特征在于：基于浏览器代理技术完成对http请求的抓取，得到http请求的完整报文，包括请求和返回的内容。
7.根据权利要求6所述的应用于业务系统智能数据交换的方法，其特征在于：步骤S3中，客户端监听到数据包保存到客户端数据库，并根据配置采取手动或自动推送到后台服务。
8.根据权利要求7所述的应用于业务系统智能数据交换的方法，其特征在于：步骤S4中，调用解析引擎解析成符合目标系统的业务数据。
9.根据权利要求8所述的应用于业务系统智能数据交换的方法，其特征在于：采用http报文解析技术，完成http报文解析为业务数据，满足目标系统的数据交换格式要求。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110232857.6A CN113204694A (zh) | 2021-03-03 | 2021-03-03 | 一种应用于业务系统智能数据交换的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110232857.6A CN113204694A (zh) | 2021-03-03 | 2021-03-03 | 一种应用于业务系统智能数据交换的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113204694A true CN113204694A (zh) | 2021-08-03 |
Family
ID=77025347
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110232857.6A Pending CN113204694A (zh) | 2021-03-03 | 2021-03-03 | 一种应用于业务系统智能数据交换的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113204694A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114448961A (zh) * | 2022-01-04 | 2022-05-06 | 浪潮软件股份有限公司 | 一种自动交换数据的方法、系统、装置及计算机可读介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020099562A1 (en) * | 1999-10-29 | 2002-07-25 | Bruce Michael George | System and method of data exchange for electronic transactions with multiple sources |
| CN104158848A (zh) * | 2014-07-17 | 2014-11-19 | 国网山东省电力公司 | 一种无耦合待办集成的方法及系统 |
| CN106789755A (zh) * | 2016-11-30 | 2017-05-31 | 中国电子科技集团公司第五十四研究所 | 跨网数据交换平台 |
| CN112291229A (zh) * | 2020-10-26 | 2021-01-29 | 浪潮云信息技术股份公司 | 一种在隔离网络环境下实现政务系统业务数据交换的方法 |
| CN112308542A (zh) * | 2020-12-31 | 2021-02-02 | 浙江非线数联科技有限公司 | 实现数据智能无感录入的方法及系统 |
-
2021
- 2021-03-03 CN CN202110232857.6A patent/CN113204694A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020099562A1 (en) * | 1999-10-29 | 2002-07-25 | Bruce Michael George | System and method of data exchange for electronic transactions with multiple sources |
| CN104158848A (zh) * | 2014-07-17 | 2014-11-19 | 国网山东省电力公司 | 一种无耦合待办集成的方法及系统 |
| CN106789755A (zh) * | 2016-11-30 | 2017-05-31 | 中国电子科技集团公司第五十四研究所 | 跨网数据交换平台 |
| CN112291229A (zh) * | 2020-10-26 | 2021-01-29 | 浪潮云信息技术股份公司 | 一种在隔离网络环境下实现政务系统业务数据交换的方法 |
| CN112308542A (zh) * | 2020-12-31 | 2021-02-02 | 浙江非线数联科技有限公司 | 实现数据智能无感录入的方法及系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114448961A (zh) * | 2022-01-04 | 2022-05-06 | 浪潮软件股份有限公司 | 一种自动交换数据的方法、系统、装置及计算机可读介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107094158B (zh) | 一种自动化内网安全脆弱分析系统 | |
| CN109889551A (zh) | 一种智能硬件接入的物联网云平台的方法 | |
| CN107294808A (zh) | 接口测试的方法、装置和系统 | |
| CN110581773A (zh) | 一种自动化服务监控与报警管理系统 | |
| CN103546343A (zh) | 网络流量分析系统的网络流量展示方法和系统 | |
| CN110858192A (zh) | 一种日志查询方法和系统、日志排查系统和查询终端 | |
| CN111628896A (zh) | It运维管理方法、装置、设备及计算机存储介质 | |
| CN112416902A (zh) | 一种主机与数据库一键巡检方法 | |
| CN113204694A (zh) | 一种应用于业务系统智能数据交换的方法 | |
| CN115712646A (zh) | 一种告警策略生成方法、装置和存储介质 | |
| CN108847949A (zh) | 基于云平台的消息通知方法、装置、电子设备及存储介质 | |
| CN110995538B (zh) | 网络数据采集方法、装置、系统、设备及存储介质 | |
| KR100237870B1 (ko) | 패킷망 트래픽 분석 장치를 이용한 과금 데이타 처리 방법 | |
| CN113760634A (zh) | 一种数据处理方法和装置 | |
| CN112291229A (zh) | 一种在隔离网络环境下实现政务系统业务数据交换的方法 | |
| CN116074095A (zh) | 一种日志分析方法、装置、设备及存储介质 | |
| CN111817865A (zh) | 一种监控网管设备的方法及监控系统 | |
| CN113297148B (zh) | 业务日志数据的采集方法、装置、设备及可读存储介质 | |
| TWI762969B (zh) | 行固網路融合之服務編程與供裝系統及其方法 | |
| CN112506886B (zh) | 一种多源业务操作日志采集方法及系统 | |
| CN101409647A (zh) | 一种对用户路由器提供流量监控及分析的方法 | |
| CN101325626B (zh) | 基于网络语音通信的实时录音监察服务方法 | |
| CN110300233A (zh) | 企业级电话轨迹管理方法及系统 | |
| CN115242677B (zh) | 一种家宽用户状态监听系统、方法和装置 | |
| CN112291209B (zh) | 一种前端设备目录获取方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210803 |