CN113553093A - 一种多来源交易数据并行采集与整合的方法及其系统 - Google Patents

一种多来源交易数据并行采集与整合的方法及其系统 Download PDF

Info

Publication number
CN113553093A
CN113553093A CN202010332384.2A CN202010332384A CN113553093A CN 113553093 A CN113553093 A CN 113553093A CN 202010332384 A CN202010332384 A CN 202010332384A CN 113553093 A CN113553093 A CN 113553093A
Authority
CN
China
Prior art keywords
data
integration
plug
instruction
management module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010332384.2A
Other languages
English (en)
Other versions
CN113553093B (zh
Inventor
王志修
周兀
谢翼翾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Haolian Digital Technology Co ltd
Original Assignee
Shanghai Haolian Digital Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Haolian Digital Technology Co ltd filed Critical Shanghai Haolian Digital Technology Co ltd
Priority to CN202010332384.2A priority Critical patent/CN113553093B/zh
Publication of CN113553093A publication Critical patent/CN113553093A/zh
Application granted granted Critical
Publication of CN113553093B publication Critical patent/CN113553093B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/70Software maintenance or management
    • G06F8/71Version control; Configuration management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44521Dynamic linking or loading; Link editing at or after load time, e.g. Java class loading
    • G06F9/44526Plug-ins; Add-ons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/541Interprogram communication via adapters, e.g. between incompatible applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明的目的在于公开一种多来源交易数据并行采集与整合的方法及其系统,它包括客户端,服务端及运维端;与现有技术相比,支持既有插件以合并方式或分离方式采集数据,提供后继插件开发标准,以应对不同场景需要;数据需求方可根据产品需要,在服务端配置相关客户、数据来源与字段,适应灵活的产品需求和场景变化;数据需求方可根据具体应用场景或服务产品,选择数据展示方式或集成方式,形成以数据需求方所主导的场景驱动化数据服务模式,实现本发明的目的。

Description

一种多来源交易数据并行采集与整合的方法及其系统
技术领域
本发明涉及一种信息采集与整合的方法及其系统,特别涉及一种多来源交易数据并行采集与整合的方法及其系统。
背景技术
面向企业贸易业务的交易数据,主要记录企业及其上下游运营过程中产生的不同维度流转数据,狭义上主要指采购、库存和销售的进销存数据,从广义上来说,则覆盖需求预测数据、合同数据、询报价数据、订单数据、发货数据、物流数据、收货数据、验收入库数据、对账数据、发票数据和付款结算数据等。
面向企业融资的供应链金融业务,基于传统信贷业务基础上,金融机构通常需供应链贸易所产生的各项交易数据定性或定量评估企业的综合情况,作为金融服务方,此时也成为数据需求方。供应链金融服务作为全面提升供应链产业升级相关配套服务,其中交易数据对供应链金融的开展至关重要。由于交易数据来源广泛,且数据采集方式呈多样化,需要借助于企业本地部署的信息系统或相关数据文件以获取相关数据,采集不同系统或来源的交易数据需要花费金融机构大量人力、物力和时间,且数据采集后有待与相关系统或金融产品集成。
现有技术中,主要针对单项来源数据提供采集方法,并未考虑相关数据与产品的集成,且未针对多项来源数据提供采集方法,未依托于金融服务场景提供灵活的采集工具与集成方式。
因此,特别需要一种多来源交易数据并行采集与整合的方法及其系统,以解决上述现有存在的问题。
发明内容
本发明的目的在于提供一种多来源交易数据并行采集与整合的方法及其系统,针对现有技术的不足,以采集指令与取数工具的合并或分离方式采集多来源交易数据,以应对不同来源数据的差异场景,实现多场景切换,实现多来源数据采集的灵活与机动化。
本发明所解决的技术问题可以采用以下技术方案来实现:
第一方面,本发明提供一种多来源交易数据并行采集与整合的系统,其特征在于,它包括:
客户端,面向数据采集与服务对象,为数据采集提供闭环采集工具;
服务端,面向数据需求方,配置数据采集相关参数,并配置数据管理相关方案;及
运维端:为数据采集与整合提供采集指令工具管理和认证管理服务;
所述客户端、所述服务端和所述运维端互相通讯连接,实现多来源数据的机动采集与整合,为数据需求方提供全面且适当的数据信息,并实现相关产品的数据标准对接。
在本发明的一个实施例中,所述客户端包括:
主程序模块,包括模块激活与更新、插件集成,并与服务端或运维端之间相关指令收发;
分离类插件模块,集成各分离类插件,为数据采集提供整合服务;及
合并类插件模块,集成各合并类插件,为数据采集提供整合服务。
进一步,所述分离类插件指取数工具和采集指令未部署于一处,通常取数工具部署于本地,采集指令部署于异地。
进一步,所述合并类插件指取数工具和采集指令部署于同处,通常共同部署于本地。
在本发明的一个实施例中,所述服务端包括:
客户管理模块,包括用户建档、许可证管理和激活码管理;
数据管理模块,包括数据配置、数据存储和数据调用;
数据展示模块,包括展示配置和数据预览;及
数据集成模块,根据约定独立调用网页(Web)、文件传输(File)和应用程序接口(API)等集成模块,相关数据依照指定方式传输至其他应用系统。
在本发明的一个实施例中,所述运维端包括:
许可证管理模块,包括许可证生成、状态管理和日志更新;及
适配器管理模块,包括适配器配置和采集指令调用。
第二方面,本发明提供一种多来源交易数据并行采集与整合的方法,其特征在于,它包括如下步骤:
(一)预备阶段:
(1)在服务端,客户管理完成用户建档,包括客户主数据录入,包括必要信息:企业名称、统一社会信用代码,及其他非必要信息,发送相关信息与指令至运维端;
(2)在运维端,许可证管理模块生成许可证并标识其状态,推送相应信息至服务端;
(3)在服务端,客户管理模块接收指令,许可证状态更新;
(4)在服务端,客户管理模块生成激活码,并发送激活信息给客户;
(5)在客户端,客户通过客户端确认激活,主程序模块发送激活确认信息至服务端和运维端;
(6)在运维端,接收激活信息,许可证管理模块进行状态更新;
(7)在服务端,接收激活信息,激活码管理模块进行状态更新;
(8)在服务端,许可证管理模块进行状态更新;
(9)在服务端,服务端人员通过数据管理模块进行数据配置,确认所需数据来源与字段,并把相应配置发送至运维端;
(10)在运维端,适配器管理模块确认许可证状态已更新,可接收服务端相应数据配置信息;
(二)取数阶段:
(1)通过客户端主动上传数据或者服务端反向调用数据的方式进行取数,运用套接字(Socket)技术实现客户端主程序模块与插件模块之间的交互;
(2)预先定义基础信息,包括主程序及插件编码(ID)、网络位置(IP)、端口(Port);客户端主程序呼叫插件时涉及参数如下:开始时间、取数字段、数据涉及时间长度;插件返回主程序时涉及参数如下:完成与否、完成时间、数据包位置;
(三)整合调用阶段:
(1)在服务端,数据展示模块进行数据配置,主要针对待展示与集成数据予以配置,发送指令给数据管理模块;
(2)在服务端,数据管理模块接收上述指令,发起数据调用指令;
(3)在服务端,数据管理模块调用存储数据;
(4)在服务端,数据展示模块生成数据预览;
(5)在服务端,数据集成模块根据约定独立调用各集成模块,相关数据依照指定方式传输至其他应用系统,数据集成模块包括调用网页(Web)、文件传输(File)和应用程序接口(API)三类集成方式。
在本发明的一个实施例中,在取数阶段,通过客户端主动上传数据进行取数包括如下步骤:
(1)在客户端,主程序模块发起插件调用指令,指令传输至运维端确认;
(2)在运维端,许可证管理模块接收指令进行状态查询,确认许可证状态后,发送指令至适配器管理模块;
(3)在运维端,适配器管理模块接收上述指令后发出执行调用指令至客户端,并传输相关数据参数;
(4)在客户端,主程序模块进行插件调用,分别传送至合并类插件模块和分离类插件模块;
(5)在客户端,合并类插件模块接收主程序指令,发出调用指令;
(6)在客户端,合并类插件模块执行插件取数功能,采集数据以文件加密传输协议(SFTP)或其他约定方式传输至服务端数据管理模块;
(7)在客户端,分离类插件模块接收执行调用指令,按照所接收参数采集相关数据,数据以文件加密传输协议(SFTP)或其他约定方式传输至服务端数据管理模块;
(8)在服务端,数据管理模块对两类插件模块所传输数据完成数据存储,发送信息至运维端许可证管理模块;
(9)在运维端,许可证管理模块接收信息,完成日志更新。
在本发明的一个实施例中,在取数阶段,通过服务端反向调用数据进行取数包括如下步骤:
(1)在服务端,数据管理模块发送数据调用指令至运维端;
(2)在运维端,许可证管理模块接收指令进行状态查询,确认许可证状态后,发送指令至适配器管理模块;
(3)在运维端,适配器管理模块接收上述指令后发出执行调用指令至客户端,并传输相关数据参数;
(4)在客户端,主程序模块接收上述指令和参数后,发起插件调用指令,指令分别传送至合并类插件模块和分离类插件模块;
(5)在客户端,合并类插件模块接收主程序指令,发出调用指令;
(6)在客户端,合并类插件模块执行插件取数功能,采集数据以文件加密传输协议(SFTP)方式传输至服务端数据管理模块;
(7)在客户端,分离类插件模块接收主程序指令,照所接收参数采集相关数据,数据以文件加密传输协议(SFTP)方式传输至服务端数据管理模块;
(8)在服务端,数据管理模块对两类插件模块所传输数据完成数据存储,发送信息至运维端许可证管理模块;
(9)在运维端,许可证管理模块接收信息,完成日志更新。
在本发明的一个实施例中,在整合阶段,通过调用网页(Web)的集成方式包括如下步骤:
(1)利用账号密码登录服务端网页;
(2)批量或单选指定企业客户;
(3)下载Excel格式数据。
在本发明的一个实施例中,在整合阶段,通过文件传输(File)集成的集成方式包括如下步骤:
(1)默认使用文件加密传输协议(SFTP)进行文件安全传输;
(2)服务端与其他应用系统约定密码或证书登入;
(3)定期或人工传送全量或增量文件。
在本发明的一个实施例中,在整合阶段,通过应用程序接口(API)集成的集成方式包括如下步骤:
(1)服务端与其他应用系统约定接口访问方式或加解密算法;
(2)其他应用系统依照接口指定提供入参;
(3)服务端输出结果报文。
本发明的多来源交易数据并行采集与整合的方法及其系统,与现有技术相比,支持既有插件以合并方式或分离方式采集数据,提供后继插件开发标准,以应对不同场景需要;数据需求方可根据产品需要,在服务端配置相关客户、数据来源与字段,适应灵活的产品需求和场景变化;数据需求方可根据具体应用场景或服务产品,选择数据展示方式或集成方式,形成以数据需求方所主导的场景驱动化数据服务模式,实现本发明的目的。
本发明的特点可参阅本案图式及以下较好实施方式的详细说明而获得清楚地了解。
附图说明
图1为本发明的多来源交易数据并行采集与整合的系统的结构示意图;
图2为本发明多来源交易数据并行采集与整合的系统的客户端、服务端和运维端中各个模块的连接关系示意图;
图3为本发明的多来源交易数据并行采集与整合的方法预备阶段的流程示意图;
图4为本发明的多来源交易数据并行采集与整合的方法通过客户端主动上传数据进行取数的流程示意图;
图5为本发明的多来源交易数据并行采集与整合的方法通过服务端反向调用数据进行取数的流程示意图;
图6为本发明的多来源交易数据并行采集与整合的方法整合阶段的流程示意图。
具体实施方式
为了使本发明实现的技术手段、创作特征、达成目的与功效易于明白了解,下面结合具体图示,进一步阐述本发明。
实施例
如图1所示,本发明的多来源交易数据并行采集与整合的系统,它包括:
客户端10,面向数据采集与服务对象,为数据采集提供闭环采集工具;
服务端20,面向数据需求方,配置数据采集相关参数,并配置数据管理相关方案;及
运维端30:为数据采集与整合提供采集指令工具管理和认证管理服务;
客户端10、服务端20和运维端30互相通讯连接,实现多来源数据的机动采集与整合,为数据需求方提供全面且适当的数据信息,并实现相关产品的数据标准对接。
在本实施例中,客户端10包括:
主程序模块11,包括模块激活与更新、插件集成,并与服务端或运维端之间相关指令收发;
分离类插件模块12,集成各分离类插件,为数据采集提供整合服务;及
合并类插件模块13,集成各合并类插件,为数据采集提供整合服务。
分离类插件12指取数工具和采集指令未部署于一处,通常取数工具部署于本地,采集指令部署于异地;合并类插件13指取数工具和采集指令部署于同处,通常共同部署于本地。
在本实施例中,服务端20包括:
客户管理模块21,包括用户建档、许可证管理和激活码管理;
数据管理模块22,包括数据配置、数据存储和数据调用;
数据展示模块23,包括展示配置和数据预览;及
数据集成模块24,根据约定独立调用网页(Web)、文件传输(File)和应用程序接口(API)等集成模块,相关数据依照指定方式传输至其他应用系统。
在本实施例中,运维端30包括:
许可证管理模块31,包括许可证生成、状态管理和日志更新;及
适配器管理模块32,包括适配器配置和采集指令调用。
客户端、服务端和运维端中各个模块的连接关系如图2所示。
本发明的多来源交易数据并行采集与整合的方法,它包括如下步骤:
预备阶段:(如图3所示)
【线下协议】约定许可证类型与数量
1、【服务端】客户管理完成用户建档,包括客户主数据录入,包括必要信息:企业名称、统一社会信用代码,及其他非必要信息,发送相关信息与指令至运维端;
2、【运维端】许可证管理模块生成许可证并标识其状态,推送相应信息至服务端;
3、【服务端】客户管理模块接收指令,许可证状态更新;
4、【服务端】客户管理模块生成激活码,并发送激活信息给客户;
5、【客户端】客户通过客户端确认激活,主程序模块发送激活确认信息至服务端和运维端;
6、【运维端】接收激活信息,许可证管理模块进行状态更新;
7、【服务端】接收激活信息,激活码管理模块进行状态更新;
8、【服务端】许可证管理模块进行状态更新;
9、【服务端】服务端人员通过数据管理模块进行数据配置,确认所需数据来源与字段,并把相应配置发送至运维端;
10、【运维端】适配器管理模块确认许可证状态已更新,可接收服务端相应数据配置信息。
取数阶段:
取数可采取两种方式,A:客户端主动上传数据;B:服务端反向调用数据
在取数方案中,运用套接字(Socket)技术实现客户端主程序模块与插件模块之间的交互;
预先定义基础信息,主程序及插件编码(ID)、网络位置(IP)、端口(Port)等;客户端主程序呼叫插件时涉及参数如下:开始时间、取数字段、数据涉及时间长度等;插件返回主程序时涉及参数如下:完成与否、完成时间、数据包位置等。
A:客户端主动上传数据(如图4所示)
1、【客户端】主程序模块发起插件调用指令,指令传输至运维端确认;
2、【运维端】许可证管理模块接收指令进行状态查询,确认许可证状态后,发送指令至适配器管理模块;
3、【运维端】适配器管理模块接收上述指令后发出执行调用指令至客户端,并传输相关数据参数;
4、【客户端】主程序模块进行插件调用,分别传送至合并类插件模块和分离类插件模块;
5、【客户端】合并类插件模块接收主程序指令,发出调用指令;
6、【客户端】合并类插件模块执行插件取数功能,采集数据以文件加密传输协议(SFTP)或其他约定方式传输至服务端数据管理模块;
7、【客户端】分离类插件模块接收执行调用指令,按照所接收参数采集相关数据,数据以文件加密传输协议(SFTP)或其他约定方式传输至服务端数据管理模块;
8、【服务端】数据管理模块对两类插件模块所传输数据完成数据存储,发送信息至运维端许可证管理模块;
9、【运维端】许可证管理模块接收信息,完成日志更新。
B:服务端反向调用数据(如图5所示)
1、【服务端】数据管理模块发送数据调用指令至运维端;
2、【运维端】许可证管理模块接收指令进行状态查询,确认许可证状态后,发送指令至适配器管理模块;
3、【运维端】适配器管理模块接收上述指令后发出执行调用指令至客户端,并传输相关数据参数;
4、【客户端】主程序模块接收上述指令和参数后,发起插件调用指令,指令分别传送至合并类插件模块和分离类插件模块;
5、【客户端】合并类插件模块接收主程序指令,发出调用指令;
6、【客户端】合并类插件模块执行插件取数功能,采集数据以文件加密传输协议(SFTP)方式传输至服务端数据管理模块;
7、【客户端】分离类插件模块接收主程序指令,照所接收参数采集相关数据,数据以文件加密传输协议(SFTP)方式传输至服务端数据管理模块;
8、【服务端】数据管理模块对两类插件模块所传输数据完成数据存储,发送信息至运维端许可证管理模块;
9、【运维端】许可证管理模块接收信息,完成日志更新。
整合阶段:(如图6所示)
此阶段主要针对已获取的多来源交易数据予以展示与集成
1、【服务端】数据展示模块进行数据配置,此处主要针对待展示与集成数据予以配置,发送指令给数据管理模块;
2、【服务端】数据管理模块接收上述指令,发起数据调用指令;
3、【服务端】数据管理模块调用存储数据;
4、【服务端】数据展示模块生成数据预览;
5、【服务端】数据集成模块调用网页(Web)、文件传输(File)、应用程序接口(API)等三类集成方式,数据集成模块根据约定独立调用各集成模块,相关数据依照指定方式传输至其他应用系统。
网页(Web)集成:
(1)利用账号密码登录服务端网页;
(2)批量或单选指定企业客户;
(3)下载Excel格式数据。
文件传输(File)集成:
(1)默认使用文件加密传输协议(SFTP)进行文件安全传输;
(2)服务端与其他应用系统约定密码或证书登入;
(3)定期或人工传送全量或增量文件。
应用程序接口(API)集成:
(1)服务端与其他应用系统约定接口访问方式或加解密算法;
(2)其他应用系统依照接口指定提供入参;
(3)服务端输出结果报文。
以上显示和描述了本发明的基本原理和主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内,本发明要求保护范围由所附的权利要求书及其等效物界定。

Claims (12)

1.一种多来源交易数据并行采集与整合的系统,其特征在于,它包括:
客户端,面向数据采集与服务对象,为数据采集提供闭环采集工具;
服务端,面向数据需求方,配置数据采集相关参数,并配置数据管理相关方案;及
运维端:为数据采集与整合提供采集指令工具管理和认证管理服务;
所述客户端、所述服务端和所述运维端互相通讯连接,实现多来源数据的机动采集与整合,为数据需求方提供全面且适当的数据信息,并实现相关产品的数据标准对接。
2.如权利要求1所述的多来源交易数据并行采集与整合的系统,其特征在于,所述客户端包括:
主程序模块,包括模块激活与更新、插件集成,并与服务端或运维端之间相关指令收发;
分离类插件模块,集成各分离类插件,为数据采集提供整合服务;及
合并类插件模块,集成各合并类插件,为数据采集提供整合服务。
3.如权利要求2所述的多来源交易数据并行采集与整合的系统,其特征在于,所述分离类插件指取数工具和采集指令未部署于一处,通常取数工具部署于本地,采集指令部署于异地。
4.如权利要求2所述的多来源交易数据并行采集与整合的系统,其特征在于,所述合并类插件指取数工具和采集指令部署于同处,通常共同部署于本地。
5.如权利要求1所述的多来源交易数据并行采集与整合的系统,其特征在于,所述服务端包括:
客户管理模块,包括用户建档、许可证管理和激活码管理;
数据管理模块,包括数据配置、数据存储和数据调用;
数据展示模块,包括展示配置和数据预览;及
数据集成模块,根据约定独立调用网页(Web)、文件传输(File)和应用程序接口(API)等集成模块,相关数据依照指定方式传输至其他应用系统。
6.如权利要求1所述的多来源交易数据并行采集与整合的系统,其特征在于,所述运维端包括:
许可证管理模块,包括许可证生成、状态管理和日志更新;及
适配器管理模块,包括适配器配置和采集指令调用。
7.一种多来源交易数据并行采集与整合的方法,其特征在于,它包括如下步骤:
(一)预备阶段:
(1)在服务端,客户管理完成用户建档,包括客户主数据录入,包括必要信息:企业名称、统一社会信用代码,及其他非必要信息,发送相关信息与指令至运维端;
(2)在运维端,许可证管理模块生成许可证并标识其状态,推送相应信息至服务端;
(3)在服务端,客户管理模块接收指令,许可证状态更新;
(4)在服务端,客户管理模块生成激活码,并发送激活信息给客户;
(5)在客户端,客户通过客户端确认激活,主程序模块发送激活确认信息至服务端和运维端;
(6)在运维端,接收激活信息,许可证管理模块进行状态更新;
(7)在服务端,接收激活信息,激活码管理模块进行状态更新;
(8)在服务端,许可证管理模块进行状态更新;
(9)在服务端,服务端人员通过数据管理模块进行数据配置,确认所需数据来源与字段,并把相应配置发送至运维端;
(10)在运维端,适配器管理模块确认许可证状态已更新,可接收服务端相应数据配置信息;
(二)取数阶段:
(1)通过客户端主动上传数据或者服务端反向调用数据的方式进行取数,运用套接字(Socket)技术实现客户端主程序模块与插件模块之间的交互;
(2)预先定义基础信息,包括主程序及插件编码(ID)、网络位置(IP)、端口(Port)等;客户端主程序呼叫插件时涉及参数如下:开始时间、取数字段、数据涉及时间长度等;插件返回主程序时涉及参数如下:完成与否、完成时间、数据包位置等;
(三)整合调用阶段:
(1)在服务端,数据展示模块进行数据配置,主要针对待展示与集成数据予以配置,发送指令给数据管理模块;
(2)在服务端,数据管理模块接收上述指令,发起数据调用指令;
(3)在服务端,数据管理模块调用存储数据;
(4)在服务端,数据展示模块生成数据预览;
(5)在服务端,数据集成模块根据约定独立调用各集成模块,相关数据依照指定方式传输至其他应用系统,数据集成模块包括调用网页(Web)、文件传输(File)和应用程序接口(API)三类集成方式。
8.如权利要求7所述的多来源交易数据并行采集与整合的方法,其特征在于,在取数阶段,通过客户端主动上传数据进行取数包括如下步骤:
(1)在客户端,主程序模块发起插件调用指令,指令传输至运维端确认;
(2)在运维端,许可证管理模块接收指令进行状态查询,确认许可证状态后,发送指令至适配器管理模块;
(3)在运维端,适配器管理模块接收上述指令后发出执行调用指令至客户端,并传输相关数据参数;
(4)在客户端,主程序模块进行插件调用,分别传送至合并类插件模块和分离类插件模块;
(5)在客户端,合并类插件模块接收主程序指令,发出调用指令;
(6)在客户端,合并类插件模块执行插件取数功能,采集数据以文件加密传输协议(SFTP)或其他约定方式传输至服务端数据管理模块;
(7)在客户端,分离类插件模块接收执行调用指令,按照所接收参数采集相关数据,数据以文件加密传输协议(SFTP)或其他约定方式传输至服务端数据管理模块;
(8)在服务端,数据管理模块对两类插件模块所传输数据完成数据存储,发送信息至运维端许可证管理模块;
(9)在运维端,许可证管理模块接收信息,完成日志更新。
9.如权利要求7所述的多来源交易数据并行采集与整合的方法,其特征在于,在取数阶段,通过服务端反向调用数据进行取数包括如下步骤:
(1)在服务端,数据管理模块发送数据调用指令至运维端;
(2)在运维端,许可证管理模块接收指令进行状态查询,确认许可证状态后,发送指令至适配器管理模块;
(3)在运维端,适配器管理模块接收上述指令后发出执行调用指令至客户端,并传输相关数据参数;
(4)在客户端,主程序模块接收上述指令和参数后,发起插件调用指令,指令分别传送至合并类插件模块和分离类插件模块;
(5)在客户端,合并类插件模块接收主程序指令,发出调用指令;
(6)在客户端,合并类插件模块执行插件取数功能,采集数据以文件加密传输协议(SFTP)方式传输至服务端数据管理模块;
(7)在客户端,分离类插件模块接收主程序指令,照所接收参数采集相关数据,数据以文件加密传输协议(SFTP)方式传输至服务端数据管理模块;
(8)在服务端,数据管理模块对两类插件模块所传输数据完成数据存储,发送信息至运维端许可证管理模块;
(9)在运维端,许可证管理模块接收信息,完成日志更新。
10.如权利要求7所述的多来源交易数据并行采集与整合的方法,其特征在于,在整合阶段,通过调用网页(Web)的集成方式包括如下步骤:
(1)利用账号密码登录服务端网页;
(2)批量或单选指定企业客户;
(3)下载Excel格式数据。
11.如权利要求7所述的多来源交易数据并行采集与整合的方法,其特征在于,在整合阶段,通过文件传输(File)集成的集成方式包括如下步骤:
(1)默认使用文件加密传输协议(SFTP)进行文件安全传输;
(2)服务端与其他应用系统约定密码或证书登入;
(3)定期或人工传送全量或增量文件。
12.如权利要求7所述的多来源交易数据并行采集与整合的方法,其特征在于,在整合阶段,通过应用程序接口(API)集成的集成方式包括如下步骤:
(1)服务端与其他应用系统约定接口访问方式或加解密算法;
(2)其他应用系统依照接口指定提供入参;
(3)服务端输出结果报文。
CN202010332384.2A 2020-04-24 2020-04-24 一种多来源交易数据并行采集与整合的方法及其系统 Active CN113553093B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010332384.2A CN113553093B (zh) 2020-04-24 2020-04-24 一种多来源交易数据并行采集与整合的方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010332384.2A CN113553093B (zh) 2020-04-24 2020-04-24 一种多来源交易数据并行采集与整合的方法及其系统

Publications (2)

Publication Number Publication Date
CN113553093A true CN113553093A (zh) 2021-10-26
CN113553093B CN113553093B (zh) 2023-05-02

Family

ID=78129635

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010332384.2A Active CN113553093B (zh) 2020-04-24 2020-04-24 一种多来源交易数据并行采集与整合的方法及其系统

Country Status (1)

Country Link
CN (1) CN113553093B (zh)

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6208345B1 (en) * 1998-04-15 2001-03-27 Adc Telecommunications, Inc. Visual data integration system and method
CN101777148A (zh) * 2010-01-14 2010-07-14 中国建设银行股份有限公司 一种收单商户管理方法、管理系统及商户管理服务端设备
US20100218108A1 (en) * 2009-02-26 2010-08-26 Jason Crabtree System and method for trading complex energy securities
CN102739802A (zh) * 2012-07-06 2012-10-17 广东电网公司汕头供电局 面向业务应用的it集中运维分析系统
CN103731298A (zh) * 2013-11-15 2014-04-16 中国航天科工集团第二研究院七〇六所 一种大规模分布式网络安全数据采集方法与系统
CN103888287A (zh) * 2013-12-18 2014-06-25 北京首都国际机场股份有限公司 信息系统一体化运维监控服务预警平台及其实现方法
CN105119750A (zh) * 2015-09-08 2015-12-02 南京联成科技发展有限公司 一种基于大数据的分布式信息安全运维管理平台
CN106487574A (zh) * 2016-04-01 2017-03-08 国家计算机网络与信息安全管理中心 自动化运行维护监测系统
CN106534272A (zh) * 2016-10-21 2017-03-22 江苏方天电力技术有限公司 一种燃煤机组参数处理系统及方法
CN107919970A (zh) * 2016-10-08 2018-04-17 南京联成科技发展股份有限公司 一种安全运维服务云平台的日志管理实现方法及系统
CN107992552A (zh) * 2017-11-28 2018-05-04 南京莱斯信息技术股份有限公司 一种数据交换平台及数据交换方法
CN108876291A (zh) * 2018-05-25 2018-11-23 江苏财税通信息科技有限公司 一种企业经营数据采集系统、方法及云端服务器
CN109492040A (zh) * 2018-11-06 2019-03-19 深圳航天智慧城市系统技术研究院有限公司 一种适用于数据中心海量短报文数据处理的系统
CN109542011A (zh) * 2018-12-05 2019-03-29 国网江西省电力有限公司信息通信分公司 一种多源异构监测数据的标准化采集系统
CN109582722A (zh) * 2018-11-30 2019-04-05 珠海市新德汇信息技术有限公司 公安资源数据服务系统
WO2019099974A1 (en) * 2017-11-19 2019-05-23 Westerngeco Llc Noise attenuation of multiple source seismic data
CN110765337A (zh) * 2019-11-15 2020-02-07 中科院计算技术研究所大数据研究院 一种基于互联网大数据的服务提供方法

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6208345B1 (en) * 1998-04-15 2001-03-27 Adc Telecommunications, Inc. Visual data integration system and method
US20100218108A1 (en) * 2009-02-26 2010-08-26 Jason Crabtree System and method for trading complex energy securities
CN101777148A (zh) * 2010-01-14 2010-07-14 中国建设银行股份有限公司 一种收单商户管理方法、管理系统及商户管理服务端设备
CN102739802A (zh) * 2012-07-06 2012-10-17 广东电网公司汕头供电局 面向业务应用的it集中运维分析系统
CN103731298A (zh) * 2013-11-15 2014-04-16 中国航天科工集团第二研究院七〇六所 一种大规模分布式网络安全数据采集方法与系统
CN103888287A (zh) * 2013-12-18 2014-06-25 北京首都国际机场股份有限公司 信息系统一体化运维监控服务预警平台及其实现方法
CN105119750A (zh) * 2015-09-08 2015-12-02 南京联成科技发展有限公司 一种基于大数据的分布式信息安全运维管理平台
CN106487574A (zh) * 2016-04-01 2017-03-08 国家计算机网络与信息安全管理中心 自动化运行维护监测系统
CN107919970A (zh) * 2016-10-08 2018-04-17 南京联成科技发展股份有限公司 一种安全运维服务云平台的日志管理实现方法及系统
CN106534272A (zh) * 2016-10-21 2017-03-22 江苏方天电力技术有限公司 一种燃煤机组参数处理系统及方法
WO2019099974A1 (en) * 2017-11-19 2019-05-23 Westerngeco Llc Noise attenuation of multiple source seismic data
CN107992552A (zh) * 2017-11-28 2018-05-04 南京莱斯信息技术股份有限公司 一种数据交换平台及数据交换方法
CN108876291A (zh) * 2018-05-25 2018-11-23 江苏财税通信息科技有限公司 一种企业经营数据采集系统、方法及云端服务器
CN109492040A (zh) * 2018-11-06 2019-03-19 深圳航天智慧城市系统技术研究院有限公司 一种适用于数据中心海量短报文数据处理的系统
CN109582722A (zh) * 2018-11-30 2019-04-05 珠海市新德汇信息技术有限公司 公安资源数据服务系统
CN109542011A (zh) * 2018-12-05 2019-03-29 国网江西省电力有限公司信息通信分公司 一种多源异构监测数据的标准化采集系统
CN110765337A (zh) * 2019-11-15 2020-02-07 中科院计算技术研究所大数据研究院 一种基于互联网大数据的服务提供方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张保奎: "煤矿安全监控系统数据集成方式研究", 《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》 *

Also Published As

Publication number Publication date
CN113553093B (zh) 2023-05-02

Similar Documents

Publication Publication Date Title
CN106709713B (zh) 一种管理用户多个可穿戴设备的方法
US20050033588A1 (en) Information system comprised of synchronized software application moduless with individual databases for implementing and changing business requirements to be automated
US20120296679A1 (en) Web integrated point-of-sale system
US20130054421A1 (en) Method and system for processing transactions
JPH09212549A (ja) 電子商取引方法及びシステム
CN111833169A (zh) 一种分账管理方法和装置
US20020069123A1 (en) Electronic commerce system
Son et al. Towards a mechanism for protecting seller’s interest of cash on delivery by using smart contract in hyperledger
KR102092410B1 (ko) 프라이빗 블록체인 기반의 오픈마켓 플랫폼 시스템
CN113177822A (zh) 一种跨境电商多渠道订单管理方法、系统和设备
CA2836049C (en) Web integrated point-of-sale system
WO2014067496A1 (en) Method and apparatus for processing information
CN102035879B (zh) 服务器及应用该服务器的数据处理系统
KR20230150909A (ko) 이알피 연계형 전자 구매 시스템 및 그 방법
CN108961622A (zh) 结算方法、结算装置以及超市系统
CN105488716A (zh) 一种用于处理企业资源数据的方法和系统
US20190102778A1 (en) Secure online transaction system and method therefor
CN113553093A (zh) 一种多来源交易数据并行采集与整合的方法及其系统
CN111429127A (zh) 一种应用于缴费的业务管理方法和装置
CN110599150A (zh) 订单显示方法、装置、设备及存储介质
WO2022148237A1 (zh) 一种库存信息处理方法和装置
WO2016090102A1 (en) System and methods for business to business commerce automation
KR100476236B1 (ko) 인터넷을 기반으로 한 신용카드의 매출전표 처리 방법
CN112308377B (zh) 基于多租户的资源调配方法和装置
JP6852829B1 (ja) 経路管理システム、経路管理方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant