CN110336791A - 一种断点数据传输方法、装置、设备及计算机存储介质 - Google Patents

一种断点数据传输方法、装置、设备及计算机存储介质 Download PDF

Info

Publication number
CN110336791A
CN110336791A CN201910467874.0A CN201910467874A CN110336791A CN 110336791 A CN110336791 A CN 110336791A CN 201910467874 A CN201910467874 A CN 201910467874A CN 110336791 A CN110336791 A CN 110336791A
Authority
CN
China
Prior art keywords
data
breakpoint
destination server
classification results
newly
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910467874.0A
Other languages
English (en)
Other versions
CN110336791B (zh
Inventor
谢富华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910467874.0A priority Critical patent/CN110336791B/zh
Priority to PCT/CN2019/102422 priority patent/WO2020237858A1/zh
Publication of CN110336791A publication Critical patent/CN110336791A/zh
Application granted granted Critical
Publication of CN110336791B publication Critical patent/CN110336791B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00—Packet switching elements
    • H04L49/90—Buffering arrangements
    • H04L49/9063—Intermediate storage in different physical parts of a node or terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • H04L67/1074—Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
    • H04L67/1078—Resource delivery mechanisms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching

Abstract

本发明公开了一种断点数据传输方法、装置、设备及计算机存储介质。本发明首先响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点；再将数据断点送入预设线程队列中，由预设线程队列根据数据断点获取用户的行为数据，将行为数据存入预设数据表中，以对行为数据进行分类，得到分类结果；最后将分类结果传输到目标服务器，以使得目标服务器第一时间从分类结果中获取表征断点数据的用户身份信息，整个运行过程中各个代码模块之间的耦合度降低，减少了流程处理的复杂度，传输时间也相应地缩短，提高了交易机构传输数据断点时的效率。

Description

一种断点数据传输方法、装置、设备及计算机存储介质
技术领域
本发明涉及计算机信息技术领域，尤其涉及一种断点数据传输方法、装置、设备及计算机存储介质。
背景技术
用户在使用智能终端(例如智能手机)上装载的具有资金交易功能的应用程序客户端进行资金交易时，该客户端对应的服务器会对用户发起的交易请求操作进行身份认证处理，例如涉及到重大经济利益的交易操作环节时，可能需要用户进行生理识别(如人脸识别、指纹识别、声音识别等)，当用户身份信息认证不通过时，该交易操作即为断点，该断点数据传输的流程一般为断点识别-数据加工-交易处理端-返回结束，如果用同步数据方式存在重要弊端，数据耦合性高，数据传输时间长，等到下游系统数据处理完成了才算断点数据传输完成。也就是说该操作环节对应的交易服务器在需要过很长时间之后才能获取该用户通过APP进行相关的数据操作，整个流程跨度长。如果该交易服务器在某个时间段有多起交易需要处理时，那么数据量大(10万级以上)，届时流程会复杂，影响用户的体验。
上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供了一种断点数据传输方法、装置、设备以及计算机存储介质，旨在解决目前传统的交易机构在进行数据断点传输时，数据传输时间长，数据耦合性高的问题。
为实现上述目的，本发明提供了一种断点数据传输方法，所述方法包括：
响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点；
将所述数据断点送入预设线程队列中，由所述预设线程队列根据所述数据断点获取所述用户的行为数据；
将所述行为数据存入预设数据表中，以对所述行为数据进行分类，得到分类结果；
将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息。
优选地，所述响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点的步骤，包括：
响应用户发起的身份认证请求，获取所述身份认证请求的开始事件；
在所述身份认证请求中的预设事件被触发时，根据所述开始事件以及被触发的预设事件得到数据断点。
优选地，所述将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息的步骤，包括：
读取所述预设数据表的日志数据，对所述日志数据进行解析，所述日志数据表征所述行为数据的分类结果；
在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器根据所述数据新增信息获取用户身份信息。
优选地，所述在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器根据所述数据新增信息获取用户身份信息的步骤，包括：
在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器将所述数据新增信息缓存到交易数据管理缓存队列中，并根据所述交易数据管理缓存队列中数据新增信息获取用户身份信息。
优选地，所述读取所述预设数据表的日志数据，对所述日志数据进行解析的步骤，包括：
利用GoldenGate软件的捕捉进程读取所述预设数据表的日志数据；
对所述日志数据进行解析，提取所述日志数据中与所述预设数据表的增删改操作相关的行为数据；
对所述行为数据进行分类，并将所述行为数据的分类结果转换为所述GoldenGate软件预定义的中间格式存放在本地的交易数据管理队列文件中。
优选地，所述目标服务器包括预设数据库；
所述在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器将所述数据新增信息缓存到交易数据管理缓存队列中，并根据所述交易数据管理缓存队列中数据新增信息获取用户身份信息的步骤，包括：
在本地的交易数据管理队列文件的行为数据的分类结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器将所述数据新增信息缓存到交易数据管理缓存队列中，基于所述预设数据库中与所述数据新增信息对应的数据表的结构创建相应的sql语句，从所述数据新增信息中获取用户身份信息，通过所述sql语句将所述用户身份信息写入所述预设数据库中。
优选地，所述将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息的步骤，包括：
将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息，并对所述用户身份信息进行展示，以使得客服人员基于所述用户身份信息反馈回访请求，所述回访请求至少包括电话回访、短信回访、以及邮箱回访中的一种。
此外，为实现上述目的，本发明还提出一种断点数据传输装置，所述装置包括：
识别模块，用于响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点；
获取模块，用于将所述数据断点送入预设线程队列中，由所述预设线程队列根据所述数据断点获取所述用户的行为数据；
分类模块，用于将所述行为数据存入预设数据表中，以对所述行为数据进行分类，得到分类结果；
传输模块，用于将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息。
此外，为实现上述目的，本发明还提出一种用于断点数据传输的设备，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的断点数据传输程序，所述断点数据传输程序配置为实现如上所述的断点数据传输方法的步骤。
此外，为实现上述目的，本发明还提出一种计算机存储介质，所述计算机存储介质存储有断点数据传输程序，所述断点数据传输程序配置为实现如上所述的断点数据传输方法的步骤。
本发明首先响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点；再将数据断点送入预设线程队列中，由预设线程队列根据数据断点获取用户的行为数据；将行为数据存入预设数据表中，以对行为数据进行分类，得到分类结果；最后将分类结果传输到目标服务器，以使得目标服务器第一时间从分类结果中获取表征断点数据的用户身份信息，整个运行过程中各个代码模块之间的耦合度降低，减少了流程处理的复杂度，传输时间也相应地缩短，提高了交易机构传输数据断点时的效率。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的用于断点数据传输的设备的结构示意图；
图2为本发明一种断点数据传输方法第一实施例的流程示意图；
图3为本发明一种断点数据传输方法第二实施例的流程示意图；
图4为本发明一种断点数据传输方法第三实施例流程示意图；
图5为本发明一种断点数据传输装置的结构框图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
参照图1，图1为本发明实施例方案涉及的硬件运行环境的用于断点数据传输设备的结构示意图。
如图1所示，该设备可以包括：处理器1001，例如CPU，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的结构并不构成对所述设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。所述设备可以是用户使用的计算机设备，例如智能手机。
如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接收模块以及断点数据传输程序。
在图1所示的设备中，所述处理器通过处理器1001调用存储器1005中存储的断点数据传输程序，并执行断点数据传输方法的步骤。
参照图2，图2为本发明一种断点数据传输方法第一实施例的流程示意图。
本实施例中，所述断点数据传输方法包括以下步骤：
步骤S10：响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点。
需要说明的是，本实施例的执行主体为上述断点数据传输设备的处理器，所述断点数据传输设备可以表征具有资金交易功能的应用程序客户端。
可理解的是，用户在使用所述客户端进行资金交易时，用户会基于客户端显示的认证界面来发起身份认证请求到与所述客户端对应的验证服务器，例如需要用户进行生理识别(如人脸识别、指纹识别、声音识别等)，在身份认证请求结果不通过时，识别出资金交易的数据断点。
例如，以人脸识别为例，在用户人脸识别几次没有通过后，客户端可能会在预设时段对用户的后续操作进行禁止(如禁止用户6小时进行交易)。
在具体实现中，处理器响应用户发起的身份认证请求，获取所述身份认证请求的开始事件；在所述身份认证请求中的预设事件被触发时，根据所述开始事件以及被触发的预设事件得到数据断点。
本实施例的识别断点的规则可依据CRM(Customer Relationship Management，客户关系管理程序)设置的断点识别规则来处理。
具体地，客户关系管理程序可以设置：将用户在触发开始事件x小时，未触发的结束事件(即所述预设事件)定义为断点，相应的断点触发成功代码为S。开始事件和结束事件都是用户的操作轨迹，x是用户操作轨迹的时间间隔。例如：张三到某个金融机构去借款，张三移交了人脸识别，但审核不通过，系统10小时没检测到张三再次提交人脸或者再次审核不通过，就会生成人脸识别审核不通过断点；开始事件是人脸识别不通过，结束事件是再次提交人脸识别，时间隔间是10小时。
本实施例在响应用户的认证请求后，会调用事件函数CheUpdateEvent()实时地对断点触发成功代码为S进行监听，在监听结果为断点触发成功时，即识别出数据断点。
步骤S20：将所述数据断点送入预设线程队列中，由所述预设线程队列根据所述数据断点获取所述用户的行为数据；
在具体实现中，客户端在识别出的数据断点后，会将数据断点传给CRM，CRM会将接收到数据断点送入预设线程队列中；
预设线程队列的作用在于：客户端对应的服务器在某段时间可能会响应多个不同用户发起的身份验证请求，将识别出的数据断点按照身份验证请求的时间顺序依次送入预设线程队列中；所述预设线程队列可以是CRM线程队列，线程队列中包含以用户请求的时间顺序排列成的断点；
然后，CRM线程队列会根据数据断点来获取用户的行为数据，用户发起的身份验证请求中会包括开始事件和结束事件(即所述预设事件)，开始事件和结束事件构成了用户的操作轨迹，可从用户的操作轨迹中获取用户的行为数据。
步骤S30：将所述行为数据存入预设数据表中，以对所述行为数据进行分类，得到分类结果。
在具体实现中，会对用户的行为数据进行分析，用户的行为数据包括用户输入验证信息的记录；通常涉及资金交易的客户端在对一个用户的身份信息进行验证的时候需要进行多重验证，如手机验证、身份证信息验证、回答自己设定的提问的验证、以及人脸验证这些都属于身份验证。
具体地，处理器会实时地识别出有价值的用户信息，即处理器会按照不同的预定格式对所述行为数据进行分析，得到不同格式的数据；然后将不同格式的数据存入预设数据表中，以对所述行为数据进行分类，从分类结果中得到用户身份信息；
例如用户的行为数据包括用户的手机号、联系邮箱、身份证等信息，而这些信息都是有预定格式的，例如手机号码是11为数字，其对应的预定格式为int(11)的整数数据类型；身份证是18为数字，其对应的预定格式为int(18)的整数数据类型；而邮箱对应的预定格式为包含@的模糊字符串。
相应地，所述预设数据表中预先设置好类型为int(11)的手机号码、类型为int(18)的身份证信息、以及包含了@的模糊字符串类型邮箱相应的列属性，这样在所述行为数据被存入预设数据表后，能够实现行为数据进行分类，进而得到用户身份信息。
步骤S40：将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息。
需要说明的是，所述目标服务器可以与上述客户端对应的服务器一致。
具体地，本实施例的断点数据传输设备可以装载GoldenGate软件，利用GoldenGate软件的交易数据管理(TDM，Transactional Data Management)，可以在异构的IT基础结构之间实现大量数据的秒一级的数据捕捉、转换和投递。GoldenGate可以支持几乎所有常用操作系统和数据库平台。在检测到所述数据库与目标服务器之间处于通讯状态时，执行所述将所述用户身份信息同步到目标服务器的步骤。
即所述断点数据传输设备可通过GoldenGate将所述数据表中用户的分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取用户不同的身份信息，以实现客户端与其下游目标服务器的数据及时同步。即利用GoldenGate软件基于日志的结构化数据复制方式，通过解析所述预设数据表的在线日志或归档日志获得数据的增删改变化(数据量只有日志的四分之一左右)，再将这些变化应用到目标数据库，进而实现所述预设数据表与目标服务器同步，目标服务器能够第一时间获取表征所述断点数据的用户身份信息，整个客户端在运行过程中各个代码模块之间的耦合度降低，减少了流程处理的复杂度，传输时间也相应地缩短。
进一步地，参照图3，图3为本发明一断点数据传输方法第二实施例的流程示意图，基于上述断点数据传输方法第一实施例，提出本申请的断点数据传输方法第二实施例。
本实施例中，所述步骤S40，包括：
步骤S401，读取所述预设数据表的日志数据，对所述日志数据进行解析，所述日志数据表征所述行为数据的分类结果。
具体地，本实施例可利用GoldenGate软件的捕捉进程(Extract Process)读取所述预设数据表的日志数据，所述日志数据表征上述步骤S30的行为数据的分类结果。然后对所述日志数据进行解析，提取所述日志数据中与所述预设数据表的增删改操作相关的行为数据；对所述行为数据进行分类，并将所述行为数据的分类结果转换为所述GoldenGate软件预定义的中间格式存放在本地的交易数据管理TDM队列文件中。
步骤S402，在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器根据所述数据新增信息获取用户身份信息。
在具体实现中，在本地的交易数据管理队列文件的行为数据的分类结果中包括数据新增信息，即解析结果为日志数据中发现预设数据表新添加了一行数据时，会通过GoldenGate的传送进程将TDM队列文件以TCP协议或者IP协议的方式传送至目标服务器，以使得所述目标服务器将所述数据新增信息缓存到交易数据管理的缓存队列中，并根据所述交易数据管理缓存队列中数据新增信息获取用户身份信息；可以通过高达10:1的压缩率对数据进行压缩，降低目标服务器的资源占有。
具体地，所述目标服务器包括预设数据库，所述预设数据库为关系型数据库，例如Sql Server数据库、或者MySQL数据库；
目标服务器会从所述TDM交易数据管理缓存队列中读取数据新增信息，基于所述预设数据库中与所述数据新增信息对应的数据表的结构创建相应的SQL语句，例如所述数据新增信息涉及用户的姓名a、性别b、手机号c、联系邮箱d和身份证e这五条属性，但是目标服务器中的预设数据库为了达到数据压缩的目的，所述预设数据库中与用户信息对应的数据表t1可能只有用户的手机号和身份证这两条重要的属性，因此创建的相应的SQL语句会是：INSERT INTO t1(手机号,身份证)VALUE(“c”，“e”)；
然后从所述数据新增信息中获取用户身份信息，通过所述SQL语句将所述用户身份信息写入所述预设数据库中，能够更快地获取用户身份信息，即下游的目标服务器能够第一时间获取断点数据。
进一步地，参照图4，图4为本发明一断点数据传输方法的第三实施例的流程示意图，基于上述断点数据传输方法第一实施例或第二实施例，提出本申请的断点数据传输方法第三实施例。
本实施例中，所述步骤S40具体包括：
步骤S40`：将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息，并对所述用户身份信息进行展示，以使得客服人员基于所述用户身份信息反馈回访请求。
可理解的是，所述目标服务器可以表征该机构客服人员使用的计算机终端，计算机终端在接收到能够表征数据断点的用户身份信息时，会对所述用户身份信息进行展示，提示客服人员该用户有对应的数据断点，即交易认证失败，以使得客服人员基于所述用户身份信息反馈回访请求。
其中，用户身份信息可以包括用户的手机号、联系邮箱、身份证等信息等；而客服人员反馈的回访请求至少包括电话回访、短信回访、以及邮箱回访中的一种。
本实施例的客服人员能够第一时间对身份识别不成功的用户进行电话回访了，提高用户使用体验。
此外，参照图5，本发明还提出一种断点数据传输装置，所述装置包括：
识别模块10，用于响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点；
获取模块20，用于将所述数据断点送入预设线程队列中，由所述预设线程队列根据所述数据断点获取所述用户的行为数据；
分类模块30，用于将所述行为数据存入预设数据表中，以对所述行为数据进行分类，得到分类结果；
传输模块40，用于将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息。
可理解的是，本实施的断点数据传输装置可以是一种计算机应用程序客户端，该客户端装载在上述用于断点数据传输的设备中，本发明断点数据传输装置的具体实现方式可参照上述断点数据传输装置方法实施例，此处不再赘述。
此外，为实现上述目的，本申请还提出一种计算机存储介质，所述计算机存储介质存储有断点数据传输程序，所述断点数据传输程序配置为实现如上所述的断点数据传输方法的步骤。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种断点数据传输方法，其特征在于，所述方法包括：
响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点；
将所述数据断点送入预设线程队列中，由所述预设线程队列根据所述数据断点获取所述用户的行为数据；
将所述行为数据存入预设数据表中，以对所述行为数据进行分类，得到分类结果；
将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息。
2.如权利要求1所述的方法，其特征在于，所述响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点的步骤，包括：
响应用户发起的身份认证请求，获取所述身份认证请求的开始事件；
在所述身份认证请求中的预设事件被触发时，根据所述开始事件以及被触发的预设事件得到数据断点。
3.如权利要求1所述的方法，其特征在于，所述将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息的步骤，包括：
读取所述预设数据表的日志数据，对所述日志数据进行解析，所述日志数据表征所述行为数据的分类结果；
在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器根据所述数据新增信息获取用户身份信息。
4.如权利要求3所述的方法，其特征在于，所述在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器根据所述数据新增信息获取用户身份信息的步骤，包括：
在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器将所述数据新增信息缓存到交易数据管理缓存队列中，并根据所述交易数据管理缓存队列中数据新增信息获取用户身份信息。
5.如权利要求4所述的方法，其特征在于，所述读取所述预设数据表的日志数据，对所述日志数据进行解析的步骤，包括：
利用GoldenGate软件的捕捉进程读取所述预设数据表的日志数据；
对所述日志数据进行解析，提取所述日志数据中与所述预设数据表的增删改操作相关的行为数据；
对所述行为数据进行分类，并将所述行为数据的分类结果转换为所述GoldenGate软件预定义的中间格式存放在本地的交易数据管理队列文件中。
6.如权利要求5所述的方法，其特征在于，所述目标服务器包括预设数据库；
所述在解析结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器将所述数据新增信息缓存到交易数据管理缓存队列中，并根据所述交易数据管理缓存队列中数据新增信息获取用户身份信息的步骤，包括：
在本地的交易数据管理队列文件的行为数据的分类结果中包括数据新增信息时，将所述数据新增信息传送至目标服务器，以使得所述目标服务器将所述数据新增信息缓存到交易数据管理缓存队列中，基于所述预设数据库中与所述数据新增信息对应的数据表的结构创建相应的sql语句，从所述数据新增信息中获取用户身份信息，通过所述sql语句将所述用户身份信息写入所述预设数据库中。
7.如权利要求1-5任一项所述的方法，其特征在于，所述将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息的步骤，包括：
将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息，并对所述用户身份信息进行展示，以使得客服人员基于所述用户身份信息反馈回访请求，所述回访请求至少包括电话回访、短信回访、以及邮箱回访中的一种。
8.一种断点数据传输装置，其特征在于，所述装置包括：
识别模块，用于响应用户发起的身份认证请求，根据身份认证请求结果识别出数据断点；
获取模块，用于将所述数据断点送入预设线程队列中，由所述预设线程队列根据所述数据断点获取所述用户的行为数据；
分类模块，用于将所述行为数据存入预设数据表中，以对所述行为数据进行分类，得到分类结果；
传输模块，用于将所述分类结果传输到目标服务器，以使得所述目标服务器从所述分类结果中获取表征所述断点数据的用户身份信息。
9.一种用于断点数据传输的设备，其特征在于，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的断点数据传输程序，所述断点数据传输程序配置为实现如权利要求1至7中任一项所述的断点数据传输方法的步骤。
10.一种计算机存储介质，其特征在于，所述计算机存储介质存储有断点数据传输程序，所述断点数据传输程序配置为实现如权利要求1至7中任一项所述的断点数据传输方法的步骤。
CN201910467874.0A 2019-05-29 2019-05-29 一种断点数据传输方法、装置、设备及计算机存储介质 Active CN110336791B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910467874.0A CN110336791B (zh) 2019-05-29 2019-05-29 一种断点数据传输方法、装置、设备及计算机存储介质
PCT/CN2019/102422 WO2020237858A1 (zh) 2019-05-29 2019-08-26 断点数据传输方法、装置、设备及非易失性存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910467874.0A CN110336791B (zh) 2019-05-29 2019-05-29 一种断点数据传输方法、装置、设备及计算机存储介质

Publications (2)

Publication Number Publication Date
CN110336791A true CN110336791A (zh) 2019-10-15
CN110336791B CN110336791B (zh) 2022-02-22

Family

ID=68140511

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910467874.0A Active CN110336791B (zh) 2019-05-29 2019-05-29 一种断点数据传输方法、装置、设备及计算机存储介质

Country Status (2)

Country Link
CN (1) CN110336791B (zh)
WO (1) WO2020237858A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111045768A (zh) * 2019-11-27 2020-04-21 青岛歌尔智能传感器有限公司 图表模块的应用方法、图表模块的应用装置及存储介质
CN113918657A (zh) * 2021-12-14 2022-01-11 天津南大通用数据技术股份有限公司 一种并行高性能增量同步方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115225649A (zh) * 2022-07-19 2022-10-21 维沃移动通信有限公司 数据同步方法、装置和电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016045545A1 (zh) * 2014-09-28 2016-03-31 阿里巴巴集团控股有限公司 数据交互方法和系统以及服务器
CN107704473A (zh) * 2016-08-09 2018-02-16 中国移动通信集团四川有限公司 一种数据处理方法和装置
CN107864120A (zh) * 2017-09-25 2018-03-30 国土资源部珠宝玉石首饰管理中心深圳珠宝研究所 身份验证方法、装置及计算机可读存储介质
CN107911227A (zh) * 2017-09-28 2018-04-13 平安科技（深圳）有限公司 一种断点数据跟进方法、电子装置及计算机可读存储介质
CN109062690A (zh) * 2018-07-18 2018-12-21 郑州云海信息技术有限公司 一种请求响应方法、服务器、介质及系统
CN109615393A (zh) * 2018-10-23 2019-04-12 平安科技（深圳）有限公司 断点的跟进处理方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104978383B (zh) * 2015-02-12 2018-01-09 腾讯科技（深圳）有限公司 一种数据互通的方法，及数据互通设备
CN107798037A (zh) * 2017-04-26 2018-03-13 平安科技（深圳）有限公司 用户特征数据的获取方法及服务器
CN109375913B (zh) * 2018-09-11 2022-04-08 中铁程科技有限责任公司 数据处理方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016045545A1 (zh) * 2014-09-28 2016-03-31 阿里巴巴集团控股有限公司 数据交互方法和系统以及服务器
CN107704473A (zh) * 2016-08-09 2018-02-16 中国移动通信集团四川有限公司 一种数据处理方法和装置
CN107864120A (zh) * 2017-09-25 2018-03-30 国土资源部珠宝玉石首饰管理中心深圳珠宝研究所 身份验证方法、装置及计算机可读存储介质
CN107911227A (zh) * 2017-09-28 2018-04-13 平安科技（深圳）有限公司 一种断点数据跟进方法、电子装置及计算机可读存储介质
CN109062690A (zh) * 2018-07-18 2018-12-21 郑州云海信息技术有限公司 一种请求响应方法、服务器、介质及系统
CN109615393A (zh) * 2018-10-23 2019-04-12 平安科技（深圳）有限公司 断点的跟进处理方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111045768A (zh) * 2019-11-27 2020-04-21 青岛歌尔智能传感器有限公司 图表模块的应用方法、图表模块的应用装置及存储介质
CN111045768B (zh) * 2019-11-27 2023-06-23 青岛歌尔智能传感器有限公司 图表模块的应用方法、图表模块的应用装置及存储介质
CN113918657A (zh) * 2021-12-14 2022-01-11 天津南大通用数据技术股份有限公司 一种并行高性能增量同步方法
CN113918657B (zh) * 2021-12-14 2022-03-15 天津南大通用数据技术股份有限公司 一种并行高性能增量同步方法

Also Published As

Publication number Publication date
WO2020237858A1 (zh) 2020-12-03
CN110336791B (zh) 2022-02-22

Similar Documents

Publication Publication Date Title
CN109034993A (zh) 对账方法、设备、系统及计算机可读存储介质
CN110163618A (zh) 异常交易的检测方法、装置、设备及计算机可读存储介质
CN108280104B (zh) 目标对象的特征信息提取方法及装置
US11601529B1 (en) Method and system of generating generic protocol handlers
US8825798B1 (en) Business event tracking system
CN107450919A (zh) 业务流程管理方法、设备及计算机可读存储介质
CN107730228A (zh) 账户清结算方法、设备及存储介质
CN110336791A (zh) 一种断点数据传输方法、装置、设备及计算机存储介质
CN109634996A (zh) 客户信息表生成方法、装置、设备及计算机可读存储介质
CN106407078B (zh) 基于信息交互的客户端性能监控装置及方法
WO2020000720A1 (zh) 服务器、报文处理方法、程序和计算机可读存储介质
CN107862425B (zh) 风控数据采集方法、设备、系统及可读存储介质
CN109993524A (zh) 卡券管理方法、装置、设备及计算机可读存储介质
CN109087194A (zh) 发票审核方法、装置、计算机设备及存储介质
CN108304447A (zh) 异常信息的处理方法、装置、存储介质和处理器
CN109670933A (zh) 识别用户角色的方法、用户设备、存储介质及装置
CN109684364A (zh) 基于用户画像的问题处理方法、装置、设备和存储介质
CN109639719A (zh) 一种基于临时标识符的身份验证方法和装置
CN112163946A (zh) 基于分布式交易系统的账务处理方法及装置
CN109670934A (zh) 基于用户行为的身份识别方法、设备、存储介质及装置
CN107451301B (zh) 实时投递账单邮件的处理方法、装置、设备和存储介质
KR20090102947A (ko) 이동 단말의 메시지 서비스를 이용한 가계부 작성 방법 및시스템
CN107656959A (zh) 一种留言方法、装置及留言设备
CN114219596A (zh) 一种基于决策树模型的数据处理方法及相关设备
US8326717B2 (en) Rate exception management tool

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant