CN114239296A - 一种数据处理方法、装置及电子设备 - Google Patents
一种数据处理方法、装置及电子设备 Download PDFInfo
- Publication number
- CN114239296A CN114239296A CN202111571904.6A CN202111571904A CN114239296A CN 114239296 A CN114239296 A CN 114239296A CN 202111571904 A CN202111571904 A CN 202111571904A CN 114239296 A CN114239296 A CN 114239296A
- Authority
- CN
- China
- Prior art keywords
- transaction data
- initial
- target
- data
- abnormal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/103—Workflow collaboration or project management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Theoretical Computer Science (AREA)
- Human Resources & Organizations (AREA)
- General Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- Economics (AREA)
- Tourism & Hospitality (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Operations Research (AREA)
- Development Economics (AREA)
- Technology Law (AREA)
- Computer Hardware Design (AREA)
- Evolutionary Computation (AREA)
- Geometry (AREA)
- General Engineering & Computer Science (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请涉及数据验证技术领域,特别是涉及一种数据处理方法、装置及电子设备,该方法包括:获取业务节点中的初始交易数据,并获得所述初始交易数据对应的初始账目表,将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表,提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果。通过上述的方法,将从业务节点中获取的初始交易数据中删除异常交易数据后输入预设仿真模型中,在预设仿真模型中模拟出现异常情况的场景,根据最后的异常结果获得包含异常交易数据的异常业务节点,当业务节点出现异常时,从而能够及时检测到具有异常交易数据的业务节点。
Description
技术领域
本申请涉及数据验证技术领域,尤其涉及一种数据处理方法、装置及电子设备。
背景技术
随着大数据技术的发展,大数据技术被用在各种业务流程中,为了完成同一个项目,基于大数据技术建立了业务流程模型,业务流程模型中包含了多个业务流程,业务流程中包含了多个业务节点,业务节点可以存在于物理设备中,也可以存在于虚拟设备中,每个业务节点对应为同一个项目中的具体某一个步骤,为了确保一个项目的完成,需要确保该项目对应的业务节点上的步骤能够全部成功完成。
当某一个业务节点上的步骤全部完成时,为了避免每个业务节点对应的人员获取的信息不一致,需要确保该业务流程整体的一致性,比如:当客户a与客户b进行转账交易时,客户a所在的业务节点显示客户a转账至客户b的操作已经完成,但是由于每个业务节点之间受到网络波动的有效,客户b所属的业务节点显示没有收到客户a的转账,造成同一个业务流程中不同的业务节点对应着多种不同的业务结果,导致不能及时检测到业务流程中的异常情况。
发明内容
本申请提供了一种数据处理的方法、装置及电子设备,通过将初始交易数据输入预设仿真模型中,模拟在业务节点上出现异常交易数据时的场景,当业务流程中的业务节点出现异常交易数据时,能够通过预设仿真模型及时检测出出现异常交易数据对应的业务节点,从而能够及时检测到业务流程中的异常情况。
第一方面,本申请提供了一种数据处理方法,所述方法包括:
获取业务节点中的初始交易数据,并获得所述初始交易数据对应的初始账目表,其中,所述初始账目表中记录了用户端与用户端之间的账目往来信息;
将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表;
提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果,其中,所述异常结果为包含异常交易数据的异常业务节点。
在一种可能的设计中,将所述初始交易数据输入预设仿真模型中,包括:
检测所述初始交易数据中是否有异常交易数据;
确定所述初始交易数据中有异常交易数据时,将所述异常交易数据从所述初始交易数据中删除后输入预设仿真模型中。
在一种可能的设计中,将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表,包括:
获得每个初始交易数据对应的交易状态信息,从所述交易状态信息中解析出对应的时间标识以及账目交易信息;
基于所述时间标识生成第一关联关系,并基于所述第一关联关系以及所述账目交易信息,生成所述初始交易数据对应的目标账目表。
在一种可能的设计中,基于所述时间标识生成第一关联关系,包括:
获得每个初始交易数据对应的时间标识;
将所述初始交易数据与对应的时间标识进行关联,生成第一关联关系。
在一种可能的设计中,从所述交易状态信息中解析出对应的时间标识以及账目交易信息之后,包括:
提取相邻业务节点中初始交易数据对应的时间标识;
计算出所述相邻业务节点中所述时间标识之间的时间差,检测所述时间差是否超过预设阈值;
确定所述时间差超过预设阈值时,则将所述时间差超过预设阈值对应的业务节点中的初始交易数据作为目标交易数据;
检测所述目标交易数据是否触发预设规则;
确定所述第一交易状态信息触发预设规则时,生成目标交易数据对应的目标账目信息。
在一种可能的设计中,确定所述第一交易状态信息触发预设规则时,生成目标交易数据对应的目标账目信息,包括:
确定所述目标交易数据触发同步冲正或异步冲正时,获得所述目标交易数据对应的第一结果;或
确定所述目标交易数据不存在时,获得所述目标交易数据的第二结果;
基于所述第一结果或所述第二结果生成目标交易数据对应的目标账目信息。
在一种可能的设计中,确定所述目标交易数据不存在,包括:
检测预设时间内是否收到所述目标交易数据对应的第一交易状态信息;
确定预设时间内没有收到所述第一交易状态信息,则确认所述目标交易数据不存在。
在一种可能的设计中,提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果,包括:
基于所述目标账目信息以及所述账目交易信息生成目标账目表;
提取出所述目标账目表以及所述初始账目表中的差异数据;
将所述差异数据按照类别进行分类,生成所述差异数据对应的异常结果。
第二方面,本申请提供了一种数据处理装置,所述装置包括:
获得模块,用于获取业务节点中的初始交易数据,并获得所述初始交易数据对应的初始账目表;
输入模块,用于将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表;
生成模块,用于提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果。
在一种可能的设计中,所述输入模块,具体用于检测所述初始交易数据中是否有异常交易数据,确定所述初始交易数据中有异常交易数据时,将所述异常交易数据从所述初始交易数据中删除后输入预设仿真模型中。
在一种可能的设计中,所述输入模块,还用于获得每个初始交易数据对应的交易状态信息,从所述交易状态信息中解析出对应的时间标识以及账目交易信息,基于所述时间标识生成第一关联关系,并基于所述第一关联关系以及所述账目交易信息,生成所述初始交易数据对应的目标账目表。
在一种可能的设计中,所述生成模块,具体用于获得每个初始交易数据对应的时间标识,将所述初始交易数据与对应的时间标识进行关联,生成第一关联关系。
在一种可能的设计中,所述生成模块,还用于提取相邻业务节点中初始交易数据对应的时间标识,计算出所述相邻业务节点中所述时间标识之间的时间差,检测所述时间差是否超过预设阈值,确定所述时间差超过预设阈值时,则将所述时间差超过预设阈值对应的业务节点中的初始交易数据作为目标交易数据,检测所述目标交易数据是否触发预设规则,确定所述第一交易状态信息触发预设规则时,生成目标交易数据对应的目标账目信息。
在一种可能的设计中,所述生成模块,还用于确定所述目标交易数据触发同步冲正或异步冲正时,获得所述目标交易数据对应的第一结果,或确定所述目标交易数据不存在时,获得所述目标交易数据的第二结果基于所述第一结果或所述第二结果生成目标交易数据对应的目标账目信息。
在一种可能的设计中,所述生成模块,还用于检测预设时间内是否收到所述目标交易数据对应的第一交易状态信息,确定预设时间内没有收到所述第一交易状态信息,则确认所述目标交易数据不存在。
在一种可能的设计中,所述生成模块,还用于基于所述目标账目信息以及所述账目交易信息生成目标账目表,提取出所述目标账目表以及所述初始账目表中的差异数据,将所述差异数据按照类别进行分类,生成所述差异数据对应的异常结果。
第三方面,本申请提供了一种电子设备,包括:
存储器,用于存放计算机程序;
处理器,用于执行所述存储器上所存放的计算机程序时,实现上述数据处理方法步骤。
第四方面,本申请提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述数据处理方法步骤。
第五方面,本申请提供了一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行上述数据处理方法步骤。
上述第二方面至第五方面中的各个方面以及各个方面可能达到的技术效果参照上述针对第一方面或者第一方面中的各种可能方案可以达到的技术效果说明,这里不再重复赘述。
附图说明
图1为本申请提供的一种数据处理方法步骤的流程图;
图2为本申请提供的一种数据处理装置的结构示意图;
图3为本申请提供的一种电子设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请作进一步地详细描述。方法实施例中的具体操作方法也可以应用于装置实施例或系统实施例中。需要说明的是,在本申请的描述中“多个”理解为“至少两个”。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。A与B连接,可以表示:A与B直接连接和A与B通过C连接这两种情况。另外,在本申请的描述中,“第一”、“第二”等词汇,仅用于区分描述的目的,而不能理解为指示或暗示相对重要性,也不能理解为指示或暗示顺序。
在以往的技术中,在一个业务流程中,当业务流程中的业务节点出现异常交易数据时,不能及时检测到出现异常交易数据对应的业务节点,从而导致不能及时检测到业务流程中的异常情况。
为了解决上述描述的问题,本申请实施例提供了一种数据处理方法,用以实现当业务流程中的业务节点出现异常情况时,能够及时检测到业务流程中的异常情况。其中,本申请实施例所述方法和装置基于同一技术构思,由于方法及装置所解决问题的原理相似,因此装置与方法的实施例可以相互参见,重复之处不再赘述,本申请技术方案中对数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。
下面结合附图,对本申请实施例进行详细描述。
参照图1,本申请提供了一种数据处理方法,该方法可以实现当业务流程中的业务节点出现异常交易数据时,能够及时检测到业务流程中的异常情况,该方法的实现流程如下:
步骤S1:获取业务节点中的初始交易数据,并获得所述初始交易数据对应的初始账目表。
在本申请实施例中,当业务流程中的业务节点出现异常交易数据时,为了能够及时检测到业务流程中的异常情况,需要在预设仿真模型中的各个业务节点上设置一个仿真组件,用以模拟业务节点上出现的异常情况,该预设仿真模型能够模拟业务流程中处于任意的业务节点,因此,仿真组件能够设置超时、丢失等情况,由于实际运用中,不同的场景下可能出现多种异常情况,其他的异常情况可以参考本申请实施例的超时和/或丢失,在这里不做过多阐述。
在将仿真组件模拟的异常情况设置好之后,为了确保能够检测出具有异常情况的业务节点,将获取业务节点中的初始交易数据,为了能够检测出异常交易数据,需要先获得初始交易数据对应的初始账目表,初始账目表中记录了用户端与其他用户端之间的账目往来信息。
通过上述的方法,在预设仿真模型中设置仿真组件用于模拟不同的异常情况,并获得初始交易数据以及初始交易数据对应的初始账目表,为检测出异常交易数据做好提前的准备工作,确保了能够检测出异常交易数据。
步骤S2:将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表。
在获得初始交易数据以及初始交易数据对应的初始账目表之后,为了确保在预设仿真模型中能够检测到的异常情况为仿真组件模拟的异常情况,因此,在将初始交易数据输入预设仿真模型之前,需要检测初始交易数据中是否有异常交易数据,若初始交易数据中有异常交易数据,则将该异常交易数据从初始交易数据中删除后再输入预设仿真模型,若初始交易数据中没有异常交易数据,则直接将初始交易数据输入预设仿真模型。
采用上述描述的步骤,确保了输入预设仿真模型中的初始交易数据中没有异常交易数据,避免了该异常交易数据对预设仿真模型检测具有异常情况的业务节点的过程中进行干扰,从而提高了预设仿真模型检测出具有异常情况的业务节点的准确度。
在确保输入预设仿真模型中的初始交易数据中没有异常交易数据之后,将初始交易数据输入预设仿真模型,为了记录初始交易数据的交易状态变化过程,需要获得初始交易数据对应的交易状态信息,该交易状态信息中包含了时间标识以及账目交易信息,时间标识是交易状态信息生成时对应的时间,账目交易信息为用户端当前账户与其他账户的历史账目往来信息。
获得包含了时间标识以及账目交易信息的交易状态信息之后,将初始交易数据与该初始交易数据对应的时间标识进行关联,将该关联关系作为第一关联关系,第一关联关系存储在服务器的中形式如表1所示:
表1
在上述表1中,数据1与数据2都为初始交易数据,表1中记录了数据1的第一关联关系以及数据2的第一关联关系,若有其他数据的关联关系,可以参考表1中数据1与数据2中任意一个的第一关联关系,需要进行说明的是,第一关联关系在本申请实施中可以代表一个关联关系,也可以代表初始交易数据与该初始交易数据对应的时间标识这一类关联关系,这里不做过多说明。
获得交易状态信息中的时间标识以及账目交易信息之后,为了检测出预设仿真模型中具有超时情况的业务节点,需要提取相邻业务节点中初始交易数据对应的时间标识,计算出当前业务节点与当前业务节点的下一个业务节点中初始交易数据对应的时间差,获得时间差之后,需要检测该时间差是否超过预设阈值,确定该时间差超过预设阈值之后,将获得时间差超过预设阈值对应的业务节点,将该业务节点对应的初始交易数据作为目标交易数据。
在获得目标交易数据之后,为了进一步的分析出该业务节点对应的异常情况,将检测目标交易数据是否触发预设规则,预设规则中包括同步冲正成功、同步冲正失败以及异步冲正成功、异步冲正失败,还包括目标交易数据丢失的异常情况,当目标交易数据触发预设规则之后,将获得目标交易数据对应的第一结果和/或第二结果,目标交易数据触发预设规则的具体过程如下:
情况一:当目标交易数据触发同步冲正时,为了更清楚的说明目标交易数据触发同步冲正的过程,将采用举例的方式进行说明,目标交易数据触发同步冲正的具体过程如下:
当业务节点2所属的用户要转账至业务节点1所属的用户,业务节点2所属的用户端显示转账成功,但是业务节点1没有收到转账信息,因此,业务节点1将会进行同步冲正,同步冲正之后,业务节点2所属的用户的转账将从原路返回至业务节点2,若业务节点2所属的用户成功接收转账退回的信息,则代表业务节点1同步冲正成功,若业务节点2所属的用户未接收到转账退回的信息,则代表业务节点1同步冲正失败。
业务节点1同步冲正成功后,该业务节点2的目标交易数据对应的第一交易状态信息将会发生变化,比如:第一交易状态信息将会由转账成功的信息变为成功接收转账退回的信息,业务节点2将会记录同步冲正的时间,当业务节点1同步冲正失败后,该业务节点1的目标交易数据对应的当前第一交易状态信息与上一次的第一交易状态信息相同,当前第一交易状态信息与上一次的第一交易状态信息的区别点是时间标识不同,当前第一交易状态信息中的时间标识为当前的时间。
进一步需要说明的是,当第一交易状态信息同步冲正失败之后,将在预设时间后将会再次进行同步冲正,由于同步冲正为本领域技术人员公知的技术,因此,这里不做过多阐述。
情况二:当目标交易数据触发异步冲正时,触发异步冲正的过程与同步冲正一致,为了避免重复,将不做具体阐述,异步冲正的具体过程可以参考情况一,为了更清晰的说明异步冲正与同步冲正的区别,将采用上述的例子,具体的说明过程如下:
同步冲正是当业务节点1检测出异常数据时,立即进行冲正,异步冲正是业务节点1检测出异常数据时,需要经过一段时间后才会进行冲正。
进一步需要说明的是,在本申请实施例中,由于有多个业务节点,因此情况一与情况二可以同时存在,也可以只存在情况一或情况二,当情况一与情况二可以同时存在时,当同步冲正的次数达到预设次数后,将由同步冲正转为异步冲正,由于同步冲正转为异步冲正为本领域技术人员公知的技术,因此,这里不做过多阐述。
上述描述的情况,在每一种情况中都会记录第一交易状态信息的变化,并基于该第一交易状态信息的变化生成第一结果。
情况三:当所述目标交易数据不存在时,为了更清晰的说明目标交易数据不存在的具体情况,将采用举例的方式说明,确定目标交易数据不存在的具体情况如下:
当业务节点3处理完目标交易数据之后,业务流程将流向业务节点4,业务节点4将接收到业务节点3发送的第一交易状态信息,当业务节点4检测到在预设时间内没有收到业务节点3发送的第一交易状态信息时,业务节点4将会确认目标交易数据不存在,业务节点4将不会记录任何关于目标交易数据的第一交易状态信息,将第一交易状态信息作为第二结果。
进一步需要说明的是,本申请实施例中的异常情况可以是情况一、情况二、情况三中的任意一种情况,也可以是情况一、情况二、情况三中进行两两组合中的任意一种情况,也可以是情况一、情况二、情况三组合在一起的情况,由于预设仿真模型中的业务节点不止一个,并且,预设仿真模型中的业务流程至少为1个,因此,能够将情况一、情况二、情况三进行组合,为了避免大量的重复,情况一、情况二、情况三进行组合的步骤可以参考上述分别对情况一、情况二、情况三的描述,这里不做过多说明。
获得第一结果以及第二结果之后,由于第一结果以及第二结果都为初始交易数据中的异常交易数据,为了更高效的对异常交易数据进行分析,只需要一份异常交易数据,因此,将第一结果以及第二结果合并为目标账目信息。
通过上述描述的方法,将初始交易数据输入预设仿真模型中,使得初始交易数据触发预设仿真模型中预设规则,实现对不同异常情况的模拟,进而获得不同异常情况下初始交易数据对应的第一交易状态信息,从而能够获知初始交易数据对应的异常交易数据。
步骤S3:提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果。
在上述的步骤中,获得了初始交易数据的目标账目信息,目标账目信息为初始交易数据中的异常交易数据,为了更高效的获得差异数据,只需要一份目标账目表,因此,需要获得初始交易数据的账目交易信息,获得初始交易数据的账目交易信息之后,将目标账目信息以及账目交易信息合并为目标账目表。
在获得目标账目表之后,为了能够展示出初始交易数据在发生异常情况之前以及发生异常情况之后的区别,将获得初始交易信息在异常情况发生之前的初始账目表,还需要获得初始交易信息在异常情况发生之后的目标账目表,将初始账目表与目标账目表进行比较,将获得初始账目表与目标账目表中的差异数据。
在获得差异数据之后,将差异数据按照超时数据、丢失数据、冲正数据进行分类,时间差超过预设阈值的目标交易数据作为超时数据,预设时间内没有收到上一个业务节点发送的第一交易状态信息对应的目标交易数据作为丢失数据,进行冲正的业务节点对应的目标交易数据作为冲正数据。
基于上述对差异数据的描述,生成差异数据对应的异常结果,差异数据对应的异常结果如表2所示:
差异数据 | 异常结果 |
超时数据 | 超时 |
丢失数据 | 丢失 |
冲正数据 | 同步冲正和/或异步冲正 |
表2
在表2中,记录了三种数据分别对应的异常情况,在本申请实施例中只例举的三种异常情况,其他的异常情况可以参考本申请实施例描述的异常情况,这里不做过多说明。
通过上述描述的步骤,将初始交易数据中的异常交易删除后再输入预设仿真模型,初始交易数据将触发不同的异常情况,从而产生每一种异常情况对应的异常交易数据,通过目标账目表以及初始账目表的分析能够获知业务节点对应的异常情况,从而能够及时检测到业务流程中的异常情况。
基于同一发明构思,本申请实施例中还提供了一种数据处理装置,该数据处理的装置用于实现了一种数据处理方法的功能,参照图2,所述装置包括:
获得模块201,用于获取业务节点中的初始交易数据,并获得所述初始交易数据对应的初始账目表;
输入模块202,用于将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表;
生成模块203,用于提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果。
在一种可能的设计中,所述输入模块202,具体用于检测所述初始交易数据中是否有异常交易数据,确定所述初始交易数据中有异常交易数据时,将所述异常交易数据从所述初始交易数据中删除后输入预设仿真模型中。
在一种可能的设计中,所述输入模块202,还用于获得每个初始交易数据对应的交易状态信息,从所述交易状态信息中解析出对应的时间标识以及账目交易信息,基于所述时间标识生成第一关联关系,并基于所述第一关联关系以及所述账目交易信息,生成所述初始交易数据对应的目标账目表。
在一种可能的设计中,所述生成模块203,具体用于获得每个初始交易数据对应的时间标识,将所述初始交易数据与对应的时间标识进行关联,生成第一关联关系。
在一种可能的设计中,所述生成模块203,还用于提取相邻业务节点中初始交易数据对应的时间标识,计算出所述相邻业务节点中所述时间标识之间的时间差,检测所述时间差是否超过预设阈值,确定所述时间差超过预设阈值时,则将所述时间差超过预设阈值对应的业务节点中的初始交易数据作为目标交易数据,检测所述目标交易数据是否触发预设规则,确定所述第一交易状态信息触发预设规则时,生成目标交易数据对应的目标账目信息。
在一种可能的设计中,所述生成模块203,还用于确定所述目标交易数据触发同步冲正或异步冲正时,获得所述目标交易数据对应的第一结果,或确定所述目标交易数据不存在时,获得所述目标交易数据的第二结果基于所述第一结果或所述第二结果生成目标交易数据对应的目标账目信息。
在一种可能的设计中,所述生成模块203,还用于检测预设时间内是否收到所述目标交易数据对应的第一交易状态信息,确定预设时间内没有收到所述第一交易状态信息,则确认所述目标交易数据不存在。
在一种可能的设计中,所述生成模块203,还用于基于所述目标账目信息以及所述账目交易信息生成目标账目表,提取出所述目标账目表以及所述初始账目表中的差异数据,将所述差异数据按照类别进行分类,生成所述差异数据对应的异常结果。
基于同一发明构思,本申请实施例中还提供了一种电子设备,所述电子设备可以实现前述一种数据处理的装置的功能,参考图3,所述电子设备包括:
至少一个处理器301,以及与至少一个处理器301连接的存储器302,本申请实施例中不限定处理器301与存储器302之间的具体连接介质,图3中是以处理器301和存储器302之间通过总线300连接为例。总线300在图3中以粗线表示,其它部件之间的连接方式,仅是进行示意性说明,并不引以为限。总线300可以分为地址总线、数据总线、控制总线等,为便于表示,图3中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。或者,处理器301也可以称为控制器,对于名称不做限制。
在本申请实施例中,存储器302存储有可被至少一个处理器301执行的指令,至少一个处理器301通过执行存储器402存储的指令,可以执行前文论述的一种数据处理的方法。处理器301可以实现图2所示的装置中各个模块的功能。
其中,处理器301是该装置的控制中心,可以利用各种接口和线路连接整个该控制设备的各个部分,通过运行或执行存储在存储器302内的指令以及调用存储在存储器302内的数据,该装置的各种功能和处理数据,从而对该装置进行整体监控。
在一种可能的设计中,处理器301可包括一个或多个处理单元,处理器301可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器301中。在一些实施例中,处理器301和存储器302可以在同一芯片上实现,在一些实施例中,它们也可以在独立的芯片上分别实现。
处理器301可以是通用处理器,例如中央处理器(CPU)、数字信号处理器、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件,可以实现或者执行本申请实施例中公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的一种数据处理方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
存储器302作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块。存储器302可以包括至少一种类型的存储介质,例如可以包括闪存、硬盘、多媒体卡、卡型存储器、随机访问存储器(Random AccessMemory,RAM)、静态随机访问存储器(Static Random Access Memory,SRAM)、可编程只读存储器(Programmable Read Only Memory,PROM)、只读存储器(Read Only Memory,ROM)、带电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、磁性存储器、磁盘、光盘等等。存储器302是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。本申请实施例中的存储器302还可以是电路或者其它任意能够实现存储功能的装置,用于存储程序指令和/或数据。
通过对处理器301进行设计编程,可以将前述实施例中介绍的一种数据处理方法所对应的代码固化到芯片内,从而使芯片在运行时能够执行图1所示的实施例的一种数据处理的步骤。如何对处理器301进行设计编程为本领域技术人员所公知的技术,这里不再赘述。
基于同一发明构思,本申请实施例还提供一种存储介质,该存储介质存储有计算机指令,当该计算机指令在计算机上运行时,使得计算机执行前文论述的一种数据处理方法。
在一些可能的实施方式中,本申请提供一种数据处理的方法的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当程序产品在装置上运行时,程序代码用于使该控制设备执行本说明书上述描述的根据本申请各种示例性实施方式的一种数据处理方法中的步骤。
程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
本发明的实施方式中提供的数据处理方法的程序产品可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在计算设备上运行。然而,本发明的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、有线、光缆、RF等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
应当注意,尽管在上文详细描述中提及了装置的若干单元或子单元,但是这种划分仅仅是示例性的并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多单元的特征和功能可以在一个单元中具体化。反之,上文描述的一个单元的特征和功能可以进一步划分为由多个单元来具体化。
此外,尽管在附图中以特定顺序描述了本发明方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
Claims (19)
1.一种数据处理方法,其特征在于,包括:
获取业务节点中的初始交易数据,并获得所述初始交易数据对应的初始账目表,其中,所述初始账目表中记录了用户端与用户端之间的账目往来信息;
将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表;
提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果,其中,所述异常结果为包含异常交易数据的异常业务节点。
2.如权利要求1所述的方法,其特征在于,将所述初始交易数据输入预设仿真模型中,包括:
检测所述初始交易数据中是否有异常交易数据;
确定所述初始交易数据中有异常交易数据时,将所述异常交易数据从所述初始交易数据中删除后输入预设仿真模型中。
3.如权利要求1所述的方法,其特征在于,将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表,包括:
获得每个初始交易数据对应的交易状态信息,从所述交易状态信息中解析出对应的时间标识以及账目交易信息;
基于所述时间标识生成第一关联关系,并基于所述第一关联关系以及所述账目交易信息,生成所述初始交易数据对应的目标账目表。
4.如权利要求3所述的方法,其特征在于,基于所述时间标识生成第一关联关系,包括:
获得每个初始交易数据对应的时间标识;
将所述初始交易数据与对应的时间标识进行关联,生成第一关联关系。
5.如权利要求3所述的方法,其特征在于,从所述交易状态信息中解析出对应的时间标识以及账目交易信息之后,包括:
提取相邻业务节点中初始交易数据对应的时间标识;
计算出所述相邻业务节点中所述时间标识之间的时间差,检测所述时间差是否超过预设阈值;
确定所述时间差超过预设阈值时,则将所述时间差超过预设阈值对应的业务节点中的初始交易数据作为目标交易数据;
检测所述目标交易数据是否触发预设规则;
确定所述目标交易数据触发预设规则时,生成目标交易数据对应的目标账目信息。
6.如权利要求5所述的方法,其特征在于,确定所述第一交易状态信息触发预设规则时,生成目标交易数据对应的目标账目信息,包括:
确定所述目标交易数据触发同步冲正或异步冲正时,获得所述目标交易数据对应的第一结果;或
确定所述目标交易数据不存在时,获得所述目标交易数据的第二结果;
基于所述第一结果或所述第二结果生成目标交易数据对应的目标账目信息。
7.如权利要求6所述的方法,其特征在于,确定所述目标交易数据不存在,包括:
检测预设时间内是否收到所述目标交易数据对应的目标交易状态信息;
确定预设时间内没有收到所述目标交易状态信息,则确认所述目标交易数据不存在。
8.如权利要求1所述的方法,其特征在于,提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果,包括:
基于所述目标账目信息以及所述账目交易信息生成目标账目表;
提取出所述目标账目表以及所述初始账目表中的差异数据;
将所述差异数据按照类别进行分类,生成所述差异数据对应的异常结果。
9.一种数据处理装置,其特征在于,所述装置包括:
获得模块,用于获取业务节点中的初始交易数据,并获得所述初始交易数据对应的初始账目表;
输入模块,用于将所述初始交易数据输入预设仿真模型中,生成所述初始交易数据对应的目标账目表;
生成模块,用于提取所述初始账目表与所述目标账目表的差异数据,基于所述差异数据生成异常结果。
10.如权利要求9所述的装置,其特征在于,所述输入模块,具体用于检测所述初始交易数据中是否有异常交易数据,确定所述初始交易数据中有异常交易数据时,将所述异常交易数据从所述初始交易数据中删除后输入预设仿真模型中。
11.如权利要求9所述的装置,其特征在于,所述输入模块,还用于获得每个初始交易数据对应的交易状态信息,从所述交易状态信息中解析出对应的时间标识以及账目交易信息,基于所述时间标识生成第一关联关系,并基于所述第一关联关系以及所述账目交易信息,生成所述初始交易数据对应的目标账目表。
12.如权利要求9所述的装置,其特征在于,所述生成模块,具体用于获得每个初始交易数据对应的时间标识,将所述初始交易数据与对应的时间标识进行关联,生成第一关联关系。
13.如权利要求9所述的装置,其特征在于,所述生成模块,还用于提取相邻业务节点中初始交易数据对应的时间标识,计算出所述相邻业务节点中所述时间标识之间的时间差,检测所述时间差是否超过预设阈值,确定所述时间差超过预设阈值时,则将所述时间差超过预设阈值对应的业务节点中的初始交易数据作为目标交易数据,检测所述目标交易数据是否触发预设规则,确定所述第一交易状态信息触发预设规则时,生成目标交易数据对应的目标账目信息。
14.如权利要求9所述的装置,其特征在于,所述生成模块,还用于确定所述目标交易数据触发同步冲正或异步冲正时,获得所述目标交易数据对应的第一结果,或确定所述目标交易数据不存在时,获得所述目标交易数据的第二结果基于所述第一结果或所述第二结果生成目标交易数据对应的目标账目信息。
15.如权利要求9所述的装置,其特征在于,所述生成模块,还用于检测预设时间内是否收到所述目标交易数据对应的第一交易状态信息,确定预设时间内没有收到所述第一交易状态信息,则确认所述目标交易数据不存在。
16.如权利要求9所述的装置,其特征在于,所述生成模块,还用于基于所述目标账目信息以及所述账目交易信息生成目标账目表,提取出所述目标账目表以及所述初始账目表中的差异数据,将所述差异数据按照类别进行分类,生成所述差异数据对应的异常结果。
17.一种电子设备,其特征在于,包括:
存储器,用于存放计算机程序;
处理器,用于执行所述存储器上所存放的计算机程序时,实现权利要求1-8任一项所述的方法步骤。
18.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-8任一项所述的方法步骤。
19.一种计算机程序产品,其特征在于,当所述计算机程序产品在计算机上运行时,使得所述计算机执行如权利要求1-8中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111571904.6A CN114239296A (zh) | 2021-12-21 | 2021-12-21 | 一种数据处理方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111571904.6A CN114239296A (zh) | 2021-12-21 | 2021-12-21 | 一种数据处理方法、装置及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114239296A true CN114239296A (zh) | 2022-03-25 |
Family
ID=80760382
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111571904.6A Pending CN114239296A (zh) | 2021-12-21 | 2021-12-21 | 一种数据处理方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114239296A (zh) |
-
2021
- 2021-12-21 CN CN202111571904.6A patent/CN114239296A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110298662B (zh) | 交易重复提交的自动化检测方法及装置 | |
CN111552633A (zh) | 接口的异常调用测试方法、装置、计算机设备及存储介质 | |
CN109446208A (zh) | 一种数据存储方法、计算机可读存储介质及服务器 | |
CN109284331B (zh) | 基于业务数据资源的制证信息获取方法、终端设备及介质 | |
CN114168190A (zh) | 接口文档生成方法、装置、计算机设备和存储介质 | |
CN111680104B (zh) | 数据同步方法、装置、计算机设备及可读存储介质 | |
CN114022151A (zh) | 区块链数据可视化方法、系统、电子设备和存储介质 | |
CN109582550A (zh) | 一种获取全量业务场景故障集合的方法、装置及服务器 | |
CN109408361A (zh) | Monkey测试复原方法、装置、电子设备及计算机可读存储介质 | |
CN111949518A (zh) | 一种生成故障检测脚本的方法、系统、终端及存储介质 | |
CN111475494A (zh) | 一种海量数据处理方法、系统、终端及存储介质 | |
CN111666298A (zh) | 基于flink的用户服务类别检测方法、装置、计算机设备 | |
CN111651522B (zh) | 一种数据同步方法及装置 | |
CN116136950B (zh) | 芯片验证方法、装置、系统、电子设备及存储介质 | |
CN111427796A (zh) | 系统测试方法、装置及电子设备 | |
CN114239296A (zh) | 一种数据处理方法、装置及电子设备 | |
CN105405220A (zh) | 一种自动化测试的方法及装置 | |
CN115309638A (zh) | 协助模型优化的方法及装置 | |
CN114691768A (zh) | 一种数据处理方法、核算系统及相关设备 | |
CN109840213B (zh) | 一种gui测试的测试数据创建方法、装置、终端及存储介质 | |
CN111752677A (zh) | 一种云资源配置方法、系统、终端及存储介质 | |
CN112560992B (zh) | 优化图片分类模型的方法、装置、电子设备及存储介质 | |
CN109800099A (zh) | 一种用户操作行为的还原方法、存储介质和终端设备 | |
CN116340187B (zh) | 规则引擎迁移测试方法、装置、电子设备及存储介质 | |
CN110309211A (zh) | 一种定位etl过程问题的方法及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |