CN114996242A - 一种数据处理方法及装置 - Google Patents

一种数据处理方法及装置 Download PDF

Info

Publication number
CN114996242A
CN114996242A CN202210656967.XA CN202210656967A CN114996242A CN 114996242 A CN114996242 A CN 114996242A CN 202210656967 A CN202210656967 A CN 202210656967A CN 114996242 A CN114996242 A CN 114996242A
Authority
CN
China
Prior art keywords
information
service
preset rule
sub
types
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210656967.XA
Other languages
English (en)
Inventor
张兴顺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Automotive Research Institute Co Ltd
Original Assignee
Beijing Automotive Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Automotive Research Institute Co Ltd filed Critical Beijing Automotive Research Institute Co Ltd
Priority to CN202210656967.XA priority Critical patent/CN114996242A/zh
Publication of CN114996242A publication Critical patent/CN114996242A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/217Database tuning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/215Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/546Message passing systems or structures, e.g. queues
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/54Indexing scheme relating to G06F9/54
    • G06F2209/548Queue

Abstract

本发明提供一种数据处理方法及装置,所述方法包括:接收客户端发送的业务请求,业务请求包括多个业务信息;利用第一预设规则对多个业务信息进行校验,获得两类业务信息,两类业务信息中的第一类业务信息包括通过第一预设规则校验的业务信息;利用第二预设规则对第一类业务信息进行校验,获得两类业务子信息,两类业务子信息中的第一类业务子信息包括通过第二预设规则校验的业务子信息;将第一类业务子信息发送给客户端。通过在进行第二预设规则校验之前进行第一预设规则校验,减少了多个业务信息中待处理信息的数量,从而缩短了响应时间,提高了数据处理的效率。

Description

一种数据处理方法及装置
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据处理方法及装置。
背景技术
将各类业务请求批量导入数据管理系统后,需要对每条数据都进行检查。例如,在电池溯源管理系统中,存在着人工导入上报数据的场景,人工通过电子表格Excel导入批量数据后,需要对每条数据都进行检查,在数据较少、校验规则单一的情况下,这种数据处理方案还是可行的。但是,随着数据量的增多,比如超过5000条,且涉及数据库查询校验、排他性校验或多层次校验等具有复杂校验规则的情况下,人工校验的数据处理方案耗时较长、效率低,费时费力。
可见,现有技术中数据处理存在效率低的问题。
发明内容
本发明实施例提供一种数据处理方法及装置,以解决现有技术中数据处理效率低的问题。
本发明实施例提供了一种数据处理方法,所述方法包括:
接收客户端发送的业务请求,所述业务请求包括多个业务信息;
利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息,所述两类业务信息中的第一类业务信息包括通过所述第一预设规则校验的业务信息;
利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息,所述两类业务子信息中的第一类业务子信息包括通过所述第二预设规则校验的业务子信息;
将所述第一类业务子信息发送给所述客户端。
可选地,所述将所述第一类业务子信息发送给所述客户端包括:
将分类信息发送给所述客户端,所述分类信息包括所述第一类业务子信息、第二类业务信息、第二类业务子信息,其中,所述第二类业务信息包括所述多个业务信息中未通过所述第一预设规则校验的业务信息,所述第二类业务子信息包括所述第一类业务信息中未通过所述第二预设规则校验的业务信息,所述第一类业务子信息具有第一标记,所述第二类业务信息具有第二标记,所述第二类业务子信息具有第三标记。
可选地,在所述接收客户端发送的业务请求之前,所述方法还包括:
构建两个校验模型;
在所述两个校验模型中依次写入所述第一预设规则和所述第二预设规则,一个校验模型对应一个预设规则。
可选地,在所述利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息之后,在所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息之前,所述方法还包括:
将所述两类业务信息发送至消息队列;
获取所述消息队列中的第一目标步骤标识,所述第一目标步骤标识为基于所述两类业务信息中任一项生成的步骤标识;
将所述第一目标步骤标识发送至所述客户端,所述第一目标步骤标识用于所述客户端查看所述业务请求的当前处理进度。
可选地,所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息包括:
获取所述消息队列中的步骤标识列表;
在所述步骤标识列表中包括所述第一目标步骤标识的情况下,利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息;
在所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息之后,所述方法还包括:
将所述两类业务子信息发送至消息队列;
获取所述消息队列中的第二目标步骤标识,所述第二目标步骤标识为基于所述两类业务子信息中任一项生成的步骤标识;
将所述第二目标步骤标识发送至所述客户端,并在所述步骤标识列表中新增所述第二目标步骤标识。
本发明实施例还提供了一种数据处理装置,包括:
接收模块,用于接收客户端发送的业务请求,所述业务请求包括多个业务信息;
第一校验模块,用于利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息,所述两类业务信息中的第一类业务信息包括通过所述第一预设规则校验的业务信息;
第二校验模块,用于利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息,所述两类业务子信息中的第一类业务子信息包括通过所述第二预设规则校验的业务子信息;
第一发送模块,用于将所述第一类业务子信息发送给所述客户端。
可选地,所述第一发送模块包括:
发送单元,用于将分类信息发送给所述客户端,所述分类信息包括所述第一类业务子信息、第二类业务信息、第二类业务子信息,其中,所述第二类业务信息包括所述多个业务信息中未通过所述第一预设规则校验的业务信息,所述第二类业务子信息包括所述第一类业务信息中未通过所述第二预设规则校验的业务信息,所述第一类业务子信息具有第一标记,所述第二类业务信息具有第二标记,所述第二类业务子信息具有第三标记。
可选地,所述数据处理装置还包括:
构建模块,用于构建两个校验模型;
写入模块,用于在所述两个校验模型中依次写入所述第一预设规则和所述第二预设规则,一个校验模型对应一个预设规则。
可选地,所述数据处理装置还包括:
第二发送模块,用于将所述两类业务信息发送至消息队列;
第一获取模块,用于获取所述消息队列中的第一目标步骤标识,所述第一目标步骤标识为基于所述两类业务信息中任一项生成的步骤标识;
第三发送模块,用于将所述第一目标步骤标识发送至所述客户端,所述第一目标步骤标识用于所述客户端查看所述业务请求的当前处理进度。
可选地,所述第二校验模块包括:
获取单元,用于获取所述消息队列中的步骤标识列表;
校验单元,用于在所述步骤标识列表中包括所述第一目标步骤标识的情况下,利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息;
所述数据处理装置还包括:
第四发送模块,用于将所述两类业务子信息发送至消息队列;
第二获取模块,用于获取所述消息队列中的第二目标步骤标识,所述第二目标步骤标识为基于所述两类业务子信息中任一项生成的步骤标识;
第五发送模块,用于将所述第二目标步骤标识发送至所述客户端,并在所述步骤标识列表中新增所述第二目标步骤标识。
本发明实施例中,将复杂的校验规则划分成至少包括第一预设规则和第二预设规则,将完成第一预设规则的业务信息通过消息驱动的方式进行第二预设规则校验。第二预设规则可以包括第一预设规则,通过在进行第二预设规则校验之前进行第一预设规则校验,减少了多个业务信息中待处理信息的数量,从而缩短了响应时间,提高了数据处理的效率。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的数据处理方法的流程示意图之一;
图2是本发明实施例提供的数据处理方法的流程示意图之二;
图3是本发明实施例提供的数据处理方法的流程示意图之三;
图4是本发明实施例提供的数据处理装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,图1是本发明实施例提供的数据处理方法的流程图之一。如图1所示,本发明实施例提供了一种数据处理方法,包括以下步骤:
步骤101、接收客户端发送的业务请求,所述业务请求包括多个业务信息;
该步骤中,业务请求中可以包括多个随机排列的业务信息,多个业务信息数据量大、校验规则多且校验规则复杂。业务信息可以通过消息主题Topic的形式在消息生产者Producer和消息消费者Consumer之间传输,可以是通过实时操作系统接收客户端发送的业务请求,并通过后续步骤对业务请求中多个业务信息进行关键与非关键流程的区分处理。
步骤102、利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息,所述两类业务信息中的第一类业务信息包括通过所述第一预设规则校验的业务信息;
该步骤中,通过在业务处理流程中设置第一预设规则,以获得通过校验的第一类业务信息和未通过校验的第二类业务信息,从而对多个业务信息进行初步区分,然后更新数据内容,以进行后续步骤,缩短了响应时间。
步骤103、利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息,所述两类业务子信息中的第一类业务子信息包括通过所述第二预设规则校验的业务子信息;
该步骤中,通过在业务处理流程中进一步设置第二预设规则,以获得通过校验的第一类业务子信息和未通过校验的第二类业务子信息,从而对第一类业务信息中的信息进行再次区分,然后更新数据内容,由于第一类业务信息中的信息已经通过了上一步骤中第一预设规则的筛选,减少了多个业务信息中待处理信息的数量,从而极大的缩短了响应时间。
步骤104、将所述第一类业务子信息发送给所述客户端。
该步骤中,将多个业务信息中通过第一预设规则、和第二规则校验的业务信息,即第一类业务子信息发送给客户端,以对客户端发送的业务请求进行结果反馈,缩短了响应时间,减少信息遗漏的情况,提高了数据处理效率。
本实施方式中,将复杂的校验规则划分成至少包括第一预设规则和第二预设规则,将完成第一预设规则的业务信息通过消息驱动的方式进行第二预设规则校验。第二预设规则可以包括第一预设规则,通过在进行第二预设规则校验之前进行第一预设规则校验,减少了多个业务信息中待处理信息的数量,从而缩短了响应时间,提高了数据处理的效率。
需要说明的是,在实际使用过程中还可以设置有更多数量的预设规则,把复杂规则划分成一个个简单的校验,通过消息驱动,一级校验完成后发消息通知二级校验,多级情况下,如此类推,大大提高了数据处理时的效率。
可选地,将所述第一类业务子信息发送给所述客户端包括:
将分类信息发送给所述客户端,所述分类信息包括所述第一类业务子信息、第二类业务信息、第二类业务子信息,其中,所述第二类业务信息包括所述多个业务信息中未通过所述第一预设规则校验的业务信息,所述第二类业务子信息包括所述第一类业务信息中未通过所述第二预设规则校验的业务信息,所述第一类业务子信息具有第一标记,所述第二类业务信息具有第二标记,所述第二类业务子信息具有第三标记。
本实施方式中,客户端发送的业务请求中可以包括对多个业务信息进行入库、上报等需求。在入库、上报等过程中,不仅需要第一类业务子信息,即通过第一预设规则和第二预设规则校验的业务信息;还可能需要第二类业务信息,即未能通过第一预设规则校验的业务信息;以及第二类业务子信息,即通过第一预设规则校验但是未能通过第二预设规则校验的业务信息。
利用第一预设规则对多个业务信息进行校验,获得第一类业务信息和第二类业务信息,并分别对第一类业务信息和第二类业务信息进行标记,使得第一类业务信息具有第一标记,第二类业务信息具有第二标记。第一类业务信息和/或第二类业务信息可以通过消息驱动的方式,在第一预设规则校验完成后,利用第二预设规则对第一类业务信息进行校验,以获得第一类业务子信息和第二类业务子信息,并分别对第一类业务子信息和第二类业务子信息进行标记。对第一类业务子信息进行标记可以是在第一类业务信息中进行标记更新,更新后擦除第一类业务上的第一标记,并将第一标记赋予第一类业务子信息,同时,在第二类业务子信息上赋予第三标记。这样,通过第一标记、第二标记和第三标记可以对多个业务信息进行区分,换言之,根据第一预设规则和第二预设规则的校验后,可以多个业务信息进行筛选,将复杂规则划分成一个个简单的分别进行校验,提高了数据处理的效率,将分类信息发送给所述客户端,以对客户端发送的业务请求进行响应,缩短了响应时间。
需要说明的是第一标记、第二标记和第三标记可以是分别标记在第一类业务子信息、第二类业务信息和第二类业务子信息上的;也可以是分别标记在第一类业务子信息、第二类业务信息和第二类业务子信息对应的多个业务信息上,可以达到相同的技术效果。
可选地,在所述接收客户端发送的业务请求之前,所述方法还包括:
构建两个校验模型;
在所述两个校验模型中依次写入所述第一预设规则和所述第二预设规则,一个校验模型对应一个预设规则。
本实施方式中,第一预设规则和第二预设规则可以分别设置在第一校验模型和第二校验模型中,通过一个校验模型执行一个规则,减少在同一个模型中运输不同程序时系统卡顿、奔溃的情况,提高了处理效率。
其中,在业务信息数量更多的情况下,还可以设置更多的预设规则,比如多个业务信息依次经过第一预设规则、第二预设规则、第三预设规则和第四预设规则后,将处理结果反馈至客户端。相应的,每个预设规则对应有一个校验模型,减少在同一个模型中运输不同程序时系统卡顿、奔溃的情况,提高了处理效率。
可选地,在所述利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息之后,在所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息之前,所述方法还包括:
将所述两类业务信息发送至消息队列;
获取所述消息队列中的第一目标步骤标识,所述第一目标步骤标识为基于所述两类业务信息中任一项生成的步骤标识;
将所述第一目标步骤标识发送至所述客户端,所述第一目标步骤标识用于所述客户端查看所述业务请求的当前处理进度。
本实施方式中,如图2和图3所示,接收客户端发送的业务请求,开始对业务请求进行数据处理。可以将数据处理划分成n个业务流程处理步骤,分别是步骤1至步骤n,每个步骤对应一个预设规则,换言之,第一预设规则和第二预设规则可以是步骤1至步骤n中先后两个步骤。一个步骤即一个预设规则,可以通过远程调用的方式进行数据处理。通过新增步骤标识,以缩短响应时间。在步骤1处理时,发送消息至消息队列中,然后保存数据,返回响应至客户端。用户可以通过步骤标识查看业务请求的当前处理进度,提升用户的体验。步骤2至步骤n采用基于消息驱动的方式,分段处理,每步处理完成后发送新消息至消息队列,然后更新数据内容。这种方式极大缩短了请求响应时间。
其中,所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息包括:
获取所述消息队列中的步骤标识列表;
在所述步骤标识列表中包括所述第一目标步骤标识的情况下,利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息;
在所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息之后,所述方法还包括:
将所述两类业务子信息发送至消息队列;
获取所述消息队列中的第二目标步骤标识,所述第二目标步骤标识为基于所述两类业务子信息中任一项生成的步骤标识;
将所述第二目标步骤标识发送至所述客户端,并在所述步骤标识列表中新增所述第二目标步骤标识。
业务请求可以包括多个业务信息,业务信息可以通过消息主题Topic的形式在消息生产者Producer和消息消费者Consumer之间传输,在业务流程处理的过程中可以通过步骤标识Tag进行记录。比如Tag1、Tag2、...Tag n可以是按照实际业务流程进行拆分、按顺序定义的步骤标识,用来保证整个业务流程的顺序执行。Topic+Tag可以定义某业务流程中的具体某个操作步骤。
消息生产者Producer在每条消息在发送至消息队列前,会设置Topic、Tag标识和消息体内容,然后发送至消息队列。
消息消费者Consumer可以采用监听机制实现,以获取消息队列中的步骤标识列表,根据Topic和Tags获取新消息,其中Tags即步骤标识列表,步骤标识列表可以包含某个业务流程中的所有操作步骤标识Tag,比如,步骤标识列表中可以包括第一目标步骤标识和第二目标步骤标识。获取消息后,根据上上一个Tag标识判断本次需要调用的业务处理过程方法。在每个业务处理完成后,会通知消息队列该条消息已处理完成;然后根据业务步骤要求判断是否生产新消息发送至消息队列中,在生产新消息的情况下,将步骤标识列表中新增该新消息。
其中,消息处理过程有可能既是消息消费者又是消息生产者。
参见图4,图4是本发明实施例提供的数据处理装置的结构示意图。如图4所示,本发明实施例还提供了一种数据处理装置400,包括:
接收模块401,用于接收客户端发送的业务请求,所述业务请求包括多个业务信息;
第一校验模块402,用于利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息,所述两类业务信息中的第一类业务信息包括通过所述第一预设规则校验的业务信息;
第二校验模块403,用于利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息,所述两类业务子信息中的第一类业务子信息包括通过所述第二预设规则校验的业务子信息;
第一发送模块404,用于将所述第一类业务子信息发送给所述客户端。
可选地,第一发送模块404包括:
发送单元,用于将分类信息发送给所述客户端,所述分类信息包括所述第一类业务子信息、第二类业务信息、第二类业务子信息,其中,所述第二类业务信息包括所述多个业务信息中未通过所述第一预设规则校验的业务信息,所述第二类业务子信息包括所述第一类业务信息中未通过所述第二预设规则校验的业务信息,所述第一类业务子信息具有第一标记,所述第二类业务信息具有第二标记,所述第二类业务子信息具有第三标记。
可选地,所述数据处理装置还包括:
构建模块,用于构建两个校验模型;
写入模块,用于在所述两个校验模型中依次写入所述第一预设规则和所述第二预设规则,一个校验模型对应一个预设规则。
可选地,所述数据处理装置还包括:
第二发送模块,用于将所述两类业务信息发送至消息队列;
第一获取模块,用于获取所述消息队列中的第一目标步骤标识,所述第一目标步骤标识为基于所述两类业务信息中任一项生成的步骤标识;
第三发送模块,用于将所述第一目标步骤标识发送至所述客户端,所述第一目标步骤标识用于所述客户端查看所述业务请求的当前处理进度。
可选地,第二校验模块403包括:
获取单元,用于获取所述消息队列中的步骤标识列表;
校验单元,用于在所述步骤标识列表中包括所述第一目标步骤标识的情况下,利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息;
所述数据处理装置还包括:
第四发送模块,用于将所述两类业务子信息发送至消息队列;
第二获取模块,用于获取所述消息队列中的第二目标步骤标识,所述第二目标步骤标识为基于所述两类业务子信息中任一项生成的步骤标识;
第五发送模块,用于将所述第二目标步骤标识发送至所述客户端,并在所述步骤标识列表中新增所述第二目标步骤标识。
本发明实施例提供的数据处理装置能够实现图1的方法实施例实现的各个过程并达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本发明实施方式中的方法和装置的范围不限于按所讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (10)

1.一种数据处理方法,其特征在于,所述方法包括:
接收客户端发送的业务请求,所述业务请求包括多个业务信息;
利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息,所述两类业务信息中的第一类业务信息包括通过所述第一预设规则校验的业务信息;
利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息,所述两类业务子信息中的第一类业务子信息包括通过所述第二预设规则校验的业务子信息;
将所述第一类业务子信息发送给所述客户端。
2.根据权利要求1所述的方法,其特征在于,所述将所述第一类业务子信息发送给所述客户端包括:
将分类信息发送给所述客户端,所述分类信息包括所述第一类业务子信息、第二类业务信息、第二类业务子信息,其中,所述第二类业务信息包括所述多个业务信息中未通过所述第一预设规则校验的业务信息,所述第二类业务子信息包括所述第一类业务信息中未通过所述第二预设规则校验的业务信息,所述第一类业务子信息具有第一标记,所述第二类业务信息具有第二标记,所述第二类业务子信息具有第三标记。
3.根据权利要求1所述的方法,其特征在于,在所述接收客户端发送的业务请求之前,所述方法还包括:
构建两个校验模型;
在所述两个校验模型中依次写入所述第一预设规则和所述第二预设规则,一个校验模型对应一个预设规则。
4.根据权利要求1所述的方法,其特征在于,在所述利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息之后,在所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息之前,所述方法还包括:
将所述两类业务信息发送至消息队列;
获取所述消息队列中的第一目标步骤标识,所述第一目标步骤标识为基于所述两类业务信息中任一项生成的步骤标识;
将所述第一目标步骤标识发送至所述客户端,所述第一目标步骤标识用于所述客户端查看所述业务请求的当前处理进度。
5.根据权利要求4所述的方法,其特征在于,所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息包括:
获取所述消息队列中的步骤标识列表;
在所述步骤标识列表中包括所述第一目标步骤标识的情况下,利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息;
在所述利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息之后,所述方法还包括:
将所述两类业务子信息发送至消息队列;
获取所述消息队列中的第二目标步骤标识,所述第二目标步骤标识为基于所述两类业务子信息中任一项生成的步骤标识;
将所述第二目标步骤标识发送至所述客户端,并在所述步骤标识列表中新增所述第二目标步骤标识。
6.一种数据处理装置,其特征在于,包括:
接收模块,用于接收客户端发送的业务请求,所述业务请求包括多个业务信息;
第一校验模块,用于利用第一预设规则对所述多个业务信息进行校验,获得两类业务信息,所述两类业务信息中的第一类业务信息包括通过所述第一预设规则校验的业务信息;
第二校验模块,用于利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息,所述两类业务子信息中的第一类业务子信息包括通过所述第二预设规则校验的业务子信息;
第一发送模块,用于将所述第一类业务子信息发送给所述客户端。
7.根据权利要求6所述的数据处理装置,其特征在于,所述第一发送模块包括:
发送单元,用于将分类信息发送给所述客户端,所述分类信息包括所述第一类业务子信息、第二类业务信息、第二类业务子信息,其中,所述第二类业务信息包括所述多个业务信息中未通过所述第一预设规则校验的业务信息,所述第二类业务子信息包括所述第一类业务信息中未通过所述第二预设规则校验的业务信息,所述第一类业务子信息具有第一标记,所述第二类业务信息具有第二标记,所述第二类业务子信息具有第三标记。
8.根据权利要求6所述的数据处理装置,其特征在于,还包括:
构建模块,用于构建两个校验模型;
写入模块,用于在所述两个校验模型中依次写入所述第一预设规则和所述第二预设规则,一个校验模型对应一个预设规则。
9.根据权利要求6所述的数据处理装置,其特征在于,还包括:
第二发送模块,用于将所述两类业务信息发送至消息队列;
第一获取模块,用于获取所述消息队列中的第一目标步骤标识,所述第一目标步骤标识为基于所述两类业务信息中任一项生成的步骤标识;
第三发送模块,用于将所述第一目标步骤标识发送至所述客户端,所述第一目标步骤标识用于所述客户端查看所述业务请求的当前处理进度。
10.根据权利要求9所述的数据处理装置,其特征在于,所述第二校验模块包括:
获取单元,用于获取所述消息队列中的步骤标识列表;
校验单元,用于在所述步骤标识列表中包括所述第一目标步骤标识的情况下,利用第二预设规则对所述第一类业务信息进行校验,获得两类业务子信息;
所述数据处理装置还包括:
第四发送模块,用于将所述两类业务子信息发送至消息队列;
第二获取模块,用于获取所述消息队列中的第二目标步骤标识,所述第二目标步骤标识为基于所述两类业务子信息中任一项生成的步骤标识;
第五发送模块,用于将所述第二目标步骤标识发送至所述客户端,并在所述步骤标识列表中新增所述第二目标步骤标识。
CN202210656967.XA 2022-06-10 2022-06-10 一种数据处理方法及装置 Pending CN114996242A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210656967.XA CN114996242A (zh) 2022-06-10 2022-06-10 一种数据处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210656967.XA CN114996242A (zh) 2022-06-10 2022-06-10 一种数据处理方法及装置

Publications (1)

Publication Number Publication Date
CN114996242A true CN114996242A (zh) 2022-09-02

Family

ID=83032296

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210656967.XA Pending CN114996242A (zh) 2022-06-10 2022-06-10 一种数据处理方法及装置

Country Status (1)

Country Link
CN (1) CN114996242A (zh)

Similar Documents

Publication Publication Date Title
CN109474578B (zh) 报文消息校验方法、装置、计算机设备和存储介质
CN111428881A (zh) 识别模型的训练方法、装置、设备及可读存储介质
CN111667267B (zh) 一种区块链交易风险识别方法及装置
CN107908680A (zh) 微信公众号的管理方法、电子装置及计算机可读存储介质
CN110599354B (zh) 线上对账方法、系统、计算机设备和计算机可读存储介质
CN111831682B (zh) 处理公积金业务的方法、装置、设备和计算机可读介质
CN111124917A (zh) 公共测试用例的管控方法、装置、设备及存储介质
CN111931189B (zh) Api接口转用风险检测方法、装置和api服务系统
CN112711640A (zh) 一种业务受理流程配置的方法及装置
CN113094560A (zh) 基于数据中台的数据标签库构建方法、装置、设备及介质
CN110704699A (zh) 数据画像的构建方法、装置、计算机设备及存储介质
CN116069838A (zh) 一种数据处理方法、装置、计算机设备及存储介质
CN113988319A (zh) 联邦学习模型的训练方法、装置、电子设备、介质及产品
WO2020019489A1 (zh) 员工离职原因的预测方法及相关装置
CN116719817B (zh) 一种面向科技资源的数字对象关系溯源方法及系统
CN109600250B (zh) 业务系统故障通知方法、装置、电子装置及存储介质
CN114996242A (zh) 一种数据处理方法及装置
CN107679871B (zh) 名单管理方法、装置、系统以及计算机可读存储介质
CN114186976A (zh) 工作流程流转方法、装置、计算机设备及存储介质
CN114896955A (zh) 数据报表加工方法、装置、计算机设备及存储介质
CN113111153A (zh) 一种数据分析方法、装置、设备及存储介质
CN113468446A (zh) 一种支持识别第三方二维码数据的方法、系统及设备
CN111966515A (zh) 业务异常数据处理方法、装置、计算机设备和存储介质
CN109800415A (zh) 基于语义解析的生产问题分发方法及系统
CN117710068B (zh) 基于人工智能的临时供应商核验方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination