CN112817709A - 批量数据的处理方法、装置、设备及存储介质 - Google Patents

Abstract

本发明涉及数据处理技术领域，公开了一种批量数据的处理方法、装置、设备及存储介质，通过从批量处理请求中得到处理等级信息确定批量处理通道，并在确定批量处理通道为快速处理通道时，调取默认通道的批量处理策略，提供其中的审核节点，通过对审核节点进行调整以得到快速处理通道的实时通道，基于该实时通道对业务数据进行审核，通过对原有的批量处理通道进行调整，以生成快速批量处理通道，基于该快速批量处理通道对批量业务进行处理，从而大大提高了业务的处理效率，也保证了业务的处理时效。此外，本发明还涉及区块链技术，业务数据可存储于区块链中。

Description

批量数据的处理方法、装置、设备及存储介质

技术领域

本申请涉及数据处理技术领域，具体涉及一种批量数据的处理方法、装置、设备及存储介质。

背景技术

随着智能化管理的发展和普及，目前的业务系统，对于批量处理的功能也越来越普遍，而批量处理，可以极大减少了人力资源的消耗，尤其是在金融业务的处理上，由于其业务流程的繁琐，使得其处理效率记为低下。

目前，对于业务系统上的批量扣款功能，都配备有批量扣款渠道，所谓批量扣款渠道就是针对核算报盘扣款渠道，资金通道系统定时汇总数据，进行渠道划分、卡单、报盘、数据准备、打批报盘到平安付进行扣款。其中每个步骤均要进行定时任务轮流处理，中间涉及多个定时任务。处理的时间较长，从核算报盘资金通道到接收到资金通道的回盘结果大约需要18分钟左右。虽然这个时间是比较正常的，但是对于一些特殊情况来说，这个时间就显得非常长了，尤其是对要求处理时效较高的情况，这就不能满足客户的需求了。

发明内容

本发明的主要目的是为了解决现有的批量数据处理方案在批量处理数据时所消耗时间较长，导致处理时效不高的技术问题。

本发明第一方面提供了一种批量数据的处理方法，所述批量数据的处理方法包括：

获取待处理的业务数据，以及批量处理请求；

对所述批量处理请求进行解析，得到处理等级信息；

根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

若所述批量处理通道为快速处理通道，则调取默认通道对应的批量处理策略，并基于所述批量处理策略确定所述默认通道中的审核节点；

根据所述处理等级信息，对所述审核节点进行调整，生成与所述快速处理通道对应的实时通道；

基于所述实时通道对所述业务数据进行审核处理。

可选地，在本发明第一方面的第一种实现方式中，所述对所述批量处理请求进行解析，得到处理等级信息包括：

提取所述批量处理请求中的所有字段抬头，并从所有字段抬头中识别出审核字段，并提取所述审核字段中的审核标识；

基于所述审核标识，预设的业务数据处理等级表中查询对应的处理等级信息，其中，所述业务数据处理等级表中存储有若干种场景下数据的优先数据等级。

可选地，在本发明第一方面的第二种实现方式中，所述根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道包括：

从所述批量处理请求中提取所述业务数据对应的场景信息，其中所述场景信息包括单一场景的信息和复杂场景的信息中的一种；

根据所述场景信息和处理等级信息，从预设的处理难度系数表格中分别确定与所述场景信息对应的第一难度系数和与所述处理等级信息对应的第二难度系数，基于所述第一难度系数和第二难度系数计算出所述业务数据的处理系数，并判断所述处理系数是否大于预设系数值；

若是，则确定所述批量处理通道为默认通道；

若不是，则确定所述批量处理通道为快速处理通道。

可选地，在本发明第一方面的第三种实现方式中，所述根据所述处理等级信息，对所述审核节点进行调整，生成与所述快速处理通道对应的实时通道包括：

根据所述处理等级信息，从预设的策略表格中查询出对应的调整策略，所述调整策略为审核时间阈值和审核节点调整方式，所述策略表格中存储有不同处理等级信息对应的策略版本信息；

根据所述处理等级信息和所述场景信息，计算出所述业务数据的审核总时间长度；

计算所述审核总时间长度与所述审核时间阈值之间的差值，并基于所述差值确定待处理审核节点；

根据所述审核节点调整方式，将所述待处理审核节点从所述默认通道中剔除，生成快速通道。

可选地，在本发明第一方面的第四种实现方式中，所述批量处理请求为批量扣款且快速审核的请求时，所述基于所述差值确定待处理审核节点包括：

根据所述批量处理请求确定每个审核节点审核的最大消耗时间；

将所述最大消耗时间与所述差值进行比较，得到比较结果；

根据所述比较结果，确定对应的待处理审核节点。

可选地，在本发明第一方面的第五种实现方式中，所述审核节点包括核算报盘节点、渠道划分节点、卡单节点、打批节点、数据准备节点、报盘节点、查询节点和回盘节点；

所述根据所述比较结果，确定对应的待处理审核节点包括：

若所述比较结果的差值范围大于预设的时间差值区间，确定所述审核节点中功耗消耗大的节点为待处理节点，其中，所述功耗较大的节点包括渠道划分节点、打批节点、数据准备节点和查询节点。

可选地，在本发明第一方面的第六种实现方式中，在所述根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道之后，还包括：

若所述批量处理通道为默认通道，则调取与所述默认通道对应的批量处理策略对所述业务数据进行审核处理。

本发明第二方面提供了一种批量数据的处理装置，所述批量数据的处理装置包括：

获取模块，用于获取待处理的业务数据，以及批量处理请求；

解析模块，用于对所述批量处理请求进行解析，得到处理等级信息；

查询模块，用于根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

提取模块，用于在所述批量处理通道为快速处理通道时，调取默认通道对应的批量处理策略，并基于所述批量处理策略确定所述默认通道中的审核节点；

生成模块，用于根据所述处理等级信息，对所述审核节点进行调整，生成与所述快速处理通道对应的实时通道；

审核模块，用于基于所述实时通道对所述业务数据进行审核处理。

可选地，在本发明第二方面的第一种实现方式中，所述解析模块包括：

标识提取单元，用于提取所述批量处理请求中的所有字段抬头，并从所有字段抬头中识别出审核字段，并提取所述审核字段中的审核标识；

解析单元，用于基于所述审核标识，预设的业务数据处理等级表中查询对应的处理等级信息，其中，所述业务数据处理等级表中存储有若干种场景下数据的优先数据等级。

可选地，在本发明第二方面的第二种实现方式中，所述查询模块包括：

信息提取单元，用于从所述批量处理请求中提取所述业务数据对应的场景信息，其中所述场景信息包括单一场景的信息和复杂场景的信息中的一种；

判断单元，用于根据所述场景信息和处理等级信息，从预设的处理难度系数表格中分别确定与所述场景信息对应的第一难度系数和与所述处理等级信息对应的第二难度系数，基于所述第一难度系数和第二难度系数计算出所述业务数据的处理系数，并判断所述处理系数是否大于预设系数值；

确定单元，用于在判断所述处理系数大于预设系数值时，确定所述批量处理通道为默认通道；以及在判断所述处理系数不大于预设系数值定所述批量处理通道为快速处理通道。

可选地，在本发明第二方面的第三种实现方式中，所述生成模块包括：

第一确定单元，用于根据所述处理等级信息，从预设的策略表格中查询出对应的调整策略，所述调整策略为审核时间阈值和审核节点调整方式，所述策略表格中存储有不同处理等级信息对应的策略版本信息；

第一计算单元，用于根据所述处理等级信息和所述场景信息，计算出所述业务数据的审核总时间长度；

第二计算单元，用于计算所述审核总时间长度与所述审核时间阈值之间的差值，并基于所述差值确定待处理审核节点；

生成单元，用于根据所述审核节点调整方式，将所述待处理审核节点从所述默认通道中剔除，生成快速通道。

可选地，在本发明第二方面的第四种实现方式中，所述提取模块包括：

第二确定单元，用于在所述批量处理请求为批量扣款且快速审核的请求时，根据所述批量处理请求确定每个审核节点审核的最大消耗时间；

比较单元，用于将所述最大消耗时间与所述差值进行比较，得到比较结果；

提取单元，用于根据所述比较结果，确定对应的待处理审核节点。

可选地，在本发明第二方面的第五种实现方式中，所述审核节点包括核算报盘节点、渠道划分节点、卡单节点、打批节点、数据准备节点、报盘节点、查询节点和回盘节点；

所述提取单元，具体用于在所述比较结果的差值范围大于预设的时间差值区间时，确定所述审核节点中功耗消耗大的节点为待处理节点，其中，所述功耗较大的节点包括渠道划分节点、打批节点、数据准备节点和查询节点。

可选地，在本发明第二方面的第六种实现方式中，所述审核模块还用于在所述批量处理通道为默认通道时，调取与所述默认通道对应的批量处理策略对所述业务数据进行审核处理。

本发明第三方面提供了一种批量数据的处理设备，包括：存储器和至少一个处理器，所述存储器中存储有指令，所述存储器和所述至少一个处理器通过线路互连；

所述至少一个处理器调用所述存储器中的所述指令，以使得所述批量数据的处理设备执行上述的批量数据的处理方法的步骤。

本发明的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，当其在计算机上运行时，使得计算机执行上述的批量数据的处理方法的步骤。

本发明提供的技术方案中，通过从批量处理请求中得到处理等级信息确定批量处理通道，并在确定批量处理通道为快速处理通道时，调取默认通道的批量处理策略，提供其中的审核节点，通过对审核节点进行调整以得到快速处理通道的实时通道，基于该实时通道对业务数据进行审核，通过对原有的批量处理通道进行调整，以生成快速批量处理通道，基于该快速批量处理通道对批量业务进行处理，从而大大提高了业务的处理效率，也保证了业务的处理时效。

附图说明

图1为本发明实施例中批量数据的处理方法的第一个实施例示意图；

图2为本发明实施例中批量数据的处理方法的第二个实施例示意图；

图3为本发明实施例中批量数据的处理方法的第三个实施例示意图；

图4为本发明实施例中批量数据的处理方法的第四个实施例示意图；

图5为本发明实施例中默认的批量处理通道的示意图；

图6为本发明实施例中默认的快速处理通道的示意图；

图7为本发明实施例中批量数据的处理装置的一个实施例示意图；

图8为本发明实施例中批量数据的处理装置的另一个实施例示意图；

图9为本发明实施例中批量数据的处理设备的一个实施例示意图。

具体实施方式

针对于上述的缺陷，提出了一种批量数据的处理方法，具体是通过对原有的批量处理通道进行调整，以生成快速批量处理通道，基于该快速批量处理通道对批量业务进行处理，从而大大提高了业务的处理效率，也保证了业务的处理时效。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”或“具有”及其任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

为便于理解，下面对本发明实施例的具体流程进行描述，请参阅图1，本发明实施例中批量数据的处理方法的第一个实施例包括：

101、获取待处理的业务数据，以及批量处理请求；

该步骤中，所述业务数据包括至少两中不同类型或者至少两条同类型的待审核的业务的数据，也即是该业务数据必须是包含有多条数据的数据集合，基于该数据集合进行后续的批量处理。

在实际应用中，所述批量处理请求可以是由用户通过在系统处理系统上通过触控操作触发而产生的系统指令，也可以是在用户启动批量选择操作时触发产生的操作指令，而该请求中具体包含有业务数据的处理标识信息和业务类型等信息。而处理标识信息可以理解为是推送业务数据的紧急程度的指示信息。

102、对批量处理请求进行解析，得到处理等级信息；

在本实施例中，这里的解析具体是提取批量处理请求中的标志位的信息，这里的标志位即是用于表示业务数据的处理紧急程度，在实际应用中，通过通信协议中的帧结构对所述批量处理请求的协议帧进行解析，并识别对应的标志位的赋值，以确定具体的紧急程度的指示信息，具体的，当标志位上为非空时，则确定该批量处理请求为快速审核业务数据请求，若标志位上为空时，则确定该批量处理请求为常规的审核业务数据请求。

根据该标志位上的具体值来确定一个等级范围，然后基于等级范围再确定具体的处理等级信息，在实际应用中，基于批量处理请求中的操作指令和业务类型的百分占比来计算出具体的处理紧急程度的范围值，基于所述处理紧急程度的范围值，从等级划分表格中查询出与所述范围值之间为包含关系的处理等级信息，从而确定处理该业务数据的等级。

103、根据处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

在实际应用中，不同的处理等级信息对应处理业务数据时，会选择不同的处理通道，而该处理通道具体是有多个审核节点拼接在一起形成的业务审核渠道，可选的，也可以理解为是业务审核规则，该完整的审核渠道是基于不同的审核节点组成，每个审核节点对应设有审核规则。

在本实施例中，在该步骤之前，还包括设置不同的批量处理规则，基于这些规则形成规则库，并建立规则与处理等级信息之间的对应关系，在使用时，通过从处理等级信息从规则库中，基于对应关系来查询出对应的规则，基于规则确定对应的批量处理通道。

在实际应用中，对于批量处理通道，这里设置有两种，一种是默认的，也即是预先完善的通道，另一种是定制化通道，该种通道需要根据实际的规则来进行定制化设置。

具体的，对于默认的通道，一般是将处理等级信息设置为5等级以下的业务数据进行使用，而对于大于5等级的，则选择定制化通道进行处理。

104、若批量处理通道为快速处理通道，则调取默认通道对应的批量处理策略，并基于批量处理策略确定默认通道中的审核节点；

该步骤中，这里的快速处理通道指的是定制化通道，也即是说其不存在完整的业务处理通道，在确定批量处理通道为定制化通道时，首先要确定通道模板，然后通过对通道模板进行调整，从而得到对应的快速处理通道，具体的以默认通道作为通道模板，然后进行调整，当然也可以是以上一次得到的业务处理通道作为通道模板来进行调整，确定通道模板后，对通道模板中的审核节点进行提取。得到审核节点集合，进一步的，还可以确定可调整的审核节点。

105、根据处理等级信息，对审核节点进行调整，生成与快速处理通道对应的实时通道；

具体的，根据所述处理等级信息对所述默认通道中的审核节点的属性进行识别，可选的，识别在该处理等级信息对应的调整级别中，对于审核节点中可调整的权限的识别，例如所述审核节点包括核算报盘、渠道划分、卡单、打批、数据准备、报盘、查询和回盘等审核节点，且所述处理等级信息为5级别时，只能对渠道划分、打批、数据准备和查询进行调整，并且其调整的权限为将这些审核节点进行关闭，从而生成新的业务处理通道，即是与所述快速处理通道对应的实时通道。

在实际应用中，还可以是根据处理等级信息查询调整通道的创建策略，基于创建策略对所述默认通道中的审核节点进行调整，以生成实时通道，其中这里的调整包括删除和增加两种方式，而所述删除指的是将默认通道中的审核节点的使用状态修改为不使用，具体可以通过节点屏蔽的方式进行处理，而增加是在原有的两个节点直接增加新的节点。

106、基于实时通道对业务数据进行审核处理。

在本实施例中，对于快速处理通道也可以是设置多种不同等级的通道，具体是根据不同的处理等级信息设置不同的通道生成策略，在应用时，当确定了对应的处理等级信息后，根据处理等级信息查询对已故你的通道生成策略，基于通道生成策略对当前状态下的批量处理通道中的审核节点进行调整。

在本实施例中，在步骤103之后，还包括若批量处理通道为默认通道时，则调取与所述默认通道对应的批量处理策略对所述业务数据进行审核处理。

在实际应用中，所述默认通道指的是直接采用预先设定好的业务处理渠道，对业务数据进行审核，当然也可以理解为是采用上一次审核业务数据时构建的业务处理渠道。

在实际应用中，当选择采用上一次审核业务数据时构建的业务处理渠道时，则该步骤具体包括：

根据根据所述批量处理通道，确定该通道对应的类型或者名称；

基于所述类型或者名称，从历史处理记录中查询对应的历史批量处理通道；

基于历史批量处理通道，调取对应的审核节点，并配置出新的处理渠道；

将业务数据输入至所述处理渠道中，所述业务数据流经所述处理渠道中的每个审核节点进行对应的审核，输出审核结果。

通过对上述提供的方法的执行，通过从批量处理请求中得到处理等级信息确定批量处理通道，并在确定批量处理通道为快速处理通道时，调取默认通道的批量处理策略，提供其中的审核节点，通过对审核节点进行调整以得到快速处理通道的实时通道，基于该实时通道对业务数据进行审核，这样对原有的批量处理通道进行调整，以生成快速批量处理通道的方式对批量业务进行处理，从而大大提高了业务的处理效率，也保证了业务的处理时效。

请参阅图2，本发明实施例中批量数据的处理方法的第二个实施例包括：

201、获取待处理的业务数据，以及批量处理请求；

202、提取批量处理请求中的所有字段抬头，并从所有字段抬头中识别出审核字段，并提取审核字段中的审核标识；

在该步骤之前，还包括控制数据处理系统与业务系统进行握手操作，该握手操作是通过利用通信协议，协商请求的生成规则，业务系统在需要进行批量数据的审批时，基于生成规则封装数据以产生批量处理请求，然后发送给数据处理系统，数据处理系统根据握手后产生的请求生成规则，对接收的批量处理请求进行解析，得到业务数据的审核标识。

203、基于审核标识，预设的业务数据处理等级表中查询对应的处理等级信息；

其中，所述业务数据处理等级表中存储有若干种场景下数据的优先数据等级。

在实际应用中，该审核标识具体可以理解为是业务数据的类型，基于该类型来确定业务数据的优先级，从而得到处理等级信息。

204、根据处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

在本实施例中，在确定批量处理通道时，还包括确定场景信息，基于场景信息和处理等级信息确定批量处理通道，具体的实现步骤包括：

从所述批量处理请求中提取所述业务数据对应的场景信息，其中所述场景信息包括单一场景的信息和复杂场景的信息中的一种；

根据所述场景信息和处理等级信息，从预设的处理难度系数表格中分别确定与所述场景信息对应的第一难度系数和与所述处理等级信息对应的第二难度系数，基于所述第一难度系数和第二难度系数计算出所述业务数据的处理系数，并判断所述处理系数是否大于预设系数值；

若是，则确定所述批量处理通道为默认通道；

若不是，则确定所述批量处理通道为快速处理通道。

205、若批量处理通道为快速处理通道，则调取默认通道对应的批量处理策略，并基于批量处理策略确定默认通道中的审核节点；

在实际应用中，若所述业务数据为扣款业务时，所述快速处理通道即为快速扣款通道，也即是不需要通过复杂的审批，使用特殊的扣款通道直接提交审核扣款，优先的，则这里的批量处理规则可以理解为是从默认通道中确定复杂的审核节点，保留扣款和核算相关的节点，从而形成新的通道，即为快速处理通道。

206、根据处理等级信息，对所述审核节点进行调整，生成与快速处理通道对应的实时通道；

在该步骤中，这里的实时通道指的是根据实际的业务需求进行调整得到的临时通道。

在实际应用中，除了基于默认通道进行改造形成快速处理通道之外，本实施例还包括预先学习各种业务需求生成统一的通道模型，基于通道模型结合实际的批量处理请求来选择增加对应的通道，从而得到快速处理通道，以实现对业务的实时和快速审核。

207、基于实时通道对业务数据进行审核处理。

通过对上述方法的实施，通过从批量处理请求中得到处理等级信息确定批量处理通道，并在确定批量处理通道为快速处理通道时，调取默认通道的批量处理策略，提供其中的审核节点，通过对审核节点进行调整以得到快速处理通道的实时通道，基于该实时通道对业务数据进行审核，实现了针对算报盘场景更加灵活配置，更符合实际应用场景。核算报盘可以根据具体的场景进行自主选择，满足业务在扣款时效上的要求。

请参阅图3，本发明实施例中批量数据的处理方法的第三个实施例包括：

301、获取待处理的业务数据，以及批量处理请求；

302、提取批量处理请求中的所有字段抬头，并从所有字段抬头中识别出审核字段，并提取审核字段中的审核标识；

303、基于审核标识，预设的业务数据处理等级表中查询对应的处理等级信息；

304、根据处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

305、若批量处理通道为快速处理通道，则调取默认通道对应的批量处理策略，并基于批量处理策略确定默认通道中的审核节点；

306、根据处理等级信息，从预设的策略表格中查询出对应的调整策略；

其中，所述调整策略为审核时间阈值和审核节点调整方式，所述策略表格中存储有不同处理等级信息对应的策略版本信息，基于策略版本信息可以得到调整策略；

307、根据处理等级信息和场景信息，计算出业务数据的审核总时间长度；

308、计算审核总时间长度与所述审核时间阈值之间的差值，并基于差值确定待处理审核节点；

309、根据审核节点调整方式，将待处理审核节点从默认通道中剔除，生成快速通道；

在实际应用中，当所述默认通道中的审核节点包括核算报盘、渠道划分、卡单、打批、数据准备、报盘、查询和回盘时，通过定制化的方式生成与批量处理请求相匹配的实时通道具体为：

在确定批量处理请求中业务数据的处理等级信息后，基于处理等级信息计算出批量处理通道的调整策略，可选的，根据请求中的业务数据的处理时限，结合当前时间和当前使用的通道审核时间长度来计算出该业务数据的审核时间，将审核时间与调整策略中的审核时间阈值相比较，若审核时间大于审核时间阈值，则确定需要对当前使用的通道进行修改，并确定修改策略，其中，根据处理等级信息提取通道中与处理等级信息相匹配的可被调整的审核节点，并计算出每个可被调整的审核节点的实际执行时间，基于实际执行时间调整审核节点的审核方式或者是剔除该审核节点，从而得到与批量处理请求相匹配的快速通道。

310、基于实时通道对业务数据进行审核处理。

在实际应用中，若默认的批量处理通道包含审核节点为核算报盘、渠道划分、卡单、打批、数据准备、报盘、查询和回盘时，如图5所示，以批量处理扣款为例，当待处理的业务数据的数据量较大，且扣款场景较为复杂。基于处理等级信息将当前使用的审核通道中的渠道划分、卡单、报盘、数据准备、打批报盘全流程保留。然后在针对时效性要求较高的场景进行提供快速定制化的实时通道，定制化的步骤，如图6中所示，省略去中间打X的步骤。简化流程，并且直接指定渠道，可在1分钟内拿到结果。

通过上述方法的实施，针对核算报盘场景更加灵活配置，更符合实际应用场景，核算报盘可以根据具体的场景进行自主选择，满足业务在扣款时效上的要求。

请参阅图4，本发明实施例中批量数据的处理方法的第四个实施例包括：

401、获取待处理的业务数据，以及批量处理请求；

402、对批量处理请求进行解析，得到处理等级信息；

该步骤中，还包括控制数据处理系统与业务系统进行握手操作，该握手操作是通过利用通信协议，协商请求的生成规则，业务系统在需要进行批量数据的审批时，基于生成规则封装数据以产生批量处理请求，然后发送给数据处理系统，数据处理系统根据握手后产生的请求生成规则，对接收的批量处理请求进行解析，得到业务数据的审核标识。

在实际应用中，该审核标识具体可以理解为是业务数据的类型，基于该类型来确定业务数据的优先级，从而得到处理等级信息。

进一步的，所述根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道包括：

从所述批量处理请求中提取所述业务数据对应的场景信息，其中所述场景信息包括单一场景的信息和复杂场景的信息中的一种；

根据所述场景信息和处理等级信息，从预设的处理难度系数表格中分别确定与所述场景信息对应的第一难度系数和与所述处理等级信息对应的第二难度系数，基于所述第一难度系数和第二难度系数计算出所述业务数据的处理系数，并判断所述处理系数是否为大于预设系数值；

若是，则确定所述批量处理通道为默认通道；

若不是，则确定所述批量处理通道为快速处理通道。

403、根据处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

404、若批量处理通道为快速处理通道，则调取默认通道对应的批量处理策略，并基于批量处理策略确定默认通道中的审核节点；

405、根据处理等级信息，从预设的策略表格中查询出对应的调整策略；

其中所述调整策略为审核时间阈值和审核节点调整方式，所述策略表格中存储有不同处理等级信息对应的策略版本信息；

406、根据处理等级信息和场景信息，计算出业务数据的审核总时间长度；

407、计算审核总时间长度与审核时间阈值之间的差值；

408、根据批量处理请求确定每个审核节点审核的最大消耗时间；

409、将最大消耗时间与差值进行比较，得到比较结果；

410、根据比较结果，确定对应的待处理审核节点；

在实际应用中，所述审核节点包括核算报盘节点、渠道划分节点、卡单节点、打批节点、数据准备节点、报盘节点、查询节点和回盘节点；

所述根据比较结果，确定对应的待处理审核节点包括：

若比较结果的差值范围大于预设的时间差值区间，确定审核节点中功耗消耗大的节点为待处理节点，其中，功耗较大的节点包括渠道划分节点、打批节点、数据准备节点和查询节点。

411、根据审核节点调整方式，将待处理审核节点从默认通道中剔除，生成快速通道；

412、基于实时通道对业务数据进行审核处理。

通过上述方案的实施，由于实时通道场景比较单一，比如催员手工扣款或者针对消费场景的放款，针对固定场景扣款渠道可固定，故无需渠道划分和打批处理流程，收到数据马上报盘出去，也无需定时任务轮训等待处理。在对批量进行优化，催收单笔扣款平均时效由原来18分钟降低至0.2分钟，批量单笔扣款平均时效由原来18分钟降低至5分钟；

故核算报盘有两种方案进行自主选择，批量扣款和快速通道。核算可根据自己实际时间要求，推送标识到资金通道。(如果是系统批扣(即每月固定时间向客户批量发起扣款，比如没有1号还房贷类似)客户对扣款时长无感知，对时效要求不高，可以走批量通道。如果是客户主动还款、或者是催收人员手工向客户扣款，则客户和催收人员在线等待的操作场景可以走快速通道)资金通道根据核算推送的标识来看是走批量通道还是快速通道。解决了催员在线等待时间较长的问题。

通过上述方法的实施，针对核算报盘场景更加灵活配置，更符合实际应用场景。核算报盘可以根据具体的场景进行自主选择，满足业务在扣款时效上的要求。

同时，解决了催员在线等待时间较长的问题，针对消费类型的放款也更加快速。

进一步的，针对时效性要求不高、但是场景较为复杂的批量扣款，沿用批量扣款的通道，更具稳定性。针对时效性较高的扣款，时效上有了较大的提升：催收单笔扣款平均时效由原来18分钟降低至0.2分钟，批量单笔扣款平均时效由原来18分钟降低至5分钟。

上面对本发明实施例中批量数据的处理方法进行了描述，下面对本发明实施例中批量数据的处理装置进行描述，请参阅图7，本发明实施例中批量数据的处理装置的第一个实施例包括：

获取模块701，用于获取待处理的业务数据，以及批量处理请求；

解析模块702，用于对所述批量处理请求进行解析，得到处理等级信息；

查询模块703，用于根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

提取模块704，用于在所述批量处理通道为快速处理通道时，调取默认通道对应的批量处理策略，并基于所述批量处理策略确定所述默认通道中的审核节点；

生成模块705，用于根据所述处理等级信息，对所述审核节点进行调整，生成与所述快速处理通道对应的实时通道；

审核模块706，用于基于所述实时通道对所述业务数据进行审核处理。

在本实施例中，通过对原有的批量处理通道进行调整，以生成快速批量处理通道，基于该快速批量处理通道对批量业务进行处理，从而大大提高了业务的处理效率，也保证了业务的处理时效。

请参阅图8，本发明实施例中批量数据的处理装置的第二个实施例，该批量数据的处理装置具体包括：

获取模块701，用于获取待处理的业务数据，以及批量处理请求；

解析模块702，用于对所述批量处理请求进行解析，得到处理等级信息；

查询模块703，用于根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

提取模块704，用于在所述批量处理通道为快速处理通道时，调取默认通道对应的批量处理策略，并基于所述批量处理策略确定所述默认通道中的审核节点；

生成模块705，用于根据所述处理等级信息，对所述审核节点进行调整，生成与所述快速处理通道对应的实时通道；

审核模块706，用于基于所述实时通道对所述业务数据进行审核处理。

在本实施例中，所述解析模块702包括：

标识提取单元7021，用于提取所述批量处理请求中的所有字段抬头，并从所有字段抬头中识别出审核字段，并提取所述审核字段中的审核标识；

解析单元7022，用于基于所述审核标识，预设的业务数据处理等级表中查询对应的处理等级信息，其中，所述业务数据处理等级表中存储有若干种场景下数据的优先数据等级。

在本实施例中，所述查询模块703包括：

信息提取单元7031，用于从所述批量处理请求中提取所述业务数据对应的场景信息，其中所述场景信息包括单一场景的信息和复杂场景的信息中的一种；

判断单元7032，用于根据所述场景信息和处理等级信息，从预设的处理难度系数表格中分别确定与所述场景信息对应的第一难度系数和与所述处理等级信息对应的第二难度系数，基于所述第一难度系数和第二难度系数计算出所述业务数据的处理系数，并判断所述处理系数是否大于预设系数值；

确定单元7033，用于在判断所述处理系数大于预设系数值时，确定所述批量处理通道为默认通道；以及在判断所述处理系数不大于预设系数值定所述批量处理通道为快速处理通道。

其中，所述生成模块705包括：

第一确定单元7051，用于根据所述处理等级信息，从预设的策略表格中查询出对应的调整策略，所述调整策略为审核时间阈值和审核节点调整方式；

第一计算单元7052，用于根据所述处理等级信息和所述场景信息，计算出所述业务数据的审核总时间长度，所述策略表格中存储有不同处理等级信息对应的策略版本信息；

第二计算单元7053，用于计算所述审核总时间长度与所述审核时间阈值之间的差值，并基于所述差值确定待处理审核节点；

生成单元7054，用于根据所述审核节点调整方式，将所述待处理审核节点从所述默认通道中剔除，生成快速通道。

其中，所述提取模块704包括：

第二确定单元7041，用于在所述批量处理请求为批量扣款且快速审核的请求时，根据所述批量处理请求确定每个审核节点审核的最大消耗时间；

比较单元7042，用于将所述最大消耗时间与所述差值进行比较，得到比较结果；

提取单元7043，用于根据所述比较结果，确定对应的待处理审核节点。

可选地，所述审核节点包括核算报盘节点、渠道划分节点、卡单节点、打批节点、数据准备节点、报盘节点、查询节点和回盘节点；

所述提取单元7043，具体用于在所述比较结果的差值范围大于预设的时间差值区间时，确定所述审核节点中功耗消耗大的节点为待处理节点，其中，所述功耗较大的节点包括渠道划分节点、打批节点、数据准备节点和查询节点。

可选地，所述审核模块706还用于在所述批量处理通道为默认通道时，调取与所述默认通道对应的批量处理策略对所述业务数据进行审核处理。

上面图7和图8从模块化功能实体的角度对本发明实施例中的批量数据的处理装置进行详细描述，下面从硬件处理的角度对本发明实施例中批量数据的处理设备进行详细描述。

图9是本发明实施例提供的一种批量数据的处理设备的结构示意图，该批量数据的处理设备800可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器(central processing units，CPU)810(例如，一个或一个以上处理器)和存储器820，一个或一个以上存储应用程序833或数据832的存储介质830(例如一个或一个以上海量存储设备)。其中，存储器820和存储介质830可以是短暂存储或持久存储。存储在存储介质830的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对批量数据的处理设备800中的一系列指令操作。更进一步地，处理器810可以设置为与存储介质830通信，在批量数据的处理设备800上执行存储介质830中的一系列指令操作,以实现上述批量数据的处理方法的步骤。

批量数据的处理设备800还可以包括一个或一个以上电源840，一个或一个以上有线或无线网络接口850，一个或一个以上输入输出接口860，和/或，一个或一个以上操作系统831，例如Windows Serve，Mac OS X，Unix，Linux，FreeBSD等等。本领域技术人员可以理解，图9示出的批量数据的处理设备结构并不构成对本申请提供的批量数据的处理设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

本发明所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain)，本质上是一个去中心化的数据库，是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一批次网络交易的信息，用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。

本发明还提供一种计算机可读存储介质，该计算机可读存储介质可以为非易失性计算机可读存储介质，该计算机可读存储介质也可以为易失性计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在计算机上运行时，使得计算机执行上述各实施例提供的批量数据的处理方法的步骤。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种批量数据的处理方法，其特征在于，所述批量数据的处理方法包括：

获取待处理的业务数据，以及批量处理请求；

对所述批量处理请求进行解析，得到处理等级信息；

根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

若所述批量处理通道为快速处理通道，则调取默认通道对应的批量处理策略，并基于所述批量处理策略确定所述默认通道中的审核节点；

根据所述处理等级信息，对所述审核节点进行调整，生成与所述快速处理通道对应的实时通道；

基于所述实时通道对所述业务数据进行审核处理。

2.根据权利要求1所述的批量数据的处理方法，其特征在于，所述对所述批量处理请求进行解析，得到处理等级信息包括：

提取所述批量处理请求中的所有字段抬头，并从所有字段抬头中识别出审核字段，并提取所述审核字段中的审核标识；

基于所述审核标识，预设的业务数据处理等级表中查询对应的处理等级信息，其中，所述业务数据处理等级表中存储有若干种场景下数据的优先数据等级。

3.根据权利要求1所述的批量数据的处理方法，其特征在于，所述根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道包括：

从所述批量处理请求中提取所述业务数据对应的场景信息，其中所述场景信息包括单一场景的信息和复杂场景的信息中的一种；

根据所述场景信息和处理等级信息，从预设的处理难度系数表格中分别确定与所述场景信息对应的第一难度系数和与所述处理等级信息对应的第二难度系数，基于所述第一难度系数和第二难度系数计算出所述业务数据的处理系数，并判断所述处理系数是否大于预设系数值；

若是，则确定所述批量处理通道为默认通道；

若不是，则确定所述批量处理通道为快速处理通道。

4.根据权利要求3所述的批量数据的处理方法，其特征在于，所述根据所述处理等级信息，对所述审核节点进行调整，生成与所述快速处理通道对应的实时通道包括：

根据所述处理等级信息，从预设的策略表格中查询出对应的调整策略，所述调整策略为审核时间阈值和审核节点调整方式，所述策略表格中存储有不同处理等级信息对应的策略版本信息；

根据所述处理等级信息和所述场景信息，计算出所述业务数据的审核总时间长度；

计算所述审核总时间长度与所述审核时间阈值之间的差值，并基于所述差值确定待处理审核节点；

根据所述审核节点调整方式，将所述待处理审核节点从所述默认通道中剔除，生成快速通道。

5.根据权利要求4所述的批量数据的处理方法，其特征在于，所述批量处理请求为批量扣款且快速审核的请求时，所述基于所述差值确定待处理审核节点包括：

根据所述批量处理请求确定每个审核节点审核的最大消耗时间；

将所述最大消耗时间与所述差值进行比较，得到比较结果；

根据所述比较结果，确定对应的待处理审核节点。

6.根据权利要求5所述的批量数据的处理方法，其特征在于，所述审核节点包括核算报盘节点、渠道划分节点、卡单节点、打批节点、数据准备节点、报盘节点、查询节点和回盘节点；

所述根据所述比较结果，确定对应的待处理审核节点包括：

若所述比较结果的差值范围大于预设的时间差值区间，确定所述审核节点中功耗消耗大的节点为待处理节点，其中，所述功耗较大的节点包括渠道划分节点、打批节点、数据准备节点和查询节点。

7.根据权利要求1-5任一项所述的批量数据的处理方法，其特征在于，在所述根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道之后，还包括：

若所述批量处理通道为默认通道，则调取与所述默认通道对应的批量处理策略对所述业务数据进行审核处理。

8.一种批量数据的处理装置，其特征在于，所述批量数据的处理装置包括：

获取模块，用于获取待处理的业务数据，以及批量处理请求；

解析模块，用于对所述批量处理请求进行解析，得到处理等级信息；

查询模块，用于根据所述处理等级信息，从预设的批量处理规则库中确定对应的批量处理通道；

提取模块，用于在所述批量处理通道为快速处理通道时，调取默认通道对应的批量处理策略，并基于所述批量处理策略确定所述默认通道中的审核节点；

生成模块，用于根据所述处理等级信息，对所述审核节点进行调整，生成与所述快速处理通道对应的实时通道；

审核模块，用于基于所述实时通道对所述业务数据进行审核处理。

9.一种批量数据的处理设备，其特征在于，所述批量数据的处理设备包括：

存储器和至少一个处理器，所述存储器中存储有指令，所述存储器和所述至少一个处理器通过线路互连；

所述至少一个处理器调用所述存储器中的所述指令，以使得所述批量数据的处理设备执行如权利要求1-7中任一项所述的批量数据的处理方法的步骤。

10.一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述的批量数据的处理方法的步骤。

Images