CN111966673A - 基于大数据的数据审核方法、装置及存储介质 - Google Patents

Abstract

本申请实施例提供一种基于大数据的数据审核方法、装置及存储介质，该方法包括：获取大数据平台中数据表单的应用场景；获取与应用场景对应的用于审核所述数据表单的审核公式；确定多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；确定至少一个目标数据标识对应的数据内容的审核复杂度；按照审核复杂度由低到高的顺序，根据审核公式对至少一个目标数据标识对应的数据内容进行审核，在对至少一个目标数据标识对应的数据内容审核通过之后，对数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核，如此，能够按照审核复杂度由低到高的顺序，对数据内容进行审核，提高数据审核效率。

Description

基于大数据的数据审核方法、装置及存储介质

技术领域

本申请涉及大数据技术领域，具体涉及一种基于大数据的数据审核方法、装置及存储介质。

背景技术

现有的很多数据采集系统，除了系统表单上报验证之外，后台管理数据大都基于人工审核的方式，导致产生很多重复性的工作，浪费大量的人力物力，并且审核质量受人为因素影响。在已有数据表中，用户经常会针对这些数据期望过滤筛选出自己的目标数据，但往往这些目标数据需要经过表内、标间以及历史数据比较计算，过程冗长以及复杂，导致用户想要批量处理变得极其困难。此外，在数据采集系统中，经常会遇到验证需求需要变更的场景。每次审核逻辑的修改都需要重新编码、测试、发布等一系列工作，造成了很大的资源浪费，并且处理的及时性也较滞后。

发明内容

本申请实施例提供一种基于大数据的数据审核方法、装置及存储介质，能够根据应用场景确定用于审核所述数据表单的审核公式，按照审核复杂度由低到高的顺序，对至少一个目标数据标识对应的数据内容进行审核，提高数据审核效率。

本申请实施例的第一方面提供了基于大数据的数据审核方法，所述方法包括：

获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；

获取与所述应用场景对应的用于审核所述数据表单的审核公式；

确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；

确定所述至少一个目标数据标识对应的数据内容的审核复杂度；

按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。

本申请实施例的第二方面提供了一种基于大数据的数据审核装置，所述装置包括：

获取单元，用于获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；以及，获取与所述应用场景对应的用于审核所述数据表单的审核公式；

确定单元，用于确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；以及确定所述至少一个目标数据标识对应的数据内容的审核复杂度；

审核单元，用于按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。

本申请实施例的第三方面提供了一种基于大数据的数据审核装置，包括处理器、存储器、通信接口，以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面所述的方法中的步骤的指令。

本申请实施例的第四方面提供了一种计算机可读存储介质，上述计算机可读存储介质用于存储计算机程序，上述计算机程序被处理器执行，以实现如本申请实施例第一方面所述的方法中所描述的部分或全部步骤。

本申请实施例的第五方面提供了一种计算机程序产品，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面所述的方法中所描述的部分或全部步骤。

实施本申请实施例，具有至少如下有益效果：

可以看出，通过本申请实施例，获取大数据平台中数据表单的应用场景，应用场景为表单验证应用场景或批量审核应用场景，数据表单包括多个数据内容，每一数据内容对应一个数据标识；获取与应用场景对应的用于审核所述数据表单的审核公式；确定多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；确定至少一个目标数据标识对应的数据内容的审核复杂度；按照审核复杂度由低到高的顺序，根据审核公式对至少一个目标数据标识对应的数据内容进行审核，在对至少一个目标数据标识对应的数据内容审核通过之后，对数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核，如此，能够根据应用场景确定用于审核所述数据表单的审核公式，按照审核复杂度由低到高的顺序，对至少一个目标数据标识对应的数据内容进行审核，提高数据审核效率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的一种基于大数据的数据审核方法的流程示意图；

图2为本申请实施例提供的一种地址树的演示示意图；

图3为本申请实施例提供的另一种基于大数据的数据审核方法的流程示意图；

图4为本申请实施例提供的一种基于大数据的数据审核装置的流程示意图；

图5为本申请实施例提供的一种基于大数据的数据审核装置的结构示意图；

图6为本申请实施例提供的如图5所示的基于大数据的数据审核装置的变型装置。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。

在本申请中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本申请所描述的实施例可以与其它实施例相结合。

下面对本申请实施例进行详细介绍。

请参阅图1，图1为本申请实施例提供的一种基于大数据的数据审核方法的流程示意图。如图1所示，本申请实施例提供的基于大数据的数据审核方法应用于基于大数据的数据审核装置，该基于大数据的数据审核方法可包括以下步骤：

101、获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识。

其中，在大数据平台中，所述应用场景可包括表单验证应用场景和批量审核应用场景。

其中，上述数据表单可以是终端设备根据用户填写的数据内容生成的数据表单，也可以是终端设备根据应用程序在运行过程中产生的数据内容生成的数据表单，此处不作限制。

具体实施中，终端设备可获取用户选取的应用场景，若应用场景为表单验证应用场景，则终端设备可对当前页面的数据表单进行审核；若应用场景为批量审核应用场景，则终端设备可将数据表单传输至服务器，服务器可接收到不同的多个终端设备传输的多个数据表单，从而，服务器可对多个数据表单的数据内容进行批量审核。

102、获取与所述应用场景对应的用于审核所述数据表单的审核公式。

本申请实施例中，终端设备和服务器中均可预先设置用于审核数据表单的审核公式，针对不同的应用场景，可设置与应用场景对应的审核公式，具体地，不同的应用场景对应不同的审核需求，进行数据表单审核的准确度要求也不同，因此，可对不同的应用场景下的审核需求设置对应的审核公式，从而，可在获取大数据平台中数据表单的应用场景之后，获取与应用场景对应的审核公式。

103、确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识。

其中，上述预设白名单中包括至少一个目标数据标识可以为多个数据内容中较为重要的数据内容对应的数据标识。

具体实施中，数据表单中包括多个数据内容，多项数据内容中可包括重要项的数据内容以及非重要项的数据类容，例如，有的数据表单中会将重要项的数据内容进行标注，提示用户在填写数据内容时必须填写该项数据内容，而未进行标注的数据内容，用户则可以填写，也可以不填写，因此，可预先构建白名单，将数据表单中的至少一个较为重要的数据内容对应的至少一个数据标识添加至预设白名单，从而，可将多个数据内容对应的多个数据标识与预设白名单中的数据标识进行匹配，得到匹配成功的至少一个目标数据标识。如此，可对数据表单中至少一个目标数据标识对应的数据内容与其他的数据内容区分开，进而，在后续进行数据审核时，提升数据审核效率。

104、确定所述至少一个目标数据标识对应的数据内容的审核复杂度。

本申请实施例中，可根据组成数据内容的数据成分类型、数据内容的数据长度、数据审核步骤的步骤数、历史审核数据记录中的审核时长等指标确定数据内容的审核复杂度，具体地，可针对每一指标设定一个权值，根据上述至少一项指标以及至少一个指标的对应的至少一个权值进行加权运算，得到每一目标数据标识对应的数据内容的审核复杂度。

105、按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。

本申请实施例中，按照审核复杂度由低到高的顺序对所述至少一个目标数据标识对应的数据内容进行审核，可优先审核复杂度较低的数据内容，若审核不通过，则不需要对后面的审核复杂度较高的数据内容进行审核，若审核复杂度较低的数据内容审核通过，则对审核复杂度较高的数据内容进行审核，从而，提升数据审核效率。

可选地，所述审核公式为表单验证应用场景下与所述数据表单对应的第一审核公式，上述步骤105中，所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，包括：

51、按照审核复杂度由低到高的顺序，根据所述第一审核公式生成页面脚本；

52、将所述页面脚本写入所述数据表单中，并通过审核引擎运行所述页面脚本，以对所述至少一个目标数据标识对应的数据内容进行审核。

本申请实施例中，在表单验证应用场景下，可确定与数据表单对应的第一审核公式，按照审核复杂度由低到高的顺序，根据第一审核公式生成页面脚本，通过审核引擎运行页面脚本，从而可按照审核复杂度由低到高的顺序审核至少一个目标数据标识对应的数据内容。

可选地，上述步骤51中，所述根据所述第一审核公式生成页面脚本，包括：

5101、根据所述第一审核公式生成预设脚本；

5102、根据关键字标识从所述数据表单中提取关键字；

5103、根据所述关键字替换所述预设脚本中的预设字段，得到所述页面脚本。

本申请实施例中，可预先设定关键字标识，从而可根据关键字标识提取数据表单中的关键字，进而，根据提取的关键字替换预设脚本中的预设字段，得到所述页面脚本，从而，可运行该页面脚本，实现对所述至少一个目标数据标识对应的数据内容进行审核。

可选地，若所述应用场景为批量审核应用场景，所述数据表单包括待批量审核的N个数据表单，所述N个数据表单具有相同的表单标签，N为正整数，上述步骤105中，所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，包括：

53、根据所述表单标签查找地址树；

54、遍历所述地址树，根据所述地址树中每一子节点的数据内容地址读取数据内容，其中，遍历所述地址树的第二层子节点i以及所述第二层子节点i的所有子节点读取到的数据内容对应相同的目标数据标识，所述地址树中所述第二层子节点i及所述第二层子节点i的所有子节点对应的数据内容的审核复杂度与所述数据内容所处的层数呈正相关；调用与所述数据标识对应的第二审核公式，根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核，所述第二层子节点i为第二层中任一子节点。

本申请实施例中，在批量审核应用场景下，可对多个数据表单进行批量审核。具体地，可设置具有相同的表单标签的数据表单为可以进行批量审核的数据表单，从而，可按照审核复杂度由低到高的顺序对待批量审核的N个数据表单进行批量审核。

其中，上述地址树的根节点可包括表单标签地址，表单标签地址用于存储表单标签，从而，可将N个数据表单相同的表单标签与地址树的根节点对应的表单标签进行匹配，若匹配成功，则确定查找到与表单标签对应的地址树。

其中，通过遍历地址树，可依次根据地址树中各个节点包括的数据内容地址遍历得到具有相同目标数据标识的数据内容，且读取到数据内容的顺序为数据内容的审核复杂度由低到高的顺序，从而，可实现按照审核复杂度将具有相同目标数据标识的数据内容依次进行审核，提升数据审核效率。

可选地，本申请实施例中，所述调用与所述数据标识对应的第二审核公式之前，所述方法还包括：

A1、获取M个数据表单的M个表单标识信息，M为大于N的正整数；

A2、确定所述M个表单标识信息中的具有相同表单标签的N个表单标识信息；

A3、确定所述N个表单标识信息对应的N个数据表单；

上述步骤54中，所述调用与所述数据标识对应的第二审核公式，包括：

A4、根据所述数据标识跳转至预设地址列表中与所述数据标识对应的预设地址；

A5、根据所述预设地址调用所述第二审核公式。

其中，每一数据表单对应的表单标识信息中可包括表单标签，可根据M个表单标识信息中的表单标签筛选出具有相同表单标签的N个表单标识信息，从而可将N个表单标识信息对应的N个数据表单进行批量审核。

其中，上述预设地址列表包括多个预设地址，每一预设地址用于存储一个审核公式，从而，可以根据数据标识跳转至预设地址列表中与数据标识对应的预设地址，进而根据该预设地址调用第二审核公式对数据内容进行批量审核。

可选地，上述步骤54中，所述根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核，包括：

5401、根据所述第二审核公式中的关键字标识从所述数据内容中提取关键字；

5402、根据所述关键字替换所述第二审核公式中的携带所述关键字标识的数据值，并根据替换后的所述第二审核公式执行计算操作，得到计算结果；

5403、根据所述计算结果对所述多个数据内容进行批量审核。

本申请实施例中，可预先设定第二审核公式中的关键字标识，从而可根据关键字标识提取数据内容中的关键字，进而，根据提取的关键字第二审核公式中的携带所述关键字标识的数据值，并根据替换后的所述第二审核公式执行计算操作，得到计算结果，从而，根据计算结果对所述多个数据内容进行批量审核。其中，计算结果例如可以为数值结果，可判断数值结果是否处于预设数值范围，若是，则判断对应的数据内容审核通过。

可选地，在所述根据所述表单标签查找地址树之前，所述方法还包括：

按照所述审核复杂度由低到高的顺序构建地址树，其中，所述地址树的根节点包括表单标签地址，所述表单标签地址用于存储所述表单标签；

所述地址树包括根节点和多层子节点，每一子节点包括数据内容地址，所述数据内容地址用于存储数据内容、所述数据内容的数据标识和所述数据内容所属数据表单的表单标识信息；

所述地址树第二层的多个子节点包括的所述数据内容的数据标识均不相同；

所述第二层子节点i包括的数据内容地址中的数据内容的数据标识与所述第二层子节点i的任一子节点包括的数据内容地址中的数据内容的数据标识相同；

所述地址树中子节点j包括的数据内容地址中的数据内容对应的审核复杂度低于所述子节点j的子节点包括的数据内容地址中的数据内容对应的审核复杂度，高于所述子节点j的父节点包括的数据内容地址中的数据内容对应的审核复杂度，所述子节点j为所述地址树中除了所述根节点以外的任一子节点。

本申请实施例中，如图2所示，为本申请实施例提供的一种地址树的演示示意图，可在地址树的根节点设置表单标签地址，从而，可根据该根节点查找到地址树，进而，从地址树的第二层遍历得到数据内容，具体地，第二层节点i为第二层的任一子节点，可根据该第二层节点i读取一个数据内容A1，然后，根据第二层节点i的下一层(第三层)的子节点i+1读取数据内容A2，根据第二层节点i的下一层(第三层)的子节点i+2读取数据内容A3，以此类推，往下一层的3个子节点分别对应的数据内容地址读取数据内容A4、A5、A6，从而，可读取到具有相同数据标识的多个数据内容，其中，数据内容A1、A2、A3、A4、A5、A6对应的审核复杂度依次从低到高，按照A1、A2、A3、A4、A5、A6的顺序将该多个数据内容进行批量审核，可以实现按照审核复杂度由低到高的顺序进行批量审核。

可以看出，本申请实施例中，通过获取大数据平台中数据表单的应用场景，应用场景为表单验证应用场景或批量审核应用场景，数据表单包括多个数据内容，每一数据内容对应一个数据标识；获取与应用场景对应的用于审核所述数据表单的审核公式；确定多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；确定至少一个目标数据标识对应的数据内容的审核复杂度；按照审核复杂度由低到高的顺序，根据审核公式对至少一个目标数据标识对应的数据内容进行审核，在对至少一个目标数据标识对应的数据内容审核通过之后，对数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核，如此，能够根据应用场景确定用于审核所述数据表单的审核公式，按照审核复杂度由低到高的顺序，对至少一个目标数据标识对应的数据内容进行审核，提高数据审核效率。

请参阅图3，图3是本申请实施例提供的另一种基于大数据的数据审核方法的流程示意图，本申请实施例提供的基于大数据的数据审核方法应用于基于大数据的数据审核装置，该基于大数据的数据审核方法包括：

获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识。若所述应用场景为表单验证应用场景，所述审核公式为表单验证应用场景下与所述数据表单对应的第一审核公式；根据所述第一审核公式生成预设脚本；根据关键字标识从所述数据表单中提取关键字；根据所述关键字替换所述预设脚本中的预设字段，得到所述页面脚本；将所述页面脚本写入所述数据表单中，并通过审核引擎运行所述页面脚本，以对所述至少一个目标数据标识对应的数据内容进行审核。若所述应用场景为批量审核应用场景，所述数据表单包括待批量审核的N个数据表单，根据所述表单标签查找地址树；遍历所述地址树，根据所述地址树中每一子节点的数据内容地址读取数据内容，其中，遍历所述地址树的第二层子节点i以及所述第二层子节点i的所有子节点读取到的数据内容对应相同的目标数据标识，所述地址树中所述第二层子节点i及所述第二层子节点i的所有子节点对应的数据内容的审核复杂度与所述数据内容所处的层数呈正相关；调用与所述数据标识对应的第二审核公式，根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核，所述第二层子节点i为第二层中任一子节点；其中，根据所述第二审核公式中的关键字标识从所述数据内容中提取关键字；根据所述关键字替换所述第二审核公式中的携带所述关键字标识的数据值，并根据替换后的所述第二审核公式执行计算操作，得到计算结果；根据所述计算结果对所述多个数据内容进行批量审核。

可以看出，本申请实施例中，通过在表单验证应用场景下，根据第一审核公式生成预设脚本；根据关键字标识从数据表单中提取关键字；根据关键字替换预设脚本中的预设字段，得到页面脚本；将面脚本写入数据表单中，并通过审核引擎运行页面脚本，以对至少一个目标数据标识对应的数据内容进行审核；在批量审核应用场景下，根据表单标签查找地址树；遍历地址树，根据地址树中每一子节点的数据内容地址读取数据内容，其中，遍历地址树的第二层子节点i以及第二层子节点i的所有子节点读取到的数据内容对应相同的目标数据标识，地址树中第二层子节点i及第二层子节点i的所有子节点对应的数据内容的审核复杂度与数据内容所处的层数呈正相关；调用与数据标识对应的第二审核公式，根据第二审核公式对具有相同的目标数据标识的多个数据内容进行批量审核，第二层子节点i为第二层中任一子节点；其中，根据第二审核公式中的关键字标识从数据内容中提取关键字；根据关键字替换第二审核公式中的携带关键字标识的数据值，并根据替换后的第二审核公式执行计算操作，得到计算结果；根据计算结果对多个数据内容进行批量审核，如此，按照审核复杂度由低到高的顺序，对至少一个目标数据标识对应的数据内容进行审核，提高数据审核效率。

请参阅图4，图4是本申请实施例公开的基于大数据的数据审核装置的结构示意图，如图所示，该服务器包括处理器、存储器、通信接口，以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行以下步骤的指令：

获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；

获取与所述应用场景对应的用于审核所述数据表单的审核公式；

确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；

确定所述至少一个目标数据标识对应的数据内容的审核复杂度；

按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。

在一个可能的示例中，所述审核公式为表单验证应用场景下与所述数据表单对应的第一审核公式，在所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核方面，上述程序包括用于执行以下步骤的指令：

按照审核复杂度由低到高的顺序，根据所述第一审核公式生成页面脚本；

将所述页面脚本写入所述数据表单中，并通过审核引擎运行所述页面脚本，以对所述至少一个目标数据标识对应的数据内容进行审核。

在一个可能的示例中，在所述根据所述第一审核公式生成页面脚本方面，上述程序还包括用于执行以下步骤的指令：

根据所述第一审核公式生成预设脚本；

根据关键字标识从所述数据表单中提取关键字；

根据所述关键字替换所述预设脚本中的预设字段，得到所述页面脚本。

在一个可能的示例中，若所述应用场景为批量审核应用场景，所述数据表单包括待批量审核的N个数据表单，所述N个数据表单具有相同的表单标签，N为正整数，在所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核方面，上述程序包括用于执行以下步骤的指令：

根据所述表单标签查找地址树；

遍历所述地址树，根据所述地址树中每一子节点的数据内容地址读取数据内容，其中，遍历所述地址树的第二层子节点i以及所述第二层子节点i的所有子节点读取到的数据内容对应相同的目标数据标识，所述地址树中所述第二层子节点i及所述第二层子节点i的所有子节点对应的数据内容的审核复杂度与所述数据内容所处的层数呈正相关；调用与所述数据标识对应的第二审核公式，根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核，所述第二层子节点i为第二层中任一子节点。

在一个可能的示例中，在所述调用与所述数据标识对应的第二审核公式之前，上述程序还包括用于执行以下步骤的指令：

获取M个数据表单的M个表单标识信息，M为大于N的正整数；

确定所述M个表单标识信息中的具有相同表单标签的N个表单标识信息；

确定所述N个表单标识信息对应的N个数据表单；

在所述调用与所述数据标识对应的第二审核公式方面，上述程序包括用于执行以下步骤的指令：

根据所述数据标识跳转至预设地址列表中与所述数据标识对应的预设地址；

根据所述预设地址调用所述第二审核公式。

在一个可能的示例中，在所述根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核方面，上述程序包括用于执行以下步骤的指令：

根据所述第二审核公式中的关键字标识从所述数据内容中提取关键字；

根据所述关键字替换所述第二审核公式中的携带所述关键字标识的数据值，并根据替换后的所述第二审核公式执行计算操作，得到计算结果；

根据所述计算结果对所述多个数据内容进行批量审核。

在一个可能的示例中，在所述根据所述表单标签查找地址树之前，上述程序还包括用于执行以下步骤的指令：

按照所述审核复杂度由低到高的顺序构建地址树，其中，所述地址树的根节点包括表单标签地址，所述表单标签地址用于存储所述表单标签；

所述地址树包括根节点和多层子节点，每一子节点包括数据内容地址，所述数据内容地址用于存储数据内容、所述数据内容的数据标识和所述数据内容所属数据表单的表单标识信息；

所述地址树第二层的多个子节点包括的所述数据内容的数据标识均不相同；

所述第二层子节点i包括的数据内容地址中的数据内容的数据标识与所述第二层子节点i的任一子节点包括的数据内容地址中的数据内容的数据标识相同；

所述地址树中子节点j包括的数据内容地址中的数据内容对应的审核复杂度低于所述子节点j的子节点包括的数据内容地址中的数据内容对应的审核复杂度，高于所述子节点j的父节点包括的数据内容地址中的数据内容对应的审核复杂度，所述子节点j为所述地址树中除了所述根节点以外的任一子节点。

请参阅图5，图5是本实施例提供的一种基于大数据的数据审核装置的结构示意图，该装置500包括获取单元501、确定单元502和审核单元503，其中，

所述获取单元501，用于获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；以及，获取与所述应用场景对应的用于审核所述数据表单的审核公式；

所述确定单元502，用于确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；以及确定所述至少一个目标数据标识对应的数据内容的审核复杂度；

所述审核单元503，用于按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。

可选地，所述审核公式为表单验证应用场景下与所述数据表单对应的第一审核公式，在所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核方面，所述审核单元503具体用于：

按照审核复杂度由低到高的顺序，根据所述第一审核公式生成页面脚本；

将所述页面脚本写入所述数据表单中，并通过审核引擎运行所述页面脚本，以对所述至少一个目标数据标识对应的数据内容进行审核。

可选地，在所述根据所述第一审核公式生成页面脚本方面，所述审核单元503具体用于：

根据所述第一审核公式生成预设脚本；

根据关键字标识从所述数据表单中提取关键字；

根据所述关键字替换所述预设脚本中的预设字段，得到所述页面脚本。

可选地，若所述应用场景为批量审核应用场景，所述数据表单包括待批量审核的N个数据表单，所述N个数据表单具有相同的表单标签，N为正整数，在所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核方面，所述审核单元503具体用于：

根据所述表单标签查找地址树；

遍历所述地址树，根据所述地址树中每一子节点的数据内容地址读取数据内容，其中，遍历所述地址树的第二层子节点i以及所述第二层子节点i的所有子节点读取到的数据内容对应相同的目标数据标识，所述地址树中所述第二层子节点i及所述第二层子节点i的所有子节点对应的数据内容的审核复杂度与所述数据内容所处的层数呈正相关；调用与所述数据标识对应的第二审核公式，根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核，所述第二层子节点i为第二层中任一子节点。

可选地，在所述调用与所述数据标识对应的第二审核公式之前，所述获取单元501，还用于获取M个数据表单的M个表单标识信息，M为大于N的正整数；

所述确定单元502，还用于确定所述M个表单标识信息中的具有相同表单标签的N个表单标识信息；确定所述N个表单标识信息对应的N个数据表单；

在所述调用与所述数据标识对应的第二审核公式方面，所述审核单元503具体用于：

根据所述数据标识跳转至预设地址列表中与所述数据标识对应的预设地址；

根据所述预设地址调用所述第二审核公式。

可选地，在所述根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核方面，所述审核单元503具体用于：

根据所述第二审核公式中的关键字标识从所述数据内容中提取关键字；

根据所述关键字替换所述第二审核公式中的携带所述关键字标识的数据值，并根据替换后的所述第二审核公式执行计算操作，得到计算结果；

根据所述计算结果对所述多个数据内容进行批量审核。

可选地，如图6，图6为图6所描述的基于大数据的数据审核装置的变型装置，其与图5相比较，还可以包括：构建单元504，其中，所述构建单元504用于按照所述审核复杂度由低到高的顺序构建地址树，其中，所述地址树的根节点包括表单标签地址，所述表单标签地址用于存储所述表单标签；

所述地址树包括根节点和多层子节点，每一子节点包括数据内容地址，所述数据内容地址用于存储数据内容、所述数据内容的数据标识和所述数据内容所属数据表单的表单标识信息；

所述地址树第二层的多个子节点包括的所述数据内容的数据标识均不相同；

所述第二层子节点i包括的数据内容地址中的数据内容的数据标识与所述第二层子节点i的任一子节点包括的数据内容地址中的数据内容的数据标识相同；

所述地址树中子节点j包括的数据内容地址中的数据内容对应的审核复杂度低于所述子节点j的子节点包括的数据内容地址中的数据内容对应的审核复杂度，高于所述子节点j的父节点包括的数据内容地址中的数据内容对应的审核复杂度，所述子节点j为所述地址树中除了所述根节点以外的任一子节点。

可以看出，本申请实施例中，通过获取大数据平台中数据表单的应用场景，应用场景为表单验证应用场景或批量审核应用场景，数据表单包括多个数据内容，每一数据内容对应一个数据标识；获取与应用场景对应的用于审核所述数据表单的审核公式；确定多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；确定至少一个目标数据标识对应的数据内容的审核复杂度；按照审核复杂度由低到高的顺序，根据审核公式对至少一个目标数据标识对应的数据内容进行审核，在对至少一个目标数据标识对应的数据内容审核通过之后，对数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核，如此，能够根据应用场景确定用于审核所述数据表单的审核公式，按照审核复杂度由低到高的顺序，对至少一个目标数据标识对应的数据内容进行审核，提高数据审核效率。

本申请实施例还提供一种计算机存储介质，其中，该计算机存储介质存储用于电子数据交换的计算机程序，该计算机程序使得计算机执行如上述方法实施例中记载的任何一种基于大数据的数据审核方法的部分或全部步骤。

本申请实施例还提供一种计算机程序产品，所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，该计算机程序使得计算机执行如上述方法实施例中记载的任何一种基于大数据的数据审核方法的部分或全部步骤。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在申请明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件程序模块的形式实现。

所述集成的单元如果以软件程序模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储器包括：U盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储器中，存储器可以包括：闪存盘、只读存储器、随机存取器、磁盘或光盘等。

以上对本申请实施例进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种基于大数据的数据审核方法，其特征在于，所述方法包括：

获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；

获取与所述应用场景对应的用于审核所述数据表单的审核公式；

确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；

确定所述至少一个目标数据标识对应的数据内容的审核复杂度；

按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。

2.根据权利要求1所述的方法，其特征在于，所述审核公式为表单验证应用场景下与所述数据表单对应的第一审核公式，所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，包括：

按照审核复杂度由低到高的顺序，根据所述第一审核公式生成页面脚本；

将所述页面脚本写入所述数据表单中，并通过审核引擎运行所述页面脚本，以对所述至少一个目标数据标识对应的数据内容进行审核。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第一审核公式生成页面脚本，包括：

根据所述第一审核公式生成预设脚本；

根据关键字标识从所述数据表单中提取关键字；

根据所述关键字替换所述预设脚本中的预设字段，得到所述页面脚本。

4.根据权利要求1所述的方法，其特征在于，若所述应用场景为批量审核应用场景，所述数据表单包括待批量审核的N个数据表单，所述N个数据表单具有相同的表单标签，N为正整数，所述按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，包括：

根据所述表单标签查找地址树；

遍历所述地址树，根据所述地址树中每一子节点的数据内容地址读取数据内容，其中，遍历所述地址树的第二层子节点i以及所述第二层子节点i的所有子节点读取到的数据内容对应相同的目标数据标识，所述地址树中所述第二层子节点i及所述第二层子节点i的所有子节点对应的数据内容的审核复杂度与所述数据内容所处的层数呈正相关；调用与所述数据标识对应的第二审核公式，根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核，所述第二层子节点i为第二层中任一子节点。

5.根据权利要求4所述的方法，其特征在于，在所述调用与所述数据标识对应的第二审核公式之前，所述方法还包括：

获取M个数据表单的M个表单标识信息，M为大于N的正整数；

确定所述M个表单标识信息中的具有相同表单标签的N个表单标识信息；

确定所述N个表单标识信息对应的N个数据表单；

所述调用与所述数据标识对应的第二审核公式，包括：

根据所述数据标识跳转至预设地址列表中与所述数据标识对应的预设地址；

根据所述预设地址调用所述第二审核公式。

6.根据权利要求4或5所述的方法，其特征在于，所述根据所述第二审核公式对具有所述相同的目标数据标识的多个数据内容进行批量审核，包括：

根据所述第二审核公式中的关键字标识从所述数据内容中提取关键字；

根据所述关键字替换所述第二审核公式中的携带所述关键字标识的数据值，并根据替换后的所述第二审核公式执行计算操作，得到计算结果；

根据所述计算结果对所述多个数据内容进行批量审核。

7.根据权利要求4所述的方法，其特征在于，在所述根据所述表单标签查找地址树之前，所述方法还包括：

按照所述审核复杂度由低到高的顺序构建地址树，其中，所述地址树的根节点包括表单标签地址，所述表单标签地址用于存储所述表单标签；

所述地址树包括根节点和多层子节点，每一子节点包括数据内容地址，所述数据内容地址用于存储数据内容、所述数据内容的数据标识和所述数据内容所属数据表单的表单标识信息；

所述地址树第二层的多个子节点包括的所述数据内容的数据标识均不相同；

所述第二层子节点i包括的数据内容地址中的数据内容的数据标识与所述第二层子节点i的任一子节点包括的数据内容地址中的数据内容的数据标识相同；

所述地址树中子节点j包括的数据内容地址中的数据内容对应的审核复杂度低于所述子节点j的子节点包括的数据内容地址中的数据内容对应的审核复杂度，高于所述子节点j的父节点包括的数据内容地址中的数据内容对应的审核复杂度，所述子节点j为所述地址树中除了所述根节点以外的任一子节点。

8.一种基于大数据的数据审核装置，其特征在于，所述装置包括：

获取单元，用于获取大数据平台中数据表单的应用场景，所述应用场景为表单验证应用场景或批量审核应用场景，所述数据表单包括多个数据内容，每一数据内容对应一个数据标识；以及，获取与所述应用场景对应的用于审核所述数据表单的审核公式；

确定单元，用于确定所述多个数据内容对应的多个数据标识中属于预设白名单的至少一个目标数据标识；以及确定所述至少一个目标数据标识对应的数据内容的审核复杂度；

审核单元，用于按照审核复杂度由低到高的顺序，根据所述审核公式对所述至少一个目标数据标识对应的数据内容进行审核，在对所述至少一个目标数据标识对应的数据内容审核通过之后，对所述数据表单中除了所述至少一个目标数据标识对应的数据内容之外的其他数据内容进行审核。

9.一种基于大数据的数据审核装置，其特征在于，包括处理器、存储器和通信接口，所述存储器用于存储一个或多个程序，并且被配置由所述处理器执行，所述程序包括用于执行如权利要求1-7任一项所述的方法中的步骤的指令。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质用于存储计算机程序，所述计算机程序被处理器执行，以实现如权利要求1-7任一项所述的方法。

Images