CN117453747A - 一种数据质量检测方法、装置、电子设备及存储介质 - Google Patents

Abstract

本发明实施例公开了一种数据质量检测方法、装置、电子设备及存储介质。该方法包括：响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，所述机构数据包括至少一个待检测字段；从所述至少一个待检测字段中确定目标检测字段，并确定所述目标检测字段所属的目标检测数据项；根据所述目标检测数据项，确定所述目标检测字段的目标检测方法和目标检测参数，并根据所述目标检测方法和所述目标检测参数，对所述目标检测字段进行质量检测。本发明实施例的技术方案，可以实现能够适应性的灵活满足对不同的机构数据的质量进行检测。

Description

一种数据质量检测方法、装置、电子设备及存储介质

技术领域

本发明实施例涉及数据检测技术领域，尤其涉及一种数据质量检测方法、装置、电子设备及存储介质。

背景技术

企业内部通常存在例如网点、部门和营业室等等机构，每个机构都有其自身的机构数据，对机构数据的质量检测对于企业的数据质量管控有着十分重要的意义。

目前，对于不同机构数据质量检测方案检测灵活性不足，无法适应性地满足针对不同机构数据的数据质量检测要求，叩待解决。

发明内容

本发明实施例提供了一种数据质量检测方法、装置、电子设备及存储介质，以实现能够适应性的灵活满足对不同的机构数据的质量进行检测。

根据本发明的一方面，提供了一种数据质量检测方法，可以包括：

响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段；

从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项；

根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。

根据本发明的另一方面，提供了一种数据质量检测装置，可以包括：

机构数据获取模块，用于响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段；

目标检测数据项确定模块，用于从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项；

目标检测字段质量检测模块，用于根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。

根据本发明的另一方面，提供了一种电子设备，可以包括：

至少一个处理器；以及

与至少一个处理器通信连接的存储器；其中，

存储器存储有可被至少一个处理器执行的计算机程序，计算机程序被至少一个处理器执行，以使至少一个处理器执行时实现本发明任意实施例所提供的数据质量检测方法。

根据本发明的另一方面，提供了一种计算机可读存储介质，其上存储有计算机指令，该计算机指令用于使处理器执行时实现本发明任意实施例所提供的数据质量检测方法。

本发明实施例的技术方案，响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段；从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项；根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。上述技术方案，可以通过确定与目标检测字段的目标检测数据项对应的目标检测字段的目标检测方法和目标检测参数，对目标检测字段进行质量检测，以使对目标检测字段进行质量检测的方式能够满足对目标检测字段进行质量检测的需求，从而可以实现能够适应性的灵活满足对不同的机构数据的质量进行检测。

应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或是重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是根据本发明实施例一提供的一种数据质量检测方法的流程图；

图2是根据本发明实施例提供的另一种数据质量检测方法的流程图；

图3是根据本发明实施例提供的又一种数据质量检测方法的流程图；

图4是根据本发明实施例提供的又一种数据质量检测方法中一可选示例的流程图；

图5是根据本发明实施例提供的一种数据质量检测装置的结构框图；

图6是实现本发明实施例的数据质量检测方法的电子设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。“目标”、“原始”等的情况类似，在此不再赘述。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

图1是本发明实施例中提供的一种数据质量检测方法的流程图。本实施例可适用于数据质量检测的情况。该方法可以由本发明实施例提供的数据质量检测装置来执行，该装置可以由软件和/或硬件的方式实现，该装置可以集成在电子设备上，该电子设备可以是各种用户终端或服务器。

参见图1，本发明实施例的方法具体包括如下步骤：

S110、响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段。

其中，数据质量检测指令是指示对机构数据进行质量检测的指令。机构数据是来自于企业机构的需求进行质量检测的数据；机构数据可以是在企业机构的前端输入的数据；机构数据可以是机构内部工作人员生成的，机构数据还可以是在机构办理业务的客户生成的，在本发明实施例中，对机构数据的数据内容以及来源不做具体的限定。待检测字段是机构数据中可进行质量检测的字段。

在本发明实施例中，可以响应于数据质量检测指令，从数据质量检测指令中或其他来源处，获取与数据质量检测指令对应的待进行数据质量检测的机构数据。

S120、从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项。

其中，目标检测字段是需求进行质量检测的字段；目标检测字段的数量可以是一个或多个；目标检测字段还可以与至少一个待检测字段一一对应，即可以将至少一个待检测字段都作为目标检测字段。目标检测数据项是目标检测字段的数据项。

在本发明实施例中，在目标检测字段的数量为多个的情况下，可以针对目标检测字段中的每个目标检测字段，确定目标检测字段所属的目标检测数据项。

在本发明实施例中，可以是按照一定的检测顺序，从至少一个待检测字段中确定目标检测字段；还可以按照至少一个待检测字段在机构数据中的排列顺序，从至少一个待检测字段中确定目标检测字段；还可以从至少一个待检测字段中随机确定目标检测字段；还可以根据质量检测需求，从至少一个待检测字段中确定目标检测字段，在本发明实施例中，对从至少一个待检测字段中确定目标检测字段的方式不做具体的限定。

在本发明实施例中，在机构数据中可以包括目标检测字段所属的目标检测数据项的情况下，可以根据目标检测字段，从机构数据中获取目标检测字段所属的目标检测数据项，例如机构数据中包括“办理业务类型：账户注销”，目标检测字段为“账户注销”，则从机构数据中可以获取目标检测数据项为“办理业务类型”；还可以对目标检测字段进行字段分析，确定目标检测字段所属的目标检测数据项，例如目标检测字段为“基本账户”，对目标检测字段进行字段分析，可以确定目标检测字段所属的目标检测数据项为“账户性质”；还可以根据目标检测字段在机构数据的位置，确定目标检测字段所属的目标检测数据项，例如，目标检测字段位于机构数据中第五行的位置，该位置为“业务明细”数据项对应的字段位于的位置，可以确定目标检测字段所属的目标检测数据项为“业务明细”。在本发明实施例中，对确定目标检测字段所属的目标检测数据项的方式不做具体的限定。

S130、根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。

其中，目标检测方法是用于对目标检测字段进行质量检测的方法，目标检测方法例如可以是validate()方法等等。目标检测参数是目标检测方法在使用时需求传入的参数。

在本发明实施例中，可以预先针对企业或机构可能使用到的所有可进行质量检测的所有可检测数据项，确定所有可检测数据项分别对应的备选检测方法以及备选检测参数并进行保存，其中，所有可检测数据项包括目标检测数据项；可以从所有可检测数据项分别对应的备选检测方法和备选检测参数中，确定与目标检测数据项对应的目标检测方法和目标检测参数。还可以预先设置用于数据质量检测的至少一个可选检测方法和至少一个可选检测参数，根据目标检测数据项，从至少一个可选检测方法中确定适用于目标检测数据项的目标检测方法，从至少一个可选检测参数中确定适用于目标检测数据项的目标检测参数。在本发明实施例中，对根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数的方式不做具体的限定。

在本发明实施例中，根据目标检测数据项，确定得到的目标检测字段的目标检测方法的数量可以是一个或多个，确定得到的目标检测字段的目标检测参数的数量可以是一个或多个；在可以目标检测字段的目标检测方法的数量为多个的情况下，可以是逐个调用目标检测方法以及其所需的目标检测参数，对目标检测字段进行质量检测。

在本发明实施例中，在根据目标检测方法和目标检测参数，对目标检测字段进行质量检测检测完成后，可以结束针对机构数据的质量检测，还可以返回执行从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项的步骤，以确定新的目标检测字段进行质量检测，直至某目标检测字段检测失败，或，至少一个待检测字段遍历检测完成。

在本发明实施例中，还可以响应于第一质量检测指令，获取待进行数据质量检测的第一数据，其中，第一数据包括至少一个第一检测字段；针对至少一个第一检测字段中的每个第一检测字段，确定第一检测字段的第一检测数据项；根据第一检测数据项，确定第一检测字段的第一检测方法和第一检测参数，并根据第一检测方法和第一检测参数，对第一检测字段进行质量检测，并将质量检测结果进行展示。上述方案，可以对作为机构数据的第一数据中的全部可以进行质量检测的字段都进行质量检测，从而可以使用户获知第一数据中的存在问题的字段，从而便于用户对第一数据的修改。

可以理解的是，企业内部通常存在例如网点、部门和营业室等等机构，每个机构都有其自身的机构数据，企业内不同的系统对于这些机构数据的处理方法以及标准各不相同，从而形成了不同的机构树以及不同的机构管理逻辑，但是企业级机构数据对数据质量的要求具有多样化的特性，采用本发明实施例的技术方案，可以在企业级机构数据对数据质量的要求具有多样化的情况下，可面向多样化的数据质量要求建立多样化的数据质量检测，实现适应于企业级机构信息管理系统业务场景需求的数据质量检测，提高对企业数据质量检测的灵活性，适应性地满足企业级机构数据的数据质量管控要求，满足业务检测数据质量的需求。

本发明实施例的技术方案，响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段；从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项；根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。上述技术方案，可以通过确定与目标检测字段的目标检测数据项对应的目标检测字段的目标检测方法和目标检测参数，对目标检测字段进行质量检测，从而可以实现能够适应性的灵活满足对不同的机构数据的质量进行检测。

一种可选的技术方案，在从至少一个待检测字段中确定目标检测字段之前，数据质量检测方法，还包括：获取基础校验方法和基础校验参数；根据基础校验方法和基础校验参数，对机构数据进行基础校验；从至少一个待检测字段中确定目标检测字段，包括：在基础校验成功的情况下，从至少一个待检测字段中确定目标检测字段。

其中，基础检测方法是用于对机构数据进行基础校验的方法。基础检测参数是基础检测方法在使用时需求传入的参数。

在本发明实施例中，可以在从至少一个待检测字段中确定目标检测字段之前，对机构数据进行例如校验机构数据中的各个字段是否合法和/或是否符合质量需求、长度是否处于预设范围内等等基础校验，从而可以提高后续针对机构数据进行质量检测的效率。

在本发明实施例中，可以将机构数据作为一个整体，根据基础校验方法和基础校验参数，对整体的机构数据进行基础校验；还可以针对机构数据中的各字段中的每个字段，根据基础校验方法和基础校验参数对字段进行校验；还可以遍历机构数据中的各字段，根据基础校验方法和基础校验参数对遍历的字段进行校验；还可以针对机构数据中的至少一个待检测字段中的每个待检测字段，根据基础校验方法和基础校验参数对待检测字段进行校验。在本发明实施例中，对根据基础校验方法和基础校验参数，对机构数据进行基础校验的方式不作具体的限定。

在本发明实施例中，可以响应于数据质量检测指令，获取待进行数据质量检测的机构数据之前，获取基础校验方法和基础校验参数，并根据基础校验方法和基础校验参数，对机构数据进行基础校验；还可以在响应于数据质量检测指令，获取待进行数据质量检测的机构数据之后，在从至少一个待检测字段中确定目标检测字段之前，获取基础校验方法和基础校验参数，并根据基础校验方法和基础校验参数，对机构数据进行基础校验；还可以获取基础校验方法和基础校验参数，在前端输入机构数据时，根据基础校验方法和基础校验参数，对机构数据进行基础校验，例如可以在存在机构数据输入动作时，对已输入的机构数据进行基础校验，再例如可以周期性的对已输入的机构数据进行基础校验，再例如可以在对机构数据全部输入完成后，对机构数据进行基础校验，在机构数据通过基础校验后，才可以对机构数据进行保存等操作并传入后端进行质量检测。

在本发明实施例，可以在基础校验成功的情况下，从至少一个待检测字段中确定目标检测字段，即可以在基础校验成功的情况下，才可以执行对从至少一个待检测字段中确定目标检测字段并对目标检测字段进行质量检测的步骤。

在本发明实施例中，可以获取基础校验方法和基础校验参数；根据基础校验方法和基础校验参数，对机构数据进行基础校验；在基础校验成功的情况下，从至少一个待检测字段中确定目标检测字段。上述技术方案，可以通过对机构数据进行基础校验，并在基础校验成功的情况下，才会对从至少一个待检测字段中确定目标检测字段并对目标检测字段进行质量检测的步骤，从而可以在后续针对机构数据进行质量检测时减少工作量，提高后续针对机构数据进行质量检测的效率。

另一种可选的技术方案，数据质量检测方法，还包括：响应于修改质量检测指令，获取修改前数据和修改后数据，并根据修改前数据和修改后数据，确定至少一个修改字段；针对至少一个修改字段中的每个修改字段，确定修改字段的修改数据项；根据修改数据项，确定修改字段的修改检测方法和修改检测参数，并根据修改检测方法和修改检测参数，对修改字段进行质量检测。

其中，修改质量检测指令是指示对至少一个修改字段进行质量检测的指令。修改前数据是修改前的机构数据。修改后数据是修改后得到的机构数据。修改字段是修改后数据中需求进行质量检测的字段。修改数据项是修改字段的数据项。修改检测方法是用于对修改字段进行质量检测的方法。修改检测参数是修改检测方法在使用时需求传入的参数。

在本发明实施例中，可以将修改前数据和修改后数据之间的至少一个差异字段作为至少一个修改字段；还可以将修改后数据中的至少一个需求进行质量检测的字段作为至少一个修改字段。在本发明实施例中，对根据修改前数据和修改后数据，确定至少一个修改字段的方式不做具体的限定。

在本发明实施例中，还可以是响应于修改质量检测指令，直接获取至少一个被修改的字段作为至少一个修改字段。

在本发明实施例中，还可以是按照一定的修改检测顺序，从至少一个修改字段中确定修改检测字段；还可以按照至少一个修改字段在修改后数据中的排列顺序，从至少一个修改字段中确定修改检测字段；还可以从至少一个修改字段中随机确定修改检测字段；还可以根据质量检测需求，从至少一个修改字段中确定修改检测字段。在确定得到修改检测字段之后，确定修改检测字段的修改数据项，根据修改数据项，确定修改检测字段的修改检测方法和修改检测参数，并根据修改检测方法和修改检测参数，对修改检测字段进行质量检测；在对修改检测字段进行质量检测成功的情况下，可以重复执行上述从至少一个修改字段中确定修改检测字段的方法；在对修改检测字段进行质量检测失败的情况下，生成修改失败提示信息，并对修改失败提示信息进行展示。上述方案，可以在对修改字段进行质量检测失败的情况下，停止对未进行修改的字段进行质量检测，从而可以节省已确定修改后数据存在质量问题的情况下对未修改字段继续进行质量检测的资源消耗。

在本发明实施例中，在获取修改前数据和修改后数据，并根据修改前数据和修改后数据，确定至少一个修改字段之前，还可以对修改后数据进行基础校验，在基础校验通过的情况下，再进行后续的质量检测步骤。

在本发明实施例中，确定修改字段的修改数据项的方式，与，确定目标检测字段所属的目标检测数据项的方式可以相同也可以不同，在此不作具体赘述。根据修改数据项，确定修改字段的修改检测方法和修改检测参数，并根据修改检测方法和修改检测参数，对修改字段进行质量检测的方式，与，根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测的方式可以相同也可以不同，在此不作具体赘述。

在本发明实施例中，可以在对至少一个修改字段质量检测失败的情况下，若此前对修改前数据质量检测成功，则可以将修改前数据仍作为原本的机构数据进行保存；在对至少一个修改字段质量检测成功的情况下，可以保存修改前数据作为备份数据。

示例性的，可以在系统前端页面对已有的机构数据进行修改操作，将修改前的机构数据作为修改前数据，将修改后的机构数据作为修改后数据；在前端对修改后数据进行基础校验，在基础校验通过的情况下，用户可以在系统前端页面点击“保存”等按钮，生成修改质量检测指令，并将修改前数据和修改后数据从前端传递到后端；后端响应于修改质量检测指令，获取修改前数据和修改后数据，并根据修改前数据和修改后数据，确定至少一个修改字段；循环遍历至少一个修改字段，针对当前遍历的修改字段，确定修改字段的修改数据项；根据修改数据项，在数据表中进行查询，确定修改字段的修改检测方法fld_validator和修改检测参数fld_validator_parm，并根据修改检测方法和修改检测参数，对修改字段进行质量检测；在对遍历过程中若对某个修改字段质量检测失败的情况下，停止遍历，生成检测失败提示信息并进行展示，以提示修改的哪个地方有误；在每个修改字段质量检测都成功的情况下，可以保存修改后数据。

在本发明实施例中，还可以响应于新增质量检测指令，获取新增前数据和新增后数据，并根据新增前数据和新增后数据，确定至少一个新增字段；针对至少一个新增字段中的每个新增字段，确定新增字段的新增数据项；根据新增数据项，确定新增字段的新增检测方法和新增检测参数，并根据新增检测方法和新增检测参数，对新增字段进行质量检测。在本发明实施例中，对机构数据进行新增后得到的新增后数据的质量检测的过程与对对机构数据进行修改后得到的修改后数据的质量检测的过程可以相同也可以不同。

在本发明实施例中，可以响应于修改质量检测指令，获取修改前数据和修改后数据，并根据修改前数据和修改后数据，确定至少一个修改字段；针对至少一个修改字段中的每个修改字段，确定修改字段的修改数据项；根据修改数据项，确定修改字段的修改检测方法和修改检测参数，并根据修改检测方法和修改检测参数，对修改字段进行质量检测。上述方案，可以在对机构数据进行修改后也可以进行质量检测，从而增加了数据质量检测的适应性。

又一种可选的技术方案，确定目标检测字段所属的目标检测数据项，包括：确定目标检测字段所属的目标检测数据项、字段类型以及字段长度；根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，包括：根据目标检测数据项、字段类型以及字段长度，确定目标检测字段的目标检测方法和目标检测参数。

其中，字段类型是目标检测字段的字段类型。字段长度是目标检测字段的字段长度。

可以理解的是，在目标检测字段的字段类型和字段长度不同的情况下，其进行质量检测时采用的目标检测方法和目标检测参数可能不同，例如在字段类型为英文的情况下，若采用中文的检测方法对目标检测字段进行质量检测是，则会导致质量检测结果不准确的问题，因此可以确定目标检测字段所属的目标检测数据项、字段类型以及字段长度，根据目标检测数据项、字段类型以及字段长度，确定目标检测字段的目标检测方法和目标检测参数。

在本发明实施例中，可以是确定目标检测字段所属的目标检测数据项，和，目标检测字段在机构数据中合法和/或符合质量需求的字段类型以及字段长度，其中，目标检测字段在不同的机构数据中的合法和/或符合质量需求字段类型以及字段长度可能不同；根据目标检测数据项、字段类型以及字段长度，确定目标检测字段的目标检测方法和目标检测参数。

在本发明实施例中，还可以确定目标检测字段所属的目标检测数据项，根据目标检测数据项确定目标检测字段合法和/或符合质量需求的字段类型和字段长度；根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数；根据字段类型、字段长度、目标检测方法和目标检测参数，对目标检测字段进行质量检测，例如将字段类型和字段长度用于检测目标检测字段的类型和长度是否合法和/或是否符合质量需求。

在本发明实施例中，可以确定目标检测字段所属的目标检测数据项、字段类型以及字段长度；根据目标检测数据项、字段类型以及字段长度，确定目标检测字段的目标检测方法和目标检测参数。上述方案，可以确定得到与目标检测字段更为匹配的目标检测方法和目标检测参数。

图2是本发明实施例中提供的另一种数据质量检测方法的流程图。本实施例以上述各技术方案为基础进行优化。在本实施例中，可选的，根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，包括：根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测方法中确定目标检测字段的目标检测方法；根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测参数中确定目标检测字段的目标检测参数。其中，与上述各实施例相同或相应的术语的解释在此不再赘述。

参见图2，本实施例的方法具体可以包括如下步骤：

S210、响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段。

S220、从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项。

S230、根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测方法中确定目标检测字段的目标检测方法。

其中，可检测数据项为可以进行质量检测的数据项。备选检测方法是备选的可以用于进行质量检测的方法。

在本发明实施例中，可以确定至少一个企业或机构可能使用到的可能需求进行质量检测的可检测数据项，确定至少一个可检测数据项分别对应的备选检测方法以及备选检测参数并进行保存，其中，所有可检测数据项包括目标检测数据项；可以根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测方法中确定目标检测字段的目标检测方法；根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测参数中确定目标检测字段的目标检测参数。

在本发明实施例中，可以预先确定至少一个可能会使用到的备选检测方法以及至少一个可能会使用到的备选检测参数，并确定至少一个可检测数据项与至少一个备选检测方法和至少一个备选检测参数之间的映射关系，将与可检测数据项具有映射关系的备选检测方法和备选检测参数作为可检测数据项对应的备选检测方法和备选检测参数。

S240、根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测参数中确定目标检测字段的目标检测参数。

其中，备选检测参数是备选的可以用于在使用备选检测参数时需求传入的参数。

S250、根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。

本发明实施例的技术方案，根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测方法中确定目标检测字段的目标检测方法；根据目标检测数据项，从数据库中存储的至少一个可检测数据项分别对应的备选检测参数中确定目标检测字段的目标检测参数。上述技术方案，可以根据目标检测数据项，从已有的至少一个备选检测方法和至少一个备选检测参数确定目标检测方法和目标检测参数，从而加快确定目标检测方法和目标检测参数的速度以及增加确定目标检测方法和目标检测参数的准确性，从而便于快速对目标检测字段进行质量检测，从而提高用户的体验。

一种可选的技术方案，数据质量检测方法，还包括：获取至少一个可检测数据项，以及，至少一个可检测数据项对应的数据检测规则；根据数据检测规则，确定至少一个可检测数据项分别对应的备选检测方法以及备选检测参数；将至少一个可检测数据项，以及至少一个可检测数据项分别对应的备选检测方法以及备选检测参数进行保存。

其中，数据检测规则是能够表征对可检测数据项进行质量检测的规则；数据检测规则可以是在前期根据业务要求，梳理企业级机构数据项的数据标准制定出的完整地检测规则。

在本发明实施例中，可以预先设置至少一个可检测数据项对应的数据检测规则或从其他地方获取至少一个可检测数据项对应的数据检测规则；获取至少一个可检测数据项，以及，至少一个可检测数据项对应的数据检测规则；对数据检测规则进行分析或通过其他操作进行处理，确定至少一个可检测数据项分别对应的备选检测方法以及备选检测参数；将至少一个可检测数据项，以及至少一个可检测数据项分别对应的备选检测方法以及备选检测参数在数据库或内部存储空间等地进行保存。在本发明实施例中，对根据数据检测规则，确定至少一个可检测数据项分别对应的备选检测方法以及备选检测参数的方式不做具体的限定。

需要注意的是，至少一个可检测数据项对应的数据检测规则，可以是至少一个可检测数据项分别对应的数据检测规则，还可以是至少一个可检测数据项对应有一个整体的数据检测规则。

需要注意的是，对于具有质量检测需求相同的可检测数据项，可以对应有相同的备选检测方法以及备选检测参数，对于具有不同质量检测需求相同的可检测数据项则分别建立独立的备选检测方法以及备选检测参数。

在本发明实施例中，可以在数据库中建立数据表，将至少一个可检测数据项，以及至少一个可检测数据项分别对应的备选检测方法以及备选检测参数可以保存在数据表中，该数据表不仅可以保存至少一个可检测数据项，以及至少一个可检测数据项分别对应的备选检测方法以及备选检测参数，还可以将至少一个可检测数据项分别对应的数据项名称、合法的字段长度以及合法的数据类型也进行保存，在后续进行数据质量检测时，也可以将数据项名称、合法的字段长度以及合法的数据类型也作为对目标检测字段进行质量检测的因素，例如可以根据目标检测数据项，确定目标检测字段的数据项名称、合法的字段长度、合法的数据类型、目标检测方法和目标检测参数，并根据数据项名称、合法的字段长度、合法的数据类型、目标检测方法和目标检测参数，对目标检测字段进行质量检测。

示例性的，可以针对至少一个可检测数据项中的每个可检测数据项，可以根据数据检测规则，为可检测数据项建立单独的java文件实现Validator类，并重写校验方法validate()作为可检测数据项对应的备选检测方法，将文件名以及对可检测数据项进行质量检测时需要的入参记录在可检测数据项对应的数据表中。

在本发明实施例中，获取至少一个可检测数据项，以及，至少一个可检测数据项对应的数据检测规则；根据数据检测规则，确定至少一个可检测数据项分别对应的备选检测方法以及备选检测参数；将至少一个可检测数据项，以及至少一个可检测数据项分别对应的备选检测方法以及备选检测参数进行保存。上述方案，可以根据数据检测规则确定至少一个可检测数据项分别对应的备选检测方法以及备选检测参数，从而可以应对所有需要进行质量检测的机构数据的质量检测，使得到的至少一个可检测数据项分别对应的备选检测方法以及备选检测参数更为符合业务需求。

图3是本发明实施例中提供的又一种数据质量检测方法的流程图。本实施例以上述各技术方案为基础进行优化。在本实施例中，可选的，从至少一个待检测字段中确定目标检测字段，包括：按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段；数据质量检测方法，还包括：在对目标检测字段进行质量检测成功的情况下，重复执行按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段的步骤；在目标检测字段质量检测失败的情况下，生成检测失败提示信息，并对检测失败提示信息进行展示。其中，与上述各实施例相同或相应的术语的解释在此不再赘述。

参见图3，本实施例的方法具体可以包括如下步骤：

S310、响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段。

S320、按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项。

其中，检测顺序是对至少一个待检测字段进行质量检测的顺序；检测顺序例如可以是至少一个待检测字段在机构数据中的前后顺序，检测顺序再例如可以是至少一个待检测字段的字段长度顺序，等等。

在本发明实施例中，可以按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项，例如可以在第一次从至少一个待检测字段中确定目标检测字段的情况下，将字段顺序为第一位的待检测字段作为目标检测字段。

S330、根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。

S340、在对目标检测字段进行质量检测成功的情况下，返回执行S320。

在本发明实施例中，在对目标检测字段进行质量检测成功的情况下，可以对未进行质量检测的待检测字段继续进行质量检测，例如可以在第一次重复执行按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段的步骤的情况下，将字段顺序为第二位的待检测字段作为目标检测字段。

在本发明实施例中，提及的质量检测成功即为对字段质量检测通过，字段合法且符合质量需求。

S350、在目标检测字段质量检测失败的情况下，生成检测失败提示信息，并对检测失败提示信息进行展示。

在本发明实施例中，在目标检测字段质量检测失败的情况下，即说明机构数据中存在非法字段或不符合质量需求的字段，可以生成用于提示用户或工作人员质量检测失败的提示信息，该提示信息可以包括目标检测字段质量检测失败的原因等等内容，并对检测失败提示信息向后端工作人员和/或前端用户进行展示。

在本发明实施例中，提及的质量检测失败即为对字段质量检测没有通过，字段非法且不符合质量需求。

本发明实施例的技术方案，按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段；在对目标检测字段进行质量检测成功的情况下，重复执行按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段的步骤；在目标检测字段质量检测失败的情况下，生成检测失败提示信息，并对检测失败提示信息进行展示。上述技术方案，可以通过在质量检测成功的情况下继续对其他待检测字段进行质量检测，在质量检测失败的情况下停止质量检测，生成检测失败提示信息并展示，可以在质量检测失败时，在已知机构数据不合法或不满足质量需求的情况下，无需消耗更多资源对其他待检测字段进行质量检测，从而节省了资源消耗。

为了更好的理解上述本发明实施例的技术方案，在此提供一种可选示例。示例性的，参见图4，可以在前端页面输入机构数据；前端将机构数据传递给后端；后端循环遍历机构数据中的至少一个待检测字段，针对遍历到的待检测字段，确定待检测字段的数据项，根据数据项从表中查询检测方法和检测参数；调用检测方法和检测参数对遍历到的待检测字段进行质量检测；在质量检测结束后，将针对机构数据的质量检测结果返回到前端。

图5为本发明实施例提供的数据质量检测装置的结构框图，该装置用于执行上述任意实施例所提供的数据质量检测方法。该装置与上述各实施例的数据质量检测方法属于同一个发明构思，在数据质量检测装置的实施例中未详尽描述的细节内容，可以参考上述数据质量检测方法的实施例。参见图5，该装置具体可包括：机构数据获取模块410、目标检测数据项确定模块420和目标检测字段质量检测模块430。

其中，机构数据获取模块410，用于响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段；

目标检测数据项确定模块420，用于从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项；

目标检测字段质量检测模块430，用于根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。

可选的，目标检测字段质量检测模块430，可以包括：

目标检测方法确定单元，用于根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测方法中确定目标检测字段的目标检测方法；

第一目标检测参数确定单元，用于根据目标检测数据项，从至少一个可检测数据项分别对应的备选检测参数中确定目标检测字段的目标检测参数。

可选的，在上述装置的基础上，该装置，还可以包括：

数据检测规则获取模块，用于获取至少一个可检测数据项，以及，至少一个可检测数据项对应的数据检测规则；

备选检测参数确定模块，用于根据数据检测规则，确定至少一个可检测数据项分别对应的备选检测方法以及备选检测参数；

备选检测参数保存模块，用于将至少一个可检测数据项，以及至少一个可检测数据项分别对应的备选检测方法以及备选检测参数进行保存。

可选的，目标检测数据项确定模块420，可以包括：

第一目标检测字段确定单元，用于按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段；

该装置，还可以包括：

重复执行模块，用于在对目标检测字段进行质量检测成功的情况下，重复执行按照针对至少一个待检测字段的检测顺序，从至少一个待检测字段中确定目标检测字段的步骤；

失败提示信息展示模块，用于在目标检测字段质量检测失败的情况下，生成检测失败提示信息，并对检测失败提示信息进行展示。

可选的，该装置，还可以包括：

基础校验参数获取模块，用于在从至少一个待检测字段中确定目标检测字段之前，获取基础校验方法和基础校验参数；

机构数据基础校验模块，用于根据基础校验方法和基础校验参数，对机构数据进行基础校验；

目标检测数据项确定模块420，可以包括：

第二目标检测字段确定单元，用于在基础校验成功的情况下，从至少一个待检测字段中确定目标检测字段。

可选的，该装置，还可以包括：

修改字段确定模块，用于响应于修改质量检测指令，获取修改前数据和修改后数据，并根据修改前数据和修改后数据，确定至少一个修改字段；

修改数据项确定模块，用于针对至少一个修改字段中的每个修改字段，确定修改字段的修改数据项；

修改字段质量检测模块，用于根据修改数据项，确定修改字段的修改检测方法和修改检测参数，并根据修改检测方法和修改检测参数，对修改字段进行质量检测。

可选的，目标检测数据项确定模块420，可以包括：

字段长度确定单元，用于确定目标检测字段所属的目标检测数据项、字段类型以及字段长度；

目标检测字段质量检测模块430，可以包括：

第二目标检测参数确定单元，用于根据目标检测数据项、字段类型以及字段长度，确定目标检测字段的目标检测方法和目标检测参数。

本发明实施例提供的数据质量检测装置，通过机构数据获取模块，响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，机构数据包括至少一个待检测字段；通过目标检测数据项确定模块，从至少一个待检测字段中确定目标检测字段，并确定目标检测字段所属的目标检测数据项；通过目标检测字段质量检测模块，根据目标检测数据项，确定目标检测字段的目标检测方法和目标检测参数，并根据目标检测方法和目标检测参数，对目标检测字段进行质量检测。上述装置，可以通过确定与目标检测字段的目标检测数据项对应的目标检测字段的目标检测方法和目标检测参数，对目标检测字段进行质量检测，从而可以实现能够适应性的灵活满足对不同的机构数据的质量进行检测。

本发明实施例所提供的数据质量检测装置可执行本发明任意实施例所提供的数据质量检测方法，具备执行方法相应的功能模块和有益效果。

值得注意的是，上述数据质量检测装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。

图6示出了可以用来实施本发明的实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本发明的实现。

如图6所示，电子设备10包括至少一个处理器11，以及与至少一个处理器11通信连接的存储器，如只读存储器(ROM)12、随机访问存储器(RAM)13等，其中，存储器存储有可被至少一个处理器执行的计算机程序，处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或从存储单元18加载到随机访问存储器(RAM)13中的计算机程序，来执行各种适当的动作和处理。在RAM 13中，还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。

电子设备10中的多个部件连接至I/O接口15，包括：输入单元16，例如键盘、鼠标等；输出单元17，例如各种类型的显示器、扬声器等；存储单元18，如磁盘、光盘等；以及通信单元19，例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理，例如数据质量检测方法。

在一些实施例中，数据质量检测方法可被实现为计算机程序，其被有形地包含于计算机可读存储介质，例如存储单元18。在一些实施例中，计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时，可以执行上文描述的数据质量检测方法的一个或多个步骤。备选地，在其他实施例中，处理器11可通过其他任何适当的方式(例如，借助于固件)而被配置为执行数据质量检测方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、以及至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、以及该至少一个输出装置。

用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或是其他可编程数据处理装置的处理器，使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行并且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本发明的上下文中，计算机可读存储介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。备选地，计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互，可以在电子设备上实施此处描述的系统和技术，该电子设备具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)、区块链网络和互联网。

计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务中，存在的管理难度大，业务扩展性弱的缺陷。

应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本发明的技术方案所期望的结果，本文在此不进行限制。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (10)

1.一种数据质量检测方法，其特征在于，包括：

响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，所述机构数据包括至少一个待检测字段；

从所述至少一个待检测字段中确定目标检测字段，并确定所述目标检测字段所属的目标检测数据项；

根据所述目标检测数据项，确定所述目标检测字段的目标检测方法和目标检测参数，并根据所述目标检测方法和所述目标检测参数，对所述目标检测字段进行质量检测。

2.根据权利要求1所述的方法，其特征在于，所述根据所述目标检测数据项，确定所述目标检测字段的目标检测方法和目标检测参数，包括：

根据所述目标检测数据项，从所述至少一个可检测数据项分别对应的备选检测方法中确定所述目标检测字段的目标检测方法；

根据所述目标检测数据项，从所述至少一个可检测数据项分别对应的备选检测参数中确定所述目标检测字段的目标检测参数。

3.根据权利要求2所述的方法，其特征在于，还包括：

获取至少一个可检测数据项，以及，所述至少一个可检测数据项对应的数据检测规则；

根据所述数据检测规则，确定所述至少一个可检测数据项分别对应的备选检测方法以及备选检测参数；

将所述至少一个可检测数据项，以及所述至少一个可检测数据项分别对应的备选检测方法以及备选检测参数进行保存。

4.根据权利要求1所述的方法，其特征在于，所述从所述至少一个待检测字段中确定目标检测字段，包括：

按照针对所述至少一个待检测字段的检测顺序，从所述至少一个待检测字段中确定目标检测字段；

所述方法，还包括：

在对所述目标检测字段进行质量检测成功的情况下，重复执行所述按照针对所述至少一个待检测字段的检测顺序，从所述至少一个待检测字段中确定目标检测字段的步骤；

在所述目标检测字段质量检测失败的情况下，生成检测失败提示信息，并对所述检测失败提示信息进行展示。

5.根据权利要求1所述的方法，其特征在于，在所述从所述至少一个待检测字段中确定目标检测字段之前，还包括：

获取基础校验方法和基础校验参数；

根据所述基础校验方法和所述基础校验参数，对所述机构数据进行基础校验；

所述从所述至少一个待检测字段中确定目标检测字段，包括：

在基础校验成功的情况下，从所述至少一个待检测字段中确定目标检测字段。

6.根据权利要求1所述的方法，其特征在于，还包括：

响应于修改质量检测指令，获取修改前数据和修改后数据，并根据所述修改前数据和所述修改后数据，确定至少一个修改字段；

针对所述至少一个修改字段中的每个修改字段，确定所述修改字段的修改数据项；

根据所述修改数据项，确定所述修改字段的修改检测方法和修改检测参数，并根据所述修改检测方法和所述修改检测参数，对所述修改字段进行质量检测。

7.根据权利要求1所述的方法，其特征在于，所述确定所述目标检测字段所属的目标检测数据项，包括：

确定所述目标检测字段所属的目标检测数据项、字段类型以及字段长度；

所述根据所述目标检测数据项，确定所述目标检测字段的目标检测方法和目标检测参数，包括：

根据所述目标检测数据项、所述字段类型以及所述字段长度，确定所述目标检测字段的目标检测方法和目标检测参数。

8.一种数据质量检测装置，其特征在于，包括：

机构数据获取模块，用于响应于数据质量检测指令，获取待进行数据质量检测的机构数据，其中，所述机构数据包括至少一个待检测字段；

目标检测数据项确定模块，用于从所述至少一个待检测字段中确定目标检测字段，并确定所述目标检测字段所属的目标检测数据项；

目标检测字段质量检测模块，用于根据所述目标检测数据项，确定所述目标检测字段的目标检测方法和目标检测参数，并根据所述目标检测方法和所述目标检测参数，对所述目标检测字段进行质量检测。

9.一种电子设备，其特征在于，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器执行如权利要求1-7中任一项所述的数据质量检测方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现如权利要求1-7中任一所述的数据质量检测方法。