CN111191281A - 数据脱敏处理方法、装置、计算机设备及存储介质 - Google Patents

Abstract

本发明公开了一种数据脱敏处理方法、装置、计算机设备及存储介质。该方法包括获取脱敏处理请求，基于脱敏处理请求获取待脱敏数据表，待脱敏数据表对应一表标识，待脱敏数据表包括待脱敏字段和对应的待脱敏信息；基于表标识查询数据库，获取与表标识相对应的目标敏感数据屏蔽表，目标敏感数据屏蔽表包括目标敏感字段和对应的目标脱敏规则；将待脱敏数据表中，与目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态；调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新待脱敏信息的处理状态，以实时跟进脱敏处理进度。

Description

数据脱敏处理方法、装置、计算机设备及存储介质

技术领域

本发明涉及数据安全处理技术领域，尤其涉及一种数据脱敏处理方法、装置、计算机设备及存储介质。

背景技术

数据脱敏是是数据库安全技术之一，数据脱敏通过脱敏规则对敏感信息进行变形，以保护敏感信息，例如，可将姓名、身份证号、手机号、邮箱和通信地址等个人信息进行数据脱敏。

现有数据脱敏方法通常是利用跟外部机构提供的脱敏工具对敏感信息进行脱敏，但是这种脱敏方法无法实时跟进处理进度，甚至可能重复脱敏；且由于外部机构提供的脱敏工具，在脱敏过程需要将所有敏感信息托管给外部机构，这样可能会存在安全方面的隐患。

发明内容

本发明实施例提供一种数据脱敏处理方法、装置、计算机设备及存储介质，以解决现有数据脱敏处理无法实时跟进脱敏处理进度问题。

一种数据脱敏处理方法，包括：

获取脱敏处理请求，基于所述脱敏处理请求获取待脱敏数据表，待脱敏数据表对应一表标识，所述待脱敏数据表包括待脱敏字段和对应的待脱敏信息；

基于所述表标识查询数据库，获取与所述表标识相对应的目标敏感数据屏蔽表，所述目标敏感数据屏蔽表包括目标敏感字段和对应的目标脱敏规则；

将所述待脱敏数据表中，与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态；

调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新所述待脱敏信息的处理状态。

一种数据脱敏处理装置，包括：

脱敏处理请求获取模块，用于获取脱敏处理请求，基于所述脱敏处理请求获取待脱敏数据表，待脱敏数据表对应一表标识，所述待脱敏数据表包括待脱敏字段和对应的待脱敏信息；

目标敏感数据屏蔽表获取模块，用于基于所述表标识查询数据库，获取与所述表标识相对应的目标敏感数据屏蔽表，所述目标敏感数据屏蔽表包括目标敏感字段和对应的目标脱敏规则；

处理状态设置模块，用于将所述待脱敏数据表中，与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态；

脱敏处理模块，用于调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新所述待脱敏信息的处理状态。

一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述数据脱敏处理方法的步骤。

一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述数据脱敏处理方法的步骤。

上述数据脱敏处理方法、装置、计算机设备及存储介质，基于脱敏处理请求中待脱敏数据表对应的表标识查询数据库，获取与所述表标识相对应的目标敏感数据屏蔽表，以便后续根据表标识从待脱敏数据表中确定需要进行脱敏的待脱敏字段，实现自动化脱敏。将所述待脱敏数据表中，与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态，可以跟进待脱敏信息进行脱敏的处理进度，确保脱敏处理的准确性，避免重复脱敏。调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新所述待脱敏信息的处理状态，以掌握待脱敏信息的实时处理情况。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本发明一实施例中数据脱敏处理方法的一应用环境示意图；

图2是本发明一实施例中数据脱敏处理方法的一流程图；

图3是本发明一实施例中数据脱敏处理方法的一流程图；

图4是本发明一实施例中数据脱敏处理方法的一流程图；

图5是本发明一实施例中数据脱敏处理方法的一流程图；

图6是本发明一实施例中数据脱敏处理方法的一流程图；

图7是本发明一实施例中数据脱敏处理装置的一原理框图；

图8是本发明一实施例中计算机设备的一示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供的数据脱敏处理方法，该数据脱敏处理方法可应用如图1所示的应用环境中。具体地，该数据脱敏处理方法应用在数据脱敏处理系统中，该数据脱敏处理系统包括如图1所示的客户端和服务器，客户端与服务器通过网络进行通信，用于实现根据用户自定义的脱敏规则对敏感信息进行脱敏处理，且实时跟进脱敏进度。其中，客户端又称为用户端，是指与服务器相对应,为客户提供本地服务的程序。客户端可安装在但不限于各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备上。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。

在一实施例中，如图2所示，提供一种数据脱敏处理方法，以该方法应用在图1中的服务器为例进行说明，包括如下步骤：

S201：获取脱敏处理请求，基于脱敏处理请求获取待脱敏数据表，待脱敏数据表对应一表标识，待脱敏数据表包括待脱敏字段和对应的待脱敏信息。

其中，脱敏处理请求是指用于触发对数据进行脱敏处理的请求，本示例中，服务器接收到脱敏处理请求，用于触发服务器调用相应的计算机程序进行数据脱敏处理。

待脱敏数据表是指包含有需要进行脱敏的数据表，待脱敏数据表不仅包括待脱敏字段和对应的待脱敏信息等需要进行脱敏处理的信息，待脱敏数据表还包括不需进行脱敏处理的信息，例如，不需进行脱敏的信息可以是没有涉及用户隐私的信息或者没有涉及企业商业秘密的信息等。待脱敏信息是指需要进行脱敏具体的内容。待脱敏字段是指需要进行脱敏的待脱敏信息的字段名称。例如，待脱敏字段为姓名，则待脱敏信息为人名；待脱敏字段为联系方式，则待脱敏信息为手机号码。

表标识是用于表示待脱敏数据表的数据来源的标识，用于方便后续匹配到相应的目标敏感数据屏蔽表。例如，表标识为A的待脱敏数据表可以理解为A公司或者A团队所形成的需要进行脱敏处理的数据表。

具体地，为了确保用户个人信息或者企业商业秘密的数据信息安全，可根据实际情况触发脱敏处理请求，服务器接收到脱敏处理请求后，根据该脱敏处理请求获取需要进行脱敏的待脱敏数据表，由于待脱敏数据表不仅包括待脱敏字段和对应的待脱敏信息，还包括不需要进行脱敏的信息，本实施例通过目标敏感数据屏蔽表确定出待脱敏字段和对应的待脱敏信息，不需人工操作，从而加快脱敏处理处理，为了识别待脱敏数据表的数据来源，可使每一待脱敏数据表对应一表标识，以便后续根据表标识，从待脱敏数据表中确定需要进行脱敏的待脱敏字段，实现自动化脱敏。

S202：基于表标识查询数据库，获取与表标识相对应的目标敏感数据屏蔽表，目标敏感数据屏蔽表包括目标敏感字段和对应的目标脱敏规则。

其中，数据库是用于存储原始敏感数据屏蔽表的数据库，每一原始敏感数据屏蔽表对应的一表标识，原始敏感数据屏蔽表是用于对来自相同表标识的待脱敏数据表进行处理的屏蔽表。目标敏感数据屏蔽表是指与脱敏处理请求中的表标识相对应的原始敏感数据屏蔽表，该目标敏感数据屏蔽表包括目标敏感字段和对应的目标脱敏规则的数据表。目标敏感字段是指需要进行脱敏的字段，目标脱敏规则是用于对目标敏感字段进行脱敏处理的规则，该目标脱敏规则是用户自定义的，以便后续灵活地对待脱敏信息进行脱敏处理。

例如，目标敏感字段是姓名，目标脱敏规则可以是对每一用户的真实的姓名中第二个字替换为A，例如，姓名包括张三和李四，则目标脱敏规则是对张三和李四的第二个字替换为A，进行脱敏处理后获得脱敏处理结果为张A和李A；目标敏感字段是身份证号码，目标脱敏规则可以是对身份证号中最后六位数据或者字母替换为特定标识，如*号或#号。

本实施例中，根据表标识查询数据库，将数据库中与表标识相对应的原始敏感数据屏蔽表确定为目标敏感数据屏蔽表，以便后续根据目标敏感数据屏蔽表中的目标敏感字段确定待脱敏数据表中需要进行脱敏的待脱敏字段。本实施例中，目标敏感数据屏蔽表是预先设置的，因此可以对目标脱敏规则进行修改或者增加，支持用户灵活定义目标脱敏规则。

S203：将待脱敏数据表中，与目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态。

其中，未处理状态是指待脱敏信息还没有开始脱敏的状态。

具体地，由于待脱敏数据表不仅包括待脱敏字段和对应的待脱敏信息，还包括不需要进行脱敏的信息，因此，在根据待脱敏数据表对应的表标识确定目标敏感数据屏蔽表后，根据目标敏感数据屏蔽表中的目标敏感字段确定待脱敏数据表中需要进行脱敏的待脱敏字段，并将对应的待脱敏信息的处理状态设置为未处理状态，该待脱敏信息的处理状态是随着处理进度而更新的，开始执行脱敏处理时，则将待脱敏信息的处理状态更新为处理中状态，当脱敏处理结束后，则将待脱敏信息的处理状态更新为处理完成状态。设置待脱敏信息的处理状态可以实时跟进待脱敏信息的处理进度，确保脱敏处理的准确性，避免重复脱敏。

S204：调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新待脱敏信息的处理状态。

其中，脱敏处理结果是指待脱敏信息进行脱敏处理后获取的结果，一个待脱敏信息对应一个脱敏处理结果。需要说明地是，目标脱敏规则是根据目标敏感字段生成的，以确保后续准确地对于目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理。

具体地，目标敏感信息屏蔽表中预先设置有需要进行脱敏的目标敏感字段，将待脱敏数据表中与目标敏感字段相同的字段确定为待脱敏字段，并调用目标脱敏脚本执行目标脱敏规则，对待脱敏字段对应的待脱敏信息进行脱敏处理，实现自动化对待脱敏信息进行脱敏处理，提高脱敏处理效率；并将已经生成脱敏处理结果的待脱敏信息的处理状态从未处理状态更新为完成处理状态，以掌握待脱敏信息的实时处理情况。

本实施例所提供的数据脱敏处理方法，基于脱敏处理请求中待脱敏数据表对应的表标识查询数据库，获取与表标识相对应的目标敏感数据屏蔽表，以便后续根据表标识从待脱敏数据表中确定需要进行脱敏的待脱敏字段，实现自动化脱敏。将待脱敏数据表中，与目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态，可以跟进待脱敏信息进行脱敏的处理进度，确保脱敏处理的准确性，避免重复脱敏。调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新待脱敏信息的处理状态，以掌握待脱敏信息的实时处理情况。

在一实施例中，如图3所示，步骤S204，即调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，包括：

S301：获取待脱敏数据表对应的待处理数据量或者数据表容量。

其中，待处理数据量是指待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息的数量。作为一示例，若待脱敏数据表为N*M的数据表，其中，N为数据表的行数，M为数据表的列数，每一列数据对应一表头字段，该表头字段可以为待脱敏字段，也可以为不需要进行脱敏处理的信息对应的其他字段，此时N的数量为待处理数据量。

数据表容量是指待脱敏数据表的存储量，数据表容量包括需要进行脱敏处理的待脱敏信息和不需要进行脱敏处理的信息所占的存储量，例如，待脱敏数据表的数据表容量可以是150K。

S302：若待处理数据量大于预设数量阈值，或者数据表容量大于预设容量阈值，则依据预设数量阈值或者预设容量阈值，对待脱敏数据表进行切分，获取至少两个切分敏感数据表。

其中，预设数量阈值是指预先设定的，用于与待脱敏数据表中的待脱敏信息对应的待处理数据量进行比较的值，以便判断是否对待脱敏数据表进行切分。预设容量阈值是预先设定的，用于与待脱敏数据表对应的数据表容量进行比较的值，以便判断是否对待脱敏数据表进行切分。切分敏感数据表是指对待脱敏数据表进行切分后获得的数据表。

作为一示例，统计待脱敏数据表中所有信息的数量作为待处理数据量，当待处理数据量大于预设数量阈值，则说明该待脱敏数据表中要处理的待脱敏信息较多，此时，根据预设数量阈值对待脱敏数据表进行切分，以获取切分敏感数据表。通过对待处理数据量大于预设数量阈值的待脱敏数据表进行切分，为后续采用多线程处理机制提供技术支持，确保后续可快速获取脱敏处理结果。例如，预设数量阈值为2万，待脱敏数据表中所有信息的数量为7万，则依据预设数量阈值对待脱敏数据表进行切分，切分为4个切分敏感数据表。

作为一示例，当数据表容量大于预设容量阈值，则说明该待脱敏数据表中信息较多，则处理量大，处理时间也会相应增加，因此，根据预设容量阈值对待脱敏数据表进行切分，获取至少两个切分敏感数据表，为后续采用多线程处理机制提供技术支持，确保后续可快速获取脱敏处理结果。

S303：采用多线程处理机制，执行调用目标脱敏脚本执行目标脱敏规则，对每一切分敏感数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

其中，多线程处理机制是指采用多个线程对待脱敏信息进行并行脱敏处理的机制，以便缩短脱敏处理时间，提高脱敏处理效率。脱敏处理结果是指对待脱敏信息进行脱敏处理后获得的结果。

具体地，将待脱敏数据表切分为至少两个切分敏感数据表，根据线程处理机制对待脱敏数据表的与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，以快速获取脱敏处理结果。

S304：若待处理数据量不大于预设数量阈值，或者数据表容量不大于预设容量阈值，则执行调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

作为一示例，当待处理数据量不大于预设数量阈值，则说明该待脱敏数据表中的待处理数据量较少，此时执行调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。可以理解地，在待处理数据量不大于预设数量阈值，无需采用多线程处理机制，而直接调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，此过程可有效节省系统资源，也可以保障脱敏处理时效，避免脱敏处理时间过长。

作为另一示例，数据表容量不大于预设容量阈值，则说明该待脱敏数据表中的数据表容量较小，此时执行调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。可以理解地，若数据表容量不大于预设容量阈值，无需采用多线程处理机制，而直接调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，此过程可有效节省系统资源，也可以保障脱敏处理时效，避免脱敏处理时间过长。

本实施例所提供的数据脱敏处理方法，当待处理数据量大于预设数量阈值，或者数据表容量大于预设容量阈值，则依据预设数量阈值或者预设容量阈值，对待脱敏数据表进行切分，获取至少两个切分敏感数据表；再采用多线程处理机制，执行调用目标脱敏脚本执行目标脱敏规则，对每一切分敏感数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，以便缩短脱敏处理时间，提高脱敏处理效率，有助于快速获取脱敏处理结果。当待处理数据量不大于预设数量阈值，或者数据表容量不大于预设容量阈值，则执行调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，实现对处理每一目标敏感字段对应的待脱敏信息进行脱敏处理，无需执行多线程执行机制，可有效节省系统资源，也可以保障脱敏处理时效，避免脱敏处理时间过长。

在一实施例中，敏感数据屏蔽表包括至少两个目标敏感字段。步骤S204，即调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，包括：调用与至少两个目标敏感字段相对应的至少两个目标脱敏脚本，并行执行与每一目标脱敏脚本相对应的目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

具体地，为了更有针对性地对待脱敏信息进行脱敏处理，本实施例中，根据一个目标敏感字段和该目标敏感字段对应的目标脱敏规则生成一个目标脱敏脚本。在对待脱敏数据进行处理时，则同时调用与至少两个目标敏感字段相对应的目标脱敏脚本并行执行脱敏处理，实现同时对至少两个与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理。采用至少两个目标脱敏脚本并行执行脱敏处理，可有针对性地根据目标脱敏脚本，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行处理，可以加快待脱敏信息的脱敏处理速度。

在一实施例中，如图4所示，在步骤S204之前，即在调用目标脱敏脚本执行目标脱敏规则之前，数据脱敏处理方法还包括：

S401：获取原始敏感数据屏蔽表，原始敏感数据屏蔽表包括原始敏感字段和对应的原始脱敏规则。

其中，原始敏感字段是指用户预先设定的字段。原始脱敏规则是与原始敏感字段对应的规则，原始脱敏规则用于对原始敏感字段对应的原始敏感信息进行脱敏。例如，原始敏感字段为地址，则原始敏感信息为具体的地点，例如，深圳市罗湖区宝南路。原始敏感数据屏蔽表是包括原始敏感字段和原始脱敏规则的表。

S402：基于原始脱敏规则，获取与原始敏感字段相对应的原始敏感函数。

其中，原始敏感函数与原始脱敏规则相对应的函数，原始敏感函数包括但不限于替换函数等，原始敏感函数可以理解为根据原始脱敏规则生成的调用函数。例如，原始敏感字段是电话号码，原始脱敏规则是对电话号码的前4位号码替换成1234，则原始敏感函数是根据原始脱敏规则，实现对电话号码进行替换的调用函数。

S403：基于原始敏感函数和原始敏感字段获取对应的原始脱敏脚本。

原始脱敏脚本是指包含可进行脱敏的原始敏感函数的完整的代码，原始脱敏脚本是可实现脱敏处理的计算机可读指令对应的代码。需要说明地是，原始敏感字段、原始脱敏规则和原始脱敏脚本是一一对应的，确保后续可以实现并行执行脱敏处理，加快脱敏处理的速度。本实施例中，数据库预先存储有脱敏脚本模板，后续仅要原始将原始敏感函数和原始敏感字段填充至脱敏脚本模板对应的位置则可快速生成原始脱敏脚本。

相应地，步骤S204中的调用目标脱敏脚本执行目标脱敏规则，具体包括：根据目标敏感字段从原始脱敏脚本确定目标脱敏脚本，调用目标脱敏脚本执行目标脱敏规则。

具体地，在对待脱敏信息进行脱敏处理之前，用户预先配置目标敏感字段，采用字符匹配算法对原始敏感数据屏蔽表的原始敏感字段和目标敏感字段进行匹配，以便获取目标敏感字段相同的原始敏感字段，再获取与该原始敏感字段相对应的原始脱敏脚本，并将原始脱敏脚本确定为目标脱敏脚本。本实施例中，预先设置原始脱敏脚本，以便在脱敏处理时，可快速获取目标脱敏脚本，加速脱敏的进度。

本实施例所提供的数据脱敏处理方法，基于原始脱敏规则，获取与原始敏感字段相对应的原始敏感函数；然后，基于原始敏感函数和原始敏感字段获取对应的原始脱敏脚本，确保后续可以实现并行执行脱敏处理，加快脱敏处理的速度。根据目标敏感字段从原始脱敏脚本确定目标脱敏脚本，以便在脱敏处理时，可快速获取目标脱敏脚本，加速脱敏的进度。

在一实施例中，如图5所示，在步骤S204之后，即在更新待脱敏信息的处理状态之后，数据脱敏处理方法还包括：

S501：基于目标脱敏规则获取对应的目标验证脚本，采用目标验证脚本对脱敏处理结果进行验证，获取脱敏验证结果。

其中，目标验证脚本是指用于对脱敏处理结果进行验证的脚本，用于判断待脱敏信息是否准确脱敏。脱敏验证结果是指采用目标验证脚本对脱敏处理结果进行验证后获得的结果，该脱敏验证结果包括脱敏失败和脱敏成功。

具体地，预先根据原始脱敏规则生成相反的原始验证规则，并根据该验证原始规则生成原始验证脚本，将与目标脱敏规则相同的原始脱敏规则对应的原始验证脚本确定为目标验证脚本，采用目标验证脚本对脱敏处理结果进行验证，以判断每一脱敏处理结果是否符合目标脱敏规则，获取脱敏验证结果。根据目标脱敏规则生成反向验证的验证规则的具体方式是根据目标脱敏规则，生成相反的验证规则，并获取该验证规则对应的目标验证脚本。例如，目标脱敏规则是中文姓名的第一个字和第二个字替换成“平安”，则目标验证脚本对脱敏处理结果进行验证，以确定待脱敏处理结果是否有第一个字符且第二个字符不是“平安”的，如果脱敏处理结果的第一个字符且第二个字符是“平安”，则说明脱敏成功，反之，如果不是“平安”的，则说明脱敏失败。根据与目标脱敏规则相反的验证规则，生成目标验证脚本，可以快速对脱敏处理结果进行验证，保证脱敏处理结果是准确的。

S502：若脱敏验证结果为脱敏失败，则获取脱敏处理日志，并将脱敏处理日志反馈给监控终端。

脱敏处理日志是指脱敏处理过程生成的日志。监控终端是用于监控脱敏处理过程的终端，该监控终端是一种基于网络传输的终端，具体可以是数据脱敏处理系统中监控监控权限的用户对应的客户端。

具体地，当脱敏处理结果过为脱敏失败，则对脱敏处理结果对应的待脱敏信息进行标记，便于用户查找，并将处理过程中生成的脱敏处理日志反馈给监控终端，后续用户可便捷地在监控终端中调用脱敏处理日志，以便对脱敏失败的待脱敏信息进行相应处理。

本实施例所提供的数据脱敏处理方法，基于目标脱敏规则获取对应的目标验证脚本，采用目标验证脚本对脱敏处理结果，获取脱敏验证结果，可以快速对脱敏处理结果进行验证，保证脱敏处理结果的准确性。若脱敏验证结果为脱敏失败，则获取脱敏处理日志，并将脱敏处理日志反馈给监控终端，后续用户可便捷地在监控终端中调用脱敏处理日志，以便对脱敏失败的待脱敏信息进行相应处理，提高脱敏失败的待脱敏数据进行处理的效率。

在一实施例中，如图6所示，在步骤S204之前，即在调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果之前，数据脱敏处理方法还包括：

S601：检测待脱敏数据表中是否存在约束标识，获取约束检测结果。

其中，约束一种主动性元素，当数据库特征状态发生改变是自动运行，约束通常是以表达式或语句的形式存储在数据中。约束标识可以理解用于表示约束条件的表达式或语句。约束检测结果是指待脱敏数据表进行检测后获得的结果，该约束检测结果包括存在约束标识和不存在约束标识。

本实施例中通过检测待脱敏数据表是否存在约束标识，例如，可以是检测待脱敏数据表中的待脱敏信息是否存在约束相关的字符，以便后续进行相应处理，以确保对所有待脱敏信息进行脱敏处理，保障了数据脱敏的完整。其中，约束相关的字符包括但不限于表示非空约束的NOT NULL；表示唯一性约束的UNIQUE KEY和表示主键约束的PRIMARY KEY。

S602：若约束检测结果为存在约束标识，则采用失效处理脚本对待脱敏数据表进行失效处理。

失效处理脚本是指使待脱敏数据表的约束标识失效的脚本。

具体地，由于待脱敏数据表存在约束标识，则后续脱敏处理无法对所有需要进行脱敏处理的待脱敏信息进行脱敏，因此，为确保脱敏处理可顺利进行，本实施例采用失效处理脚本对待脱敏数据表进行失效处理，确保后续脱敏处理可顺利进行，保障数据脱敏的完整。

进一步地，还可以检测待脱敏数据表中的待脱敏信息是否包括触发器，若待脱敏信息存在触发器，则利用失效处理脚本是触发器失效，确保后续脱敏处理可顺利进行。

本实施例所提供的数据脱敏处理方法，检测待脱敏数据表中是否存在约束标识，当约束检测结果为存在约束标识，则采用失效处理脚本对待脱敏数据表进行失效处理，确保后续脱敏处理可顺利进行，保障数据脱敏的完整。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

在一实施例中，提供一种数据脱敏处理装置，该数据脱敏处理装置与上述实施例中数据脱敏处理方法一一对应。如图7所示，该数据脱敏处理装置包括脱敏处理请求获取模块701、目标敏感数据屏蔽表获取模块702、处理状态设置模块703和脱敏处理模块704。各功能模块详细说明如下：

脱敏处理请求获取模块701，用于获取脱敏处理请求，基于脱敏处理请求获取待脱敏数据表，待脱敏数据表对应一表标识，待脱敏数据表包括待脱敏字段和对应的待脱敏信息。

目标敏感数据屏蔽表获取模块702，用于基于表标识查询数据库，获取与表标识相对应的目标敏感数据屏蔽表，目标敏感数据屏蔽表包括目标敏感字段和对应的目标脱敏规则。

处理状态设置模块703，用于将待脱敏数据表中，与目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态。

脱敏处理模块704，用于调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新待脱敏信息的处理状态。

优选地，脱敏处理模块704，包括：数量获取单元、第一判断处理单元、多线程处理机制处理单元和第二判断处理单元。

数量获取单元，用于获取待脱敏数据表对应的待处理数据量或者数据表容量。

第一判断处理单元，用于若待处理数据量大于预设数量阈值，或者数据表容量大于预设容量阈值，则依据预设数量阈值或者预设容量阈值，对待脱敏数据表进行切分，获取至少两个切分敏感数据表。

多线程处理机制处理单元，用于采用多线程处理机制，执行调用目标脱敏脚本执行目标脱敏规则，对每一切分敏感数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

第二判断处理单元，用于若待处理数据量不大于预设数量阈值，或者数据表容量不大于预设容量阈值，则执行调用目标脱敏脚本执行目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

优选地，敏感数据屏蔽表包括至少两个目标敏感字段；脱敏处理模块704，包括：并行执行单元。

并行执行单元，用于调用与至少两个目标敏感字段相对应的至少两个目标脱敏脚本，并行执行与每一目标脱敏脚本相对应的目标脱敏规则，对待脱敏数据表中与目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

优选地，在脱敏处理模块704之前，数据脱敏处理装置还包括：原始敏感数据屏蔽表获取模块、原始敏感函数获取模块、原始脱敏脚本获取模块和目标脱敏脚本确定模块。

原始敏感数据屏蔽表获取模块，用于获取原始敏感数据屏蔽表，原始敏感数据屏蔽表包括原始敏感字段和对应的原始脱敏规则。

原始敏感函数获取模块，用于基于原始脱敏规则，获取与原始敏感字段相对应的原始敏感函数。

原始脱敏脚本获取模块，用于基于原始敏感函数和原始敏感字段获取对应的原始脱敏脚本。

目标脱敏脚本确定模块，用于调用目标脱敏脚本执行目标脱敏规则，包括：根据目标敏感字段从原始脱敏脚本确定目标脱敏脚本，调用目标脱敏脚本执行目标脱敏规则。

优选地，在脱敏处理模块704之后，数据脱敏处理装置还包括：脱敏验证结果获取模块和日志反馈模块。

脱敏验证结果获取模块，用于基于目标脱敏规则获取对应的目标验证脚本，采用目标验证脚本对脱敏处理结果进行验证，获取脱敏验证结果。

日志反馈模块，用于若脱敏验证结果为脱敏失败，则获取脱敏处理日志，并将脱敏处理日志反馈给监控终端。

优选地，在脱敏处理模块704之前，数据脱敏处理装置还包括：约束检测结果获取模块和失效处理模块。

约束检测结果获取模块，用于检测待脱敏数据表中是否存在约束标识，获取约束检测结果。

失效处理模块，用于若约束检测结果为存在约束标识，则采用失效处理脚本对待脱敏数据表进行失效处理。

关于数据脱敏处理装置的具体限定可以参见上文中对于数据脱敏处理方法的限定，在此不再赘述。上述数据脱敏处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，其内部结构图可以如图8所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储待脱敏数据表。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种数据脱敏处理方法。

在一个实施例中，提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述实施例中数据脱敏处理方法的步骤，例如图2所示的步骤S201-S204，或者图3至图6中所示的步骤，为避免重复，这里不再赘述。或者，处理器执行计算机程序时实现数据脱敏处理装置这一实施例中的各模块/单元的功能，例如图7所示的脱敏处理请求获取模块701、目标敏感数据屏蔽表获取模块702、处理状态设置模块703和脱敏处理模块704的功能，为避免重复，这里不再赘述。

在一实施例中，提供一计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述实施例中数据脱敏处理方法的步骤，例如图2所示的步骤S201-S204，或者图3至图6中所示的步骤，为避免重复，这里不再赘述。或者，处理器执行计算机程序时实现数据脱敏处理装置这一实施例中的各模块/单元的功能，例如图7所示的脱敏处理请求获取模块701、目标敏感数据屏蔽表获取模块702、处理状态设置模块703和脱敏处理模块704的功能，为避免重复，这里不再赘述。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。

以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。

Claims (10)

1.一种数据脱敏处理方法，其特征在于，包括：

获取脱敏处理请求，基于所述脱敏处理请求获取待脱敏数据表，待脱敏数据表对应一表标识，所述待脱敏数据表包括待脱敏字段和对应的待脱敏信息；

基于所述表标识查询数据库，获取与所述表标识相对应的目标敏感数据屏蔽表，所述目标敏感数据屏蔽表包括目标敏感字段和对应的目标脱敏规则；

将所述待脱敏数据表中，与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态；

调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新所述待脱敏信息的处理状态。

2.如权利要求1所述的数据脱敏处理方法，其特征在于，所述调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，包括：

获取所述待脱敏数据表对应的待处理数据量或者数据表容量；

若所述待处理数据量大于预设数量阈值，或者所述数据表容量大于预设容量阈值，则依据所述预设数量阈值或者所述预设容量阈值，对所述待脱敏数据表进行切分，获取至少两个切分敏感数据表；

采用多线程处理机制，执行所述调用目标脱敏脚本执行所述目标脱敏规则，对每一所述切分敏感数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果；

若所述待处理数据量不大于预设数量阈值，或者所述数据表容量不大于预设容量阈值，则执行所述调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

3.如权利要求1所述的数据脱敏处理方法，其特征在于，所述敏感数据屏蔽表包括至少两个目标敏感字段；

所述调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，包括：

调用与至少两个目标敏感字段相对应的至少两个目标脱敏脚本，并行执行与每一所述目标脱敏脚本相对应的所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

4.如权利要求1所述的数据脱敏处理方法，其特征在于，在所述调用目标脱敏脚本执行所述目标脱敏规则之前，所述数据脱敏处理方法还包括：

获取原始敏感数据屏蔽表，所述原始敏感数据屏蔽表包括原始敏感字段和对应的原始脱敏规则；

基于所述原始脱敏规则，获取与所述原始敏感字段相对应的原始敏感函数；

基于所述原始敏感函数和所述原始敏感字段获取对应的原始脱敏脚本；

所述调用目标脱敏脚本执行所述目标脱敏规则，包括：根据所述目标敏感字段从所述原始脱敏脚本确定目标脱敏脚本，调用目标脱敏脚本执行所述目标脱敏规则。

5.如权利要求1所述的数据脱敏处理方法，其特征在于，在所述将所述脱敏处理结果替换所述待脱敏数据表中的所述待脱敏信息，并更新所述待脱敏信息的处理状态之后，所述数据脱敏处理方法还包括：

基于所述目标脱敏规则获取对应的目标验证脚本，采用所述目标验证脚本对所述脱敏处理结果进行验证，获取脱敏验证结果；

若所述脱敏验证结果为脱敏失败，则获取脱敏处理日志，并将所述脱敏处理日志反馈给监控终端。

6.如权利要求1所述的数据脱敏处理方法，其特征在于，在所述调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果之前，所述数据脱敏处理方法还包括：

检测所述待脱敏数据表中是否存在约束标识，获取约束检测结果；

若所述约束检测结果为存在约束标识，则采用失效处理脚本对所述待脱敏数据表进行失效处理。

7.一种数据脱敏处理装置，其特征在于，包括：

脱敏处理请求获取模块，用于获取脱敏处理请求，基于所述脱敏处理请求获取待脱敏数据表，待脱敏数据表对应一表标识，所述待脱敏数据表包括待脱敏字段和对应的待脱敏信息；

目标敏感数据屏蔽表获取模块，用于基于所述表标识查询数据库，获取与所述表标识相对应的目标敏感数据屏蔽表，所述目标敏感数据屏蔽表包括目标敏感字段和对应的目标脱敏规则；

处理状态设置模块，用于将所述待脱敏数据表中，与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息的处理状态设置为未处理状态；

脱敏处理模块，用于调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果，并更新所述待脱敏信息的处理状态。

8.如权利要求7所述的数据脱敏处理装置，其特征在于，所述脱敏处理模块，包括：

数量获取单元，用于获取所述待脱敏数据表对应的待处理数据量或者数据表容量；

第一判断处理单元，用于若所述待处理数据量大于预设数量阈值，或者所述数据表容量大于预设容量阈值，则依据所述预设数量阈值或者所述预设容量阈值，对所述待脱敏数据表进行切分，获取至少两个切分敏感数据表；

多线程处理机制处理单元，用于采用多线程处理机制，执行所述调用目标脱敏脚本执行所述目标脱敏规则，对每一所述切分敏感数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果；

第二判断处理单元，用于若所述待处理数据量不大于预设数量阈值，或者所述数据表容量不大于预设容量阈值，则执行所述调用目标脱敏脚本执行所述目标脱敏规则，对所述待脱敏数据表中与所述目标敏感字段相同的待脱敏字段对应的待脱敏信息进行脱敏处理，获取脱敏处理结果。

9.一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至6任一项所述数据脱敏处理方法的步骤。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述数据脱敏处理方法的步骤。

Images