CN114385985A - 一种数据处理方法、装置、设备及存储介质 - Google Patents
一种数据处理方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN114385985A CN114385985A CN202210035595.9A CN202210035595A CN114385985A CN 114385985 A CN114385985 A CN 114385985A CN 202210035595 A CN202210035595 A CN 202210035595A CN 114385985 A CN114385985 A CN 114385985A
- Authority
- CN
- China
- Prior art keywords
- authorized
- data
- information
- data tables
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2221/00—Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/21—Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/2141—Access rights, e.g. capability lists, access control lists, access tables, access matrices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Storage Device Security (AREA)
Abstract
本发明实施例涉及大数据领域，公开了一种数据处理方法、装置、设备及存储介质，该方法包括：获取web平台的源代码信息，根据源代码信息确定当前版本信息，根据当前版本信息确定被操作过的数据表集合；遍历被操作过的数据表集合，并根据遍历结果获取数据表的授权记录信息，以及根据授权记录信息获取全部授权过的数据表的第一表名；根据数据表集合和第一表名确定一个或多个待授权数据表；对待授权数据表进行授权处理得到已授权数据表集合，并存储至用于存储已授权数据表的配置文件中，以实现对未授权数据表的校验，及时确定未授权数据表，有助于提高系统运行效率。本发明涉及区块链技术，可将数据写入区块链中，以用于数据取证等场景。
Description
技术领域
本发明涉及大数据领域，尤其涉及一种数据处理方法、装置、设备及存储介质。
背景技术
目前，在web平台中对各个应用的授权管理主要是通过管理人员人为对各个应用的数据的使用权限进行管理，在web平台中，各个应用之间需要被授权才能使用各应用之间的数据。在web平台的各个应用中存在相互关联的应用，例如，存在作为主节点的主应用以及作为该主应用的子节点的子应用，在一些场景中，当主应用的数据存在删除、修改等调整时，主应用需要重新被授权给子应用，子应用才能调用主应用的数据。
然而，由于目前各个应用的数据的使用权限是管理人员人为管理，由于应用较多，管理人员通常不能及时了解到各个应用的数据是否发生变化，而对发生变化的应用及时地进行重新授权，从而导致子应用没有使用主应用数据的权限，影响各应用之间数据调用和处理的效率。因此，如何更有效、及时地对各应用的数据的使用权限进行校验和调整是急需解决的问题。
发明内容
本发明实施例提供了一种数据处理方法、装置、设备及存储介质，可以实现对未授权数据表的校验，及时确定未授权数据表，有助于提高系统运行效率。
第一方面，本发明实施例提供了一种数据处理方法，包括：
获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；
遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；
根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；
对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中。
进一步地，所述根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合，包括：
根据所述当前版本信息确定所述当前版本的所述web平台中的提交记录信息；
通过遍历所述提交记录信息从所述提交记录信息中获取修改记录信息，并从所述修改记录信息中确定修改过的一个或多个修改文件；
从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名，所述第二表名中包括建表语句，并确定将所述一个或多个第二表名对应的数据表组成所述数据表集合。
进一步地，所述从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名，包括：
从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件；
根据所述一个或多个目标文件的内容信息，从所述一个或多个目标文件中确定所述一个或多个第二表名。
进一步地，所述从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件，包括：
从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀的文件集合；
根据所述源代码信息获取所述指定后缀的文件集合中各个文件的文件存放路径；
从所述指定后缀的文件集合的各个文件中筛选出所述文件存放路径为指定路径的一个或多个目标文件。
进一步地，所述根据所述授权记录信息获取全部授权过的数据表的第一表名之后，还包括：
根据所述第一表名从所述一个或多个目标文件的各个目标文件中确定与所述第一表名对应的授权文件；
将所述授权记录信息与所述授权文件中的信息进行对比校验；
如果所述授权记录信息中存在与所述授权文件中不匹配的信息，则将所述授权文件中不匹配的信息添加到所述授权记录信息中。
进一步地，所述根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表，包括：
将所述数据表集合中的所有数据表的表名与所述第一表名进行匹配校验；
从所述数据表集合中筛选出所述数据表的表名与所述第一表名不匹配的一个或多个数据表，并确定所述不匹配的一个或多个数据表为所述待授权表。
进一步地，所述将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中之后，还包括：
获取所述配置文件中的一个或多个已授权数据表，并将各个待授权数据表与各个已授权数据表进行再次匹配校验；
如果校验结果中存在不匹配的待授权数据表，则确定所述不匹配的待授权数据表为被遗漏的未授权数据表。
第二方面，本发明实施例提供了一种数据处理装置，包括：
第一确定单元，用于获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；
获取单元，用于遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；
第二确定单元，用于根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；
授权单元，用于对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中。
第三方面，本发明实施例提供了一种计算机设备，包括处理器和存储器，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序，所述处理器被配置用于调用所述计算机程序，执行上述第一方面的方法。
第四方面，本发明实施例提供了一种计算机可读存储介质，所述计算机存储介质存储有计算机程序，所述计算机程序被处理器执行以实现上述第一方面的方法。
本发明实施例可以获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；遍历所述被操作过的所述数据表集合中的所有数据表，并根据遍历结果获取数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中，可以实现对未授权数据表的校验，及时确定未授权数据表，有助于提高系统运行效率。
附图说明
为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种数据处理方法的示意流程图；
图2是本发明实施例提供的一种数据处理装置的示意框图；
图3是本发明实施例提供的一种计算机设备的示意框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供的数据处理方法可以应用于一种数据处理装置。在某些实施例中，所述数据处理装置设置于计算机设备中，在某些实施例中，所述计算机设备包括但不限于智能手机、平板电脑、膝上型电脑等中的一种或者多种。
本发明实施例中，数据处理装置可以获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；遍历所述被操作过的所述数据表集合中的所有数据表，并根据遍历结果获取数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将已授权数据表集合存储至用于存储已授权数据表的配置文件中。本发明实施例通过这种实施方式，可以实现对未授权数据表的校验，及时确定未授权数据表，有助于提高系统运行效率。
本申请实施例可以基于人工智能技术对相关的数据(如源代码信息、数据表等)进行获取和处理。其中，人工智能(Artificial Intelligence，AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。
人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、机器人技术、生物识别技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
下面结合附图1对本发明实施例提供的数据处理方法进行示意性说明。
请参见图1，图1是本发明实施例提供的一种数据处理方法的示意流程图，如图1所示，该方法可以由数据处理装置执行，所述数据处理装置设置于计算机设备中。具体地，本发明实施例的所述方法包括如下步骤。
S101：获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合。
本发明实施例中，数据处理装置可以获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合。
在某些实施例中，所述web平台的源代码信息可以为bdsp代码。在某些实施例中，所述被操作过的数据表包括但不限于删除、重建、修改等操作动作的数据表。
在一个实施例中，数据处理装置在获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息时，可以根据指定的代码版本管理平台获取web平台的源代码信息，并根据所述源代码信息中用于指示版本的源代码信息确定所述web平台的当前版本信息。在某些实施例中，所述指定的代码版本管理平台包括但不限于git等。
例如：数据处理装置可以根据web平台的源代码信息中的代码PH-BDSP-HADOOP21.10.21确定所述web平台的当前版本信息为HADOOP21.10.21。
在一个实施例中，数据处理装置在根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合时，可以根据所述当前版本信息确定所述当前版本的所述web平台中的提交记录信息；通过遍历所述提交记录信息从所述提交记录信息中获取修改记录信息，并从所述修改记录信息中确定修改过的一个或多个修改文件；从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名，所述第二表名中包括建表语句，并确定将所述一个或多个第二表名对应的数据表组成所述数据表集合。
在某些实施例中，所述提交记录信息是时间性的，即包括但不限于操作的用户信息、文件路径、修改文件名、修改内容等。
在一个实施例中，数据处理装置在从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名时，可以从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件；并根据所述一个或多个目标文件的内容信息，从所述一个或多个目标文件中确定所述一个或多个第二表名。
在一个实施例中，数据处理装置在从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件时，可以从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀的文件集合；并根据所述源代码信息获取所述指定后缀的文件集合中各个文件的文件存放路径；以及从所述指定后缀的文件集合的各个文件中筛选出所述文件存放路径为指定路径的一个或多个目标文件。
在某些实施例中，所述文件存放路径为指定路径的目标文件，用于存放建表文件。通过筛选出一个或多个目标文件，有助于从所述一个或多个目标文件中确定被操作过的而且包括建表语句的一个或多个第二表名。
在一个示例中，假设指定后缀为“.sql”，指定路径为“release/hive”，则数据处理装置可以从所述一个或多个修改文件中筛选文件名后缀为“.sql”结尾的文件集合，并根据web平台的源代码信息从文件名后缀为“.sql”结尾的文件集合中筛选出文件的存放路径为“release/hive”的一个或多个目标文件，打开读取后缀为“.sql”，且存放路径为“release/hive”的一个或多个目标文件，从所述一个或多个目标文件中确定被操作过的而且包括建表语句的一个或多个第二表名。
例如，假设获取到目标文件，且目标文件的文件存放路径为指定路径dwd，dw，dm，则数据处理装置可以从指定路径为dwd，dw，dm的目标文件中获取到被操作过的而且包括建表语句的第二表名分别为：dwd_table_list，dw_table_list，dm_table_list，其中，“dwd，dw，dm”用于指示文件存放路径，“table_list”用于指示表的索引。
S102：遍历所述被操作过的所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名。
本发明实施例中，数据处理装置可以遍历所述被操作过的所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名。
在一个实施例中，数据处理装置在根据所述授权记录信息获取全部授权过的数据表的第一表名之后，可以根据所述第一表名从所述一个或多个目标文件的各个目标文件中确定与所述第一表名对应的授权文件；并将所述授权记录信息与所述授权文件中的信息进行对比校验；如果所述授权记录信息中存在与所述授权文件中不匹配的信息，则将所述授权文件中不匹配的信息添加到所述授权记录信息中。
在某些实施例中，所述授权文件是用于给当前版本的web平台中各应用的数据表进行授权的配置文件。在某些实施例中，所述授权记录信息可以是授权管理人员记录的excel表，在某些实施例中，所述授权记录信息可以包括但不限于表名、授权部门、版本信息等。
在一个实施例中，数据处理装置在获取授权记录信息之后，可以读取并遍历授权记录信息，以获取到所述授权记录信息中的所有数据表的表名，并将获取到的所述授权记录信息中的所有数据表的表名组成授权记录表集合。
例如，数据处理装置在获取授权记录信息之后，可以读取授权记录表excel，遍历授权记录表excel的sheet页，得到该授权记录信息中所有数据表的表名，组成授权记录表集合excel_table_list，其中，“excel”用于指示授权记录表，“table_list”用于指示授权记录表的索引。
S103：根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表。
本发明实施例中，数据处理装置可以根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表。
在一个实施例中，数据处理装置在根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表时，可以将所述当前版本的所述web平台中被操作过的数据表集合和所述全部授权过的数据表的第一表名进行交集处理，并根据交集结果确定当前待授权的一个或多个待授权数据表。
在一个实施例中，数据处理装置在将所述当前版本的所述web平台中被操作过的数据表集合和所述全部授权过的数据表的第一表名进行交集处理，并根据交集结果确定当前待授权的一个或多个待授权数据表时，可以将所述数据表集合中的所有数据表的表名与所述第一表名进行匹配校验；从所述数据表集合中筛选出所述数据表的表名与所述第一表名不匹配的一个或多个数据表，并确定所述不匹配的一个或多个数据表为所述待授权表。在某些实施例中，所述当前待授权的一个或多个待授权表包括当前应该授权和/或当前再次授权的数据表。
例如，假设当前版本的web平台中被操作过的数据表集合中的所有数据表的表名分别为：dwd_table_list，dw_table_list，dm_table_list，本次及以往全部授权过的第一表名分别为：dwd_table_list，dm_table_list，则数据处理装置可以确定所述所有数据表中与所述本次及以往全部授权过的第一表名不匹配的一个数据表的第一表名为dw_table_list，从而可以确定当前待授权的待授权数据表的表名为dw_table_list。
S104：对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中。
本发明实施例中，数据处理装置可以对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中。
在一个实施例中，数据处理装置在将授权处理后的所述一个或多个待授权数据表存储至用于存储已授权数据表的配置文件中之后，可以将所述配置文件中的一个或多个已授权数据表与各个待授权数据表进行差集处理，并根据差集结果确定所述各个待授权数据表中被遗漏的未授权数据表。
在一个实施例中，数据处理装置在将授权处理后的所述一个或多个待授权数据表存储至用于存储已授权数据表的配置文件中之后，将所述配置文件中的一个或多个已授权数据表与各个待授权数据表进行差集处理，并根据差集结果确定所述各个待授权数据表中被遗漏的未授权数据表时，可以获取所述配置文件中的一个或多个已授权数据表，并将各个待授权数据表与各个已授权数据表进行再次匹配校验；如果校验结果中存在不匹配的待授权数据表，则可以确定所述不匹配的待授权数据表为被遗漏的未授权数据表。
例如，假设待授权数据表的表名分别为：dwd_table_list，dw_table_list，dm_table_list，dn_table_list，dx_table_list，配置文件中的已授权数据表的表名为dwd_table_list，dw_table_list，dm_table_list，则数据处理装置可以确定待授权数据表中被遗漏授权的未授权数据表为dn_table_list，dx_table_list。
本发明实施例中，数据处理装置可以获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已待授权数据表集合存储至用于存储已授权数据表的配置文件中。通过这种实施方式可以实现对未授权数据表的校验，及时确定未授权数据表，有助于提高系统运行效率。
本发明实施例还提供了一种数据处理装置，该数据处理装置用于执行前述任一项所述的方法的单元。具体地，参见图2，图2是本发明实施例提供的一种数据处理装置的示意框图。本实施例的数据处理装置包括：第一确定单元201、获取单元202、第二确定单元203以及授权单元204。
第一确定单元201，用于获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；
获取单元202，用于遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；
第二确定单元203，用于根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；
授权单元204，用于对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中。
进一步地，所述第一确定单元201根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合时，具体用于：
根据所述当前版本信息确定所述当前版本的所述web平台中的提交记录信息；
通过遍历所述提交记录信息从所述提交记录信息中获取修改记录信息，并从所述修改记录信息中确定修改过的一个或多个修改文件；
从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名，所述第二表名中包括建表语句，并确定将所述一个或多个第二表名对应的数据表组成所述数据表集合。
进一步地，所述第一确定单元201从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名时，具体用于：
从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件；
根据所述一个或多个目标文件的内容信息，从所述一个或多个目标文件中确定所述一个或多个第二表名。
进一步地，所述第一确定单元201从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件时，具体用于：
从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀的文件集合；
根据所述源代码信息获取所述指定后缀的文件集合中各个文件的文件存放路径；
从所述指定后缀的文件集合的各个文件中筛选出所述文件存放路径为指定路径的一个或多个目标文件。
进一步地，所述第一确定单元201根据所述授权记录信息获取全部授权过的数据表的第一表名之后，还用于：
根据所述第一表名从所述一个或多个目标文件的各个目标文件中确定与所述第一表名对应的授权文件；
将所述授权记录信息与所述授权文件中的信息进行对比校验；
如果所述授权记录信息中存在与所述授权文件中不匹配的信息，则将所述授权文件中不匹配的信息添加到所述授权记录信息中。
进一步地，所述第二确定单元203根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表时，具体用于：
将所述数据表集合中的所有数据表的表名与所述第一表名进行匹配校验；
从所述数据表集合中筛选出所述数据表的表名与所述第一表名不匹配的一个或多个数据表，并确定所述不匹配的一个或多个数据表为所述待授权表。
进一步地，所述授权单元204将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中之后，还用于：
获取所述配置文件中的一个或多个已授权数据表，并将各个待授权数据表与各个已授权数据表进行再次匹配校验；
如果校验结果中存在不匹配的待授权数据表，则确定所述不匹配的待授权数据表为被遗漏的未授权数据表。
本发明实施例中，数据处理装置可以获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已待授权数据表集合存储至用于存储已授权数据表的配置文件中。通过这种实施方式可以实现对未授权数据表的校验，及时确定未授权数据表，有助于提高系统运行效率。
参见图3，图3是本发明实施例提供的一种计算机设备的示意框图，在某些实施例中，如图3所示的本实施例中的计算机设备可以包括：一个或多个处理器301；一个或多个输入设备302，一个或多个输出设备303和存储器304。上述处理器301、输入设备302、输出设备303和存储器304通过总线305连接。存储器304用于存储计算机程序，所述计算机程序包括程序，处理器301用于执行存储器304存储的程序。其中，处理器301被配置用于调用所述程序执行：
获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；
遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；
根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；
对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中。
进一步地，所述处理器301根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合时，具体用于：
根据所述当前版本信息确定所述当前版本的所述web平台中的提交记录信息；
通过遍历所述提交记录信息从所述提交记录信息中获取修改记录信息，并从所述修改记录信息中确定修改过的一个或多个修改文件；
从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名，所述第二表名中包括建表语句，并确定将所述一个或多个第二表名对应的数据表组成所述数据表集合。
进一步地，所述处理器301从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名时，具体用于：
从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件；
根据所述一个或多个目标文件的内容信息，从所述一个或多个目标文件中确定所述一个或多个第二表名。
进一步地，所述处理器301从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件时，具体用于：
从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀的文件集合；
根据所述源代码信息获取所述指定后缀的文件集合中各个文件的文件存放路径；
从所述指定后缀的文件集合的各个文件中筛选出所述文件存放路径为指定路径的一个或多个目标文件。
进一步地，所述处理器301根据所述授权记录信息获取全部授权过的数据表的第一表名之后，还用于：
根据所述第一表名从所述一个或多个目标文件的各个目标文件中确定与所述第一表名对应的授权文件；
将所述授权记录信息与所述授权文件中的信息进行对比校验；
如果所述授权记录信息中存在与所述授权文件中不匹配的信息，则将所述授权文件中不匹配的信息添加到所述授权记录信息中。
进一步地，所述处理器301根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表时，具体用于：
将所述数据表集合中的所有数据表的表名与所述第一表名进行匹配校验；
从所述数据表集合中筛选出所述数据表的表名与所述第一表名不匹配的一个或多个数据表，并确定所述不匹配的一个或多个数据表为所述待授权表。
进一步地，所述处理器301将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中之后，还用于：
获取所述配置文件中的一个或多个已授权数据表，并将各个待授权数据表与各个已授权数据表进行再次匹配校验；
如果校验结果中存在不匹配的待授权数据表，则确定所述不匹配的待授权数据表为被遗漏的未授权数据表。
本发明实施例中，计算机设备可以获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已待授权数据表集合存储至用于存储已授权数据表的配置文件中。通过这种实施方式可以实现对未授权数据表的校验，及时确定未授权数据表，有助于提高系统运行效率。
应当理解，在本发明实施例中，所述处理器301可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备302可以包括触控板、麦克风等，输出设备303可以包括显示器(LCD等)、扬声器等。
该存储器304可以包括只读存储器和随机存取存储器，并向处理器301提供指令和数据。存储器304的一部分还可以包括非易失性随机存取存储器。例如，存储器304还可以存储设备类型的信息。
具体实现中，本发明实施例中所描述的处理器301、输入设备302、输出设备303可执行本发明实施例提供的图1所述的方法实施例中所描述的实现方式，也可执行本发明实施例图2所描述的数据处理装置的实现方式，在此不再赘述。
本发明实施例中还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现图1所对应实施例中描述的数据处理方法，也可实现本发明图2所对应实施例的数据处理装置，在此不再赘述。
所述计算机可读存储介质可以是前述任一实施例所述的数据处理装置的内部存储单元，例如数据处理装置的硬盘或内存。所述计算机可读存储介质也可以是所述数据处理装置的外部存储装置，例如所述数据处理装置上配备的插接式硬盘，智能存储卡(SmartMedia Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，所述计算机可读存储介质还可以既包括所述数据处理装置的内部存储单元也包括外部存储装置。所述计算机可读存储介质用于存储所述计算机程序以及所述数据处理装置所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个计算机可读存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，终端，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的计算机可读存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。所述的计算机可读存储介质可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据区块链节点的使用所创建的数据等。
需要强调的是，为进一步保证上述数据的私密和安全性，上述数据还可以存储于一区块链的节点中。其中，本发明所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain)，本质上是一个去中心化的数据库，是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一批次网络交易的信息，用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。
以上所述，仅为本发明的部分实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。
Claims (10)
1.一种数据处理方法，其特征在于，包括：
获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；
遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；
根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；
对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中。
2.根据权利要求1所述的方法，其特征在于，所述根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合，包括：
根据所述当前版本信息确定所述当前版本的所述web平台中的提交记录信息；
通过遍历所述提交记录信息从所述提交记录信息中获取修改记录信息，并从所述修改记录信息中确定修改过的一个或多个修改文件；
从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名，所述第二表名中包括建表语句，并确定将所述一个或多个第二表名对应的数据表组成所述数据表集合。
3.根据权利要求2所述的方法，其特征在于，所述从所述一个或多个修改文件中筛选出被操作过的一个或多个第二表名，包括：
从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件；
根据所述一个或多个目标文件的内容信息，从所述一个或多个目标文件中确定所述一个或多个第二表名。
4.根据权利要求3所述的方法，其特征在于，所述从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀以及文件存放路径为指定路径的一个或多个目标文件，包括：
从所述一个或多个修改文件中筛选出文件名的后缀为指定后缀的文件集合；
根据所述源代码信息获取所述指定后缀的文件集合中各个文件的文件存放路径；
从所述指定后缀的文件集合的各个文件中筛选出所述文件存放路径为指定路径的一个或多个目标文件。
5.根据权利要求4所述的方法，其特征在于，所述根据所述授权记录信息获取全部授权过的数据表的第一表名之后，还包括：
根据所述第一表名从所述一个或多个目标文件的各个目标文件中确定与所述第一表名对应的授权文件；
将所述授权记录信息与所述授权文件中的信息进行对比校验；
如果所述授权记录信息中存在与所述授权文件中不匹配的信息，则将所述授权文件中不匹配的信息添加到所述授权记录信息中。
6.根据权利要求1所述的方法，其特征在于，所述根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表，包括：
将所述数据表集合中的所有数据表的表名与所述第一表名进行匹配校验；
从所述数据表集合中筛选出所述数据表的表名与所述第一表名不匹配的一个或多个数据表，并确定所述不匹配的一个或多个数据表为所述待授权表。
7.根据权利要求1所述的方法，其特征在于，所述将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中之后，还包括：
获取所述配置文件中的一个或多个已授权数据表，并将各个待授权数据表与各个已授权数据表进行再次匹配校验；
如果校验结果中存在不匹配的待授权数据表，则确定所述不匹配的待授权数据表为被遗漏的未授权数据表。
8.一种数据处理装置，其特征在于，包括：
第一确定单元，用于获取web平台的源代码信息，并根据所述源代码信息确定所述web平台的当前版本信息，以及根据所述当前版本信息确定当前版本的所述web平台中被操作过的数据表集合；
获取单元，用于遍历所述数据表集合中的所有数据表，并根据遍历结果获取所述数据表的授权记录信息，以及根据所述授权记录信息获取全部授权过的数据表的第一表名；
第二确定单元，用于根据所述数据表集合和所述全部授权过的数据表的第一表名，确定当前待授权的一个或多个待授权数据表；
授权单元，用于对所述一个或多个待授权数据表进行授权处理得到已授权数据表集合，并将所述已授权数据表集合存储至用于存储已授权数据表的配置文件中。
9.一种计算机设备，其特征在于，包括处理器和存储器，其中，所述存储器用于存储计算机程序，所述处理器被配置用于调用所述计算机程序，执行如权利要求1-7任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行以实现权利要求1-7任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210035595.9A CN114385985A (zh) | 2022-01-12 | 2022-01-12 | 一种数据处理方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210035595.9A CN114385985A (zh) | 2022-01-12 | 2022-01-12 | 一种数据处理方法、装置、设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114385985A true CN114385985A (zh) | 2022-04-22 |
Family
ID=81202235
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210035595.9A Pending CN114385985A (zh) | 2022-01-12 | 2022-01-12 | 一种数据处理方法、装置、设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114385985A (zh) |
-
2022
- 2022-01-12 CN CN202210035595.9A patent/CN114385985A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11552795B2 (en) | Key recovery | |
| CN109791591B (zh) | 经由区块链进行身份和凭证保护及核实的方法和系统 | |
| JP7092868B2 (ja) | 分散型台帳を用いるデジタルアセット・トレーサビリティおよび保証 | |
| CN107341702B (zh) | 一种业务处理的方法及装置 | |
| RU2745518C9 (ru) | Изоляция данных в сети блокчейн | |
| CN110795501A (zh) | 基于区块链的可验证声明的创建方法、装置、设备及系统 | |
| US20190303623A1 (en) | Promotion smart contracts for software development processes | |
| AU2018202830A1 (en) | Digital Asset Platform | |
| US20110265162A1 (en) | Holistic risk-based identity establishment for eligibility determinations in context of an application | |
| CN111033489B (zh) | 用于数据遍历的方法和设备 | |
| CN111126950A (zh) | 一种基于区块链的业务处理方法、装置及设备 | |
| CN110990820B (zh) | 税盘授权方法、装置、电子设备及存储介质 | |
| US11580206B2 (en) | Project-based permission system | |
| CN113037505A (zh) | 一种可信Web应用的实现方法及系统 | |
| CN113221142A (zh) | 授权业务的处理方法、装置、设备及系统 | |
| CN111260080A (zh) | 基于机器学习的流程优化方法、装置、终端及存储介质 | |
| CN111143399A (zh) | 数据处理方法、装置、存储介质和计算机设备 | |
| CN109522723A (zh) | Poc脚本生成方法、装置、电子设备及存储介质 | |
| US12079283B2 (en) | Behavior driven graph expansion | |
| US20240161109A1 (en) | Distributed evaluation platform for nonfungible tokens using virtual token cloning | |
| CN114385985A (zh) | 一种数据处理方法、装置、设备及存储介质 | |
| CN114356848B (zh) | 元数据管理方法、计算机存储介质及电子设备 | |
| CN112491839B (zh) | 基于跨系统的登录处理方法、装置、计算机设备及介质 | |
| US9424543B2 (en) | Authenticating a response to a change request | |
| CN112308440B (zh) | 工单处理方法、装置、计算机设备及计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |