CN115952083A - 一种索引创建方式检测方法、装置、介质和计算机设备 - Google Patents
一种索引创建方式检测方法、装置、介质和计算机设备 Download PDFInfo
- Publication number
- CN115952083A CN115952083A CN202211608337.1A CN202211608337A CN115952083A CN 115952083 A CN115952083 A CN 115952083A CN 202211608337 A CN202211608337 A CN 202211608337A CN 115952083 A CN115952083 A CN 115952083A
- Authority
- CN
- China
- Prior art keywords
- field
- detected
- target
- traversing
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种索引创建方式检测方法、装置、介质和计算机设备,该方法包括:获取待检测字段,待检测字段包括与目标数据库相关的字段;基于第一遍历规则遍历待检测字段,从待检测字段中筛选出归属于数据库文件的第一待检测字段;基于第二遍历规则遍历待检测字段,从第一待检测字段中筛选出归属于目标数据库的第二待检测字段;基于第三遍历规则遍历待检测字段,从第二待检测字段中筛选出归属于目标节点操作的第三待检测字段;基于目标函数遍历第三待检测字段,若第三待检测字段中包含目标字段,则目标数据库中存在以在线创建方式创建的目标索引。本申请能够提升检测索引创建方式的效率和准确性。
Description
技术领域
本申请涉及计算机技术领域,具体涉及一种索引创建方式检测方法、装置、介质和计算机设备。
背景技术
随着互联网的快速发展,在一些数据库的开发过程中,可以通过创建索引来提升访问数据库中数据的性能和效率。在实际的数据库开发中,开发者由于开发习惯、或者开发能力等原因,在创建索引时可能未使用在线创建的方式,未使用在线创建的索引在使用数据库的数据库表时,可能会造成数据库表的锁定,导致程序异常。
为了避免出现类似问题,可以人工进行代码评审(Code Review)的方式逐一检查数据库开发源代码,从源代码的对应字段中判断开发者是否以在线创建的方式创建索引。然而,人工进行代码评审的方式往往存在遗漏、误判等问题,从而对索引创建方式的检测效率和准确性较低。并且,一个数据库开发项目的源代码可能成千上万行,完全通过人工进行代码评审的方式需要耗费大量的时间,影响项目进度。
发明内容
本发明实施例提供一种索引创建方式检测方法、装置、介质和计算机设备,能够显著地提升检测索引创建方式的效率和准确性,节省数据库的开发时间。
本发明实施例提供一种索引创建方式检测方法,应用于目标数据库,该方法包括:
获取待检测字段,所述待检测字段包括与所述目标数据库相关的字段;
基于第一遍历规则遍历所述待检测字段,从所述待检测字段中筛选出归属于数据库文件的第一待检测字段;
基于第二遍历规则遍历所述第一待检测字段,从所述第一待检测字段中筛选出归属于所述目标数据库的第二待检测字段;
基于第三遍历规则遍历所述第二待检测字段,从所述第二待检测字段中筛选出归属于目标节点操作的第三待检测字段;
基于目标函数遍历所述第三待检测字段,若所述第三待检测字段中包含目标字段,则所述目标数据库中存在以在线创建方式创建的目标索引。
本发明实施例还提供一种索引创建方式检测装置,应用于目标数据库,该装置包括:
待检测字段获取模块,用于获取待检测字段,所述待检测字段包括与所述目标数据库相关的字段;
第一遍历模块,用于基于第一遍历规则遍历所述待检测字段,从所述待检测字段中筛选出归属于数据库文件的第一待检测字段;
第二遍历模块,用于基于第二遍历规则遍历所述第一待检测字段,从所述第一待检测字段中筛选出归属于所述目标数据库的第二待检测字段;
第三遍历模块,用于基于第三遍历规则遍历所述第二待检测字段,从所述第二待检测字段中筛选出归属于目标节点操作的第三待检测字段;
第四遍历模块,用于基于目标函数遍历所述第三待检测字段,若所述第三待检测字段中包含目标字段,则所述目标数据库中存在以在线创建方式创建的目标索引。
可选地,所述第一遍历模块还包括:
文件夹遍历子模块,用于遍历所述待检测字段所在的文件夹,以及所述文件夹所包含的全部子文件夹;
目标后缀字符查找模块,用于查找所述文件夹或所述子文件夹的命名中是否存在目标后缀字符,若是,则将包含所述目标后缀字符的文件夹或子文件夹下的字段确定为所述第一待检测字段。
可选地,所述第二遍历模块包括:
目标程序语言获取子模块,用于获取目标程序语言;
解析子模块,用于基于所述目标程序语言解析所述文件夹或所述子文件夹中的所述第一待检测字段;
异常检测子模块,用于检测解析所述第一待检测字段的过程是否异常,若否,则将解析后的第一待检测字段确定为所述第二待检测字段。
可选地,所述第三遍历模块,包括:
解析信息获取子模块,用于获取所述第二待检测字段的解析信息;
目标节点检测子模块,用于检测所述解析信息中是否存在目标节点,若是,则将所述第二待检测字段中与所述目标节点相关的字段确定为所述第三待检测字段。
可选地,所述目标函数包括第一目标函数和第二目标函数,所述第四遍历模块包括:
属性信息获取子模块,用于遍历所述第三待检测字段,获取所述第三待检测字段的属性信息;
目标参数检测子模块,用于基于所述第一目标函数检测所述属性信息中是否包含与创建索引相关的第一目标参数,若是,则继续检测所述属性信息中是否包含与在线创建索引相关的第二目标参数;
若是,则所述文件夹或所述子文件夹中的文件中存在以在线创建方式创建的所述目标索引。
可选地,所述装置还包括:
字符翻译子模块,用于基于翻译函数,将所述待检测字段的每个字符统一转换为大写字符或小写字符。
在本发明的一些实施例中,还可以提供一种计算机设备,包括存储器,处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述处理器执行所述计算机程序时实现如上所述方法的步骤。
在本发明的一些实施例中,还可以提供一种计算机可读存储介质,其上存储有计算机程序,当计算机程序在计算机上运行时,使得所述计算机执行如如上所述方法的步骤。
由上可知,本申请通过自动化脚本遍历项目源代码的待检测字段,以第一、第二和第三遍历规则,从待检测字段中提取出目标后缀文件,并根据PLSQL语法解析出抽象语法树,快速查找待检测字段中是否存在未使用在线创建方式创建的索引。因此,通过以上方式进行索引创建方式检测的查找时间快、查找准确度高,通过脚本遍历的方式能够避免人工查找的漏查、误查。另外,通过该方式进行检测的过程无需依赖人工处理,以实现完全通过自动化脚本方法来显著地降低研发成本开销。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的索引创建方式检测方法的应用场景示意图;
图2是本发明实施例提供的索引创建方式检测方法的流程示意图;
图3是本发明实施例提供的索引创建方式检测方法的技术架构示意图;
图4是本发明实施例提供的索引创建方式检测装置的结构示意图;
图5是本发明实施例提供的计算机设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明中的术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”、“第三”的特征可以明示或者隐含地包括至少一个该特征。本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。本发明实施例中所有方向性指示(诸如上、下、左、右、前、后……)仅用于解释在某一特定姿态(如附图所示)下各部件之间的相对位置关系、运动情况等,如果该特定姿态发生改变时,则该方向性指示也相应地随之改变。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本发明的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
本发明实施例提供一种索引创建方式检测方法、装置、计算机设备和存储介质。
其中,计算机设备可以为手机、平板电脑、笔记本电脑等终端设备,也可以为穿戴设备、智能电视或其他智能终端。
服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器,但并不局限于此。
请参阅图1,图1是本发明实施例提供的索引创建方式检测方法的应用场景示意图。以该索引创建方式检测装置集成在服务器中为例,该服务器可以当监测到待同步的第一数据库发生数据改变时,获取所述第一数据库生成的二进制日志数据;对所述二进制日志数据进行解析,得到所述二进制日志数据对应的可识别数据;以第一预设时间间隔,将所述可识别数据推送至用于清洗加工所述可识别数据的第一节点;控制所述第一节点加载清洗加工模板,通过所述清洗加工模板将所述可识别数据转化为增量的二进制日志数据,作为目标日志数据;以第二预设时间间隔,获取所述目标日志数据对应的用户操作后的数据库值作为增量数据,将所述增量数据并发同步至目标存储的第二数据库。
由上可知,本申请通过自动化脚本遍历项目源代码的待检测字段,以第一、第二和第三遍历规则,从待检测字段中提取出目标后缀文件,并根据PLSQL语法解析出抽象语法树,快速查找待检测字段中是否存在未使用在线创建方式创建的索引。因此,通过以上方式进行索引创建方式检测的查找时间快、查找准确度高,通过脚本遍历的方式能够避免人工查找的漏查、误查。另外,通过该方式进行检测的过程无需依赖人工处理,以实现完全通过自动化脚本方法来显著地降低研发成本开销。
以下分别进行详细说明。需说明的是,以下实施例的描述顺序不作为对实施例优选顺序的限定。
请参阅图2和图3,图2是本发明实施例提供的一种索引创建方式检测方法的流程示意图,图3是是本发明实施例提供的索引创建方式检测方法的技术架构示意图。如图2所示,该索引创建方式检测方法的流程可以如下:
步骤201、获取待检测字段。
其中,待检测字段可以包括与目标数据库相关的字段。在一些实施例中,可以从项目源码管理仓库gitlab中,通过git clone命令获取待检测字段。
其中,gitLab是一个用于仓库管理系统的开源项目,使用git作为代码管理工具,并在此基础上搭建起来的Web服务。其中,目标数据库可以是Oracle数据库是甲骨文公司的一款关系数据库管理系统。
步骤202、基于第一遍历规则遍历所述待检测字段,从所述待检测字段中筛选出归属于数据库文件的第一待检测字段。
可选地,步骤202可以包括以下步骤:
遍历所述待检测字段所在的文件夹,以及所述文件夹所包含的全部子文件夹;
查找所述文件夹或所述子文件夹的命名中是否存在目标后缀字符,若是,则将包含所述目标后缀字符的文件夹或子文件夹下的字段确定为所述第一待检测字段。
其中,目标后缀字符可以是“.sql”。可以理解,由于SQL为结构化查询语言(Structured Query Language),是一种特殊目的的编程语言,是一种数据库查询和程序设计语言,用于存取数据以及查询、更新和管理关系数据库系统,因此若一个文件夹或子文件夹的命名中带有.sql的后缀,则表示该文件夹或子文件夹中的文件属于数据库文件,可以进一步地生成数据库文件相对的sql文件列表。
步骤203、基于第二遍历规则遍历所述第一待检测字段,从所述第一待检测字段中筛选出归属于所述目标数据库的第二待检测字段。
可选地,步骤203还可以包括以下步骤:
获取目标程序语言;
基于所述目标程序语言解析所述文件夹或所述子文件夹中的所述第一待检测字段;
检测解析所述第一待检测字段的过程是否异常,若否,则将解析后的第一待检测字段确定为所述第二待检测字段。
其中,目标程序语言是指PLSQL语法。其中,PLSQL语法是专用于Oracle服务器的程序语言。其在SQL基础之上,添加了一些过程化控制语句,其中,PLSQL过程化控制语句可以包括:类型定义、判断、循环、游标、异常或例外处理等。
在一些实施例中,可以遍历循环sql文件列表中的文件,该sql文件使用PLSQL语法解析第一待检测字段,将第一待检测字段解析为抽象语法树(AST,Abstract SyntaxTree)。如果解析的过程报异常,则表示该sql文件不符合PLS QL语法,表示该sql文件不是Oracle数据库的文件,例如可以为其他数据库(mysql,mariaBD)的文件。如果使用PLSQL语法将文件的第一待检测字段解析成抽象语法树成功,说明该sql文件符合PLSQL语法规则,是Oracle数据库的文件。
步骤204、基于第三遍历规则遍历所述第二待检测字段,从所述第二待检测字段中筛选出归属于目标节点操作的第三待检测字段。
可选地,步骤204还可以包括以下步骤:
获取所述第二待检测字段的解析信息;
检测所述解析信息中是否存在目标节点,若是,则将所述第二待检测字段中与所述目标节点相关的字段确定为所述第三待检测字段。
其中,目标节点可以是DDLCommand节点,即DDL指令节点,用于定义数据库表的新建、修改和删除等操作。可以理解,检测解析通过PLSQL语法解析的抽象语法树中是否存在DDLCommand节点,如果不存在,则说明该PLSQL文件不存在数据库的DDL相关操作,则跳过该文件分析,继续下一个文件分析。相应地,如果存在DDLCommand节点,提取文件中的所有DDLCommand节点信息到DDLComm and节点列表。
步骤205、基于目标函数遍历所述第三待检测字段,若所述第三待检测字段中包含目标字段,则所述目标数据库中存在以在线创建方式创建的目标索引。
可选地,目标函数包括第一目标函数和第二目标函数。其中,第一目标函数可以为contain函数,第二目标函数可以为notcontain函数。
可选地,步骤205还可以包括以下步骤:
遍历所述第三待检测字段,获取所述第三待检测字段的属性信息;
基于所述第一目标函数检测所述属性信息中是否包含与创建索引相关的第一目标参数,若是,则继续检测所述属性信息中是否包含与在线创建索引相关的第二目标参数;
若是,则所述文件夹或所述子文件夹中的文件中存在以在线创建方式创建的所述目标索引。
其中,属性信息可以为image属性信息,可以通过提取image信息来获取第一目标参数,其中第一目标参数可以是“create index”字段,也即创建索引字段,下面对createindex的应用进行举例,例如以下创建用户学号的数据表和索引的字段:
Createtablebook1(
Idint(8),
Namevarchar(20),
Pricefloat(3)
Datevarchar(20),
Sno(8)
)
Createindexindex_book1onbook1(sno)
可以看出,在创建该用户学号数据表的同时,可以通过createindex创建该用户学号数据表的索引。
可以理解,由于第一目标函数为contain函数,可以用于检测该image属性信息中是否包含createindex字段,若包含则表示该文件中存在创建索引的操作,若不包含,则跳过对该文件分析,直接分析下一个文件。
其中,第二目标参数可以为“online”字段。在一些实施例中,可以通过notcontain函数判断是否包含“online”字段,如果包含则跳过该文件分析,如果不包含则说明该sql文件中存在Oracle数据库创建数据表、序列的索引时未使用在线创建的方式对用户赋权限的问题,需要通知相关开发者修改代码。在一些实施例中,以上检测分析操作的核心表达式如下:
//DDLCommand[contains(translate(@Image,"ABCDEFGHIJKLMNOPQRSTUVWXYZ","abcdefghijklmnopqrstuvwxyz"),"create index")and not(../DDL Command[contains(translate(@Image,"ABCDEFGHIJKLMNOPQRSTUVWXY Z","abcdefghijklmnopqrstuvwxyz"),"online")])]
可选地,本申请实施例的方法还可以包括:
基于翻译函数,将所述待检测字段的每个字符统一转换为大写字符或小写字符。
其中,翻译函数可以为translate函数。在一些实施例中,可以通过translat e函数将以上sql文件的字段统一转换为大写字符或小写字符,以实现整个遍历分析的检测过程中,将所有检测字符的大小写相统一,以能够提高检测的效率和准确性。
由上可知,本申请通过自动化脚本遍历项目源代码的待检测字段,以第一、第二和第三遍历规则,从待检测字段中提取出目标后缀文件,并根据PLSQL语法解析出抽象语法树,快速查找待检测字段中是否存在未使用在线创建方式创建的索引。因此,通过以上方式进行索引创建方式检测的查找时间快、查找准确度高,通过脚本遍历的方式能够避免人工查找的漏查、误查。另外,通过该方式进行检测的过程无需依赖人工处理,以实现完全通过自动化脚本方法来显著地降低研发成本开销。
为了更好地实施以上方法,相应的,本发明实施例还提供一种索引创建方式检测装置,该索引创建方式检测装置具体集成在终端或服务器中。
参考图4,该装置包括:
待检测字段获取模块301,用于获取待检测字段,所述待检测字段包括与所述目标数据库相关的字段;
第一遍历模块302,用于基于第一遍历规则遍历所述待检测字段,从所述待检测字段中筛选出归属于数据库文件的第一待检测字段;
第二遍历模块303,用于基于第二遍历规则遍历所述第一待检测字段,从所述第一待检测字段中筛选出归属于所述目标数据库的第二待检测字段;
第三遍历模块304,用于基于第三遍历规则遍历所述第二待检测字段,从所述第二待检测字段中筛选出归属于目标节点操作的第三待检测字段;
第四遍历模块305,用于基于目标函数遍历所述第三待检测字段,若所述第三待检测字段中包含目标字段,则所述目标数据库中存在以在线创建方式创建的目标索引。
可选地,所述第一遍历模块还包括:
文件夹遍历子模块,用于遍历所述待检测字段所在的文件夹,以及所述文件夹所包含的全部子文件夹;
目标后缀字符查找模块,用于查找所述文件夹或所述子文件夹的命名中是否存在目标后缀字符,若是,则将包含所述目标后缀字符的文件夹或子文件夹下的字段确定为所述第一待检测字段。
可选地,所述第二遍历模块包括:
目标程序语言获取子模块,用于获取目标程序语言;
解析子模块,用于基于所述目标程序语言解析所述文件夹或所述子文件夹中的所述第一待检测字段;
异常检测子模块,用于检测解析所述第一待检测字段的过程是否异常,若否,则将解析后的第一待检测字段确定为所述第二待检测字段。
可选地,所述第三遍历模块,包括:
解析信息获取子模块,用于获取所述第二待检测字段的解析信息;
目标节点检测子模块,用于检测所述解析信息中是否存在目标节点,若是,则将所述第二待检测字段中与所述目标节点相关的字段确定为所述第三待检测字段。
可选地,所述目标函数包括第一目标函数和第二目标函数,所述第四遍历模块包括:
属性信息获取子模块,用于遍历所述第三待检测字段,获取所述第三待检测字段的属性信息;
目标参数检测子模块,用于基于所述第一目标函数检测所述属性信息中是否包含与创建索引相关的第一目标参数,若是,则继续检测所述属性信息中是否包含与在线创建索引相关的第二目标参数;
若是,则所述文件夹或所述子文件夹中的文件中存在以在线创建方式创建的所述目标索引。
可选地,所述装置还包括:
字符翻译子模块,用于基于翻译函数,将所述待检测字段的每个字符统一转换为大写字符或小写字符。
由上可知,本申请通过自动化脚本遍历项目源代码的待检测字段,以第一、第二和第三遍历规则,从待检测字段中提取出目标后缀文件,并根据PLSQL语法解析出抽象语法树,快速查找待检测字段中是否存在未使用在线创建方式创建的索引。因此,通过以上方式进行索引创建方式检测的查找时间快、查找准确度高,通过脚本遍历的方式能够避免人工查找的漏查、误查。另外,通过该方式进行检测的过程无需依赖人工处理,以实现完全通过自动化脚本方法来显著地降低研发成本开销。
此外,本发明实施例还提供一种计算机设备,该计算机设备可以为终端或者服务器,如图5所示,其示出了本发明实施例所涉及的计算机设备的结构示意图,具体来讲:
该计算机设备可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、电源403和输入单元404等部件。本领域技术人员可以理解,图5中示出的计算机设备结构并不构成对计算机设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器401是该计算机设备的控制中心,利用各种接口和线路连接整个计算机设备的各个部分,通过运行或执行存储在存储器402内的软件程序和/或模块,以及调用存储在存储器402内的数据,执行计算机设备的各种功能和处理数据,从而对计算机设备进行整体监控。可选的,处理器401可包括一个或多个处理核心;优选的,处理器401可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器401中。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据计算机设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
计算机设备还包括给各个部件供电的电源403,优选的,电源403可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源403还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该计算机设备还可包括输入单元404,该输入单元404可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出,计算机设备还可以包括显示单元等,在此不再赘述。具体在本实施例中,计算机设备中的处理器401会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中,并由处理器401来运行存储在存储器402中的应用程序,从而实现各种功能,如下:
当监测到待同步的第一数据库发生数据改变时,获取所述第一数据库生成的二进制日志数据;
对所述二进制日志数据进行解析,得到所述二进制日志数据对应的可识别数据;
以第一预设时间间隔,将所述可识别数据推送至用于清洗加工所述可识别数据的第一节点;
控制所述第一节点加载清洗加工模板,通过所述清洗加工模板将所述可识别数据转化为增量的二进制日志数据,作为目标日志数据;
以第二预设时间间隔,获取所述目标日志数据对应的用户操作后的数据库值作为增量数据,将所述增量数据并发同步至目标存储的第二数据库。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本发明实施例还提供一种计算机可读存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本发明实施例中的各种可选实现方式中提供的方法。
根据本申请的一个方面,还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述实施例中的各种可选实现方式中提供的方法。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的指令,可以执行本发明实施例所提供的方法中的步骤,因此,可以实现本发明实施例所提供的方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本发明实施例所提供的一种索引创建方式检测方法、装置、计算机设备和存储介质进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种索引创建方式检测方法,其特征在于,应用于目标数据库,所述方法包括:
获取待检测字段,所述待检测字段包括与所述目标数据库相关的字段;
基于第一遍历规则遍历所述待检测字段,从所述待检测字段中筛选出归属于数据库文件的第一待检测字段;
基于第二遍历规则遍历所述第一待检测字段,从所述第一待检测字段中筛选出归属于所述目标数据库的第二待检测字段;
基于第三遍历规则遍历所述第二待检测字段,从所述第二待检测字段中筛选出归属于目标节点操作的第三待检测字段;
基于目标函数遍历所述第三待检测字段,若所述第三待检测字段中包含目标字段,则所述目标数据库中存在以在线创建方式创建的目标索引。
2.根据权利要求1所述的索引创建方式检测方法,其特征在于,所述基于第一遍历规则遍历所述待检测字段,从所述待检测字段中筛选出归属于数据库文件的第一待检测字段,包括:
遍历所述待检测字段所在的文件夹,以及所述文件夹所包含的全部子文件夹;
查找所述文件夹或所述子文件夹的命名中是否存在目标后缀字符,若是,则将包含所述目标后缀字符的文件夹或子文件夹下的字段确定为所述第一待检测字段。
3.根据权利要求2所述的索引创建方式检测方法,其特征在于,所述基于第二遍历规则遍历所述第一待检测字段,从所述第一待检测字段中筛选出归属于所述目标数据库的第二待检测字段,包括:
获取目标程序语言;
基于所述目标程序语言解析所述文件夹或所述子文件夹中的所述第一待检测字段;
检测解析所述第一待检测字段的过程是否异常,若否,则将解析后的第一待检测字段确定为所述第二待检测字段。
4.根据权利要求3所述的索引创建方式检测方法,其特征在于,所述基于第三遍历规则遍历所述待检测字段,从所述第二待检测字段中筛选出归属于目标节点操作的第三待检测字段,包括:
获取所述第二待检测字段的解析信息;
检测所述解析信息中是否存在目标节点,若是,则将所述第二待检测字段中与所述目标节点相关的字段确定为所述第三待检测字段。
5.根据权利要求4所述的索引创建方式检测方法,其特征在于,所述目标函数包括第一目标函数和第二目标函数,所述基于目标函数遍历所述第三待检测字段,包括:
遍历所述第三待检测字段,获取所述第三待检测字段的属性信息;
基于所述第一目标函数检测所述属性信息中是否包含与创建索引相关的第一目标参数,若是,则继续检测所述属性信息中是否包含与在线创建索引相关的第二目标参数;
若是,则所述文件夹或所述子文件夹中的文件中存在以在线创建方式创建的所述目标索引。
6.根据权利要求1-5中任一项所述的索引创建方式检测方法,其特征在于,所述方法还包括:
基于翻译函数,将所述待检测字段的每个字符统一转换为大写字符或小写字符。
7.一种索引创建方式检测装置,其特征在于,应用于目标数据库,包括:
待检测字段获取模块,用于获取待检测字段,所述待检测字段包括与所述目标数据库相关的字段;
第一遍历模块,用于基于第一遍历规则遍历所述待检测字段,从所述待检测字段中筛选出归属于数据库文件的第一待检测字段;
第二遍历模块,用于基于第二遍历规则遍历所述第一待检测字段,从所述第一待检测字段中筛选出归属于所述目标数据库的第二待检测字段;
第三遍历模块,用于基于第三遍历规则遍历所述第二待检测字段,从所述第二待检测字段中筛选出归属于目标节点操作的第三待检测字段;
第四遍历模块,用于基于目标函数遍历所述第三待检测字段,若所述第三待检测字段中包含目标字段,则所述目标数据库中存在以在线创建方式创建的目标索引。
8.根据权利要求7所述的索引创建方式检测装置,其特征在于,所述第一遍历模块还包括:
文件夹遍历子模块,用于遍历所述待检测字段所在的文件夹,以及所述文件夹所包含的全部子文件夹;
目标后缀字符查找模块,用于查找所述文件夹或所述子文件夹的命名中是否存在目标后缀字符,若是,则将包含所述目标后缀字符的文件夹或子文件夹下的字段确定为所述第一待检测字段。
9.一种计算机设备,其特征在于,包括存储器,处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述处理器执行所述计算机程序时实现如权利要求1至6中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,当计算机程序在计算机上运行时,使得所述计算机执行如权利要求1至6中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211608337.1A CN115952083A (zh) | 2022-12-14 | 2022-12-14 | 一种索引创建方式检测方法、装置、介质和计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211608337.1A CN115952083A (zh) | 2022-12-14 | 2022-12-14 | 一种索引创建方式检测方法、装置、介质和计算机设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115952083A true CN115952083A (zh) | 2023-04-11 |
Family
ID=87285291
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211608337.1A Pending CN115952083A (zh) | 2022-12-14 | 2022-12-14 | 一种索引创建方式检测方法、装置、介质和计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115952083A (zh) |
-
2022
- 2022-12-14 CN CN202211608337.1A patent/CN115952083A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220100774A1 (en) | Generating data transformation workflows | |
US11023500B2 (en) | Systems and methods for code parsing and lineage detection | |
CN110795455A (zh) | 依赖关系解析方法、电子装置、计算机设备及可读存储介质 | |
CN110431545A (zh) | 针对结构化数据和非结构化数据执行查询 | |
US8108360B2 (en) | Database object update order determination | |
JP2000148461A (ja) | ソフトウェアモデル及び既存のソ―スコ―ドを同期化させる方法及びその装置 | |
CN113760891B (zh) | 一种数据表的生成方法、装置、设备和存储介质 | |
CN108009296B (zh) | 一种基于Hbase的SQL查询方法、系统及相关装置 | |
CN114461603A (zh) | 多源异构数据融合方法及装置 | |
CN107169092A (zh) | 交互过程中智能识别并处理敏感内容的方法及系统 | |
CN116361184A (zh) | 一种数据查找方法、装置、介质和计算机设备 | |
US10223086B2 (en) | Systems and methods for code parsing and lineage detection | |
CN113722296A (zh) | 一种农业信息处理方法、装置、电子设备及存储介质 | |
US8200673B2 (en) | System and method for on-demand indexing | |
CN110688355A (zh) | 变更容器状态的方法和装置 | |
CN115952083A (zh) | 一种索引创建方式检测方法、装置、介质和计算机设备 | |
CN115757479A (zh) | 数据库的查询优化方法、机器可读存储介质与计算机设备 | |
US20150347402A1 (en) | System and method for enabling a client system to generate file system operations on a file system data set using a virtual namespace | |
CN114968350A (zh) | 一种代码方法调用链的搜索方法、装置及设备 | |
CN113760600B (zh) | 一种数据库备份方法、数据库还原方法和相关装置 | |
US11307850B2 (en) | Efficient change analysis in poly-lingual corpus hierarchies | |
CN108763665B (zh) | 电网仿真分析数据存储方法及装置 | |
CN113868138A (zh) | 测试数据的获取方法、系统、设备及存储介质 | |
CN108470047B (zh) | 基于物联网的远程平台监测系统 | |
Marotta et al. | Managing source schema evolution in web warehouses |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |