CN117076440A - 间隔分区表上全局索引的异步清理方法、存储介质和设备 - Google Patents

间隔分区表上全局索引的异步清理方法、存储介质和设备 Download PDF

Info

Publication number
CN117076440A
CN117076440A CN202311332115.6A CN202311332115A CN117076440A CN 117076440 A CN117076440 A CN 117076440A CN 202311332115 A CN202311332115 A CN 202311332115A CN 117076440 A CN117076440 A CN 117076440A
Authority
CN
China
Prior art keywords
index
cleaning
isolated
global
entries
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311332115.6A
Other languages
English (en)
Inventor
岳红波
王建华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kingbase Information Technologies Co Ltd
Original Assignee
Beijing Kingbase Information Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingbase Information Technologies Co Ltd filed Critical Beijing Kingbase Information Technologies Co Ltd
Priority to CN202311332115.6A priority Critical patent/CN117076440A/zh
Publication of CN117076440A publication Critical patent/CN117076440A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/215Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2228Indexing structures
    • G06F16/2272Management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种间隔分区表上全局索引的异步清理方法、存储介质和设备,其中异步清理方法包括:在执行事务回滚时,不删除全局索引中的索引条目;在对全局索引中的索引条目进行扫描的过程中,根据预设规则识别出所述全局索引中的孤立索引条目;根据预设清理规则,对所述孤立索引条目进行定期清理。本发明所提供的技术方案,能够解决数据库的事务回滚效率低的问题,达到降低事务回滚与其他并发事务阻塞的目的。

Description

间隔分区表上全局索引的异步清理方法、存储介质和设备
技术领域
本发明涉及数据库的技术领域,特别是涉及一种间隔分区表上全局索引的异步清理方法、一种机器可读存储介质和一种计算机设备。
背景技术
在关系型数据库中,可以通过分区技术将一个对象,如数据库表,划分为多个子表,每个子表称为一个分区。分区类型包括范围分区、哈希分区和列表分区,其中最常见的是范围分区,范围分区是指每个单独的分区对应于表的一个或多个列的特定值范围。例如,一个表中某一列记录的是一年的日期值,则可以将该表划分为12个分区,每个分区对应今年的一个月,则特定月份的所有行将被插入到与该月份对应的分区中。当一个特定的查询选择了月份等于五月的所有行时,那么查询过程中只会扫描与五月关联的分区。
间隔分区是范围分区的一个拓展,当插入的数据超过了现有的所有分区时,数据库会按照指定的间隔自动创建分区。示例如下,
create table employee(
id int,
name varchar(64),
salary int,
...... ) partition by range (salary) interval (500)
(
partition p1 values less than(3000),
partition p2 values less than(3500)
);
根据以上程序所得到的分区包括分区p1和分区p2,每个分区对应的薪资变化在500以内,其中分区p1中存储的是薪资在2500到3000的员工,分区p2中存储的是新增在3000到3500的员工。当在录入一名新员工且其薪资为3600时,该雇员表的插入操作会触发自动扩展出一个新分区p3,其对应的分区范围为[3500, 4000)。
分区表上可以创建两种索引:本地索引和全局索引,其中本地索引是一种分区索引且每个索引分区只包含一个表分区的数据,全局索引可以是分区或者非分区的,对于非分区全局索引,各个表分区数据对应的索引项存放在一起,对于分区全局索引,其分区键可以与表分区不一致,即一个索引分区中可以包含不同表分区的数据。
当间隔分区由于数据插入或者更新触发了分区自动扩展,但最终事务回滚时,在全局索引中会出现对应表分区不存在的孤立索引条目。当此类索引条目大量存在时,在事务回滚阶段清理孤立索引条目会花费较长时间,而在这个过程中其他并发查询将无法使用该全局索引。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的间隔分区表上全局索引的异步清理方法、存储介质和设备,能够解决数据库的事务回滚效率低的问题,达到降低事务回滚与其他并发事务阻塞的目的。
具体地,本发明提供了一种间隔分区表上全局索引的异步清理方法,包括:
在执行事务回滚时,不删除全局索引中的索引条目;
在对所述全局索引中的索引条目进行扫描的过程中,根据预设规则识别出所述全局索引中的孤立索引条目;
根据预设清理规则,对所述孤立索引条目进行定期清理。
根据本发明的一个实施例,在所述的根据预设规则识别出所述全局索引中的孤立索引条目后,还包括:
对所述孤立索引条目进行标记;
所述的根据预设清理规则,对所述孤立索引条目进行定期清理,包括:
根据所述标记识别出所述全局索引中的孤立索引条目并进行清理。
根据本发明的一个实施例,所述的根据预设规则识别出所述全局索引中的孤立索引条目,包括:
获取所述全局索引中没有被标记的索引项;
获取所述索引项的分区标识符,并根据所述分区标识符查找对应的表分区;
若查找失败,则标记所述索引项为孤立索引条目。
根据本发明的一个实施例,所述的根据预设清理规则,对所述孤立索引条目进行定期清理,包括:
当数据库处于空闲状态时,对所述孤立索引条目进行定期清理。
根据本发明的一个实施例,所述对所述孤立索引条目进行定期清理,包括:
通过负责清理工作的进程,根据系统配置时间对所述孤立索引条目进行定期清理。
根据本发明的一个实施例,所述的根据系统配置时间对所述孤立索引条目进行定期清理,包括:
依次对所述全局索引中各数据页面中的孤立索引条目进行清理。
根据本发明的一个实施例,所述的根据预设清理规则,对所述孤立索引条目进行定期清理,包括:
当分区表的数据进行更新和/或插入操作时,对所述孤立索引条目进行清理。
根据本发明的一个实施例,所述的对所述孤立索引条目进行清理,包括:
获取用于存放新增的索引列的数据页面;
判断所述数据页面的空间是否足够存储新增的索引项;
若否,则将所述数据页面中的孤立索引条目删除。
另一方面,本发明还提供了一种机器可读存储介质,其上存储有机器可执行程序,所述机器可执行程序被处理器执行时,实现根据上述任一项实施例所述的间隔分区表上全局索引的异步清理方法。
又一方面,本发明还提供了一种计算机设备,包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的机器可执行程序,并且所述处理器执行所述机器可执行程序时,实现根据上述任一项实施例所述的间隔分区表上全局索引的异步清理方法。
本发明所提供的技术方案,在执行事务回滚时,不删除全局索引中的索引条目;在对全局索引中的索引条目进行扫描的过程中,根据预设规则识别出全局索引中的孤立索引条目;并根据预设清理规则,对全局索引中的孤立索引条目进行定期清理。由于本发明的技术方案单独对全局索引中的孤立索引条目进行清理,而在进行事务回滚时不执行全局索引中的孤立索引条目的清理工作,因此可以提升事务回滚的效率,进而降低事务回滚与其他并发事务的阻塞。
根据下文结合附图对本发明具体实施例的详细描述,本领域技术人员将会更加明了本发明的上述以及其他目的、优点和特征。
附图说明
后文将参照附图以示例性而非限制性的方式详细描述本发明的一些具体实施例。附图中相同的附图标记标示了相同或类似的部件或部分。本领域技术人员应该理解,这些附图未必是按比例绘制的。附图中:
图1是根据本发明一个实施例的一种间隔分区表上全局索引的异步清理方法的示意性流程图;
图2是根据本发明一个实施例的数据库的事务处理方法的示意性流程图;
图3是根据本发明一个实施例的根据预设规则识别出全局索引中的孤立索引条目的方法的示意性流程图;
图4是根据本发明一个实施例的一种对全局索引中各数据页面中的孤立索引条目进行清理的示意性流程图;
图5是根据本发明一个实施例的另一种对全局索引中各数据页面中的孤立索引条目进行清理的示意性流程图;
图6是根据本发明一个实施例的一种机器可读存储介质的示意图;
图7是根据本发明一个实施例的一种计算机设备的示意图。
具体实施方式
下面参照图1至图7来描述本发明实施例的一种间隔分区表上全局索引的异步清理方法、一种机器可读存储介质和一种计算机设备。在本实施例的描述中,需要理解的是,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征,也即包括一个或者更多个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个、三个等,除非另有明确具体的限定。当某个特征“包括或者包含”某个或某些其涵盖的特征时,除非另外特别地描述,这指示不排除其它特征和可以进一步包括其它特征。
在本实施例的描述中,参考术语“一个实施例”、“一些实施例”、“示意性实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。参考属于“步骤S1”、“步骤S2”等步骤的编号不代表步骤执行的先后顺序,只代表对应的方法中有相应的步骤内容。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
在下面各实施例中,数据库的事务是访问并可能操作各种数据项的一个数据库操作序列,这些操作要么全部执行,要么全部不执行,是一个不可分割的工作单位,事务由事务开始与事务结束之间执行的全部数据库操作组成。事务回滚是指将该事务已完成对数据库的更新操作撤销。
请参阅图1,图1所示出的是本发明的一个实施例中一种间隔分区表上全局索引的异步清理方法的示意性流程图,该异步清理方法用于对间隔分区表上中的孤立索引条目进行清理,以提升事务回滚的执行效率,降低事务回滚对其他并发事务的阻塞。下面结合图1所示出的流程对本实施例的间隔分区表上全局索引的异步清理方法做详细的介绍。
如图1所示,本实施例的间隔分区表上全局索引的异步清理方法包括如下步骤:
步骤S1:在执行事务回滚时,不删除全局索引中的索引条目;
步骤S2:在对全局索引中的索引条目进行扫描的过程中,根据预设规则识别出全局索引中的孤立索引条目;
步骤S3:根据预设清理规则,对全局索引中的孤立索引条目进行定期清理。
在上述步骤S1中,在执行事务回滚时,仅删除间隔分区表中对应的数据,以释放对应的存储空间,但是不删除该数据在全局索引中对应的索引条目,以使该索引条目成为孤立索引条目。
在上述步骤S2中,对全局索引中的索引条目进行扫描是指在对其中一个间隔分区表上的数据查询时,从磁盘或者缓存中读取该间隔分区表的全局索引后,对该全局索引中的索引条目逐条进行扫描。在扫描到全局索引中的任意一个索引条目时,会根据预规则识别该索引条目是否为孤立索引条目;如果是,则跳过该索引条目;如果否,则继续扫描下一个索引条目;当扫描完所有全局索引中的所有索引条目后,根据扫描到的索引条目执行下一步的数据查询动作。
在上述步骤S3中,预设清理规则可以为数据库的运行状态满足预设条件,并且该预设条件至少包括非事务回滚状态,即数据库在非事务回滚的状态下,对全局索引中的孤立索引条目进行定期清理,因此在事务回滚时不需要再清理孤立索引条目,从而提升事务回滚的执行效率。
在采用本实施例的间隔分区表上全局索引的异步清理方法后,数据库的事务处理方法如图2所示,包括如下步骤:
步骤S101:在启动事务后,对间隔分区表进行数据的插入或者更新操作;
步骤S102:判断上述插入或者更新操作是否触发自动创建新分区,若是,则执行步骤S103;
步骤S103:创建新分区,将对应的数据插入到该新分区中,并在全局索引中插入对应的索引条目;
步骤S104:在触发事务回滚时,删除新分区并删除其中的数据;
步骤S105:在对间隔分区表进行数据查询时,对全局索引进行扫描;
步骤S106:在对全局索引的扫描过程中,检查全局索引中各索引条目是否为孤立索引条目;
步骤S107:如果全局索引中某个索引条目为孤立索引条目,则跳过该索引条目。
综上所述,在本实施例中,在执行事务回滚时不删除全局索引中的索引条目,在对全局索引中的索引条目进行扫描的过程中根据预设规则识别出全局索引中的孤立索引条目,并根据预设清理规则,对全局索引中的孤立索引条目进行定期清理。由于本实施例中在进行事务回滚时,不需要执行全局索引中的孤立索引条目的清理工作,而是设置了单独的清理步骤对全局索引中的孤立索引条目进行清理,因此所以本实施例的技术方案可以提升事务回滚的效率,进而降低事务回滚与其他并发事务的阻塞。
在本发明的一些实施例中,在上述步骤S2中根据预设规则识别出全局索引中的孤立索引条目后,还包括:对全局索引中的孤立索引条目进行标记。
在本实施例中,可以在全局索引中设置各索引条目的标记值,例如,如果某个索引条目为孤立索引条目,则该索引条目的标记值为1;如果某个索引条目不为孤立索引条目,则该索引条目的标记值为0。
相应地,在上述步骤S3中根据预设清理规则,对全局索引中的孤立索引条目进行定期清理时,包括:
首先识别出全局索引中被标记的索引项,该索引项即为全局索引中的孤立索引条目;然后将该孤立索引条目删除,以实现对全局索引中孤立索引条目的清理。
即在本实施例中,从全局索引中查找出标记值为1的索引条目,并将该索引条目作为孤立索引条目删除。
通过本实施例的设置方式,可以通过对孤立索引条目进行标记的方式,便于在定期清理时便于对孤立索引条目的查找,从而提高对全局索引中孤立索引条目清理的工作效率和准确度。
在本发明的一些实施例中,上述步骤S2中根据预设规则识别出全局索引中的孤立索引条目的方法如图3所示,包括如下步骤:
步骤S21:在对全局索引中的索引条目进行扫描的过程中,获取全局索引中没有被标记的索引条目;
步骤S22:获取没有被标记的索引条目的分区标识符,并根据该分区标识符查找对应的表分区,
步骤S23:判断是否查找到与没有被标记的索引条目的分区标识符对应的表分区;
若否,则执行步骤S24;若是,则执行步骤S25;根据上述没有被标记的索引条目的行标识查找对应数据表的数据行;
步骤S24:上述没有被标记的索引条目为孤立索引条目;
步骤S25:根据上述没有被标记的索引条目的行标识查找对应数据表的数据行。
通过本实施例的设置方式,可以根据标识符是否存在对应的表分区,判断出对应的索引条目是否为孤立索引条目,从而保证对全局索引中孤立索引条目识别的准确性和可靠性。
在本发明的一些实施例中,上述步骤S3的根据预设清理规则,对全局索引中的孤立索引条目进行定期清理的方法包括:
当数据库处于空闲状态时,对全局索引中的孤立索引条目进行定期清理。
数据库处于空闲状态是指数据库出现事务较少状态,在本实施例中,可以对数据库处理事务的历史次数进行周期性的检测和记录,以得到在各周期内数据库处理事务的频次小于预设频次的时间段;当数据库处于当前周期对应的时间段时,判断为数据库处于空闲状态。或者,当数据库在设定时间段内处理事务的数量小于设定数量时,判断为数据库处于空闲状态。
当数据库处于空闲状态时,每间隔设定时间段对全局索引中的孤立索引条目进行一次清理,从而实现对全局索引中的孤立索引条目进行定期清理。
通过本实施例的设置方式,可以在数据库处于空闲状态时,对全局索引中的孤立索引条目进行定期清理,以减少对孤立索引条目进行清理的过程与其他事务之间产生冲突,达到降低孤立索引条目的清理对其他并发事务形成阻塞的目的。
在本发明的一些实施例中,当数据库处于空闲状态时,对全局索引中的孤立索引条目进行定期清理的方法包括:
通过负责清理工作的进程,根据系统配置时间对全局索引的孤立索引条目进行定期清理。
在本实施例中,可以根据数据库的系统配置时间,每间隔一段时间负责清理工作的进程对全局索引中的索引条目进行一次扫描和整理,查找出全局索引中的孤立索引条目并进行删除,实现对全局索引的孤立索引条目进行定期清理。
通过本实施例的设置方式,可以采用数据库中负责清理工作的进程对全局索引的孤立索引条目进行清理,以保证对孤立索引条目清理的准确性和可靠性。
在本发明的一些实施例中,在根据系统配置时间对全局索引的孤立索引条目进行定期清理时,依次对全局索引中各数据页面中的孤立索引条目进行清理。
在本实施例中,对全局索引中各数据页面中的孤立索引条目进行清理的流程如图4所示,包括如下步骤:
步骤S31:判断是否开始执行全局索引的孤立索引条目的清理工作;
如果是,则执行步骤S32;
步骤S32:读取全局索引中的第一个数据页面;
步骤S33:判断所读取的数据页面中是否存在孤立索引条目,例如,可以判断是否存在标记值为1的索引条目,如果是,则所读取的数据页面中存在孤立索引条目;如果否,则所读取的数据页面中不存在孤立索引条目;
若读取的数据页面中存在孤立索引条目,则执行步骤S35;若读取的数据页面中不存在孤立索引条目,则执行步骤S34;
步骤S34:将所读取的数据页面中的孤立索引条目删除,然后执行步骤S35;
步骤S35:判断是否存在下一数据页面;
若是,则读取下一数据页面并返回步骤S33;
若否,则完成对全局索引中孤立索引条目进行的清理。
通过本实施例的设置方式,可以依次删除全局索引中各数据页面上的孤立索引条目,以提高对全局索引中孤立索引条目清理的可靠性。
在本发明的一些实施例中,上述步骤S3的根据预设清理规则,对全局索引中的孤立索引条目进行定期清理的方法包括:
当分区表的数据进行更新和/或插入操作时,对全局索引中的孤立索引条目进行清理。
由于有分区表的数据更新或插入时,需要将更新或插入的数据的索引条目添加到全局索引中,因此在分区表的数据进行更新和/或插入操作时对全局索引中的孤立索引条目进行清理,可以提高减少孤立索引条目的清理过程对其他事务造成阻塞。
在本发明的一些实施例中,当分区表的数据进行更新和/或插入操作时,对全局索引中的孤立索引条目进行清理的流程如图5所示,包括如下步骤:
步骤S41:判断分区表是否有数据进行更新和/或插入操作;
若是,则执行步骤S42;
步骤S42:获取待插入数据的索引条目,并查找该索引条目对应的待插入数据页面;
步骤S43:判断待插入数据页面的剩余空间是否足够插入待插入数据的索引条目;
若否,则执行步骤S45;若是,则执行步骤S44;
步骤S44:将查找到的孤立索引条目删除,以释放待插入数据页面的存储空间,然后执行步骤S45;
步骤S45:将待插入数据的索引条目插入到待插入数据页面。
通过本实施例的设置方式,不仅可以降低事务回滚与其他并发事务阻塞,而且还能够在分区表是有数据进行更新和/或插入操作时,防止出现对应数据页面存在空间不足的问题,从而进一步提高数据库的可靠性和稳定性。
本实施例还提供了一种机器可读存储介质和计算机设备。图6是根据本发明一个实施例的机器可读存储介质830的示意图;图7是根据本发明一个实施例的计算机设备900的示意图。机器可读存储介质830其上存储有机器可执行程序840,机器可执行程序840被处理器执行时实现上述任一实施例的间隔分区表上全局索引的异步清理方法。
计算机设备900可以包括存储器920、处理器910及存储在存储器920上并在处理器910上运行的机器可执行程序840,并且处理器910执行机器可执行程序840时实现上述任一实施例的间隔分区表上全局索引的异步清理方法。
需要说明的是,在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何机器可读存储介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。
就本实施例的描述而言,机器可读存储介质830可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,机器可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。
计算机设备900可以是例如服务器、台式计算机、笔记本式计算机、平板计算机或智能手机。在一些示例中,计算机设备900可以是云计算节点。计算机设备900可以在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般语境下描述。通常,程序模块可以包括执行特定的任务或者实现特定的抽象数据类型的例程、程序、目标程序、组件、逻辑、数据结构等。计算机设备900可以在通过通信网络链接的远程处理设备执行任务的分布式云计算环境中实施。在分布式云计算环境中,程序模块可以位于包括存储设备的本地或远程计算系统存储介质上。
计算机设备900可以包括适于执行存储的指令的处理器910、在操作期间为所述指令的操作提供临时存储空间的存储器920。处理器910可以是单核处理器、多核处理器、计算集群或任何数量的其他配置。存储器920可以包括随机存取存储器(RAM)、只读存储器、闪存或任何其他合适的存储系统。
处理器910可以通过系统互连(例如PCI、PCI-Express等)连接到适于将计算机设备900连接到一个或多个I/O设备(输入/输出设备)的I/O接口(输入/输出接口)。I/O设备可以包括例如键盘和指示设备,其中指示设备可以包括触摸板或触摸屏等等。I/O设备可以是计算机设备900的内置组件,或者可以是外部连接到计算设备的设备。
处理器910也可以通过系统互连链接到适于将计算机设备900连接到显示设备的显示接口。显示设备可以包括作为计算机设备900的内置组件的显示屏。显示设备还可以包括外部连接到计算机设备900的计算机监视器、电视机或投影仪等。此外,网络接口控制器(network interface controller,NIC)可以适于通过系统互连将计算机设备900连接到网络。在一些实施例中,NIC可以使用任何合适的接口或协议(诸如因特网小型计算机系统接口等)来传输数据。网络可以是蜂窝网络、无线电网络、广域网(WAN))、局域网(LAN)或因特网等等。远程设备可以通过网络连接到计算设备。
至此,本领域技术人员应认识到,虽然本文已详尽示出和描述了本发明的多个示例性实施例,但是,在不脱离本发明精神和范围的情况下,仍可根据本发明公开的内容直接确定或推导出符合本发明原理的许多其他变型或修改。因此,本发明的范围应被理解和认定为覆盖了所有这些其他变型或修改。

Claims (10)

1.一种间隔分区表上全局索引的异步清理方法,其特征在于,包括:
在执行事务回滚时,不删除全局索引中的索引条目;
在对所述全局索引中的索引条目进行扫描的过程中,根据预设规则识别出所述全局索引中的孤立索引条目;
根据预设清理规则,对所述孤立索引条目进行定期清理。
2.根据权利要求1所述的异步清理方法,其特征在于,
在所述的根据预设规则识别出所述全局索引中的孤立索引条目后,还包括:
对所述孤立索引条目进行标记;
所述的根据预设清理规则,对所述孤立索引条目进行定期清理,包括:
根据所述标记识别出所述全局索引中的孤立索引条目并进行清理。
3.根据权利要求2所述的异步清理方法,其特征在于,
所述的根据预设规则识别出所述全局索引中的孤立索引条目,包括:
获取所述全局索引中没有被标记的索引项;
获取所述索引项的分区标识符,并根据所述分区标识符查找对应的表分区;
若查找失败,则标记所述索引项为孤立索引条目。
4.根据权利要求1-3任一项所述的异步清理方法,其特征在于,
所述的根据预设清理规则,对所述孤立索引条目进行定期清理,包括:
当数据库处于空闲状态时,对所述孤立索引条目进行定期清理。
5.根据权利要求4所述的异步清理方法,其特征在于,
所述的对所述孤立索引条目进行定期清理,包括:
通过负责清理工作的进程,根据系统配置时间对所述孤立索引条目进行定期清理。
6.根据权利要求5所述的异步清理方法,其特征在于,
所述的根据系统配置时间对所述孤立索引条目进行定期清理,包括:
依次对所述全局索引中各数据页面中的孤立索引条目进行清理。
7.根据权利要求1-3任一项所述的异步清理方法,其特征在于,
所述的根据预设清理规则,对所述孤立索引条目进行定期清理,包括:
当分区表的数据进行更新和/或插入操作时,对所述孤立索引条目进行清理。
8.根据权利要求7所述的异步清理方法,其特征在于,
所述的对所述孤立索引条目进行清理,包括:
获取用于存放新增的索引列的数据页面;
判断所述数据页面的空间是否足够存储新增的索引项;
若否,则将所述数据页面中的孤立索引条目删除。
9.一种机器可读存储介质,其上存储有机器可执行程序,所述机器可执行程序被处理器执行时,实现根据权利要求1至8任一项所述的间隔分区表上全局索引的异步清理方法。
10.一种计算机设备,包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的机器可执行程序,并且所述处理器执行所述机器可执行程序时,实现根据权利要求1至8任一项所述的间隔分区表上全局索引的异步清理方法。
CN202311332115.6A 2023-10-16 2023-10-16 间隔分区表上全局索引的异步清理方法、存储介质和设备 Pending CN117076440A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311332115.6A CN117076440A (zh) 2023-10-16 2023-10-16 间隔分区表上全局索引的异步清理方法、存储介质和设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311332115.6A CN117076440A (zh) 2023-10-16 2023-10-16 间隔分区表上全局索引的异步清理方法、存储介质和设备

Publications (1)

Publication Number Publication Date
CN117076440A true CN117076440A (zh) 2023-11-17

Family

ID=88713739

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311332115.6A Pending CN117076440A (zh) 2023-10-16 2023-10-16 间隔分区表上全局索引的异步清理方法、存储介质和设备

Country Status (1)

Country Link
CN (1) CN117076440A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103262074A (zh) * 2010-11-16 2013-08-21 赛贝斯股份有限公司 并行再分区索引扫描
US20150278327A1 (en) * 2014-03-31 2015-10-01 Oracle International Corporation Asynchronous global index maintenance during partition maintenance
CN113239013A (zh) * 2021-05-17 2021-08-10 北京青云科技股份有限公司 分布式系统及存储介质
CN114546999A (zh) * 2022-01-24 2022-05-27 北京北信源软件股份有限公司 一种数据清理方法、装置、电子设备及存储介质
CN114661718A (zh) * 2022-03-28 2022-06-24 北京海量数据技术股份有限公司 Opengauss平台下在线创建本地分区索引的方法及系统
CN116348866A (zh) * 2020-10-14 2023-06-27 甲骨文国际公司 横向扩展数据库中具有快照隔离的多语句交互式事务
CN116467310A (zh) * 2023-04-11 2023-07-21 北京人大金仓信息技术股份有限公司 无效索引的无锁标记方法、存储介质和计算机设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103262074A (zh) * 2010-11-16 2013-08-21 赛贝斯股份有限公司 并行再分区索引扫描
US20150278327A1 (en) * 2014-03-31 2015-10-01 Oracle International Corporation Asynchronous global index maintenance during partition maintenance
CN116348866A (zh) * 2020-10-14 2023-06-27 甲骨文国际公司 横向扩展数据库中具有快照隔离的多语句交互式事务
CN113239013A (zh) * 2021-05-17 2021-08-10 北京青云科技股份有限公司 分布式系统及存储介质
CN114546999A (zh) * 2022-01-24 2022-05-27 北京北信源软件股份有限公司 一种数据清理方法、装置、电子设备及存储介质
CN114661718A (zh) * 2022-03-28 2022-06-24 北京海量数据技术股份有限公司 Opengauss平台下在线创建本地分区索引的方法及系统
CN116467310A (zh) * 2023-04-11 2023-07-21 北京人大金仓信息技术股份有限公司 无效索引的无锁标记方法、存储介质和计算机设备

Similar Documents

Publication Publication Date Title
US7219104B2 (en) Data cleansing
US7406477B2 (en) Database system with methodology for automated determination and selection of optimal indexes
JP3945771B2 (ja) データベース・システム
US5043872A (en) Access path optimization using degrees of clustering
US7730097B2 (en) Smart database
JP2583010B2 (ja) 多層インデックス構造におけるローカルインデックステーブル及び大域インデックステーブルの間の一貫性を維持する方法
US8161004B2 (en) XML sub-document versioning method in XML databases using record storages
US6480848B1 (en) Extension of data definition language (DDL) capabilities for relational databases for applications issuing DML and DDL statements
US6161109A (en) Accumulating changes in a database management system by copying the data object to the image copy if the data object identifier of the data object is greater than the image identifier of the image copy
US8161015B2 (en) Method and system for deferred maintenance of database indexes
CN101136027B (zh) 用于数据库索引、搜索和数据检索的系统和方法
JP4101410B2 (ja) タイムバージョンデータ記憶装置
US20050076018A1 (en) Sorting result buffer
US8682872B2 (en) Index page split avoidance with mass insert processing
CN111143368A (zh) 一种关系型数据库数据对比方法及系统
US9489413B2 (en) Asynchronous global index maintenance during partition maintenance
US9043294B2 (en) Managing overflow access records in a database
US6453322B1 (en) Extension of data definition language (DDL) capabilities for relational databases for applications issuing multiple units of work
CN117076440A (zh) 间隔分区表上全局索引的异步清理方法、存储介质和设备
US6421677B1 (en) Extension of data definition language (DDL) capabilities for relational databases for applications issuing DDL statements
CN116467310A (zh) 无效索引的无锁标记方法、存储介质和计算机设备
US8818990B2 (en) Method, apparatus and computer program for retrieving data
US7565217B2 (en) Traversal of empty regions in a searchable data structure
CN113536058A (zh) 一种空间索引修改方法、装置、设备及存储介质
US8510269B2 (en) Uninterrupted database index reorganization/movement

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination