CN115827663A - 一种物化视图的方法以及相关设备 - Google Patents
一种物化视图的方法以及相关设备 Download PDFInfo
- Publication number
- CN115827663A CN115827663A CN202111088864.XA CN202111088864A CN115827663A CN 115827663 A CN115827663 A CN 115827663A CN 202111088864 A CN202111088864 A CN 202111088864A CN 115827663 A CN115827663 A CN 115827663A
- Authority
- CN
- China
- Prior art keywords
- view
- history
- views
- target
- hash value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000012545 processing Methods 0.000 claims description 26
- 238000004590 computer program Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请实施例公开了一种物化视图的方法以及相关设备,用于提高物化后的视图被查询的概率。本申请实施例方法包括:基于历史的视图查询情况确定多个第一历史视图,每个第一历史视图皆存在对应的特征信息,特征信息用于指示视图的数据构成情况。查询第一视图,并确定存在目标历史视图,目标历史视图的特征信息与第一视图的特征信息具有匹配关系。若第一视图不存在对应的物化视图,则创建所述第一视图的物化视图。
Description
技术领域
本申请实施例涉及数据库领域,尤其涉及一种物化视图的方法以及相关设备。
背景技术
在数据库系统中,随着数据的查询量迅猛增长,为了降低查询的响应时间,通常使用物化视图技术。物化视图技术是指对数据进行实际的物理存储,从而在需要查询这些数据时大幅提高响应速度。
物化视图的过程通常需要根据历史的查询情况选择出较为常用的视图,之后对这些视图进行物化。然而,存在的缺点是进行物化的视图在未来不会被查询,从而浪费了物化视图所需的计算以及存储资源。
发明内容
本申请实施例提供了一种物化视图的方法以及相关设备,用于提高物化的视图在后续被查询的概率。
本申请实施例第一方面提供了一种物化视图的方法:
基于工作日志可以对历史的视图查询情况进行分析,基于历史的视图查询情况确定多个第一历史视图,每个第一历史视图皆存在对应的特征信息,其中,第一历史视图为已经被查询过的视图,特征信息用于指示视图的数据构成情况。确定出多个第一历史视图之后,对第一视图进行查询,确定第一视图对应的特征信息,并且确定在多个第一历史视图中存在目标历史视图,该目标历史视图的特征信息与第一视图的特征信息具有匹配关系。这种情况下,如果第一视图没有对应的物化视图,则创建第一视图对应的物化视图。
本申请实施例中,第一历史视图可以是被查询的概率比较高的视图,但是并不会直接对第一历史视图进行物化,当后续对第一视图进行查询,并且第一视图的特征信息与第一历史视图中的目标历史视图的特征信息存在匹配关系,说明第一视图的数据与目标历史视图完全一致或者非常相近,才会对第一视图进行物化,从而进一步提高了第一视图在后续被查询的概率,提高物化的收益。
在一种可能的实现方式中,特征信息包括第一哈希值,第一哈希值为基于查询视图时所使用的第一查询参数确定。目标历史视图的特征信息与第一视图的所述特征信息具有匹配关系具体可以是,目标历史视图与第一视图对应相同的第一哈希值。或者,特征信息也可以包括第二哈希值以及数据选取范围,其中数据选取范围用于指示从基表中选取的数据的范围,第二哈希值基于第二查询参数确定,第二查询参数由第一查询参数中的部分查询参数组成。这种情况下目标历史视图的特征信息与第一视图的特征信息具有匹配关系具体可以是,目标历史视图与第一视图对应相同的第二哈希值,且目标历史视图的数据选取范围包含第一视图的所述数据选取范围。
在一种可能的实现方式中,如果第一视图存在对应的物化视图,那么可以直接访问第一视图对应的物化视图。
在一种可能的实现方式中,确定多个第二历史视图中的每个第二历史视图对应的第二哈希值,其中第二历史视图为已经被查询过的视图。确定多个第二哈希值之后,选取多个第二哈希值中出现次数最多的第二哈希值作为目标哈希值,基于此,将第二哈希值与目标哈希值相同的第二历史视图确定为第一历史视图。
在一种可能的实现方式中,第一查询参数包括基表信息、操作类型以及筛选关键字,基表信息包括一个或多个基表的标识,所查询的视图中的数据来自一个或多个基表,操作类型用于指示从一个或多个基表中选取数据的方式,数据选取范围根据操作方式以及筛选关键字确定,第二查询参数包括基表信息以及操作方式。
在一种可能的实现方式中,在创建第一视图对应的物化视图之前,还可以确定查询目标历史视图所消耗的资源情况,如果消耗的资源情况符合预设情况,则创建第一视图对应的物化视图。
本申请实施例中,如果目标历史视图消耗的资源情况较为严重,才创建第一视图对应的物化视图,如果目标历史视图消耗的资源情况并不多,则说明没有必要对第一视图进行物化,从而节省物化所需的内存资源。
在一种可能的实现方式中,消耗资源的情况包括时延以及选择率,其中,时延用于指示查询目标历史视图所消耗的时间,选择率为查询目标历史视图而从基表中选取的数据量与基表中总共的数据量的比值。
在一种可能的实现方式中,确定多个第一历史视图可以是周期性进行的,因此还可以基于新增的视图查询情况更新多个第一历史视图,得到更新后的多个第一历史视图。若内更新后的多个第一历史视图中不存在第一视图的时长超过预设阈值,则删除第一视图对应的物化视图。
本申请实施例中,对于被查询的概率不高的视图,将这些视图对应的物化视图删除,从而节省了内存资源。
本申请实施例第二方面提供了一种物化视图设备:
该设备包括多个功能模块,所述多个功能模块相互作用,实现上述第一方面及其各实施方式中的方法。多个功能模块可以基于软件、硬件或软件和硬件的结合实现,且所述多个功能模块可以基于具体实现进行任意组合或分割。
本申请实施例第三方面提供了一种物化视图设备:
该设备包括处理器,处理器与存储器耦合,存储器用于存储指令,当指令被处理器执行时,使得显示设备执行如前述第一方面中所述的方法。
本申请实施例第四方面提供了一种计算机可读存储介质,其上存储有计算机程序或指令,其特征在于,计算机程序或指令被执行时,其上存储有计算机程序或指令,计算机程序或指令被执行时,使得计算机执行如前述第一方面所述的方法。
附图说明
图1为本申请实施例中应用场景的一个示意图;
图2为本申请实施例中确定窗口的显示位置的一个流程示意图;
图3为本申请实施例中确定多个第一历史视图的示意图;
图4为本申请实施例中确定选择率的一个示意图;
图5为本申请实施例中物化视图设备的一个结构示意图;
图6为本申请实施例中物化视图设备的另一结构示意图。
具体实施方式
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本申请实施例提供了一种物化视图的方法以及相关装置,用于提高视图被物化后被使用的概率。
本申请实施例可以应用于创建物化视图的场景,请参阅图1,在数据库中,基表是数据的具体体现形式,在基表中包括了最基本的数据,例如在基表1中包括了班级1中各个学生的姓名以及各个学生对应的考试成绩,在基表2中包括了班级2中各个学生的姓名以及各个学生对应的考试成绩,在基表3中包括了班级3中各个学生的姓名以及各个学生对应的考试成绩。用户可以通过结构化查询语句(structure query language,SQL)在数据库中查询所需的数据,用户所查询的数据往往只是数据库中的一小部分数据,这些基于SQL语句被查询的数据也称之为视图(view)。例如用户可以通过SQL语句查询基表1以及基表2中考试成绩大于80分学生的姓名以及对应的考试成绩,则相应的查询结果为视图1。又或者,用户可以通过SQL语句查询基表1、基表2以及基表3中考试成绩大于80分学生的姓名以及对应的考试成绩,则相应的查询结果为视图2。基于SQL语句从数据库中查询数据往往存在一定的时延,通过将视图的数据保存到本地,也即创建视图对应的物化视图可以提高视图查询的效率。例如创建视图1对应的物化视图1,在下次需要对视图1进行查询时,直接访问物化视图1,从而降低查询的开销。然而,物化视图需要消耗计算资源以及存储资源,如何选择出物化后被查询的概率比较高的视图,显得尤为关键。
请参阅图2,下面对本申请实施例中物化视图的方法进行描述:
201、基于历史的视图查询情况确定多个第一历史视图;
基于用户在历史的视图查询情况确定出多个第一历史视图,其中,第一历史视图为已经被查询过的视图,历史的视图查询情况可以是历史的一段时间内的视图查询情况,例如一个月或者两个月。每个第一历史视图都存在对应的特征信息,该特征用于指示视图的数据构成情况。
在一种方式中,特征信息包括第一哈希值。第一哈希值为基于查询视图时所使用的第一查询参数确定,在一种方式中,第一查询参数包括基表信息、操作类型以及筛选关键字,其中基表信息包括了一个或多个基表的标识,所查询的视图中的数据来自于这一个或多个基表,例如,当基表信息包括基表1的标识以及基表2的标识时,则表明视图中的数据来自基表1以及基表2;操作类型指示了从一个或多个基表中选取数据的方式,包括但不限于对基表中的数据进行分组、对基表中的数据进行求和以及按照特定的条件对基表中的数据进行筛选;筛选关键字结合操作类型可以指示数据选取范围,数据选取范围为从上述一个或多个基表中选取的数据的范围,例如,在包含学生考试成绩的基表中,数据选取范围可以是筛选出分数大于90分的数据,对应的,操作类型可以是从基表中选取大于目标值的数据,筛选关键字则为该目标值,也即设定为“90”,从而实现上述范围内的数据的选取。
在一种方式中,特征信息包括第二哈希值以及上述基于操作类型以及筛选关键字确定的数据选取范围。第二哈希值为基于查询视图时所使用的第二查询参数确定,第二查询参数包括第一查询参数中的部分参数,在一种方式中,第二查询参数包括基表信息以及操作类型。
多个第一历史视图的确定方式可以是先确定出历史查询的每个第二历史视图对应的第二哈希值,之后在确定出的第二哈希值中选取出现次数较多的第二哈希值作为目标哈希值,请参阅图3,例如存在第二历史视图1、第二历史视图2、第二历史视图3、第二历史视图4、第二历史视图5以及第二历史视图6,其中第二历史视图1对应第二哈希值1、第二历史视图2对应第二哈希值1、第二历史视图3对应第二哈希值2、第二历史视图4对应第二哈希值3、第二历史视图5对应第二哈希值1、第二历史视图6对应第二哈希值1,则可以确定目标哈希值为第二哈希值1,多个第一历史视图为多个第二历史视图中对应目标哈希值的视图,上述例子中,多个第一历史视图为第二历史视图1、第二历史视图2、第二历史视图5以及第二历史视图6。
可以理解的是,由于第一历史视图对应的基表信息以及操作类型在历史的查询中较为常用,因此第一历史视图在后续仍然被查询的概率也比较高。
202、查询第一视图,并确定存在目标历史视图;
确定出多个第一历史视图之后,将多个第一历史视图进行保存。这之后当对第一视图进行查询时,根据查询第一视图所使用的SQL语句,可以确定出第一视图对应的特征信息。并且将第一视图对应的特征信息与上述多个第一历史视图分别对应的特征信息进行比对,确定在多个第一历史视图中是否存在特征信息与第一视图的特征信息匹配的目标历史视图。
当特征信息包括第一哈希值时,第一视图的第一哈希值与目标历史视图的第一哈希值一致则表示第一视图的特征信息与目标历史视图的特征信息存在匹配关系。
当特征信息包括第二哈希值以及数据选取范围时,第一视图的第二哈希值与目标历史视图的第二哈希值一致,并且目标历史视图的数据选取范围包含第一视图的数据选取范围则表示第一视图的特征信息与目标历史视图的特征信息存在匹配关系。示例性的,目标历史视图为从成绩表中选取分数大于80分的数据,而第一视图为从成绩表中选取分数大于90分的数据,显然目标历史视图的选取范围包括了第一视图的选取范围,当第一视图的第二哈希值与目标历史视图的第二哈希值也一致时,则表明第一视图的特征信息与目标历史视图的特征信息存在匹配关系。
203、若第一视图不存在对应的物化视图,则创建第一视图对应的物化视图。
由于第一视图对应的特征信息与目标历史视图对应的特征信息具有对应关系,说明第一视图的数据目标历史视图的数据比较相似,这部分数据在历史时期被查询过,并且当前也需要进行查询,因此这部分数据后续被查询的概率比较高。基于此,如果第一视图不存在对应的物化视图,则创建第一视图对应的物化视图。如果第一视图存在对应的物化视图,则直接访问该物化视图。
本申请实施例中,并不会直接对第一历史视图进行物化,当后续对第一视图进行查询,并且第一视图的特征信息与第一历史视图中的目标历史视图的特征信息存在匹配关系,说明第一视图的数据与目标历史视图完全一致或者非常相近,才会对第一视图进行物化,从而进一步提高了第一视图在后续被查询的概率,提高物化的收益。针对周期性重复查询或者多人合作场景中编写相同的SQL语句的情况,可以通过对历史的查询情况进行分析,对相应的视图进行物化,从而提高查询的效率;在云场景中,对视图进行查询的时延比较高,通过历史的查询情况的分析,将视图进行物化,从而降低查询的时延。
在上述图2所示实施例的基础之上,在创建第一视图的物化视图之前,还可以确定查询目标历史视图所消耗的资源情况,消耗资源的情况可以是查询目标历史视图的时延、选择率以及消耗的内存资源等,其中选择率用于为查询目标历史视图而从基表中选取的数据量与基表中的总数据量的比值,请参阅图4,例如目标历史视图的数据为从基表1中选择10条数据组成,而基表1中的总数据量为100条数据,因此选择率为10%。消耗资源的情况可以是在查询目标历史视图之后将相应的消耗情况进行保存得到的。
在确定出目标历史视图消耗的资源情况之后,如果消耗资源的情况符合预设情况,例如查询目标历史视图的时延比较大,或者消耗的内存资源比较大,或者选择率比较大,说明对第一视图进行物化能够对上述消耗资源的情况进行改善,从而对第一视图进行物化。
可以理解的是,在实际的实现中还可以基于新增的视图查询情况对多个第一历史视图进行更新,得到更新后的多个第一历史视图,如果第一视图不包含于更新后的多个第一历史视图的时长超过了预设阈值,则说明第一视图的物化视图在后续被访问的概率比较低,因此可以将第一视图的物化视图删除。
上面对本申请实施例中的方法进行了介绍,请参阅图5,下面对本申请实施例中的设备进行介绍:
本申请实施例中的物化视图设备500包括处理单元501。
处理单元501,用于基于历史的视图查询情况确定多个第一历史视图,每个第一历史视图皆存在对应的特征信息,第一历史视图为已经被查询过的视图,特征信息用于指示视图的数据构成情况。
处理单元501,还用于查询第一视图,并确定存在目标历史视图,目标历史视图的特征信息与第一视图的特征信息具有匹配关系,目标历史视图包含于多个第一历史视图中。
处理单元501,还用于若第一视图不存在对应的物化视图,则创建第一视图的物化视图。
在一种可能的实现中,
特征信息包括第一哈希值,第一哈希值为基于查询视图时所使用的第一查询参数确定。
目标历史视图的所述特征信息与第一视图的特征信息具有匹配关系具体是:
目标历史视图与第一视图对应相同的第一哈希值;
或,
特征信息包括第二哈希值以及数据选取范围,数据选取范围用于指示从基表中选取的数据的范围,第二哈希值基于第二查询参数确定,第二查询参数由第一查询参数中的部分查询参数组成。
目标历史视图的特征信息与第一视图的特征信息具有匹配关系具体是:
目标历史视图与第一视图对应相同的第二哈希值,且目标历史视图的数据选取范围包含第一视图的数据选取范围。
在一种可能的实现中,
处理单元501,还用于若第一视图存在对应的物化视图,则访问第一视图对应的物化视图。
在一种可能的实现中,
处理单元501,具体用于确定多个第二历史视图中的每个第二历史视图对应的第二哈希值,第二历史视图为已经被查询过的视图。
处理单元501,还用于确定第二哈希值中的目标哈希值。
处理单元501,还用于根据目标哈希值确定多个第二历史视图中的多个第一历史视图,每个第一历史视图的第二哈希值与目标哈希值相同。
在一种可能的实现中,
第一查询参数包括基表信息、操作类型以及筛选关键字,基表信息包括一个或多个基表的标识,所查询的视图中的数据来自一个或多个基表,操作类型用于指示从一个或多个基表中选取数据的方式,数据选取范围根据操作方式以及筛选关键字确定,第二查询参数包括基表信息以及操作方式。
在一种可能的实现中,
处理单元501,还用于确定查询目标历史视图所消耗资源的情况。
处理单元501,还用于若消耗资源的情况符合预设情况,则创建第一视图的物化视图。
在一种可能的实现中,
消耗资源的情况包括时延以及选择率,时延用于指示查询目标历史视图所消耗的时间,选择率为查询目标历史视图而从基表中选取的数据量与基表中总共的数据量的比值。
在一种可能的实现中,
处理单元501,还用于基于新增的视图查询情况更新多个第一历史视图,得到更新后的多个第一历史视图。
处理单元501,还用于若内更新后的多个第一历史视图中不存在第一视图的时长超过预设阈值,则删除第一视图对应的物化视图。
图6是本申请实施例提供的一种物化视图设备的结构示意图,该物化视图设备600可以包括一个或一个以上中央处理器(central processing units,CPU)601和存储器605,该存储器605中存储有一个或一个以上的应用程序或数据。
其中,存储器605可以是易失性存储或持久存储。存储在存储器605的程序可以包括一个或一个以上模块,每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器601可以设置为与存储器605通信,在物化视图设备600上执行存储器605中的一系列指令操作。
物化视图设备600还可以包括一个或一个以上电源602,一个或一个以上有线或无线网络接口603,一个或一个以上输入输出接口604,和/或,一个或一个以上操作系统,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等。
该中央处理器601可以执行前述图2所示实施例中通信装置所执行的操作,具体此处不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,read-onlymemory)、随机存取存储器(RAM,random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
Claims (18)
1.一种物化视图的方法,其特征在于,包括:
基于历史的视图查询情况确定多个第一历史视图,每个所述第一历史视图皆存在对应的特征信息,所述第一历史视图为已经被查询过的视图,所述特征信息用于指示视图的数据构成情况;
查询第一视图,并确定存在目标历史视图,所述目标历史视图的所述特征信息与第一视图的所述特征信息具有匹配关系,所述目标历史视图包含于所述多个第一历史视图中;
若所述第一视图不存在对应的物化视图,则创建所述第一视图的物化视图。
2.根据权利要求1所述的方法,其特征在于,所述特征信息包括第一哈希值,所述第一哈希值为基于查询视图时所使用的第一查询参数确定;
所述目标历史视图的所述特征信息与第一视图的所述特征信息具有匹配关系包括:
所述目标历史视图与所述第一视图对应相同的所述第一哈希值;
或,
所述特征信息包括第二哈希值以及数据选取范围,所述数据选取范围用于指示从基表中选取的数据的范围,所述第二哈希值基于第二查询参数确定,所述第二查询参数由所述第一查询参数中的部分查询参数组成;
所述目标历史视图的所述特征信息与第一视图的所述特征信息具有匹配关系包括:
所述目标历史视图与所述第一视图对应相同的所述第二哈希值,且所述目标历史视图的所述数据选取范围包含所述第一视图的所述数据选取范围。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
若所述第一视图存在对应的物化视图,则访问所述第一视图对应的物化视图。
4.根据权利要求3所述的方法,其特征在于,所述基于历史的视图查询情况确定多个第一历史视图包括:
确定多个第二历史视图中的每个第二历史视图对应的所述第二哈希值,所述第二历史视图为已经被查询过的视图;
确定所述第二哈希值中的目标哈希值;
根据所述目标哈希值确定所述多个第二历史视图中的所述多个第一历史视图,每个所述第一历史视图的所述第二哈希值与所述目标哈希值相同。
5.根据权利要求4所述的方法,其特征在于,所述第一查询参数包括基表信息、操作类型以及筛选关键字,所述基表信息包括一个或多个基表的标识,所查询的视图中的数据来自所述一个或多个基表,所述操作类型用于指示从所述一个或多个基表中选取数据的方式,所述数据选取范围根据所述操作方式以及所述筛选关键字确定,所述第二查询参数包括所述基表信息以及所述操作方式。
6.根据权利要求5所述的方法,其特征在于,所述创建所述第一视图的物化视图之前,所述方法还包括:
确定查询所述目标历史视图所消耗资源的情况;
若所述消耗资源的情况符合预设情况,则创建所述第一视图的物化视图。
7.根据权利要求6所述的方法,其特征在于,所述消耗资源的情况包括时延以及选择率,所述时延用于指示查询所述目标历史视图所消耗的时间,所述选择率为查询所述目标历史视图而从基表中选取的数据量与基表中总共的数据量的比值。
8.根据权利要求1至7中任一项所述的方法,其特征在于,所述方法还包括:
基于新增的视图查询情况更新所述多个第一历史视图,得到更新后的多个第一历史视图;
若内所述更新后的多个第一历史视图中不存在所述第一视图的时长超过预设阈值,则删除所述第一视图对应的物化视图。
9.一种物化视图设备,其特征在于,包括:
处理单元,用于基于历史的视图查询情况确定多个第一历史视图,每个所述第一历史视图皆存在对应的特征信息,所述第一历史视图为已经被查询过的视图,所述特征信息用于指示视图的数据构成情况;
所述处理单元,还用于查询第一视图,并确定存在目标历史视图,所述目标历史视图的所述特征信息与第一视图的所述特征信息具有匹配关系,所述目标历史视图包含于所述多个第一历史视图中;
所述处理单元,还用于若所述第一视图不存在对应的物化视图,则创建所述第一视图的物化视图。
10.根据权利要求9所述的设备,其特征在于,所述特征信息包括第一哈希值,所述第一哈希值为基于查询视图时所使用的第一查询参数确定;
所述目标历史视图的所述特征信息与第一视图的所述特征信息具有匹配关系包括:
所述目标历史视图与所述第一视图对应相同的所述第一哈希值;
或,
所述特征信息包括第二哈希值以及数据选取范围,所述数据选取范围用于指示从基表中选取的数据的范围,所述第二哈希值基于第二查询参数确定,所述第二查询参数由所述第一查询参数中的部分查询参数组成;
所述目标历史视图的所述特征信息与第一视图的所述特征信息具有匹配关系包括:
所述目标历史视图与所述第一视图对应相同的所述第二哈希值,且所述目标历史视图的所述数据选取范围包含所述第一视图的所述数据选取范围。
11.根据权利要求9或10所述的设备,其特征在于,
所述处理单元,还用于若所述第一视图存在对应的物化视图,则访问所述第一视图对应的物化视图。
12.根据权利要求11所述的设备,其特征在于,
所述处理单元,具体用于确定多个第二历史视图中的每个第二历史视图对应的所述第二哈希值,所述第二历史视图为已经被查询过的视图;
所述处理单元,还用于确定所述第二哈希值中的目标哈希值;
所述处理单元,还用于根据所述目标哈希值确定所述多个第二历史视图中的所述多个第一历史视图,每个所述第一历史视图的所述第二哈希值与所述目标哈希值相同。
13.根据权利要求12所述的设备,其特征在于,所述第一查询参数包括基表信息、操作类型以及筛选关键字,所述基表信息包括一个或多个基表的标识,所查询的视图中的数据来自所述一个或多个基表,所述操作类型用于指示从所述一个或多个基表中选取数据的方式,所述数据选取范围根据所述操作方式以及所述筛选关键字确定,所述第二查询参数包括所述基表信息以及所述操作方式。
14.根据权利要求13所述的设备,其特征在于,
所述处理单元,还用于确定查询所述目标历史视图所消耗资源的情况;
所述处理单元,还用于若所述消耗资源的情况符合预设情况,则确定创建所述第一视图的物化视图。
15.根据权利要求14所述的设备,其特征在于,所述消耗资源的情况包括时延以及选择率,所述时延用于指示查询所述目标历史视图所消耗的时间,所述选择率为查询所述目标历史视图而从基表中选取的数据量与基表中总共的数据量的比值。
16.根据权利要求9至15中任一项所述的设备,其特征在于,
所述处理单元,还用于基于新增的视图查询情况更新所述多个第一历史视图,得到更新后的多个第一历史视图;
所述处理单元,还用于若内所述更新后的多个第一历史视图中不存在所述第一视图的时长超过预设阈值,则删除所述第一视图对应的物化视图。
17.一种物化视图设备,其特征在于,包括处理器,所述处理器与存储器耦合,所述存储器用于存储指令,当所述指令被所述处理器执行时,使得所述装置执行如权利要求1至8中任一项所述的方法。
18.一种计算机可读储存介质,其上存储有计算机程序或指令,其特征在于,所述计算机程序或指令被执行时,使得计算机执行如权利要求1至8中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111088864.XA CN115827663A (zh) | 2021-09-16 | 2021-09-16 | 一种物化视图的方法以及相关设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111088864.XA CN115827663A (zh) | 2021-09-16 | 2021-09-16 | 一种物化视图的方法以及相关设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115827663A true CN115827663A (zh) | 2023-03-21 |
Family
ID=85515776
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111088864.XA Pending CN115827663A (zh) | 2021-09-16 | 2021-09-16 | 一种物化视图的方法以及相关设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115827663A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116541377A (zh) * | 2023-04-27 | 2023-08-04 | 阿里巴巴(中国)有限公司 | 任务的物化视图的处理方法、系统和电子设备 |
-
2021
- 2021-09-16 CN CN202111088864.XA patent/CN115827663A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116541377A (zh) * | 2023-04-27 | 2023-08-04 | 阿里巴巴(中国)有限公司 | 任务的物化视图的处理方法、系统和电子设备 |
CN116541377B (zh) * | 2023-04-27 | 2024-05-14 | 阿里巴巴(中国)有限公司 | 任务的物化视图的处理方法、系统和电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8266147B2 (en) | Methods and systems for database organization | |
CN106815260B (zh) | 一种索引建立方法及设备 | |
CN106156088B (zh) | 一种索引数据处理方法、数据查询方法及装置 | |
CN111339171B (zh) | 数据查询的方法、装置及设备 | |
US7587388B2 (en) | Separating uploads into aggregate and raw data storage | |
AU2017399399A1 (en) | Method and system for optimizing database system, electronic device, and storage medium | |
CN108664492B (zh) | 一种向用户推送内容的方法、装置、电子设备和存储介质 | |
CN115827663A (zh) | 一种物化视图的方法以及相关设备 | |
CN117009453A (zh) | 一种数字化营销实时查询客户所在客群列表的方法和系统 | |
CN110704472A (zh) | 数据查询统计方法及装置 | |
CN112667632B (zh) | 一种元数据处理方法及装置 | |
CN112527824A (zh) | 分页查询方法、装置、电子设备和计算机可读存储介质 | |
CN114238389A (zh) | 数据库查询优化方法、装置、电子设备、介质和程序产品 | |
US20060230020A1 (en) | Improving Efficiency in processing queries directed to static data sets | |
CN113010539A (zh) | 一种数据处理方法及装置 | |
CN111143433B (zh) | 一种统计数据仓数据的方法及装置 | |
CN109388658B (zh) | 一种数据确定方法和装置 | |
CN108920664B (zh) | 一种基于索引价值的数据库智能索引实现方法 | |
CN115329150A (zh) | 生成搜索条件树的方法、装置、电子设备及存储介质 | |
CN110333883B (zh) | 一种更新持久化数据的方法及装置 | |
US20170139969A1 (en) | Method for filtering and analyzing big data, electronic device, and non-transitory computer-readable storage medium | |
CN112765118A (zh) | 一种日志查询方法、装置、设备及存储介质 | |
CN112506953A (zh) | 基于结构化查询语言sql的查询方法、装置及存储介质 | |
CN111506606A (zh) | 一种报表查询方法及相关设备 | |
CN113868267A (zh) | 注入时序数据的方法、查询时序数据的方法及数据库系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |