CN111506749A - 一种监控数据归档方法、装置、电子设备及存储介质 - Google Patents
一种监控数据归档方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN111506749A CN111506749A CN202010294471.3A CN202010294471A CN111506749A CN 111506749 A CN111506749 A CN 111506749A CN 202010294471 A CN202010294471 A CN 202010294471A CN 111506749 A CN111506749 A CN 111506749A
- Authority
- CN
- China
- Prior art keywords
- level
- filing
- sub
- library
- monitoring data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 562
- 238000000034 method Methods 0.000 title claims abstract description 65
- 230000004044 response Effects 0.000 claims abstract description 71
- 238000000605 extraction Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 abstract description 16
- 230000006870 function Effects 0.000 description 92
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 101100134058 Caenorhabditis elegans nth-1 gene Proteins 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/51—Indexing; Data structures therefor; Storage structures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本公开实施例提供了一种监控数据归档方法、装置、电子设备及存储介质,涉及云计算领域。该方法包括:响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。这样,可以使得对监控数据的归档计算和存储都在数据库中进行,无需从数据库中复制监控数据,从而可以降低复制的成本,并且,由于对监控数据的归档计算和存储都在数据库中进行,因此,可以避免数据库读写速度对归档效率的限制,从而可以提高归档效率。
Description
技术领域
本公开涉及一种监控数据归档方法、装置、电子设备及存储介质。
背景技术
随着监控设备的广泛应用,产生的监控数据也越来越多,例如,监控设备可以在拍摄到监控图像后,可以对监控图像进行人脸识别或者目标跟踪,从而可以得到人脸数据。又例如,监控设备可以在拍摄到监控图像后,可以对监控图像进行车辆特征识别,从而可以得到车辆数据。为了对这些监控数据进行有效利用,通常会对这些监控数据进行数据分析,以便从这些监控数据中获得有用数据。在对这些监控数据进行分析处理之前,通常会对这些监控数据进行归档存储,以方便对这些监控数据的管理。
目前,相关技术在对监控数据进行归档时,通常是先从数据库中将这些监控数据复制出来,然后再对复制的监控数据进行聚类归档,最后,将归档后的监控数据存储到数据库中。当存在大量监控数据需要归档时,就需要频繁的对数据库进行读写,从而增加复制的成本,并且,由于数据库读写速度的限制,频繁的对数据库进行读写会降低对监控数据进行归档的效率。
发明内容
本公开实施例的目的在于提供一种监控数据归档方法、装置、电子设备及存储介质,以实现降低复制的成本,提高归档效率。具体技术方案如下:
第一方面,本公开实施例提供了一种监控数据归档方法,应用于数据库系统,数据库系统包括:监控数据子库和归档子库,该方法包括:
响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
可选的,归档条件至少包括:监控数据的数据表名、监控起始时间以及监控结束时间。
可选的,对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库,包括:
将目标监控数据输入至预先设置于数据库系统中的归档函数,以使得归档函数对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
可选的,归档子库为N级归档子库,N级归档子库为按照时间粒度从小到大的顺序进行划分的;归档函数包括:与每一级归档子库对应的归档函数;
响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据,包括:
响应于获取到的针对第一级归档子库的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
将目标监控数据输入至预先设置于数据库系统中的归档函数,以使得归档函数对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库,包括:
将目标监控数据输入至预先设置于数据库系统中的第一级归档子库对应的归档函数,以使得对目标监控数据进行一级归档处理,并将一级归档后的目标监控数据存储至第一级归档子库;
可选的,该数据归档方法还包括:
响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库。
可选的,数据库系统还包括:全量归档子库;当n=N-1时,将第n+1级归档后的监控数据存储至第n+1级归档子库为将第N级归档后的监控数据存储至第N级归档子库;
在将第N级归档后的监控数据存储至第N级归档子库后,该数据归档方法还包括:
响应于获取到的全量归档指令,提取第N级归档子库中存储的所有归档后的监控数据;
将所有归档后的监控数据输入至全量归档子库对应的归档函数,以使得对所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至全量归档子库。
可选的,N级归档子库包括:小时级归档子库和天级归档子库;小时级归档子库为第一级归档子库,天级归档子库为第二级归档子库;
响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,包括:
响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库,包括:
将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库。
可选的,N级归档子库包括:小时级归档子库、天级归档子库和月级归档子库;小时级归档子库为第一级归档子库,天级归档子库为第二级归档子库,月级归档子库为第二级归档子库;
响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,包括:
响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库,包括:
将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库;
响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,还包括:
响应于获取到的针对月级归档子库的归档指令,提取天级归档子库中存储的天级归档后的监控数据;
将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库,还包括:
将天级归档后的监控数据输入至与月级归档子库对应的归档函数,以使得对天级归档后的监控数据进行月级归档,并将月级归档后的监控数据存储至月级归档子库中。
第二方面,本公开实施例还提供了一种监控数据归档装置,应用于数据库系统,数据库系统包括:监控数据子库和归档子库,该装置包括:
第一提取模块,用于响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
第一归档模块,用于对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
可选的,归档条件至少包括:监控数据的数据表名、监控起始时间以及监控结束时间。
可选的,第一归档模块,具体用于:
将目标监控数据输入至预先设置于数据库系统中的归档函数,以使得归档函数对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
可选的,归档子库为N级归档子库,N级归档子库为按照时间粒度从小到大的顺序进行划分的;归档函数包括:与每一级归档子库对应的归档函数;
第一提取模块,具体用于:
响应于获取到的针对第一级归档子库的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
第一归档模块,具体用于:
将目标监控数据输入至预先设置于数据库系统中的第一级归档子库对应的归档函数,以使得对目标监控数据进行一级归档处理,并将一级归档后的目标监控数据存储至第一级归档子库;
可选的,该数据归档装置还包括:
第二提取模块,用于响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
第二归档模块,用于将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库。
可选的,数据库系统还包括:全量归档子库;当n=N-1时,将第n+1级归档后的监控数据存储至第n+1级归档子库为将第N级归档后的监控数据存储至第N级归档子库;
可选的,该数据归档装置还包括:
第三提取模块,用于响应于获取到的全量归档指令,提取第N级归档子库中存储的所有归档后的监控数据;
第三归档模块,用于将所有归档后的监控数据输入至全量归档子库对应的归档函数,以使得对所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至全量归档子库。
可选的,N级归档子库包括:小时级归档子库和天级归档子库;小时级归档子库为第一级归档子库,天级归档子库为第二级归档子库;
第二提取模块,具体用于:
响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
第二归档模块,具体用于:
将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库。
可选的,N级归档子库包括:小时级归档子库、天级归档子库和月级归档子库;小时级归档子库为第一级归档子库,天级归档子库为第二级归档子库,月级归档子库为第二级归档子库;
第二提取模块,还用于:
响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
第二归档模块,还用于:
将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库;
第二提取模块,还用于:
响应于获取到的针对月级归档子库的归档指令,提取天级归档子库中存储的天级归档后的监控数据;
第二归档模块,还用于:
将天级归档后的监控数据输入至与月级归档子库对应的归档函数,以使得对天级归档后的监控数据进行月级归档,并将月级归档后的监控数据存储至月级归档子库中。
第三方面,本公开实施例还提供了一种电子设备,包括处理器和机器可读存储介质,机器可读存储介质存储有能够被处理器执行的机器可执行指令,处理器被机器可执行指令促使:实现上述第一方面提供的一种监控数据归档方法的步骤。
第四方面,本公开实施例还提供了一种计算机可读存储介质,计算机可读存储介质内存储有计算机程序,计算机程序被处理器执行时,实现上述第一方面提供的一种监控数据归档方法的步骤。
第五方面,本公开实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第一方面提供的一种监控数据归档方法的步骤。
第六方面,本公开实施例还提供了一种计算机程序,当其在计算机上运行时,使得计算机执行上述第一方面提供的一种监控数据归档方法的步骤。
第七方面,本公开实施例还提供了一种数据库系统,该数据库系统包括:监控数据子库和归档子库;
监控数据子库,用于响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
监控数据子库,还用于对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
可选的,归档条件至少包括:监控数据的数据表名、监控起始时间以及监控结束时间。
可选的,监控数据子库,具体用于:
将目标监控数据输入至预先设置于数据库系统中的归档函数,以使得归档函数对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
可选的,归档子库为N级归档子库,N级归档子库为按照时间粒度从小到大的顺序进行划分的;归档函数包括:与每一级归档子库对应的归档函数;
监控数据子库,具体用于:
响应于获取到的针对第一级归档子库的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
监控数据子库,还用于:
将目标监控数据输入至预先设置于数据库系统中的第一级归档子库对应的归档函数,以使得对目标监控数据进行一级归档处理,并将一级归档后的目标监控数据存储至第一级归档子库;
第n级归档子库,用于:
响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
第n级归档子库,还用于:
将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库。
可选的,数据库系统还包括:全量归档子库;当n=N-1时,将第n+1级归档后的监控数据存储至第n+1级归档子库为将第N级归档后的监控数据存储至第N级归档子库;
第N-1级归档子库,用于:
响应于获取到的全量归档指令,提取第N级归档子库中存储的所有归档后的监控数据;
第N-1级归档子库,还用于:
将所有归档后的监控数据输入至全量归档子库对应的归档函数,以使得对所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至全量归档子库。
可选的,N级归档子库包括:小时级归档子库和天级归档子库;当N=2时,n为1,n+1为2,则第n级归档子库为小时级归档子库,第n+1级归档子库为天级归档子库;
小时级归档子库,用于:
响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
小时级归档子库,还用于:
将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库。
可选的,N级归档子库包括:小时级归档子库、天级归档子库和月级归档子库;当N=3时,第N-2级归档子库为小时级归档子库,第N-1级归档子库为天级归档子库,第N级归档子库为月级归档子库;
小时级归档子库,用于:
响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
小时级归档子库,还用于:
将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库;
天级归档子库,用于:
响应于获取到的针对月级归档子库的归档指令,提取天级归档子库中存储的天级归档后的监控数据;
天级归档子库,还用于:
将天级归档后的监控数据输入至与月级归档子库对应的归档函数,以使得对天级归档后的监控数据进行月级归档,并将月级归档后的监控数据存储至月级归档子库中。
本公开实施例提供的一种监控数据归档方法、装置、电子设备及存储介质,可以在获取到归档指令时,响应于获取到的归档指令,从监控数据子库中提取目标监控数据;然后对目标监控数据进行归档处理,最后将归档后的目标监控数据存储至归档子库。这样,可以使得对监控数据的归档计算和存储都在数据库中进行,无需从数据库中复制监控数据,从而可以降低复制的成本,并且,由于对监控数据的归档计算和存储都在数据库中进行,因此,可以避免数据库读写速度对归档效率的限制,从而可以提高归档效率。当然,实施本公开的任一产品或方法并不一定需要同时达到上述的所有优点。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例的一种监控数据归档方法第一种实施方式的流程图;
图2为本公开实施例的一种监控数据归档方法第二种实施方式的流程图;
图3为本公开实施例的一种监控数据归档方法第三种实施方式的流程图;
图4为本公开实施例的一种监控数据归档方法的交互示意图;
图5为本公开实施例的一种监控数据归档装置的结构示意图;
图6为本公开实施例的一种电子设备的结构示意图;
图7为本公开实施例的一种数据库系统的架构示意图。
具体实施方式
下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
为了解决现有技术存在的问题,本公开实施例提供了一种监控数据归档方法、装置、电子设备及存储介质,以实现降低复制的成本,提高归档效率。
下面,首先对本公开实施例的一种监控数据归档方法进行介绍,该方法可以应用于数据库系统,该数据库系统可以包括:监控数据子库和归档子库;如图1所示,为本公开实施例的一种监控数据归档方法第一种实施方式的流程图,该方法可以包括:
S110,响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
S120,对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
本公开实施例提供的一种监控数据归档方法,可以在获取到归档指令时,响应于获取到的归档指令,从监控数据子库中提取目标监控数据;然后对目标监控数据进行归档处理,最后将归档后的目标监控数据存储至归档子库。这样,可以使得对监控数据的归档计算和存储都在数据库中进行,无需从数据库中复制监控数据,从而可以降低复制的成本,并且,由于对监控数据的归档计算和存储都在数据库中进行,因此,可以避免数据库读写速度对归档效率的限制,从而可以提高归档效率。
在一些示例中,上述的归档指令可以是调度模块发送的,该调度模块可以设置于上述的数据库系统内,也可以与上述的数据库系统通信连接,这都是可以的。
在又一些示例中,该归档条件可以至少包括:监控数据的数据表名、监控起始时间以及监控结束时间。
在又一些示例中,该归档子库可以是小时级归档子库、天级归档子库或者月级归档子库。对此,可以在对目标监控数据进行归档处理后,可以将归档后的目标监控数据存储至小时级归档子库、天级归档子库或者月级归档子库中。
在又一些示例中,上述的归档指令可以是将监控数据归档至目标归档子库的指令,对此,可以将归档后的目标监控数据存储至目标归档子库,该目标归档子库可以是业务人员从上述的三种归档子库中择一选择的归档子库。
在一些示例中,上述的数据库系统中可以预先设置有归档函数,因此,在对目标监控数据进行归档处理时,可以将目标监控数据输入至预先设置于数据库系统中的归档函数,这样可以使得该归档函数对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
在又一些示例中,该监控数据可以是人脸图像数据,也可以是车辆图像数据等。
可以理解的是,该数据库系统中预先设置的归档函数可以是程序人员自定义的归档函数。该归档函数可以是基于现有的归档算法,采用数据库语句来编写的归档算法。
在图1所示的数据归档方法的基础上,本公开实施例还提供了一种可能的实现方式,如图2所示,为本公开实施例的一种监控数据归档方法第二种实施方式的流程图,该方法可以包括:
S210,响应于获取到的针对第一级归档子库的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
S220,将目标监控数据输入至预先设置于数据库系统中的第一级归档子库对应的归档函数,以使得对目标监控数据进行一级归档处理;
S230,将一级归档后的目标监控数据存储至第一级归档子库;
S240,响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
S250,将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库。
在一些示例中,上述的归档子库可以为N级归档子库,该N级归档子库的级数可以是预先设置的,例如,该N级归档子库可以包括一级归档子库、二级归档子库以及三级归档子库。相应地,该N级归档子库的每一级归档子库都具有对应的归档函数。
因此,可以在接收到针对第一级归档子库的归档指令后,响应于获取到的针对第一级归档子库的归档指令,将目标监控数据输入至预先设置于数据库系统中的与第一级归档子库对应的归档函数,这样,该与第一级归档子库对应的归档函数可以对该目标监控数据进行归档处理。然后可以将归档后的目标监控数据存储至N级归档子库中的第一级归档子库。
在一些示例中,该N级归档子库为按照时间粒度从小到大的顺序进行划分的;例如,按照时间粒度从小到大的顺序,可以将N级归档子库划分为小时级归档子库、天级归档子库、周级归档子库、月级归档子库、年级归档子库等。
在一些示例中,该归档后的目标监控数据可以包括:拍摄监控数据的相机的标识信息、监控数据的特征向量、质量最高的监控图像对应的监控数据和/或质量分数。
在又一些示例中,上述的调度模块也可以发送针对上述的N级归档子库中除第一级子库外的每一级子库的归档指令,例如,可以发送针对第n+1级归档子库的归档指令。其中,1≤n≤N-1;
对此,上述的数据库系统可以响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,然后将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库。
在又一些示例中,该N级归档子库可以包括小时级归档子库和天级归档子库;此时,该小时级归档子库为第一级归档子库,天级归档子库为第二级归档子库;
因此,该响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,可以是响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
对应的,上述的将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库,可以是:将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库。
在一些示例中,该与小时级归档子库对应的归档函数和与天级归档子库对应的归档函数可以是预先设置在该数据库系统中的归档函数,该归档函数可以是现有技术中的归档函数,这里不对该归档函数进行限定。
在又一些示例中,该N级归档子库包括:小时级归档子库、天级归档子库和月级归档子库;此时,该小时级归档子库为第一级归档子库,天级归档子库为第二级归档子库,月级归档子库为第二级归档子库;
对此,上述的响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,还可以是:响应于获取到的针对月级归档子库的归档指令,提取天级归档子库中存储的天级归档后的监控数据;
其中,该与月级归档子库对应的归档函数也可以是预先设置在该数据库系统中的归档函数,该归档函数可以是现有技术中的归档函数,这里不对该归档函数进行限定。
上述的将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库,还可以是:将天级归档后的监控数据输入至与月级归档子库对应的归档函数,以使得对天级归档后的监控数据进行月级归档,并将月级归档后的监控数据存储至月级归档子库中。
在一些示例中,该天级归档后的监控数据可以包括:拍摄监控数据的相机的标识信息、监控数据的特征向量、质量最高的监控图像对应的监控数据和/或质量分数。
在又一些示例中,该月级归档后的监控数据可以包括:监控数据中的目标人物的年龄、性别以及具有该目标人物的天级归档后的监控数据的数据表的标识信息。
可以理解的是,上述的小时级归档子库中可以存储有每个小时的归档后的监控数据,上述的天级归档子库中可以存储有每天的归档后的监控数据,上述的月级归档子库中可以存储有每个月归档后的监控数据。
这样,可以实现对监控数据按照时间粒度进行不同级别的归档,进而方便按照时间对监控数据进行归档管理。
在图2所示的数据归档方法的基础上,本公开实施例还提供了一种可能的实现方式,如图3所示,为本公开实施例的一种监控数据归档方法第三种实施方式的流程图,该方法可以包括:
S310,响应于获取到的针对第一级归档子库的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
S320,将目标监控数据输入至预先设置于数据库系统中的第一级归档子库对应的归档函数,以使得对目标监控数据进行一级归档处理;
S330,将一级归档后的目标监控数据存储至第一级归档子库;
S340,响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
S350,将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库。
S360,在将第N级归档后的监控数据存储至第N级归档子库后,响应于获取到的全量归档指令,提取第N级归档子库中存储的所有归档后的监控数据;
S370,将所有归档后的监控数据输入至全量归档子库对应的归档函数,以使得对所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至全量归档子库。
在一些示例中,在进行归档时,除了对监控数据按照时间段进行归档,使得目标归档子库按照时间段来存储监控数据外,还可以进行全量归档,使得全量归档后的全量归档子库中存储有所有归档后的监控数据。
在又一些示例中,上述的调度模块也可以发送对该全量归档指令,对此,可以在将第N级归档后的监控数据存储至第N级归档子库后,当接收到全量归档指令时,响应于该全量归档指令,提取第N级归档子库中存储的所有归档后的监控数据。
然后将所有归档后的监控数据输入至全量归档子库对应的归档函数,以使得对所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至全量归档子库。
通过本公开实施例,可以在对监控数据按照时间粒度进行逐级归档后,对最后一级归档子库中的监控数据进行一个全量归档,从而使得该全量归档子库中可以存储全部的归档后的监控数据。从而使得归档后的监控数据具有时间上的连续性,避免归档后的监控数据在时间上出现中断,从而可以提高归档后的监控数据的可用性。
可以理解的是,本公开实施例中的步骤S310~S350与第二种实施方式中的步骤S210~S250相同或相似,这里不再赘述。
为了更清楚的说明本公开实施例,这里结合图4进行说明,如图4所示,该数据库系统可以包括:数据库安排调度模块、监控数据子库、小时级归档子库、天级归档子库以及月级归档子库;
在一些示例中,该监控数据子库、小时级归档子库、天级归档子库以及月级归档子库,可以是该数据库系统中的不同的数据表,这也是可以的。
该数据库安排调度模块可以发送对监控数据进行归档的指令至监控数据子库;
在一些示例中,该数据库安排调度模块可以周期性的发送对监控数据进行归档的指令;数据库安排调度模块也可以非周期性的发送对监控数据进行归档的指令;
该监控数据子库在接收到对监控数据进行归档的指令后,可以提取本地存储的与归档指令中的监控数据表名、监控起始时间以及监控结束时间对应的目标监控数据;将目标监控数据表输入至预先设置于数据库系统中的、与小时级归档子库对应的归档函数;以使得该与小时级归档子库对应的归档函数对目标监控数据进行归档处理,并将归档后的目标监控数据存储至小时级归档子库。
在一些示例中,上述的数据库安排调度模块,还可以发送对归档后的监控数据进行天级归档的指令至小时级归档子库;
该小时级归档子库,在接收到对小时级归档子库中存储的归档后的监控数据进行天级归档的指令后,可以提取小时级归档子库中存储的归档后的监控数据;然后将归档后的监控数据输入至与天级归档子库对应的归档函数,以使得与天级归档子库对应的归档函数对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库。
在又一些示例中,在一些示例中,上述的数据库安排调度模块,还可以发送对天级归档后的监控数据进行月级归档的指令至天级归档子库;
上述的天级归档子库在接收到对天级归档后的监控数据进行月级归档的指令后,可以从天级归档子库中提取天级归档后的监控数据,并输入至与月级归档子库对应的归档函数,这样,可以使得与月级归档子库对应的归档函数,对天级归档后的监控数据进行月级归档,最后,将月级归档后的监控数据存储至月级归档子库中。
在又一些示例中,上述的数据库安排调度模块,还可以发送全量归档的指令至月级归档子库,该月级归档子库在接收到该全量归档指令后,可以从月级归档子库中提取所有的月级归档后的监控数据,并输入至全量归档函数,这样,该全量归档函数可以对该所有的月级归档后的监控数据进行全量归档,最后,将全量归档后的监控数据存储至全量归档子库中。
相应于上述的方法实施例,本公开实施例还提供了一种监控数据归档装置,如图5所示,为本公开实施例的一种监控数据归档装置的结构示意图,该装置可以应用于数据库系统,数据库系统包括:监控数据子库和归档子库,该装置可以包括:
第一提取模块510,用于响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
第一归档模块520,用于对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
本公开实施例提供的一种监控数据归档装置,可以在获取到归档指令时,响应于获取到的归档指令,从监控数据子库中提取目标监控数据;然后对目标监控数据进行归档处理,最后将归档后的目标监控数据存储至归档子库。这样,可以使得对监控数据的归档计算和存储都在数据库中进行,无需从数据库中复制监控数据,从而可以降低复制的成本,并且,由于对监控数据的归档计算和存储都在数据库中进行,因此,可以避免数据库读写速度对归档效率的限制,从而可以提高归档效率。
在一些示例中,归档条件至少包括:监控数据的数据表名、监控起始时间以及监控结束时间。
在一些示例中,第一归档模块520,具体用于:
将目标监控数据输入至预先设置于数据库系统中的归档函数,以使得归档函数对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
在一些示例中,归档子库为N级归档子库,N级归档子库为按照时间粒度从小到大的顺序进行划分的;归档函数包括:与每一级归档子库对应的归档函数;
第一提取模块510,具体用于:
响应于获取到的针对第一级归档子库的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
第一归档模块520,具体用于:
将目标监控数据输入至预先设置于数据库系统中的第一级归档子库对应的归档函数,以使得对目标监控数据进行一级归档处理,并将一级归档后的目标监控数据存储至第一级归档子库;
在一些示例中,该数据归档装置还包括:
第二提取模块,用于响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
第二归档模块,用于将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库。
在一些示例中,数据库系统还包括:全量归档子库;当n=N-1时,将第n+1级归档后的监控数据存储至第n+1级归档子库为将第N级归档后的监控数据存储至第N级归档子库;
在一些示例中,该数据归档装置还包括:
第三提取模块,用于响应于获取到的全量归档指令,提取第N级归档子库中存储的所有归档后的监控数据;
第三归档模块,用于将所有归档后的监控数据输入至全量归档子库对应的归档函数,以使得对所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至全量归档子库。
在一些示例中,N级归档子库包括:小时级归档子库和天级归档子库;小时级归档子库为第一级归档子库,天级归档子库为第二级归档子库;
第二提取模块,具体用于:
响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
第二归档模块,具体用于:
将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库。
在一些示例中,N级归档子库包括:小时级归档子库、天级归档子库和月级归档子库;小时级归档子库为第一级归档子库,天级归档子库为第二级归档子库,月级归档子库为第二级归档子库;
第二提取模块,还用于:
响应于获取到的针对天级归档子库的归档指令,提取小时级归档子库中存储的小时级归档后的监控数据;
第二归档模块,还用于:
将小时级归档后的监控数据输入至与天级归档子库对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库;
第二提取模块,还用于:
响应于获取到的针对月级归档子库的归档指令,提取天级归档子库中存储的天级归档后的监控数据;
第二归档模块,还用于:
将天级归档后的监控数据输入至与月级归档子库对应的归档函数,以使得对天级归档后的监控数据进行月级归档,并将月级归档后的监控数据存储至月级归档子库中。
本公开实施例还提供了一种电子设备,如图6所示,为本公开实施例的一种监控数据归档方法应用于电子设备的结构示意图,该电子设备可以包括处理器601和机器可读存储介质602,机器可读存储介质602存储有能够被处理器601执行的机器可执行指令,处理器601被机器可执行指令促使:实现上述任一实施例所示的数据归档方法的步骤,例如,可以实现以下步骤:
响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
机器可读存储介质602可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。在一些示例中,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器601可以是通用处理器,包括中央处理器(Central ProcessingUnit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(DigitalSignal Processing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
本公开实施例提供的一种电子设备,可以在获取到归档指令时,响应于获取到的归档指令,从监控数据子库中提取目标监控数据;然后对目标监控数据进行归档处理,最后将归档后的目标监控数据存储至归档子库。这样,可以使得对监控数据的归档计算和存储都在数据库中进行,无需从数据库中复制监控数据,从而可以降低复制的成本,并且,由于对监控数据的归档计算和存储都在数据库中进行,因此,可以避免数据库读写速度对归档效率的限制,从而可以提高归档效率。
本公开实施例还提供了一种数据库系统,如图7所示,为本公开实施例的一种数据库系统的结构示意图,该数据库系统包括:监控数据子库710和归档子库720;
监控数据子库710,用于响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
监控数据子库710,还用于对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库720。
在一些示例中,归档条件至少包括:监控数据的数据表名、监控起始时间以及监控结束时间。
在一些示例中,监控数据子库710,具体用于:
将目标监控数据输入至预先设置于数据库系统中的归档函数,以使得归档函数对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
在一些示例中,归档子库720为N级归档子库,N级归档子库为按照时间粒度从小到大的顺序进行划分的;归档函数包括:与每一级归档子库对应的归档函数;
监控数据子库710,具体用于响应于获取到的针对第一级归档子库721的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;将目标监控数据输入至预先设置于数据库系统中的第一级归档子库721对应的归档函数,以使得对目标监控数据进行一级归档处理,并将一级归档后的目标监控数据存储至第一级归档子库721;
第n级归档子库,用于:
响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
第n级归档子库,还用于:
将第n级归档后的监控数据输入至第n+1级归档子库对应的归档函数,以使得对归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至第n+1级归档子库。
在一些示例中,如图7所示,数据库系统还包括:全量归档子库724;当n=N-1时,将第n+1级归档后的监控数据存储至第n+1级归档子库为将第N级归档后的监控数据存储至第N级归档子库;
第N-1级归档子库,用于:
响应于获取到的全量归档指令,提取第N级归档子库中存储的所有归档后的监控数据;
第N-1级归档子库,还用于:
将所有归档后的监控数据输入至全量归档子库724对应的归档函数,以使得对所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至全量归档子库724。
在一些示例中,该N级归档子库包括:小时级归档子库721和天级归档子库722;当N=2时,n为1,n+1为2,则第n级归档子库为小时级归档子库721,第n+1级归档子库为天级归档子库722;
小时级归档子库721,用于:
响应于获取到的针对天级归档子库722的归档指令,提取小时级归档子库721中存储的小时级归档后的监控数据;
小时级归档子库721,还用于:
将小时级归档后的监控数据输入至与天级归档子库722对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库722。
在一些示例中,如图7所示,该N级归档子库可以包括:小时级归档子库721、天级归档子库722和月级归档子库723;当N=3时,第N-2级归档子库为小时级归档子库721,第N-1级归档子库为天级归档子库722,第N级归档子库为月级归档子库723;
小时级归档子库721,用于:
响应于获取到的针对天级归档子库722的归档指令,提取小时级归档子库721中存储的小时级归档后的监控数据;
小时级归档子库721,还用于:
将小时级归档后的监控数据输入至与天级归档子库722对应的归档函数,以使得对归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至天级归档子库722;
天级归档子库722,用于:
响应于获取到的针对月级归档子库723的归档指令,提取天级归档子库722中存储的天级归档后的监控数据;
天级归档子库722,还用于:
将天级归档后的监控数据输入至与月级归档子库723对应的归档函数,以使得对天级归档后的监控数据进行月级归档,并将月级归档后的监控数据存储至月级归档子库723中。
本公开实施例还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,计算机程序被处理器执行时实现上述任一实施例所示的数据归档方法的步骤,例如,可以实现以下步骤:
响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
本公开实施例提供的一种计算机可读存储介质,可以在获取到归档指令时,响应于获取到的归档指令,从监控数据子库中提取目标监控数据;然后对目标监控数据进行归档处理,最后将归档后的目标监控数据存储至归档子库。这样,可以使得对监控数据的归档计算和存储都在数据库中进行,无需从数据库中复制监控数据,从而可以降低复制的成本,并且,由于对监控数据的归档计算和存储都在数据库中进行,因此,可以避免数据库读写速度对归档效率的限制,从而可以提高归档效率。
本公开实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一实施例所示的数据归档方法的步骤,例如,可以执行以下步骤:
响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
本公开实施例提供的一种包含指令的计算机程序产品,可以在获取到归档指令时,响应于获取到的归档指令,从监控数据子库中提取目标监控数据;然后对目标监控数据进行归档处理,最后将归档后的目标监控数据存储至归档子库。这样,可以使得对监控数据的归档计算和存储都在数据库中进行,无需从数据库中复制监控数据,从而可以降低复制的成本,并且,由于对监控数据的归档计算和存储都在数据库中进行,因此,可以避免数据库读写速度对归档效率的限制,从而可以提高归档效率。
本公开实施例还提供了一种计算机程序,当其在计算机上运行时,使得计算机执行上述任一实施例所示的数据归档方法的步骤,例如,可以执行以下步骤:
响应于获取到的归档指令,从监控数据子库中提取满足归档指令中的归档条件的目标监控数据;
对目标监控数据进行归档处理,并将归档后的目标监控数据存储至归档子库。
本公开实施例提供的一种计算机程序,可以在获取到归档指令时,响应于获取到的归档指令,从监控数据子库中提取目标监控数据;然后对目标监控数据进行归档处理,最后将归档后的目标监控数据存储至归档子库。这样,可以使得对监控数据的归档计算和存储都在数据库中进行,无需从数据库中复制监控数据,从而可以降低复制的成本,并且,由于对监控数据的归档计算和存储都在数据库中进行,因此,可以避免数据库读写速度对归档效率的限制,从而可以提高归档效率。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、电子设备和系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
上述仅为本公开的较佳实施例而已,并非用于限定本公开的保护范围。凡在本公开的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本公开的保护范围内。
Claims (17)
1.一种监控数据归档方法,其特征在于,应用于数据库系统,所述数据库系统包括:监控数据子库和归档子库,所述方法包括:
响应于获取到的归档指令,从所述监控数据子库中提取满足所述归档指令中的归档条件的目标监控数据;
对所述目标监控数据进行归档处理,并将归档后的目标监控数据存储至所述归档子库。
2.根据权利要求1所述的方法,其特征在于,所述归档条件至少包括:监控数据的数据表名、监控起始时间以及监控结束时间。
3.根据权利要求1所述的方法,其特征在于,所述对所述目标监控数据进行归档处理,并将归档后的目标监控数据存储至所述归档子库,包括:
将所述目标监控数据输入至预先设置于所述数据库系统中的归档函数,以使得所述归档函数对所述目标监控数据进行归档处理,并将归档后的目标监控数据存储至所述归档子库。
4.根据权利要求3所述的方法,其特征在于,所述归档子库为N级归档子库,所述N级归档子库为按照时间粒度从小到大的顺序进行划分的;所述归档函数包括:与每一级归档子库对应的归档函数;
所述响应于获取到的归档指令,从所述监控数据子库中提取满足所述归档指令中的归档条件的目标监控数据,包括:
响应于获取到的针对第一级归档子库的归档指令,从所述监控数据子库中提取满足所述归档指令中的归档条件的目标监控数据;
所述将所述目标监控数据输入至预先设置于所述数据库系统中的归档函数,以使得所述归档函数对所述目标监控数据进行归档处理,并将归档后的目标监控数据存储至所述归档子库,包括:
将所述目标监控数据输入至预先设置于所述数据库系统中的第一级归档子库对应的归档函数,以使得对所述目标监控数据进行一级归档处理,并将一级归档后的目标监控数据存储至所述第一级归档子库;
所述方法还包括:
响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
将所述第n级归档后的监控数据输入至所述第n+1级归档子库对应的归档函数,以使得对所述归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至所述第n+1级归档子库。
5.根据权利要求4所述的方法,其特征在于,所述数据库系统还包括:全量归档子库;当所述n=N-1时,所述将第n+1级归档后的监控数据存储至所述第n+1级归档子库为将第N级归档后的监控数据存储至第N级归档子库;
在将第N级归档后的监控数据存储至第N级归档子库后,所述方法还包括:
响应于获取到的全量归档指令,提取所述第N级归档子库中存储的所有归档后的监控数据;
将所述所有归档后的监控数据输入至所述全量归档子库对应的归档函数,以使得对所述所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至所述全量归档子库。
6.根据权利要求4所述的方法,其特征在于,所述N级归档子库包括:小时级归档子库和天级归档子库;所述小时级归档子库为所述第一级归档子库,所述天级归档子库为第二级归档子库;
所述响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,包括:
响应于获取到的针对所述天级归档子库的归档指令,提取所述小时级归档子库中存储的小时级归档后的监控数据;
所述将所述第n级归档后的监控数据输入至所述第n+1级归档子库对应的归档函数,以使得对所述归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至所述第n+1级归档子库,包括:
将所述小时级归档后的监控数据输入至与所述天级归档子库对应的归档函数,以使得对所述归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至所述天级归档子库。
7.根据权利要求4所述的方法,其特征在于,所述N级归档子库包括:小时级归档子库、天级归档子库和月级归档子库;所述小时级归档子库为所述第一级归档子库,所述天级归档子库为第二级归档子库,所述月级归档子库为第二级归档子库;
所述响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,包括:
响应于获取到的针对所述天级归档子库的归档指令,提取所述小时级归档子库中存储的小时级归档后的监控数据;
所述将所述第n级归档后的监控数据输入至所述第n+1级归档子库对应的归档函数,以使得对所述归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至所述第n+1级归档子库,包括:
将所述小时级归档后的监控数据输入至与所述天级归档子库对应的归档函数,以使得对所述归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至所述天级归档子库;
所述响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,还包括:
响应于获取到的针对所述月级归档子库的归档指令,提取所述天级归档子库中存储的天级归档后的监控数据;
所述将所述第n级归档后的监控数据输入至所述第n+1级归档子库对应的归档函数,以使得对所述归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至所述第n+1级归档子库,还包括:
将所述天级归档后的监控数据输入至与所述月级归档子库对应的归档函数,以使得对所述天级归档后的监控数据进行月级归档,并将月级归档后的监控数据存储至所述月级归档子库中。
8.一种监控数据归档装置,其特征在于,应用于数据库系统,所述数据库系统包括:监控数据子库和归档子库,所述装置包括:
第一提取模块,用于响应于获取到的归档指令,从所述监控数据子库中提取满足所述归档指令中的归档条件的目标监控数据;
第一归档模块,用于对所述目标监控数据进行归档处理,并将归档后的目标监控数据存储至所述归档子库。
9.根据权利要求8所述的装置,其特征在于,所述归档条件至少包括:监控数据的数据表名、监控起始时间以及监控结束时间。
10.根据权利要求8所述的装置,其特征在于,所述第一归档模块,具体用于:
将所述目标监控数据输入至预先设置于所述数据库系统中的归档函数,以使得所述归档函数对所述目标监控数据进行归档处理,并将归档后的目标监控数据存储至所述归档子库。
11.根据权利要求10所述的装置,其特征在于,所述归档子库为N级归档子库,所述N级归档子库为按照时间粒度从小到大的顺序进行划分的;所述归档函数包括:与每一级归档子库对应的归档函数;
所述第一提取模块,具体用于:
响应于获取到的针对第一级归档子库的归档指令,从所述监控数据子库中提取满足所述归档指令中的归档条件的目标监控数据;
所述第一归档模块,具体用于:
将所述目标监控数据输入至预先设置于所述数据库系统中的第一级归档子库对应的归档函数,以使得对所述目标监控数据进行一级归档处理,并将一级归档后的目标监控数据存储至所述第一级归档子库;
所述装置还包括:
第二提取模块,用于响应于获取到的针对第n+1级归档子库的归档指令,提取第n级归档子库中的存储的第n级归档后的监控数据,其中,1≤n≤N-1;
第二归档模块,用于将所述第n级归档后的监控数据输入至所述第n+1级归档子库对应的归档函数,以使得对所述归档后的监控数据进行第n+1级归档处理,并将第n+1级归档后的监控数据存储至所述第n+1级归档子库。
12.根据权利要求11所述的装置,其特征在于,所述数据库系统还包括:全量归档子库;当所述n=N-1时,所述将第n+1级归档后的监控数据存储至所述第n+1级归档子库为将第N级归档后的监控数据存储至第N级归档子库;
所述装置还包括:
第三提取模块,用于响应于获取到的全量归档指令,提取所述第N级归档子库中存储的所有归档后的监控数据;
第三归档模块,用于将所述所有归档后的监控数据输入至所述全量归档子库对应的归档函数,以使得对所述所有归档后的监控数据进行全量归档,并将全量归档后的监控数据存储至所述全量归档子库。
13.根据权利要求11所述的装置,其特征在于,所述N级归档子库包括:小时级归档子库和天级归档子库;所述小时级归档子库为所述第一级归档子库,所述天级归档子库为第二级归档子库;
所述第二提取模块,具体用于:
响应于获取到的针对所述天级归档子库的归档指令,提取所述小时级归档子库中存储的小时级归档后的监控数据;
所述第二归档模块,具体用于:
将所述小时级归档后的监控数据输入至与所述天级归档子库对应的归档函数,以使得对所述归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至所述天级归档子库。
14.根据权利要求11所述的装置,其特征在于,所述N级归档子库包括:小时级归档子库、天级归档子库和月级归档子库;所述小时级归档子库为所述第一级归档子库,所述天级归档子库为第二级归档子库,所述月级归档子库为第二级归档子库;
所述第二提取模块,还用于:
响应于获取到的针对所述天级归档子库的归档指令,提取所述小时级归档子库中存储的小时级归档后的监控数据;
所述第二归档模块,还用于:
将所述小时级归档后的监控数据输入至与所述天级归档子库对应的归档函数,以使得对所述归档后的监控数据进行天级归档,并将天级归档后的监控数据存储至所述天级归档子库;
所述第二提取模块,还用于:
响应于获取到的针对所述月级归档子库的归档指令,提取所述天级归档子库中存储的天级归档后的监控数据;
所述第二归档模块,还用于:
将所述天级归档后的监控数据输入至与所述月级归档子库对应的归档函数,以使得对所述天级归档后的监控数据进行月级归档,并将月级归档后的监控数据存储至所述月级归档子库中。
15.一种电子设备,其特征在于,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,所述处理器被所述机器可执行指令促使:实现权利要求1~7任一项所述的方法步骤。
16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时,实现权利要求1~7任一项所述的方法步骤。
17.一种数据库系统,其特征在于,所述数据库系统包括:监控数据子库和归档子库;
所述监控数据子库,用于响应于获取到的归档指令,从所述监控数据子库中提取满足所述归档指令中的归档条件的目标监控数据;
所述监控数据子库,还用于对所述目标监控数据进行归档处理,并将归档后的目标监控数据存储至所述归档子库。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010294471.3A CN111506749B (zh) | 2020-04-15 | 2020-04-15 | 一种监控数据归档方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010294471.3A CN111506749B (zh) | 2020-04-15 | 2020-04-15 | 一种监控数据归档方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111506749A true CN111506749A (zh) | 2020-08-07 |
CN111506749B CN111506749B (zh) | 2024-01-02 |
Family
ID=71870933
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010294471.3A Active CN111506749B (zh) | 2020-04-15 | 2020-04-15 | 一种监控数据归档方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111506749B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115168684A (zh) * | 2022-09-05 | 2022-10-11 | 南昌工程学院 | 一种财务档案管理方法及系统 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101364897A (zh) * | 2008-09-17 | 2009-02-11 | 中兴通讯股份有限公司 | 一种历史数据归档的系统与实现方法 |
US20090265462A1 (en) * | 2008-04-18 | 2009-10-22 | Canon Kabushiki Kaisha | Monitoring apparatus and storage method |
CN101861572A (zh) * | 2007-11-19 | 2010-10-13 | 国际商业机器公司 | 控制对数据库的访问的技术 |
US20140074792A1 (en) * | 2012-09-07 | 2014-03-13 | Sumanth HEGDE | Automated database optimization |
US20150142749A1 (en) * | 2013-11-19 | 2015-05-21 | International Business Machines Corporation | Method and system for a safe archiving of data |
CN105912703A (zh) * | 2016-04-26 | 2016-08-31 | 北京百度网讯科技有限公司 | 数据存储方法、查询方法及装置 |
CN106126526A (zh) * | 2016-06-13 | 2016-11-16 | 浪潮电子信息产业股份有限公司 | 一种数据管理方法及装置 |
CN107239457A (zh) * | 2016-03-28 | 2017-10-10 | 阿里巴巴集团控股有限公司 | 数据归档方法及装置 |
CN107491458A (zh) * | 2016-06-13 | 2017-12-19 | 阿里巴巴集团控股有限公司 | 一种存储时间序列数据的方法和装置以及系统 |
US20180060182A1 (en) * | 2016-08-29 | 2018-03-01 | Vmware, Inc. | Efficient queueing and scheduling of backups in a multi-tenant cloud computing environment |
CN109902211A (zh) * | 2019-03-12 | 2019-06-18 | 农业部沼气科学研究所 | 一种用于会计电子档案管理的系统及方法 |
CN110457255A (zh) * | 2019-07-05 | 2019-11-15 | 中国平安人寿保险股份有限公司 | 数据归档的方法、服务器及计算机可读存储介质 |
CN110990335A (zh) * | 2019-12-06 | 2020-04-10 | 深圳前海微众银行股份有限公司 | 日志归档方法、装置、设备及计算机可读存储介质 |
-
2020
- 2020-04-15 CN CN202010294471.3A patent/CN111506749B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101861572A (zh) * | 2007-11-19 | 2010-10-13 | 国际商业机器公司 | 控制对数据库的访问的技术 |
US20090265462A1 (en) * | 2008-04-18 | 2009-10-22 | Canon Kabushiki Kaisha | Monitoring apparatus and storage method |
CN101364897A (zh) * | 2008-09-17 | 2009-02-11 | 中兴通讯股份有限公司 | 一种历史数据归档的系统与实现方法 |
US20140074792A1 (en) * | 2012-09-07 | 2014-03-13 | Sumanth HEGDE | Automated database optimization |
US20150142749A1 (en) * | 2013-11-19 | 2015-05-21 | International Business Machines Corporation | Method and system for a safe archiving of data |
CN107239457A (zh) * | 2016-03-28 | 2017-10-10 | 阿里巴巴集团控股有限公司 | 数据归档方法及装置 |
CN105912703A (zh) * | 2016-04-26 | 2016-08-31 | 北京百度网讯科技有限公司 | 数据存储方法、查询方法及装置 |
CN106126526A (zh) * | 2016-06-13 | 2016-11-16 | 浪潮电子信息产业股份有限公司 | 一种数据管理方法及装置 |
CN107491458A (zh) * | 2016-06-13 | 2017-12-19 | 阿里巴巴集团控股有限公司 | 一种存储时间序列数据的方法和装置以及系统 |
US20180060182A1 (en) * | 2016-08-29 | 2018-03-01 | Vmware, Inc. | Efficient queueing and scheduling of backups in a multi-tenant cloud computing environment |
CN109902211A (zh) * | 2019-03-12 | 2019-06-18 | 农业部沼气科学研究所 | 一种用于会计电子档案管理的系统及方法 |
CN110457255A (zh) * | 2019-07-05 | 2019-11-15 | 中国平安人寿保险股份有限公司 | 数据归档的方法、服务器及计算机可读存储介质 |
CN110990335A (zh) * | 2019-12-06 | 2020-04-10 | 深圳前海微众银行股份有限公司 | 日志归档方法、装置、设备及计算机可读存储介质 |
Non-Patent Citations (1)
Title |
---|
赵力帅;李耕宇;武振宇;刘鹏;: "基于分层异构数据库系统的历史数据归档技术", 电信科学, no. 1 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115168684A (zh) * | 2022-09-05 | 2022-10-11 | 南昌工程学院 | 一种财务档案管理方法及系统 |
CN115168684B (zh) * | 2022-09-05 | 2022-11-22 | 南昌工程学院 | 一种财务档案管理方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN111506749B (zh) | 2024-01-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230125566A1 (en) | Long string pattern matching of aggregated account data | |
US20200250218A1 (en) | System and method for signature-enhanced multimedia content searching | |
US20170212781A1 (en) | Parallel execution of blockchain transactions | |
CN109726664B (zh) | 一种智能表盘推荐方法、系统、设备及存储介质 | |
CN111209352B (zh) | 一种数据处理方法、装置、电子设备及存储介质 | |
CN109800318B (zh) | 一种归档方法及装置 | |
CN110851598B (zh) | 文本分类方法、装置、终端设备及存储介质 | |
US11200466B2 (en) | Machine learning classifiers | |
CN109800181B (zh) | 一种基于磁盘的数据写入方法、数据写入装置及终端设备 | |
CN112559726A (zh) | 简历信息的过滤方法、模型训练方法、装置、设备及介质 | |
US10248618B1 (en) | Scheduling snapshots | |
CN111159264A (zh) | 一种数据处理方法及装置 | |
CN111506749A (zh) | 一种监控数据归档方法、装置、电子设备及存储介质 | |
US20240037084A1 (en) | Method and apparatus for storing data | |
CN115392235A (zh) | 字符匹配方法、装置、电子设备及可读存储介质 | |
CN113468196B (zh) | 用于处理数据的方法、装置、系统、服务器和介质 | |
CN105159820A (zh) | 一种系统日志数据传输方法及装置 | |
US10747447B1 (en) | Storing de-duplicated data with minimal reference counts | |
US20200112321A1 (en) | Electronic device and method for compressing sampled data | |
CN111143461A (zh) | 映射关系处理系统、方法和电子设备 | |
CN107368281B (zh) | 一种数据处理方法及装置 | |
CN110188069A (zh) | 一种csv文件存储方法、装置及计算机设备 | |
US20230297878A1 (en) | Metadata-driven feature store for machine learning systems | |
US11100689B1 (en) | Method for determining a histogram of variable sample rate waveforms | |
CN111367992B (zh) | 一种数据处理方法及装置,计算机存储介质和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |