CN105426377A - 一种数据管理方法及其装置、系统 - Google Patents

一种数据管理方法及其装置、系统 Download PDF

Info

Publication number
CN105426377A
CN105426377A CN201410489954.3A CN201410489954A CN105426377A CN 105426377 A CN105426377 A CN 105426377A CN 201410489954 A CN201410489954 A CN 201410489954A CN 105426377 A CN105426377 A CN 105426377A
Authority
CN
China
Prior art keywords
data
database
client
accessed
intercept
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410489954.3A
Other languages
English (en)
Inventor
桂永宏
袁兵
梁耿
黎祖锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Group Guangxi Co Ltd
Original Assignee
China Mobile Group Guangxi Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Group Guangxi Co Ltd filed Critical China Mobile Group Guangxi Co Ltd
Priority to CN201410489954.3A priority Critical patent/CN105426377A/zh
Publication of CN105426377A publication Critical patent/CN105426377A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种数据管理方法及其装置、系统,该方法包括:侦听与客户端交互的用于进行数据库访问的消息;根据侦听到的消息确定所述数据库中被访问的数据,并统计所述被访问的数据的被访问次数;根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表。通过本发明可以将用户经常访问的数据库中的数据进行重组,避免在进行数据库优化时被优化掉,从而导致因用户再次访问而引起的系统的运行效率降低。

Description

一种数据管理方法及其装置、系统
技术领域
本发明涉及数据库技术领域,具体的涉及一种数据管理方法及其装置、系统。
背景技术
现有的数据库的管理方法中,对数据库内的数据优化方法,基本都是通过删除重复数据、压缩数据来进行。对于庞大的数据,在进行压缩的时候,都是基于时间轴来进行,对于一段时间的历史数据进行压缩,然后进行转移,以腾出空间存储新的数据。
如图1所示的是一种数据优化方法,从图1中可以看出,现有的数据优化方法非常机械化,没有能够根据数据被访问调用的实际情况去对数据进行分类,仅仅是基于时间周期进行数据压缩等优化工作。
对于数据库中的某些历史数据,有时还会经常被访问到,这样,每次访问都需要经过解压缩后再进行查询访问,大大降低系统的运行效率。
发明内容
本发明提供一种数据管理方法及其装置、系统,用以解决现有技术中存在数据库中的历史数据被优化后,用户每次访问都需要进行解压缩后再查询访问,导致系统的运行效率降低的问题。
本发明方法包括:一种数据管理方法,该方法包括:
侦听与客户端交互的用于进行数据库访问的消息;
根据侦听到的消息确定所述数据库中被访问的数据,并统计所述被访问的数据的被访问次数;
根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表。
较佳地,所述侦听与客户端交互的用于进行数据库访问的消息,根据侦听到的消息确定所述数据库中被访问的数据,包括:
侦听客户端发送的数据库访问请求消息;
根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
较佳地,所述侦听与客户端交互的用于进行数据库访问的消息,根据侦听到的消息确定所述数据库中被访问的数据,包括:
侦听客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息;
若在侦听到客户端发送的数据库访问请求消息后,侦听到发送给所述客户端的与所述数据库访问请求消息对应的数据库访问响应消息,则根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
较佳地,所述根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,包括:
按照设定周期统计当前周期内所述数据库中的数据的最高被访问次数;
用所述最高被访问次数与设定的百分比相乘得到划分基准,将所述数据库中在当前周期内被访问次数高于所述划分基准的数据确定为活跃数据,将所述数据库中在当前周期内被访问次数等于或低于所述划分基准的数据确定为非活跃数据。
较佳地,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表之后,该方法还包括:
根据所述数据活跃度列表,将非活跃数据进行压缩处理,将活跃数据进行重组。
本发明还提供了一种数据管理装置,该装置包括:
侦听单元,侦听与客户端交互的用于进行数据库访问的消息;
数据统计单元,根据侦听到的消息确定所述数据库中被访问的数据,并统计所述被访问的数据的被访问次数;
数据输出单元,根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表。
较佳地,所述侦听单元具体用于:
侦听客户端发送的数据库访问请求消息;
根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
较佳地,所述侦听单元具体用于:
侦听客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息;
若在侦听到客户端发送的数据库访问请求消息后,侦听到发送给所述客户端的与所述数据库访问请求消息对应的数据库访问响应消息,则根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
较佳地,所述数据输出单元具体用于:
按照设定周期统计当前周期内所述数据库中的数据的最高被访问次数;
用所述最高被访问次数与设定的百分比相乘得到划分基准,将所述数据库中在当前周期内被访问次数高于所述划分基准的数据确定为活跃数据,将所述数据库中在当前周期内被访问次数等于或低于所述划分基准的数据确定为非活跃数据。
本发明还提供了一种数据管理系统,包括:根据上述数据管理装置生成的数据活跃度列表,将非活跃数据进行压缩处理,将活跃数据进行重组。
本发明有益效果如下:
本发明通过侦听与客户端交互时用于进行数据库访问的消息,对所述数据库访问消息进行分析,得到数据库中被访问的数据,然后统计被访问的数据的被访问次数,再根据被访问次数确定所述数据库中的数据的活跃度,生成用于进行数据库优化的数据活跃度列表。通过本发明可以将用户经常访问的数据库中的数据进行重组,避免在进行数据库优化时被优化掉,从而导致因用户再次访问而引起的系统的运行效率降低。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为现有技术中一种数据优化的方法;
图2为本发明实施例的一种数据管理方法的流程示意图;
图3为本发明实施例的一种数据管理装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部份实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
如图2所示,本发明提供了一种数据管理方法,该方法步骤如下:
步骤S201,侦听与客户端交互的用于进行数据库访问的消息;
步骤S202,根据侦听到的消息确定所述数据库中被访问的数据,并统计所述被访问的数据的被访问次数;
步骤S203,根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表。
通过侦听与客户端交互时用于进行数据库访问的消息,对所述数据库访问消息进行分析,得到数据库中被访问的数据,然后统计被访问的数据的被访问次数,再根据被访问次数确定所述数据库中的数据的活跃度,生成用于进行数据库优化的数据活跃度列表。通过本发明可以将用户经常访问的数据库中的数据进行重组,避免在进行数据库优化时被优化掉,从而导致因用户再次访问而引起的系统的运行效率降低。
优选地,本发明提供一实施例,包括:
侦听与客户端交互的用于进行数据库访问的消息时,侦听客户端发送的数据库访问请求消息,对所述访问请求消息进行抓包分析,获取客户端需要访问的具体数据,根据获取的具体数据去访问数据库中的该数据,对所述数据库中的该数据进行简化处理,即只需从所述数据库中获取所述客户端所请求访问的数据的索引信息。然后根据从数据库中得到的索引信息,统计所述数据库中被访问数据的被访问次数,即记录被访问数据中的索引信息,在索引信息上记录被访问的次数,只要是数据库中的数据被访问一次,在所述索引信息上的被访问的次数加1。根据统计的所述被访问数据的被访问次数,将所述数据库中的数据进行活跃度分类,即按照被访问数据的被访问次数进行排序,然后根据被访问次数最高的次数的预设的百分比,将所述数据库中的数据划分为活跃数据和非活跃数据,把划分后的所述数据库中的数据生成活跃度分类表,该分类表的内容包括数据库中的数据的索引信息+对应的活跃度信息。如:对于关系型数据库,数据的索引信息可包括数据库ID、表ID以及数据记录的ID等信息。所述生成的数据库中数据的活跃度分类表主要用于数据库管理人员对数据库进行数据优化使用。
本实施例表明可以通过只侦听客户端发送的数据库访问请求消息,从中获取数据库中所述客户端所请求访问的数据的索引信息,对所述数据库中的被访问数据进行统计次数,最后生成被访问数据的活跃度分类表。无需对数据库中的数据进行整个读取,就可以统计被访问次数,提高了数据库的运行速率,降低了数据库的运行负荷。
优选地,本发明提供一实施例,包括:
侦听与客户端交互的用于进行数据库访问的消息时,侦听发送给客户端的数据库访问响应消息,对所述发送给客户端的数据库访问响应消息进行抓包分析,获取发送给所述客户端的数据的索引信息。然后根据发送给所述客户端的数据的索引信息,统计所述数据库中被访问数据的被访问次数,即记录被访问数据中的索引信息,在索引信息上记录被访问的次数,只要是数据库中的数据被访问一次,在所述索引信息上的被访问的次数加1。根据统计的所述被访问数据的被访问次数,将所述数据库中的数据进行活跃度分类,即按照被访问数据的被访问次数进行排序,然后根据被访问次数最高的次数的预设的百分比,将所述数据库中的数据划分为活跃数据和非活跃数据,把划分后的所述数据库中的数据生成活跃度分类表,该分类表的内容包括数据库中的数据的索引信息+对应的活跃度信息。如:对于关系型数据库,数据的索引信息可包括数据库ID、表ID以及数据记录的ID等信息。所述生成的数据库中数据的活跃度分类表主要用于数据库管理人员对数据库进行数据优化使用。
本实施例只适用于数据库发送给客户端的数据库访问响应信息中携带数据索引信息的情况下才可以,通常相应信息不携带数据的索引信息,只携带具体的被访问的数据,因此,本实施例只适用于数据库发送给客户端的数据库访问响应信息中携带数据索引信息的情况。通过本实施例同样可以提高了数据库的运行速率,降低了数据库的运行负荷。
优选地,本发明提供一实施例,包括:
侦听与客户端交互的用于进行数据库访问的消息时,同时侦听客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息,对所述客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息都进行抓包分析,若在侦听到客户端发送的数据库访问请求消息后,侦听到发送给所述客户端的与所述数据库访问请求消息对应的数据库访问响应消息,则根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息(若在侦听到客户端发送的数据库访问请求消息后,没有侦听到数据库发送给所述客户端的与所述数据库访问请求消息对应的数据库访问响应消息,则说明数据库中所述客户端请求访问的数据没有被访问,可能是危险访问,被数据库的安全防卫系统拦截,因此,所述侦听到客户端发送的数据库访问请求消息被丢弃,不会被统计)。然后根据所述客户端所请求访问的数据的索引信息,统计所述数据库中被访问数据的被访问次数,即记录被访问数据中的索引信息,在索引信息上记录被访问的次数,只要是数据库中的数据被访问一次,在所述索引信息上的被访问的次数加1。根据统计的所述被访问数据的被访问次数,将所述数据库中的数据进行活跃度分类,即按照被访问数据的被访问次数进行排序,然后根据被访问次数最高的次数的预设的百分比,将所述数据库中的数据划分为活跃数据和非活跃数据,把划分后的所述数据库中的数据生成活跃度分类表,该分类表的内容包括数据库中的数据的索引信息+对应的活跃度信息。如:对于关系型数据库,数据的索引信息可包括数据库ID、表ID以及数据记录的ID等信息。所述生成的数据库中数据的活跃度分类表主要用于数据库管理人员对数据库进行数据优化使用。
本实施例通过同时侦听客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息,可以不用再次去数据库中进行查找所述客户端所请求访问的数据,就可以得到数据库中的数据是否被访问,此种方法通过对比客户端发送的数据库访问请求消息和所述客户端的数据库访问响应消息,可以更好统计所述数据库的数据被访问次数,防止客户端的危险请求访问被统计,提高系统的运行效率,降低数据库运行的负荷。
优选地,所述根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,包括:按照设定周期统计当前周期内所述数据库中的数据的最高被访问次数;用所述最高被访问次数与设定的百分比相乘得到划分基准,将所述数据库中在当前周期内被访问次数高于所述划分基准的数据确定为活跃数据,将所述数据库中在当前周期内被访问次数等于或低于所述划分基准的数据确定为非活跃数据。
所述设定周期可以根据管理人员对数据库的数据优化周期来设定,如:可以是一周进行一次数据库的数据优化,就可统计一周内所述数据库中的数据库的数据的被访问次数,从中获取最高被访问次数,如最高被访问次数是1000次,然后与设定的百分比相乘得到划分基准,如设定的百分比为10%,即划分基准被访问次数为100次,就可以将所述数据库中一周内被访问次数高于100次的数据确定为活跃数据,将所述数据库中一周内被访问次数等于或低于100次的数据确定为非活跃数据。然后根据此分类生成数据库中被访问数据的活跃度分类表,管理人员根据该活跃度分类对数据库进行数据优化。通过此方法可以有效的提高数据库的访问速率,以往按照时间周期进行数据库压缩等优化方式,对数据没有进行区别分类,使得常用活跃数据也被压缩,此类数据访问的速度就会大大降低,同时也会增加数据库的负荷。
优选地,在根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表之后,就可以根据生成的数据活跃度列表,对非活跃数据进行压缩处理,对活跃数据进行重组,即重新建立数据索引或数据关系。该步骤可以在每次统计操作后生成数据活跃度列表,在需要优化数据库时(可由命令触发也可以周期触发)根据该活跃度列表进行数据库的优化。也可以按照设定周期生成活跃度列表,并根据本周期生成的活跃度列表执行数据库的优化。还可以是在接收到优化命令后生成活跃度列表,并根据生成的活跃度列表进行数据库的优化。
基于同一发明构思,本发明实施例还提供了一种数据管理装置,由于该装置解决问题的原理与上述一种数据管理方法相似,因此该装置的实施可以参见方法的实施,重复之处不再赘述。
如图3所示的结构示意图,本发明实施例还提供了一种数据管理装置,该装置包括:
侦听单元301,侦听与客户端交互的用于进行数据库访问的消息;
数据统计单元302,根据侦听到的消息确定所述数据库中被访问的数据,并统计所述被访问的数据的被访问次数;
数据输出单元303,根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表。
优选地,所述侦听单元301具体用于:
侦听客户端发送的数据库访问请求消息;
根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
优选地,所述侦听单元301具体用于:
侦听发送给客户端的数据库访问响应消息;
根据侦听到的数据库访问响应消息,从所述数据库访问响应消息中获取发送给所述客户端的数据的索引信息。
优选地,所述侦听单元301具体用于:
侦听客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息;
若在侦听到客户端发送的数据库访问请求消息后,侦听到发送给所述客户端的与所述数据库访问请求消息对应的数据库访问响应消息,则根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
优选地,所述数据输出单元303具体用于:
按照设定周期统计当前周期内所述数据库中的数据的最高被访问次数;
用所述最高被访问次数与设定的百分比相乘得到划分基准,将所述数据库中在当前周期内被访问次数高于所述划分基准的数据确定为活跃数据,将所述数据库中在当前周期内被访问次数等于或低于所述划分基准的数据确定为非活跃数据。
优选地,本发明实施例还提供一种数据管理系统,该系统包括:
根据上述数据管理装置中生成的数据活跃度列表,将非活跃数据进行压缩处理,将活跃数据进行重组。即重新建立数据索引或数据关系。该步骤可以在每次统计操作后生成数据活跃度列表,在需要优化数据库时(可由命令触发也可以周期触发)根据该活跃度列表进行数据库的优化。也可以按照设定周期生成活跃度列表,并根据本周期生成的活跃度列表执行数据库的优化。还可以是在接收到优化命令后生成活跃度列表,并根据生成的活跃度列表进行数据库的优化。
从上述内容可以看出,本发明实施例中通过侦听客户端发送的数据库访问请求消息,或侦听发送给客户端的数据库访问响应消息,或同时侦听客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息三种方法,都可以实现获取所述客户端所请求访问的数据的索引信息,在根据所述客户端所请求访问的数据的索引信息进行统计被访问数据的被访问次数,可以生成被访问数据的活跃度分类表,然后根据活跃度分类表对数据库中的非活跃数据进行压缩处理,对活跃数据进行重组,即重新建立数据索引或数据关系的处理。可以有效的提升数据库的访问效率,避免了在进行优化后,客户端对数据库进行访问时需要经过解压缩后再进行查询访问的问题,大大提高了客户端的访问速度,降低了数据库运行的负荷。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种数据管理方法,其特征在于,该方法包括:
侦听与客户端交互的用于进行数据库访问的消息;
根据侦听到的消息确定所述数据库中被访问的数据,并统计所述被访问的数据的被访问次数;
根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表。
2.如权利要求1所述的方法,其特征在于,所述侦听与客户端交互的用于进行数据库访问的消息,根据侦听到的消息确定所述数据库中被访问的数据,包括:
侦听客户端发送的数据库访问请求消息;
根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
3.如权利要求1所述的方法,其特征在于,所述侦听与客户端交互的用于进行数据库访问的消息,根据侦听到的消息确定所述数据库中被访问的数据,包括:
侦听客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息;
若在侦听到客户端发送的数据库访问请求消息后,侦听到发送给所述客户端的与所述数据库访问请求消息对应的数据库访问响应消息,则根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
4.如权利要求1所述的方法,其特征在于,所述根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,包括:
按照设定周期统计当前周期内所述数据库中的数据的最高被访问次数;
用所述最高被访问次数与设定的百分比相乘得到划分基准,将所述数据库中在当前周期内被访问次数高于所述划分基准的数据确定为活跃数据,将所述数据库中在当前周期内被访问次数等于或低于所述划分基准的数据确定为非活跃数据。
5.如权利要求1-4任一所述的方法,其特征在于,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表之后,该方法还包括:
根据所述数据活跃度列表,将非活跃数据进行压缩处理,将活跃数据进行重组。
6.一种数据管理装置,其特征在于,该装置包括:
侦听单元,侦听与客户端交互的用于进行数据库访问的消息;
数据统计单元,根据侦听到的消息确定所述数据库中被访问的数据,并统计所述被访问的数据的被访问次数;
数据输出单元,根据所述数据库中的数据的被访问次数,确定所述数据库中的数据的活跃度,根据所述数据库中的数据的活跃度生成用于进行数据库优化的数据活跃度列表。
7.如权利要求6所述的装置,其特征在于,所述侦听单元具体用于:
侦听客户端发送的数据库访问请求消息;
根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
8.如权利要求6所述的装置,其特征在于,所述侦听单元具体用于:
侦听客户端发送的数据库访问请求消息以及发送给所述客户端的数据库访问响应消息;
若在侦听到客户端发送的数据库访问请求消息后,侦听到发送给所述客户端的与所述数据库访问请求消息对应的数据库访问响应消息,则根据侦听到的数据库访问请求消息,从所述数据库中获取所述客户端所请求访问的数据的索引信息。
9.如权利要求6所述的装置,其特征在于,所述数据输出单元具体用于:
按照设定周期统计当前周期内所述数据库中的数据的最高被访问次数;
用所述最高被访问次数与设定的百分比相乘得到划分基准,将所述数据库中在当前周期内被访问次数高于所述划分基准的数据确定为活跃数据,将所述数据库中在当前周期内被访问次数等于或低于所述划分基准的数据确定为非活跃数据。
10.一种数据管理系统,其特征在于,包括:根据如权利要求6-9所述的任一装置生成的数据活跃度列表,将非活跃数据进行压缩处理,将活跃数据进行重组。
CN201410489954.3A 2014-09-23 2014-09-23 一种数据管理方法及其装置、系统 Pending CN105426377A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410489954.3A CN105426377A (zh) 2014-09-23 2014-09-23 一种数据管理方法及其装置、系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410489954.3A CN105426377A (zh) 2014-09-23 2014-09-23 一种数据管理方法及其装置、系统

Publications (1)

Publication Number Publication Date
CN105426377A true CN105426377A (zh) 2016-03-23

Family

ID=55504590

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410489954.3A Pending CN105426377A (zh) 2014-09-23 2014-09-23 一种数据管理方法及其装置、系统

Country Status (1)

Country Link
CN (1) CN105426377A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108595714A (zh) * 2018-05-14 2018-09-28 深圳市华傲数据技术有限公司 一种基于数据库查询的数据存储方法、介质及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110055607A1 (en) * 2009-08-31 2011-03-03 Red Hat, Inc. Methods for managing process activity data using a system-wide daemon
CN103092867A (zh) * 2011-11-03 2013-05-08 中国移动通信集团甘肃有限公司 一种数据管理方法及系统、数据分析装置
CN103177005A (zh) * 2011-12-21 2013-06-26 深圳市腾讯计算机系统有限公司 一种数据访问的处理方法和系统
CN103473276A (zh) * 2013-08-26 2013-12-25 广东电网公司电力调度控制中心 超大型数据存储方法、分布式数据库系统及其检索方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110055607A1 (en) * 2009-08-31 2011-03-03 Red Hat, Inc. Methods for managing process activity data using a system-wide daemon
CN103092867A (zh) * 2011-11-03 2013-05-08 中国移动通信集团甘肃有限公司 一种数据管理方法及系统、数据分析装置
CN103177005A (zh) * 2011-12-21 2013-06-26 深圳市腾讯计算机系统有限公司 一种数据访问的处理方法和系统
CN103473276A (zh) * 2013-08-26 2013-12-25 广东电网公司电力调度控制中心 超大型数据存储方法、分布式数据库系统及其检索方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108595714A (zh) * 2018-05-14 2018-09-28 深圳市华傲数据技术有限公司 一种基于数据库查询的数据存储方法、介质及设备

Similar Documents

Publication Publication Date Title
US9703824B2 (en) Managing a distributed database
WO2017148293A1 (zh) 一种基于云平台的客户端应用的信息统计方法和装置
JP6716727B2 (ja) ストリーミングデータ分散処理方法及び装置
US11238045B2 (en) Data arrangement management in a distributed data cluster environment of a shared pool of configurable computing resources
CN106161633B (zh) 一种基于云计算环境下打包文件的传输方法及系统
CN103617287A (zh) 一种分布式环境下的日志管理方法和装置
CN106682004A (zh) 一种Redis Key管理方法及系统
CN103678293B (zh) 一种数据存储方法及装置
CN104361022A (zh) 一种基于采集数据统计以及前台展现的方法
CN104462121A (zh) 数据处理方法、装置及系统
CN110389940B (zh) 一种数据均衡方法、装置和计算机可读存储介质
CN110955704A (zh) 一种数据管理方法、装置、设备及存储介质
US11727013B2 (en) Optimized processing of data in different formats
US11507277B2 (en) Key value store using progress verification
CN105516266A (zh) 一种业务监控方法、系统及相关设备
CN106020722A (zh) 一种云存储系统的重复数据去重方法、装置及系统
CN111694505B (zh) 数据存储管理方法、装置和计算机可读存储介质
WO2021056739A1 (zh) 性能分析方法、装置、计算机设备及存储介质
CN104778252A (zh) 索引的存储方法和装置
CN104503983A (zh) 为搜索引擎提供网站认证数据的方法及装置
CN105426377A (zh) 一种数据管理方法及其装置、系统
US11249901B2 (en) Ownership-based garbage collection of data
CN108989088B (zh) 一种日志上传方法和通信设备
CN106294721B (zh) 一种集群数据统计及导出方法及装置
CN104077525A (zh) 一种对终端数据信息进行处理的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160323