CN103336670B - 一种基于数据温度对数据块自动进行分布的方法和装置 - Google Patents

一种基于数据温度对数据块自动进行分布的方法和装置 Download PDF

Info

Publication number
CN103336670B
CN103336670B CN201310218930.XA CN201310218930A CN103336670B CN 103336670 B CN103336670 B CN 103336670B CN 201310218930 A CN201310218930 A CN 201310218930A CN 103336670 B CN103336670 B CN 103336670B
Authority
CN
China
Prior art keywords
data block
accessed
data
memory node
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310218930.XA
Other languages
English (en)
Other versions
CN103336670A (zh
Inventor
李海丰
张勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201310218930.XA priority Critical patent/CN103336670B/zh
Publication of CN103336670A publication Critical patent/CN103336670A/zh
Application granted granted Critical
Publication of CN103336670B publication Critical patent/CN103336670B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明适用于数据处理领域,提供了一种基于数据温度对数据块自动进行分布的方法和装置,所述方法包括:获取存储节点存储的数据块的被访问信息;对所述被访问信息进行统计,生成统计数据;根据所述统计数据将存储节点存储的数据块划分为不同的数据温度;根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布。本发明实施例,系统获取存储节点存储的数据块的被访问信息,根据所述被访问信息对数据块的数据温度进行划分,根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布,使得所有存储节点的性能都能够得到充分发挥,为应用提供了更好的磁盘I/O性能。

Description

一种基于数据温度对数据块自动进行分布的方法和装置
技术领域
本发明属于数据处理领域,尤其涉及一种基于数据温度对数据块自动进行分布的方法和装置。
背景技术
随着计算机技术和网络技术有了飞速的发展,单位存储的成本不断降低。这些为信息数字化提供了坚实的基础。而数据总线带宽、磁盘速度的增长无法满足应用对于数据带宽的需求,存储系统成为计算机系统发展的瓶颈。
在现有技术中,数据被分为固定大小的“块”,称为数据块,这些数据块被随机的存储在存储系统的磁盘中,读取时存储系统的存储层根据文件系统层请求的地址进行映射向合适的磁盘读取数据。
但是由于磁盘I/O性能的不同,磁盘访问量的不同可能出现:某些磁盘一直被访问,某些磁盘一直不被访问的情况,这样就对磁盘的性能造成很大的浪费。
发明内容
本发明实施例的目的在于提供一种基于数据温度对数据块自动进行分布的方法和装置,以解决现有无法充分利用所有存储节点的存储性能的问题。
第一方面,本发明实施例提供了一种基于数据温度对数据块自动进行分布的方法,所述方法包括:
获取存储节点存储的数据块的被访问信息,所述被访问信息包括:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率;
对所述被访问信息进行统计,生成统计数据,所述统计为:对被访问信息中的一种或多种进行统计;
根据所述统计数据将存储节点存储的数据块划分为不同的数据温度;
根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布。
在第一方面的第一种可能的实施方式中,在所述对所述被访问信息进行统计,生成统计数据的步骤之前,所述方法还包括:
预设需要进行统计的信息。
在第一方面的第二种可能的实施方式中,在所述获取存储节点存储的数据块的被访问信息之后,所述方法还包括:
获取存储节点的负载信息,所述负载信息包括:存储节点的存储空间和数据块的大小信息。
结合第一方面的第二种可能的实施方式,在第三种可能的实施方式中,在所述根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布的步骤之后,所述方法还包括:
根据所述负载信息对重新分布后的数据块进行调整。
结合第一方面的第三种可能的实施方式,在第四种可能的实施方式中,所述根据所述负载信息对重新分布后的数据块进行调整,包括:
当第一存储节点的存储空间无法存储对应的数据块时,将多出的数据块存储到所述第一存储节点的I/O性能相近的第二存储节点。
第二方面,本发明实施例提供了一种基于数据温度对数据块自动进行分布的装置,所述装置包括:
获取单元,用于获取存储节点存储的数据块的被访问信息,所述被访问信息包括:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率;
统计单元,用于对所述获取单元获取的被访问信息进行统计,生成统计数据,所述统计为:对被访问信息中的一种或多种进行统计;
划分单元,用于根据所述统计单元的统计数据将存储节点存储的数据块划分为不同的数据温度。
在第二方面的第一种可能的实施方式中,在所述统计单元统计之前,所述装置还包括:
统计信息预设单元,用于预设需要进行统计的信息。
在第二方面的第二种可能的实施方式中,在所述获取单元获取之后,所述装置还包括:
负载信息获取单元,用于获取存储节点的负载信息,所述负载信息包括:存储节点的存储空间和数据块的大小信息。
结合第二方面的第二种可能的实施方式,在第三种可能的实施方式中,在所述负载信息获取单元获取之后,所述装置还包括:
调整单元,用于根据所述负载信息获取单元获取的负载信息对重新分布后的数据块进行调整。
结合第二方面的第三种可能的实施方式,在第四种可能的实施方式中,所述调整单元的调整,包括:
当第一存储节点的存储空间无法存储对应的数据块时,将多出的数据块存储到所述第一存储节点的I/O性能相近的第二存储节点。
本发明实施例,系统获取存储节点存储的数据块的被访问信息,根据所述被访问信息对数据块的数据温度进行划分,根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布,使得所有存储节点的性能都能够得到充分发挥,为应用提供了更好的磁盘I/O性能。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的基于数据温度对数据块自动进行分布方法的流程图;
图2为本发明实施例提供的基于数据温度对数据块自动进行分布装置的结构图;
图3为本发明实施例提供的基于数据温度对数据块自动进行分布系统的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例,系统获取存储节点存储的数据块的被访问信息,根据所述被访问信息对数据块的数据温度进行划分,根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布,使得所有存储节点的性能都能够得到充分发挥,为应用提供了更好的磁盘I/O性能。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
实施例一
如图1所示为本发明实施例提供的基于数据温度对数据块自动进行分布方法的流程图,所述方法包括以下步骤:
在步骤S101中,获取存储节点存储的数据块的被访问信息,所述被访问信息包括:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率。
在本发明实施例中,系统获取存储节点存储的数据块的被访问信息,包括:数据块的修改时间(数据块什么时候被存储到该存储节点的)、数据块的被访问时间(数据块在哪些时间被访问的)、数据块的被访问次数(数据块被总共被访问了多少次)、数据块的被访问频率(数据块在单位时间内被访问的次数)等。
在步骤S102中,对所述被访问信息进行统计,生成统计数据,所述统计为:对被访问信息中的一种或多种进行统计。
在本发明实施例中,系统在获取到上述被访问信息之后,对被访问的信息进行统计,生成对应的统计数据,所述统计为:对被访问信息的一种进行统计,如:只对数据块的修改时间进行统计;或者对被放文信息的多种进行统计,如:即统计数据块的修改世界、也统计数据块的被访问时间。
在步骤S103中,根据所述统计数据将存储节点存储的数据块划分为不同的数据温度。
在本发明实施例中,系统根据获取的统计数据,对各个存储节点存储的数据进行数据温度的重新划分,如:存储节点A存储的数据块的被访问次数被统计为“多”,则将存储节点A存储的数据块的数据温度设置为“热”;存储节点B存储的数据块的被访问次数被统计为“中”,则将存储节点B存储的数据块的数据温度设置为“温”;存储节点C存储的数据块的被访问次数被统计为“少”,则将存储节点C存储的数据块的数据温度设置为“冷”。以上只是以“数据块的被访问次数”为例进行说明,并不用以限制,也可以结合“数据块的被访问次数”和“数据块的被访问频率”、“数据块的被访问频率”和“数据块的被访问时间”等方式对数据块的数据温度进行划分。
在步骤S104中,根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布。
在本发明实施例中,系统根据存储节点的I/O性能和数据温度对所述数据块进行重新分布,即:将数据温度“热”的数据块分布到I/O性能“强”的存储节点、将数据温度“中”的数据块分布到I/O性能“中”的存储节点、将数据温度“冷”的数据块分布到I/O性能“弱”的存储节点。
本发明实施例,系统获取存储节点存储的数据块的被访问信息,根据所述被访问信息对数据块的数据温度进行划分,根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布,使得所有存储节点的性能都能够得到充分发挥,为应用提供了更好的磁盘I/O性能。
作为本发明的一个可选实施例,在所述对所述被访问信息进行统计,生成统计数据的步骤之前,所述方法还包括:
预设需要进行统计的信息。
在本发明实施例中,系统可以从:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率等信息中,预设一种或多种进行统计,在后续的步骤中即可根据预设的信息种类统计信息
作为本发明的另一个可选实施例,在所述获取存储节点存储的数据块的被访问信息之后,所述方法还包括:
获取存储节点的负载信息,所述负载信息包括:存储节点的存储空间和数据块的大小信息。
在本发明实施例中,系统根据存储节点的负责信息可以对重新分布后的数据块进行调整,如:数据温度为“热”的数据块有150mb,而I/O性能“强”的存储节点的存储空间只有100mb,因此需要根据存储节点的负载信息,将另外的50mb数据块存储到I/O性能为“中”的存储节点。
实施例二
如图2所示为本发明实施例提供的基于数据温度对数据块自动进行分布装置的结构图,为了便于说明,仅示出与本发明实施例相关的部分,包括:
获取单元201,用于获取存储节点存储的数据块的被访问信息,所述被访问信息包括:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率。
在本发明实施例中,获取单元201获取存储节点存储的数据块的被访问信息,包括:数据块的修改时间(数据块什么时候被存储到该存储节点的)、数据块的被访问时间(数据块在哪些时间被访问的)、数据块的被访问次数(数据块被总共被访问了多少次)、数据块的被访问频率(数据块在单位时间内被访问的次数)等。
统计单元202,用于对所述获取单元201获取的被访问信息进行统计,生成统计数据,所述统计为:对被访问信息中的一种或多种进行统计。
在本发明实施例中,获取单元201在获取到上述被访问信息之后,统计单元202对被访问的信息进行统计,生成对应的统计数据,所述统计为:对被访问信息的一种进行统计,如:只对数据块的修改时间进行统计;或者对被放文信息的多种进行统计,如:即统计数据块的修改世界、也统计数据块的被访问时间。
划分单元203,用于根据所述统计单元202的统计数据将存储节点存储的数据块划分为不同的数据温度。
在本发明实施例中,划分单元203根据获取的统计数据,对各个存储节点存储的数据进行数据温度的重新划分,如:存储节点A存储的数据块的被访问次数被统计为“多”,则将存储节点A存储的数据块的数据温度设置为“热”;存储节点B存储的数据块的被访问次数被统计为“中”,则将存储节点B存储的数据块的数据温度设置为“温”;存储节点C存储的数据块的被访问次数被统计为“少”,则将存储节点C存储的数据块的数据温度设置为“冷”。以上只是以“数据块的被访问次数”为例进行说明,并不用以限制,也可以结合“数据块的被访问次数”和“数据块的被访问频率”、“数据块的被访问频率”和“数据块的被访问时间”等方式对数据块的数据温度进行划分。
重新分布单元204,用于根据存储节点的I/O性能和所述划分单元203划分的数据温度对所述数据块进行重新分布。
在本发明实施例中,重新分布单元204根据存储节点的I/O性能和数据温度对所述数据块进行重新分布,即:将数据温度“热”的数据块分布到I/O性能“强”的存储节点、将数据温度“中”的数据块分布到I/O性能“中”的存储节点、将数据温度“冷”的数据块分布到I/O性能“弱”的存储节点。
本发明实施例,系统获取存储节点存储的数据块的被访问信息,根据所述被访问信息对数据块的数据温度进行划分,根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布,使得所有存储节点的性能都能够得到充分发挥,为应用提供了更好的磁盘I/O性能。
作为本发明的一个可选实施例,在所述统计单元202统计之前,所述装置还包括:
统计信息预设单元,用于预设需要进行统计的信息。
在本发明实施例中,统计信息预设单元可以从:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率等信息中,预设一种或多种进行统计,在后续的步骤中即可根据预设的信息种类统计信息。
作为本发明的另一个可选实施例,在所述获取单元201获取之后,所述装置还包括:
负载信息获取单元,用于获取存储节点的负载信息,所述负载信息包括:存储节点的存储空间和数据块的大小信息。
在所述负载信息获取单元获取之后,所述装置还包括:
调整单元,用于根据所述负载信息获取单元获取的负载信息对重新分布后的数据块进行调整。
系统根据存储节点的负责信息可以对重新分布后的数据块进行调整,如:数据温度为“热”的数据块有150mb,而I/O性能“强”的存储节点的存储空间只有100mb,因此需要根据存储节点的负载信息,将另外的50mb数据块存储到I/O性能为“中”的存储节点。
实施例三
如图3所示为本发明实施例提供的基于数据温度对数据块自动进行分布系统的结构示意图。所述系统可以用于执行图1所示的方法。所述系统可以是网络设备。所述网络设备可以是路由器、交换机、防火墙或者负载均衡器。如图3所示,本实施例提供的系统包括:至少一个处理器301、存储器302、通信接口303和总线。处理器301、存储器302和通信接口303通过总线连接并完成相互间的通信。所述总线可以是工业标准体系结构(Industry StandardArchitecture,简称为ISA)总线、外部设备互连(Peripheral Componet Interconnect简称为PCI)总线或扩展工业标准体系结构(Extended Industry StandardArchitecture,简称为EISA)总线等。所述总线可以分为地址总线、控制总线等。为了便于表示,图3中仅用一条粗线表示,但并不表示图3所示的系统只能有一根总线或一种类型的总线。其中:
存储器302用于存储可执行程序代码,该程序代码包括计算机操作指令。存储器302可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个存盘存储器。
在一个实施例中,处理器301通过读取存储器302中存储的可执行程序代码来运行于所述可执行程序代码对应的程序,以用于:
获取存储节点存储的数据块的被访问信息,所述被访问信息包括:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率。
在本发明实施例中,系统获取存储节点存储的数据块的被访问信息,包括:数据块的修改时间(数据块什么时候被存储到该存储节点的)、数据块的被访问时间(数据块在哪些时间被访问的)、数据块的被访问次数(数据块被总共被访问了多少次)、数据块的被访问频率(数据块在单位时间内被访问的次数)等。
对所述被访问信息进行统计,生成统计数据,所述统计为:对被访问信息中的一种或多种进行统计。
在本发明实施例中,系统在获取到上述被访问信息之后,对被访问的信息进行统计,生成对应的统计数据,所述统计为:对被访问信息的一种进行统计,如:只对数据块的修改时间进行统计;或者对被放文信息的多种进行统计,如:即统计数据块的修改世界、也统计数据块的被访问时间。
根据所述统计数据将存储节点存储的数据块划分为不同的数据温度。
在本发明实施例中,系统根据获取的统计数据,对各个存储节点存储的数据进行数据温度的重新划分,如:存储节点A存储的数据块的被访问次数被统计为“多”,则将存储节点A存储的数据块的数据温度设置为“热”;存储节点B存储的数据块的被访问次数被统计为“中”,则将存储节点B存储的数据块的数据温度设置为“温”;存储节点C存储的数据块的被访问次数被统计为“少”,则将存储节点C存储的数据块的数据温度设置为“冷”。以上只是以“数据块的被访问次数”为例进行说明,并不用以限制,也可以结合“数据块的被访问次数”和“数据块的被访问频率”、“数据块的被访问频率”和“数据块的被访问时间”等方式对数据块的数据温度进行划分。
根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布。
在本发明实施例中,系统根据存储节点的I/O性能和数据温度对所述数据块进行重新分布,即:将数据温度“热”的数据块分布到I/O性能“强”的存储节点、将数据温度“中”的数据块分布到I/O性能“中”的存储节点、将数据温度“冷”的数据块分布到I/O性能“弱”的存储节点。
本发明实施例,系统获取存储节点存储的数据块的被访问信息,根据所述被访问信息对数据块的数据温度进行划分,根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布,使得所有存储节点的性能都能够得到充分发挥,为应用提供了更好的磁盘I/O性能。
作为本发明的一个可选实施例,在所述对所述被访问信息进行统计,生成统计数据的步骤之前,所述方法还包括:
预设需要进行统计的信息。
在本发明实施例中,系统可以从:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率等信息中,预设一种或多种进行统计,在后续的步骤中即可根据预设的信息种类统计信息
作为本发明的另一个可选实施例,在所述获取存储节点存储的数据块的被访问信息之后,所述方法还包括:
获取存储节点的负载信息,所述负载信息包括:存储节点的存储空间和数据块的大小信息。
在本发明实施例中,系统根据存储节点的负责信息可以对重新分布后的数据块进行调整,如:数据温度为“热”的数据块有150mb,而I/O性能“强”的存储节点的存储空间只有100mb,因此需要根据存储节点的负载信息,将另外的50mb数据块存储到I/O性能为“中”的存储节点。
处理器301可能是一个CPU,或者是特定集成电路(Application SpecificIntegrated Circuit,简称为ASIC),或者是被配置成实施本发明实施例的一个或多个集成电路。
需说明的是,上述处理器301除了具有上述功能之外,还可用于执行上述方法实施例中的其他流程,再此不再赘述。
通信接口303主要用于实现本实施例的流量来源,确定设备与其他设备或装置之间的通信。
本领域普通技术人员可以理解为上述实施例所包括的各个单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
本领域普通技术人员还可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以在存储于一计算机可读取存储介质中,所述的存储介质,包括ROM/RAM、磁盘、光盘等。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于数据温度对数据块自动进行分布的方法,其特征在于,所述方法包括:
获取存储节点存储的数据块的被访问信息,所述被访问信息包括:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率;
对所述被访问信息进行统计,生成统计数据,所述统计为:对被访问信息中的一种或多种进行统计;
根据所述统计数据将存储节点存储的数据块划分为不同的数据温度,其中,根据所述数据块的被访问次数,所述数据块的被访问频率,和/或所述数据块的被访问时间对所述数据块的数据温度进行划分;
根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布。
2.如权利要求1所述的方法,其特征在于,在所述对所述被访问信息进行统计,生成统计数据的步骤之前,所述方法还包括:
预设需要进行统计的信息。
3.如权利要求1所述的方法,其特征在于,在所述获取存储节点存储的数据块的被访问信息之后,所述方法还包括:
获取存储节点的负载信息,所述负载信息包括:存储节点的存储空间和数据块的大小信息。
4.如权利要求3所述的方法,其特征在于,在所述根据存储节点的I/O性能和所述数据温度对所述数据块进行重新分布的步骤之后,所述方法还包括:
根据所述负载信息对重新分布后的数据块进行调整。
5.如权利要求4所述的方法,其特征在于,所述根据所述负载信息对重新分布后的数据块进行调整,包括:
当第一存储节点的存储空间无法存储对应的数据块时,将多出的数据块存储到所述第一存储节点的I/O性能相近的第二存储节点。
6.一种基于数据温度对数据块自动进行分布的装置,其特征在于,所述装置包括:
获取单元,用于获取存储节点存储的数据块的被访问信息,所述被访问信息包括:数据块的修改时间、数据块的被访问时间、数据块的被访问次数和数据块的被访问频率;
统计单元,用于对所述获取单元获取的被访问信息进行统计,生成统计数据,所述统计为:对被访问信息中的一种或多种进行统计;
划分单元,用于根据所述统计单元的统计数据将存储节点存储的数据块划分为不同的数据温度,其中,根据所述数据块的被访问次数,所述数据块的被访问频率,和/或所述数据块的被访问时间对所述数据块的数据温度进行划分;
重新分布单元,用于根据存储节点的I/O性能和所述划分单元划分的数据温度对所述数据块进行重新分布。
7.如权利要求6所述的装置,其特征在于,在所述统计单元统计之前,所述装置还包括:
统计信息预设单元,用于预设需要进行统计的信息。
8.如权利要求6所述的装置,其特征在于,在所述获取单元获取之后,所述装置还包括:
负载信息获取单元,用于获取存储节点的负载信息,所述负载信息包括:存储节点的存储空间和数据块的大小信息。
9.如权利要求8所述的装置,其特征在于,在所述负载信息获取单元获取之后,所述装置还包括:
调整单元,用于根据所述负载信息获取单元获取的负载信息对重新分布后的数据块进行调整。
10.如权利要求9所述的装置,其特征在于,所述调整单元的调整,包括:
当第一存储节点的存储空间无法存储对应的数据块时,将多出的数据块存储到所述第一存储节点的I/O性能相近的第二存储节点。
CN201310218930.XA 2013-06-04 2013-06-04 一种基于数据温度对数据块自动进行分布的方法和装置 Active CN103336670B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310218930.XA CN103336670B (zh) 2013-06-04 2013-06-04 一种基于数据温度对数据块自动进行分布的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310218930.XA CN103336670B (zh) 2013-06-04 2013-06-04 一种基于数据温度对数据块自动进行分布的方法和装置

Publications (2)

Publication Number Publication Date
CN103336670A CN103336670A (zh) 2013-10-02
CN103336670B true CN103336670B (zh) 2016-11-23

Family

ID=49244850

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310218930.XA Active CN103336670B (zh) 2013-06-04 2013-06-04 一种基于数据温度对数据块自动进行分布的方法和装置

Country Status (1)

Country Link
CN (1) CN103336670B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103530240B (zh) * 2013-10-25 2016-09-07 华为技术有限公司 数据块缓存方法和装置
CN104239230B (zh) * 2014-08-28 2017-06-09 华为技术有限公司 一种数据块迁移方法及装置
CN104536909B (zh) * 2014-12-09 2018-01-23 华为技术有限公司 一种存储管理方法,存储管理装置及存储设备
CN104516952B (zh) * 2014-12-12 2018-02-13 华为技术有限公司 一种内存分区部署方法与装置
CN107870735B (zh) * 2016-09-28 2021-01-05 华为技术有限公司 数据管理方法、装置和设备
CN111158613B (zh) * 2020-04-07 2020-07-31 上海飞旗网络技术股份有限公司 基于访问热度的数据块存储方法、装置及存储设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1085407A2 (en) * 1999-09-15 2001-03-21 Emc Corporation Maximizing sequential output in a disk array storage device
CN103023995A (zh) * 2012-11-29 2013-04-03 中国电力科学研究院 一种基于Hadoop的分布式云存储自动分级数据管理系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1085407A2 (en) * 1999-09-15 2001-03-21 Emc Corporation Maximizing sequential output in a disk array storage device
CN103023995A (zh) * 2012-11-29 2013-04-03 中国电力科学研究院 一种基于Hadoop的分布式云存储自动分级数据管理系统

Also Published As

Publication number Publication date
CN103336670A (zh) 2013-10-02

Similar Documents

Publication Publication Date Title
CN103336670B (zh) 一种基于数据温度对数据块自动进行分布的方法和装置
CN103593147B (zh) 一种数据读取的方法及装置
CN104508639B (zh) 使用一致性域表的一致性管理
CN104750557B (zh) 一种内存管理方法和内存管理装置
CN107436725A (zh) 一种数据写、读方法、装置及分布式对象存储集群
US9178839B2 (en) Sharing buffer space in link aggregation configurations
CN106446159B (zh) 一种存储文件的方法、第一虚拟机及名称节点
CN105095109B (zh) 缓存访问方法、缓存访问路由器和计算机系统
CN108845877B (zh) 管理内存的方法、装置和系统
CN103559319B (zh) 分布式集群文件系统的缓存同步方法和设备
CN104731635B (zh) 一种虚拟机访问控制方法,及虚拟机访问控制系统
CN105988970B (zh) 共享存储数据的处理器和芯片
CN107368583A (zh) 一种多集群信息查询的方法及系统
CN104811473B (zh) 一种创建虚拟非易失性存储介质的方法、系统及管理系统
CN107291629A (zh) 一种用于访问内存的方法和装置
CN104468640A (zh) 实现云存储空间共享的方法与装置
CN110321331A (zh) 利用多级散列函数来确定存储地址的对象存储系统
CN105095104B (zh) 数据缓存处理方法及装置
CN107347039A (zh) 一种共享缓存空间的管理方法及装置
CN107623732A (zh) 一种基于云平台的数据存储方法、装置、设备及存储介质
CN106406764A (zh) 一种分布式san块存储的高效能数据访问系统及方法
CN104346404B (zh) 一种访问数据的方法、设备及系统
CN108234551A (zh) 一种数据处理方法及装置
CN110069533B (zh) 一种基于区块链的事件订阅方法及装置
CN113609167B (zh) 基于区块链的数据处理方法、装置、设备及可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant