CN109857239A - 存储控制方法及装置 - Google Patents
存储控制方法及装置 Download PDFInfo
- Publication number
- CN109857239A CN109857239A CN201711232303.6A CN201711232303A CN109857239A CN 109857239 A CN109857239 A CN 109857239A CN 201711232303 A CN201711232303 A CN 201711232303A CN 109857239 A CN109857239 A CN 109857239A
- Authority
- CN
- China
- Prior art keywords
- storage
- data
- storage array
- stored
- array
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例提供一种存储控制方法及装置,涉及存储技术领域。方法包括:从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列,作为目标存储阵列;将所述待存储数据存储至所述目标存储阵列;获得所述多个存储阵列中各所述存储阵列存储数据的时长;控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电。该存储控制方法及装置,能够有效提升节能效果。
Description
技术领域
本发明涉及存储控制技术领域,具体而言,涉及一种存储控制方法及装置。
背景技术
现有技术中,在进行数据存储时,大都尽量确保待存储数据离散的分布到所有的存储节点上,并保证每个存储节点能发挥较好的性能规格,经发明人研究发现,采用上述存储方式使得存储系统能耗较大,如何节省存储系统能耗急待研究。
发明内容
有鉴于此,本发明实施例的目的在于提供一种存储控制方法及装置,以改善现有技术中存储系统的节能性能有待提高的问题。
本发明较佳实施例提供了一种存储控制方法,包括:
从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列,作为目标存储阵列;
将所述待存储数据存储至所述目标存储阵列;
获得所述多个存储阵列中各所述存储阵列存储数据的时长;
控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电。
可选地,所述设定值包括第一设定时长和第二设定时长,控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电的步骤包括:
判断所述多个存储阵列中是否存在存储数据的时长大于第一设定时长且小于第二设定时长的第一存储阵列,若存在所述第一存储阵列,则控制所述第一存储阵列所在硬盘休眠;
判断所述多个存储阵列中是否存在存储数据的时长大于第二设定时长的第二存储阵列,若存在所述第二存储阵列,则控制所述第二存储阵列所在硬盘断电。
可选地,所述方法还包括:
接收所述第一存储阵列的读取指令,根据该读取指令逐一唤醒所述第一存储阵列所在硬盘并进行存储阵列重组;
接收所述第二存储阵列的读取指令,根据该读取指令控制所述第二存储阵列所在硬盘逐一上电。
可选地,从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列的步骤,包括:
获得所述待存储数据的传送速度和所述存储阵列支持的写入带宽;
根据所述传送速度和所述写入带宽计算得到所述待存储数据所需涉及的最少的存储阵列。
可选地,将所述待存储数据存储至所述目标存储阵列的步骤,包括:
根据所述待存储数据的传送速度计算得到所述待存储数据中的各内容存储在目标存储阵列中的时间片和对应的存储空间;
将所述待存储数据中的各内容按计算得到的时间片存储在对应的存储空间中。
可选地,所述方法还包括:
在存在需要重新存储的内容时,获得该需要重新存储的内容所携带的时间片信息;
根据获得的所述时间片信息查找出所述需要重新存储的内容所对应的存储空间;
将所述需要重新存储的内容存储在查找出的存储空间中。
可选地,所述待存储数据来自于多个采集设备,所述多个采集设备按字符串命名;将所述待存储数据存储至所述目标存储阵列的步骤,包括:
通过哈希算法在所述目标存储阵列中建立资源池;
按照所述多个采集设备命名的字符串,将所述多个采集设备采集得到的数据均匀分布在所述资源池中。
可选地,所述资源池中有多个逻辑资源分组,将所述多个采集设备采集得到的数据均匀分布在所述资源池中的步骤包括:
将所述多个采集设备采集得到的数据均匀分布在所述资源池的其中一个逻辑资源分组中;
判断所述多个采集设备采集得到的数据是否将所述资源池的其中一个逻辑资源分组中的空间使用完毕,若已经将所述资源池的其中一个逻辑资源分组中的空间使用完毕,则切换至另一个逻辑资源分组,将所述多个采集设备采集得到的数据均匀分布在该逻辑资源分组中。
本发明另一较佳实施例提供了一种存储控制装置,包括:
目标存储阵列获得模块,用于从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列,作为目标存储阵列;
数据存储模块,用于将所述待存储数据存储至所述目标存储阵列;
时长获得模块,用于获得所述多个存储阵列中各所述存储阵列存储数据的时长;
状态控制模块,用于控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电。
本发明另一较佳实施例提供了一种存储管理设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现上述存储控制方法步骤。
本发明又一较佳实施例提供了一种计算机可读存储介质,所述可读存储介质包括计算机程序,所述计算机程序运行时控制所述可读存储介质所在存储管理设备执行上述存储控制方法。
本发明实施例提供的存储控制方法及装置,摒弃了现有技术中将待存储数据离散分布在各存储节点的数据存储方式,巧妙的将待存储数据存储至所需涉及的最少的存储阵列中,并会控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电,该种方式能够有效减小存储系统的能耗,显著提升存储系统的节能性。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本发明较佳实施例提供的一种存储管理设备10的方框示意图。
图2为本发明较佳实施例提供的一种存储控制方法的流程图。
图3为一实施方式中图2所示步骤S21包括的子步骤的示意图。
图4为一实施方式中图2所示步骤S22包括的子步骤的示意图。
图5为一实施方式中图2所示步骤S22包括的子步骤的示意图。
图6为本发明较佳实施例提供的一种存储控制装置20的模块框图。
图标:10-存储管理设备;11-存储器;12-处理器;13-网络模块;20-存储控制装置;21-目标存储阵列获得模块;22-数据存储模块;23-时长获得模块;24-状态控制模块。
具体实施方式
为了节省存储系统能耗,发明人进行了多方调研和验证,经研究发现,若将多个存储阵列强行分成在线(热)存储、近线(温)存储和离线(冷)存储,通过设计专有硬件,如进行包括电源、磁盘接口、软件等方面的改造,如单电源、硬盘组单一选择供电等修改,从而对在线(热)存储、近线(温)存储和离线(冷)存储分别进行针对性控制,该种方式虽然能够在一定程度上节省能耗,但是需要定制电源、硬盘固件,硬盘排列等,实现较为复杂,成本较高。若提供硬盘休眠等功能,对不用的硬盘进行休眠处理,需要用时再唤醒,但该种休眠触发时机一般都是在初始配置时进行,如备用盘或是没有创建阵列的空闲盘等,会进行休眠,其他只要创建阵列或是建立了逻辑资源等的硬盘都不会进入休眠,更不用说断电。但是该种配置了资源就不再休眠的方式区分标准过于粗暴,完全空闲才会进入休眠状态,在大多数场景,如视频监控场景,业务容量基本都是满配,因此,该种方式并不能得到有效节能。
有鉴于此,本发明实施例提供了一种能够在进行数据存储时调用最少的存储阵列,并且减少处于上电状态的硬盘数量,从而提升节能性的存储控制方法。
下面将结合本发明实施例中附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
如图1所示,是本发明较佳实施例提供的存储管理设备10的方框示意图。本发明实施例中的存储管理设备10可以为具有存储控制功能的设备,例如,可以为数据存储服务器。如图1所示,存储管理设备10包括:存储器11、处理器12、网络模块13及存储控制装置20。该存储管理设备10可以对多个存储节点进行管理。
所述存储器11、处理器12以及网络模块13相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。存储器11中存储有存储控制装置20,所述存储控制装置20包括至少一个可以软件或固件(firmware)的形式存储于所述存储器11中的软件功能模块,所述处理器12通过运行存储在存储器11内的软件程序以及模块,如本发明实施例中的存储控制装置20,从而执行各种功能应用以及存储控制,即实现本发明实施例中的存储控制方法。
其中,所述存储器11可以是,但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-OnlyMemory,PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,EEPROM)等。其中,存储器11用于存储程序,所述处理器12在接收到执行指令后,执行所述程序。
所述处理器12可能是一种集成电路芯片,具有数据的处理能力。上述的处理器12可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等。可以实现或者执行本发明实施例中公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
网络模块13用于通过网络建立存储管理设备10与外部通信终端之间的通信连接,实现网络信号及数据的收发操作。上述网络信号可包括无线信号或者有线信号。
可以理解,图1所示的结构仅为示意,存储管理设备10还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。
本发明实施例还提供一种计算机可读存储介质,所述可读存储介质包括计算机程序。所述计算机程序运行时控制所述可读存储介质所在存储管理设备10执行下面的存储控制方法。
请参阅图2,是本发明较佳实施例提供的一种存储控制方法的流程图。所述方法有关的流程所定义的方法步骤应用于存储管理设备10,可以由所述处理器12实现。下面将对图2所示的具体流程进行详细阐述。
步骤S21,从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列,作为目标存储阵列。
请结合参阅图3,本实施例中,可以通过步骤S211和步骤S212两个子步骤获得待存储数据所需涉及的最少的存储阵列。
步骤S211,获得所述待存储数据的传送速度和所述存储阵列支持的写入带宽。
步骤S212,根据所述传送速度和所述写入带宽计算得到所述待存储数据所需涉及的最少的存储阵列。
以存储管理设备10为云直存管理服务器CDM(Cloud Data Management),存储节点为存储虚拟化组件CDV,CDM能够对多个CDV进行管理为例,每个存储节点设备上可以安装多个硬盘,在每个硬盘基础上可以创建多个盘位的存储阵列,在各存储阵列上可以创建逻辑资源。
为避免逻辑资源内管理数据的格式量太大,可以限定资源大小,如4TB,假设一台存储节点设备基本为一个60盘位主机柜再加上1到2个60盘位扩展柜,在该种情况下,一台存储节点设备具有近180个硬盘,若8盘位建1个存储阵列,则一台存储设备存在22个阵列,若留4个全局热备盘,那么一个存储阵列有7个有效硬盘容量,按4TB/盘进行计算,则一个存储阵列的有效容量为28TB*22,616TB可用空间,需要创建154个逻辑资源。
假设本实施例中的待存储数据来自于监控相机,一个2Mbps的相机一天产生的数据量有21GBytes,3个月产生的数据量有近1.8TB,9个月产生的数据量则有近6TB,那么一个存储阵列基本能支持100路相机90天的数据存储。相应地,如果是4Mbps的相机,那么一个存储阵列基本能支持50路相机90天的数据存储。
CDV管理逻辑资源时,可以先根据存储阵列进行存储阵列空间的资源池化,形式可以为{V11,V12,..,V1n},{V21,V22,…,V2n},以此类推。区别于现有技术中为尽可能提高存储性能,会选择在V11到Vnn所有资源池中进行散列,以使存储系统能支持最大化服务性能的思维方式,本实施例中从节能的角度出发,从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列,在性能可用的情况下追求最大化的存储阵列空闲,之后再使用其他存储阵列的空间。以一个8盘位*7200转硬盘组成的存储阵列能支撑50路4Mbps的相机90天的数据存储或者100路2Mbps的相机90天的数据存储为例,在该种情况下存在总码率200Mbps的并发写入,假设存储阵列能支持的写入带宽为M,调度域的存储阵列数可以通过以下公式计算得到:
N=(n*s-1)/(M)+1
其中,n为接入的路数;s为每个相机的码率,如2Mbps,则为2;M为每个存储阵列能支持的写入带宽,可能为一个区间值,以监控场景为例,可以简化为仅考虑当前监控业务中最常见的2~8Mbps的场合,该区间可以对等到总码率,如100路2Mbps的相机最多涉及一个存储阵列,150路2Mbps的相机最多涉及两个存储阵列,以此类推,按照上述公式根据待存储数据的传送速度和存储阵列支持写入的带宽便可计算得到所述待存储数据所需涉及的最少的存储阵列。其中,待存储数据可以来自于一个或者多个采集设备。
步骤S22,将所述待存储数据存储至所述目标存储阵列。
根据实际需求,可以通过多种形式将待存储数据存储至目标存储阵列。
请结合参阅图4,在待存储数据来自于多个采集设备,多个采集设备按字符串命名的情况下,可以通过步骤S221和步骤S222两个子步骤将待存储数据存储至目标存储阵列。
步骤S221,通过哈希算法在所述目标存储阵列中建立资源池。
在采集设备为监控相机,待存储数据来自于多个相机,各相机的名称为字符串模式的情况下,考虑到MD5的hash对于字符串有非常好的碰撞概率和散列均衡性,基本能将按字符串命名的接入相机均匀分布在资源池中,而且由于每次能hash到固定的逻辑资源,也便于读取时能较快速的定位到,因而可以通过MD5hash算法先在涉及的存储阵列(目标存储阵列)中建立资源池,在目标存储阵列的资源池中进行计算。
步骤S222,按照所述多个采集设备命名的字符串,将所述多个采集设备采集得到的数据均匀分布在所述资源池中。
可选地,本实施例中,在资源池为两个以上时,将所述多个采集设备采集得到的数据均匀分布在所述资源池的其中一个逻辑资源分组中,并判断所述多个采集设备采集得到的数据是否将所述资源池的其中一个逻辑资源分组中的空间使用完毕,若已经将所述资源池的其中一个逻辑资源分组中的空间使用完毕,则切换至另一个逻辑资源分组,将所述多个采集设备采集得到的数据均匀分布在该逻辑资源分组中。
假设目标存储阵列中建立有两个资源池,每个资源池中有7个逻辑资源分组,当2Mbps的相机进行数据存储时,一个存储阵列能支持100路*2Mbps的相机所对应的数据,每个逻辑资源分组有14路左右。
当相机在一个资源池中空间使用完毕后,再切换到另一个资源池中进行同样的hash策略,之后以此类推,循环往复,从而实现对待存储数据的存储。
可选地,在待存储数据为相机获得的监控数据的情况下,考虑到监控数据具有严格的时间序列,数据存储量也是按照留存期如3个月来进行,同时,考虑到后续的录像留存分级也是和存储阵列绑定,因而每路相机在对应资源上也可以定义为与时间序列相关,当一路相机切换到一个资源时,可通过时间来管理存储空间。基于此,请结合参阅图5,可以通过步骤S223~步骤S227将待存储数据存储至目标存储阵列。
步骤S223,根据所述待存储数据的传送速度计算得到所述待存储数据中的各内容存储在目标存储阵列中的时间片和对应的存储空间。
通过请求资源上的一个固定存储空间,估算该固定存储空间实际存储的时长,当前待存储数据码率的波动范围基本控制在5%以内的情况下精度可以控制到分钟级。
步骤S224,将所述待存储数据中的各内容按计算得到的时间片存储在对应的存储空间中。
空间占用模式按照时间片预分配,即该存储空间一开始不实际生成录像数据,但在该资源容量信息中已经扣除,启动录像的录入,并统计录像的记录启动时间,按时间片将相应数据存储进对应的存储空间中。
按时间片管理空间可以为录像保存空间和确定资源服务时间,当相机不发生服务时间满或者容量不足的情况,则不会发生写入的切换。
步骤S225,在存在需要重新存储的内容时,获得该需要重新存储的内容所携带的时间片信息。
按照时间片预分配,即使发生了相机异常,码流中断也不会进行切换,当相机发生异常重启或网络异常后再次发起写入请求时,存储系统需要能根据预申请的服务时间区段来返回存储节点内资源,正常录像写入过程中,时间片不到,不会进行存储节点切换,即使相机发生异常时未录像,在相机的异常恢复时间未达到服务时间片的情况下也不会调度进行业务切换,会到服务时间片后再次进行调度切换,使得即使不录像,流失的时间对应的存储空间还是占用在那里的。
步骤S226,根据获得的所述时间片信息查找出所述需要重新存储的内容所对应的存储空间。
步骤S227,将所述需要重新存储的内容存储在查找出的存储空间中。
基于时间片空间化管理,监控数据按时间预留,因此,当相机恢复时,补录请求会携带录像片段的时间信息,通过该时间段可以直接调度到与该相机对应的时间段的存储节点及存储资源,然后通过预留的补录服务能力,如预留10Mbps的补录带宽能力,填充到原先未填充录像的时间片中。由于预留能力较小,因而基本不影响存储节点当前实时录像的能力。进而确保数据存储的可靠性。
为了确保数据存储的可靠性,在存储节点发生异常时,可以进行以下处理。存储节点主要可能存在两方面的异常,一方面是磁盘异常,针对该种异常,可以通过存储节点内的阵列功能来保障数据的可靠存储。另一方面是电源、硬件、人为等故障,从而导致写入过程中存储设备掉电等情况发生,针对该异常可以主动切换写入数据到新的存储节点上,重新发起写入请求,同时更新掉电存储设备上各个数据存储的服务结束时间点为掉电时间点,存储设备重新上电后,如果有新的切换节点请求的数据过来,则可以再次路由到该存储设备上,并新增服务时间片,进而完成数据存储。
步骤S23,获得所述多个存储阵列中各所述存储阵列存储数据的时长。
步骤S24,控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电。
其中,设定值可以灵活设置,例如,设定值可以包括第一设定时长和第二设定时长,控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电的步骤包括:判断所述多个存储阵列中是否存在存储数据的时长大于第一设定时长且小于第二设定时长的第一存储阵列,若存在所述第一存储阵列,则控制所述第一存储阵列所在硬盘休眠。判断所述多个存储阵列中是否存在存储数据的时长大于第二设定时长的第二存储阵列,若存在所述第二存储阵列,则控制所述第二存储阵列所在硬盘断电。
第一设定时长和第二设定时长可以灵活设定,以上述的监控领域为例,监控领域的存储处理是严格按照存储阵列分组进行排序处理,每个存储阵列能容纳100路2Mbps的相机存储13天左右的录像,依据监控使用模式,可以判定15天左右的数据为热数据,理论上调阅的可能性比较大,15天以上到30天左右的数据为温数据,调阅可能性为30%左右,30天以上的数据接近冷数据,调阅的可能性接近0,因此,第一设定时长可以为15天,第二设定时长可以为30天。折算到存储阵列数,可以设定当前及之前的两个存储阵列为热数据,再之前的两到三个存储阵列为温数据,再往前的存储阵列则为冷数据。可以按如下公式进行计算:
M=(15*n*10.5*x)/(7*Cdisk*1024)+1
其中,n为接入的路数;x为每个相机的码率,如2Mbps,则为2;Cdisk为每块磁盘的容量;M为热数据阵列个数,根据该公式可以计算得到100路2Mbps的相机,热数据阵列为2个。
在上述基础上,从节能的角度考虑,本实施例中,针对存储数据的时长小于第一设定时长的热数据阵列,不做处理,维持磁盘的正常工作。针对存储数据的时长大于第一设定时长且小于第二设定时长的温数据阵列,控制对应的存储阵列硬盘进行休眠,针对温数据阵列,可以进行逻辑资源的假映射,仅维持一个内存记录。针对存储数据的时长大于第二设定时长的冷数据阵列,控制对应的存储阵列硬盘直接停止供电,可以维持逻辑资源的假映射。
通过上述设计,在接收到读取第一存储阵列的读取指令时,根据该读取指令逐一唤醒所述第一存储阵列所在硬盘并进行存储阵列重组,例如,可以通过SATA指令直接唤醒硬盘并尝试重组存储阵列。在接收到读取第二存储阵列的读取指令时,根据该读取指令控制所述第二存储阵列所在硬盘逐一上电,例如,可以通过电源控制逻辑模块控制硬盘逐盘上电。
可选地,上电或是唤醒硬盘的逻辑均逐盘进行,可以先将读取指令阻塞住,等逻辑资源与存储阵列重新建立关系后,再下发到存储阵列硬盘。
此外,针对上述监控领域,进行录像检索时,可以不进行精确检索,所有录像均在元数据服务中基于辅助录像巡检记录进行录像结果返回,不再尝试到磁盘中获取进一步的精确录像时间记录。考虑到有检索时紧接着就会触发回放请求,因此,此时会尝试所在存储阵列的预唤醒操作,在检索时就触发唤醒重组。为保证写入数据的连续性,当一个存储阵列写入剩余一定时长,如半天时,可以尝试下一个待写入存储阵列的预唤醒操作,从而能无缝切换写入存储阵列。
为了进一步体现本发明实施例中的存储控制方法的节能性,现进行以下分析说明,对于保存周期超过90天,甚至几年的录像,硬盘数量远大于主机数量,硬盘主机比超过100:1。一块硬盘功耗待机5w、工作状态10w,而主机功耗100w不到,硬盘主机功耗比超过10:1。考虑到主机业务的调度,维持主机不断电,仅仅控制工作在低频模式即可。硬盘的节能措施包括硬盘休眠、硬盘断电两种方法,休眠状态下电机停转,功耗1w不到。按本实施例中的设计,一台存储设备正常工作能耗为100w(主机)+10w*16(盘)+1w*16(盘)=276w,无节能措施情况下,100w+10w*180=1900w,功耗降低了85%。
在上述基础上,如图6所示,本发明实施例提供了一种存储控制装置20,应用于存储管理设备10,该存储控制装置20包括目标存储阵列获得模块21、数据存储模块22、时长获得模块23和状态控制模块24。
其中,目标存储阵列获得模块21用于从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列,作为目标存储阵列。
由于目标存储阵列获得模块21和图2中步骤S21的实现原理类似,因而在此不作更多说明。
数据存储模块22用于将所述待存储数据存储至所述目标存储阵列。
由于数据存储模块22和图2中步骤S22的实现原理类似,因而在此不作更多说明。
时长获得模块23用于获得所述多个存储阵列中各所述存储阵列存储数据的时长。
由于时长获得模块23和图2中步骤S23的实现原理类似,因而在此不作更多说明。
状态控制模块24用于控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电。
由于状态控制模块24和图2中步骤S24的实现原理类似,因而在此不作更多说明。
在上述基础上,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质包括计算机程序,所述计算机程序运行时控制所述可读存储介质所在存储管理设备执行上述存储控制方法。
本发明实施例中的存储控制方法及装置,将待存储数据存储至所需涉及的最少的存储阵列中,从而最小化硬盘利用率。通过对存储阵列进行合理分级,分为热数据阵列、温数据阵列和冷数据阵列,针对不同的数据存储阵列使用不同的磁盘节能措施,结合硬盘唤醒流程,在实现有效降低整体功耗的同时,兼顾了存储业务流程的体验优化。基于监控领域的数据特点,设计了存储空间时间序列化管理和存储节点及资源调度方法,满足监控应用的各种使用场景。
在本发明实施例所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置和方法实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,存储管理设备10,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本发明的可选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种存储控制方法,其特征在于,包括:
从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列,作为目标存储阵列;
将所述待存储数据存储至所述目标存储阵列;
获得所述多个存储阵列中各所述存储阵列存储数据的时长;
控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电。
2.根据权利要求1所述的存储控制方法,其特征在于,所述设定值包括第一设定时长和第二设定时长,控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电的步骤包括:
判断所述多个存储阵列中是否存在存储数据的时长大于第一设定时长且小于第二设定时长的第一存储阵列,若存在所述第一存储阵列,则控制所述第一存储阵列所在硬盘休眠;
判断所述多个存储阵列中是否存在存储数据的时长大于第二设定时长的第二存储阵列,若存在所述第二存储阵列,则控制所述第二存储阵列所在硬盘断电。
3.根据权利要求2所述的存储控制方法,其特征在于,所述方法还包括:
接收所述第一存储阵列的读取指令,根据该读取指令逐一唤醒所述第一存储阵列所在硬盘并进行存储阵列重组;
接收所述第二存储阵列的读取指令,根据该读取指令控制所述第二存储阵列所在硬盘逐一上电。
4.根据权利要求1所述的存储控制方法,其特征在于,从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列的步骤,包括:
获得所述待存储数据的传送速度和所述存储阵列支持的写入带宽;
根据所述传送速度和所述写入带宽计算得到所述待存储数据所需涉及的最少的存储阵列。
5.根据权利要求4所述的数据存储存储控制方法,其特征在于,将所述待存储数据存储至所述目标存储阵列的步骤,包括:
根据所述待存储数据的传送速度计算得到所述待存储数据中的各内容存储在目标存储阵列中的时间片和对应的存储空间;
将所述待存储数据中的各内容按计算得到的时间片存储在对应的存储空间中。
6.根据权利要求5所述的存储控制方法,其特征在于,所述方法还包括:
在存在需要重新存储的内容时,获得该需要重新存储的内容所携带的时间片信息;
根据获得的所述时间片信息查找出所述需要重新存储的内容所对应的存储空间;
将所述需要重新存储的内容存储在查找出的存储空间中。
7.根据权利要求1所述的存储控制方法,其特征在于,所述待存储数据来自于多个采集设备,所述多个采集设备按字符串命名;将所述待存储数据存储至所述目标存储阵列的步骤,包括:
通过哈希算法在所述目标存储阵列中建立资源池;
按照所述多个采集设备命名的字符串,将所述多个采集设备采集得到的数据均匀分布在所述资源池中。
8.根据权利要求7所述的存储控制方法,其特征在于,所述资源池中有多个逻辑资源分组,将所述多个采集设备采集得到的数据均匀分布在所述资源池中的步骤包括:
将所述多个采集设备采集得到的数据均匀分布在所述资源池的其中一个逻辑资源分组中;
判断所述多个采集设备采集得到的数据是否将所述资源池的其中一个逻辑资源分组中的空间使用完毕,若已经将所述资源池的其中一个逻辑资源分组中的空间使用完毕,则切换至另一个逻辑资源分组,将所述多个采集设备采集得到的数据均匀分布在该逻辑资源分组中。
9.一种存储控制装置,其特征在于,包括:
目标存储阵列获得模块,用于从多个存储阵列中获得待存储数据所需涉及的最少的存储阵列,作为目标存储阵列;
数据存储模块,用于将所述待存储数据存储至所述目标存储阵列;
时长获得模块,用于获得所述多个存储阵列中各所述存储阵列存储数据的时长;
状态控制模块,用于控制存储数据的时长达到设定值的存储阵列所在硬盘休眠或者断电。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括计算机程序,所述计算机程序运行时控制所述可读存储介质所在存储管理设备执行权利要求1~8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711232303.6A CN109857239B (zh) | 2017-11-29 | 2017-11-29 | 存储控制方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711232303.6A CN109857239B (zh) | 2017-11-29 | 2017-11-29 | 存储控制方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109857239A true CN109857239A (zh) | 2019-06-07 |
CN109857239B CN109857239B (zh) | 2022-04-08 |
Family
ID=66887698
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711232303.6A Active CN109857239B (zh) | 2017-11-29 | 2017-11-29 | 存储控制方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109857239B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111459261A (zh) * | 2020-04-03 | 2020-07-28 | 北京云宽志业网络技术有限公司 | 磁盘唤醒方法、装置、电子设备及存储介质 |
CN111831662A (zh) * | 2020-07-24 | 2020-10-27 | 深圳市网通兴技术发展有限公司 | 一种医疗数据信息处理方法及系统 |
CN112198818A (zh) * | 2019-07-08 | 2021-01-08 | 浙江宇视科技有限公司 | 步进式驱动结构的控制方法、装置、设备及存储介质 |
CN113296689A (zh) * | 2020-07-27 | 2021-08-24 | 阿里巴巴集团控股有限公司 | 存储空间估算方法、装置、电子设备及可读存储介质 |
CN115098023A (zh) * | 2022-06-22 | 2022-09-23 | 浙江威固信息技术有限责任公司 | 一种阵列式存储器及存储器单元控制方法 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5508968A (en) * | 1994-08-12 | 1996-04-16 | International Business Machines Corporation | Dynamic random access memory persistent page implemented as processor register sets |
CN101192093A (zh) * | 2006-11-20 | 2008-06-04 | 泽玮科技股份有限公司 | 外接式硬盘的省电方法 |
CN101262580A (zh) * | 2007-08-31 | 2008-09-10 | 深圳市同洲电子股份有限公司 | 一种数字电视接收装置及监控其硬盘休眠的方法和系统 |
US20090265567A1 (en) * | 2008-04-17 | 2009-10-22 | International Business Machines Corporation | Method, apparatus and system for reducing power consumption involving data storage devices |
CN101673191A (zh) * | 2009-09-28 | 2010-03-17 | 成都市华为赛门铁克科技有限公司 | 数据写入方法、装置及数据存储系统 |
CN203013261U (zh) * | 2013-01-28 | 2013-06-19 | 深圳市浦邦电子有限公司 | 一种智能型移动硬盘 |
CN103577300A (zh) * | 2013-11-22 | 2014-02-12 | 浪潮(北京)电子信息产业有限公司 | 一种云平台的硬盘保护方法和系统 |
CN103744614A (zh) * | 2013-12-17 | 2014-04-23 | 记忆科技(深圳)有限公司 | 固态硬盘访问的方法及其固态硬盘 |
CN104123100A (zh) * | 2013-04-25 | 2014-10-29 | 国际商业机器公司 | 控制存储设备阵列中的数据存储 |
CN104199621A (zh) * | 2014-08-28 | 2014-12-10 | 北京莱金信息技术有限公司 | 硬盘管理系统 |
CN105912279A (zh) * | 2016-05-19 | 2016-08-31 | 河南中天亿科电子科技有限公司 | 固态存储回收系统及固态存储回收方法 |
-
2017
- 2017-11-29 CN CN201711232303.6A patent/CN109857239B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5508968A (en) * | 1994-08-12 | 1996-04-16 | International Business Machines Corporation | Dynamic random access memory persistent page implemented as processor register sets |
CN101192093A (zh) * | 2006-11-20 | 2008-06-04 | 泽玮科技股份有限公司 | 外接式硬盘的省电方法 |
CN101262580A (zh) * | 2007-08-31 | 2008-09-10 | 深圳市同洲电子股份有限公司 | 一种数字电视接收装置及监控其硬盘休眠的方法和系统 |
US20090265567A1 (en) * | 2008-04-17 | 2009-10-22 | International Business Machines Corporation | Method, apparatus and system for reducing power consumption involving data storage devices |
CN101673191A (zh) * | 2009-09-28 | 2010-03-17 | 成都市华为赛门铁克科技有限公司 | 数据写入方法、装置及数据存储系统 |
CN203013261U (zh) * | 2013-01-28 | 2013-06-19 | 深圳市浦邦电子有限公司 | 一种智能型移动硬盘 |
CN104123100A (zh) * | 2013-04-25 | 2014-10-29 | 国际商业机器公司 | 控制存储设备阵列中的数据存储 |
CN103577300A (zh) * | 2013-11-22 | 2014-02-12 | 浪潮(北京)电子信息产业有限公司 | 一种云平台的硬盘保护方法和系统 |
CN103744614A (zh) * | 2013-12-17 | 2014-04-23 | 记忆科技(深圳)有限公司 | 固态硬盘访问的方法及其固态硬盘 |
CN104199621A (zh) * | 2014-08-28 | 2014-12-10 | 北京莱金信息技术有限公司 | 硬盘管理系统 |
CN105912279A (zh) * | 2016-05-19 | 2016-08-31 | 河南中天亿科电子科技有限公司 | 固态存储回收系统及固态存储回收方法 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112198818A (zh) * | 2019-07-08 | 2021-01-08 | 浙江宇视科技有限公司 | 步进式驱动结构的控制方法、装置、设备及存储介质 |
CN111459261A (zh) * | 2020-04-03 | 2020-07-28 | 北京云宽志业网络技术有限公司 | 磁盘唤醒方法、装置、电子设备及存储介质 |
CN111831662A (zh) * | 2020-07-24 | 2020-10-27 | 深圳市网通兴技术发展有限公司 | 一种医疗数据信息处理方法及系统 |
CN111831662B (zh) * | 2020-07-24 | 2021-01-12 | 深圳市网通兴技术发展有限公司 | 一种医疗数据信息处理方法及系统 |
CN113296689A (zh) * | 2020-07-27 | 2021-08-24 | 阿里巴巴集团控股有限公司 | 存储空间估算方法、装置、电子设备及可读存储介质 |
CN115098023A (zh) * | 2022-06-22 | 2022-09-23 | 浙江威固信息技术有限责任公司 | 一种阵列式存储器及存储器单元控制方法 |
CN115098023B (zh) * | 2022-06-22 | 2023-08-15 | 浙江威固信息技术有限责任公司 | 一种阵列式存储器及存储器单元控制方法 |
Also Published As
Publication number | Publication date |
---|---|
CN109857239B (zh) | 2022-04-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109857239A (zh) | 存储控制方法及装置 | |
CN1321362C (zh) | 包括器件使用评估和功率状态控制的功率管理方法和系统 | |
US10429921B2 (en) | Datacenter power management optimizations | |
US7197652B2 (en) | Method and system for energy management in a simultaneous multi-threaded (SMT) processing system including per-thread device usage monitoring | |
CN1742249B (zh) | 多处理器计算系统及其计算组件内的电源管理方法 | |
US20110283128A1 (en) | System and Method for Information Handling System Storage Device Power Consumption Management | |
KR20130002046A (ko) | 멀티 코어를 포함하는 저장 장치의 전력 관리 방법 | |
CN101344812B (zh) | 一种基于嵌入式系统的磁盘动态电源管理方法 | |
CN103838352A (zh) | 用于具有集成基带的计算机系统的低功率状态 | |
CN104700886A (zh) | 具有电源状态传感器的存储器电路 | |
Xu et al. | Resource pre-allocation algorithms for low-energy task scheduling of cloud computing | |
US11994932B2 (en) | Platform ambient data management schemes for tiered architectures | |
CN103593324A (zh) | 一种具有自学习功能的快速启动低功耗计算机片上系统 | |
CN111625080A (zh) | 一种服务器节能方法、装置及电子设备和存储介质 | |
CN107341091A (zh) | 分布式存储系统功耗管理方法及装置 | |
CN107209712A (zh) | 存储系统、存储设备及硬盘调度方法 | |
CN103927203A (zh) | 一种计算机系统及控制方法 | |
CN101414212A (zh) | 预约工作执行的方法 | |
CN102301307B (zh) | 用于控制最优时钟和电压切换的分布式表格驱动电源模式计算 | |
CN102681650B (zh) | 一种电源控制节能方法及其对应的存储系统 | |
CN108255431B (zh) | 一种统一管理的、基于策略的低功耗归档分析系统 | |
CN106201912A (zh) | 一种内存访问方法与计算机系统 | |
US20210208803A1 (en) | Systems and Methods of Power Management | |
CN104067237A (zh) | 存储系统设备管理 | |
CN112379768B (zh) | 一种应用于嵌入式云存储系统的降功耗方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |