CN112269544A - 一种数据处理方法、装置、设备及可读存储介质 - Google Patents

一种数据处理方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN112269544A
CN112269544A CN202011139273.6A CN202011139273A CN112269544A CN 112269544 A CN112269544 A CN 112269544A CN 202011139273 A CN202011139273 A CN 202011139273A CN 112269544 A CN112269544 A CN 112269544A
Authority
CN
China
Prior art keywords
area
data
target
disk
reading
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202011139273.6A
Other languages
English (en)
Inventor
黄臣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202011139273.6A priority Critical patent/CN112269544A/zh
Publication of CN112269544A publication Critical patent/CN112269544A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0625—Power saving in storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0634—Configuration or reconfiguration of storage systems by changing the state or mode of one or more devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Power Sources (AREA)

Abstract

本申请公开了一种数据处理方法、装置、设备及可读存储介质。本申请将读取数据所需的读取时间与不同休眠等级的响应时间进行对比，确定对比结果对应的目标区域；若目标区域为设有休眠等级的区域，则根据目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值；将数据中与目标值相等的第一部分数据存储至active区域，将数据中剩余的第二部分数据存储至目标区域，记录第二部分数据在目标区域中的磁盘标识以及目标区域的区域标识，在接收到该数据的读请求且磁盘标识对应的磁盘处于休眠状态时，根据磁盘标识和区域标识及时唤醒磁盘，实现节约功耗和IO响应效率之间的平衡。本申请提供的一种数据处理装置、设备及可读存储介质，也同样具有上述技术效果。

Description

一种数据处理方法、装置、设备及可读存储介质
技术领域
本申请涉及计算机技术领域，特别涉及一种数据处理方法、装置、设备及可读存储介质。
背景技术
为了达到节约功耗的目的，存储服务器中的磁盘在不活动时，会进入休眠状态。一般地，从休眠状态恢复到active状态需要等待一段时间，若该时间超过上层应用的等待超时时间，会出现IO报错或响应延迟，导致IO响应效率低下。
因此，如何实现节约功耗和IO响应效率之间的平衡，是本领域技术人员需要解决的问题。
发明内容
有鉴于此，本申请的目的在于提供一种数据处理方法、装置、设备及可读存储介质，以实现节约功耗和IO响应效率之间的平衡。其具体方案如下：
第一方面，本申请提供了一种数据处理方法，包括：
接收待存储的目标数据，并确定读取所述目标数据所需要的读取时间；
将所述读取时间与不同休眠等级的响应时间进行对比，获得对比结果，并确定所述对比结果对应的目标区域；所述目标区域为active区域或设有休眠等级的区域，所述设有休眠等级的区域中的磁盘在写满后进入休眠状态；
若所述目标区域为所述设有休眠等级的区域，则根据所述目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值；
将所述目标数据中与所述目标值相等的第一部分数据存储至所述active区域，将所述目标数据中剩余的第二部分数据存储至所述目标区域，并记录所述第二部分数据在所述目标区域中的磁盘标识以及所述目标区域的区域标识，以便在接收到所述目标数据的读请求且所述磁盘标识对应的磁盘处于休眠状态时，根据所述磁盘标识和所述区域标识唤醒所述磁盘。
优选地，所述确定读取所述目标数据所需要的读取时间，包括：
将所述目标数据的数据量大小与所述单盘读特征值的比值，确定为所述读取时间。
优选地，所述设有休眠等级的区域包括：idleB、idleC和standbyZ，所述idleB设置的休眠等级的响应时间<所述idleC设置的休眠等级的响应时间<所述standbyZ设置的休眠等级的响应时间。
优选地，所述确定所述对比结果对应的目标区域，包括：
若所述读取时间大于所述standbyZ设置的休眠等级的响应时间，则所述目标区域为所述standbyZ；
若所述读取时间处于所述standbyZ设置的休眠等级的响应时间和所述idleC设置的休眠等级的响应时间之间，则所述目标区域为所述idleC；
若所述读取时间处于所述idleB设置的休眠等级的响应时间和所述idleC设置的休眠等级的响应时间之间，则所述目标区域为所述idleB；
若所述读取时间小于所述idleB设置的休眠等级的响应时间，则所述目标区域为所述active区域。
优选地，所述根据所述目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值，包括：
将所述目标区域设置的休眠等级的响应时间与所述单盘读特征值的乘积，作为所述目标值。
优选地，还包括：
若所述目标区域为所述active区域，则将所述目标数据存储至所述active区域。
优选地，所述根据所述磁盘标识和所述区域标识唤醒所述磁盘，包括：
从所述active区域中读取所述第一部分数据，在读取所述第一部分数据的同时，根据所述磁盘标识和所述区域标识唤醒所述磁盘，以读取所述磁盘中的所述第二部分数据。
第二方面，本申请提供了一种数据处理装置，包括：
接收模块，用于接收待存储的目标数据，并确定读取所述目标数据所需要的读取时间；
对比模块，用于将所述读取时间与不同休眠等级的响应时间进行对比，获得对比结果，并确定所述对比结果对应的目标区域；所述目标区域为active区域或设有休眠等级的区域，所述设有休眠等级的区域中的磁盘在写满后进入休眠状态；
计算模块，用于若所述目标区域为所述设有休眠等级的区域，则根据所述目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值；
存储模块，用于将所述目标数据中与所述目标值相等的第一部分数据存储至所述active区域，将所述目标数据中剩余的第二部分数据存储至所述目标区域，并记录所述第二部分数据在所述目标区域中的磁盘标识以及所述目标区域的区域标识，以便在接收到所述目标数据的读请求且所述磁盘标识对应的磁盘处于休眠状态时，根据所述磁盘标识和所述区域标识唤醒所述磁盘。
第三方面，本申请提供了一种数据处理设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序，以实现前述公开的数据处理方法。
第四方面，本申请提供了一种可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述公开的数据处理方法。
通过以上方案可知，本申请提供了一种数据处理方法，包括：接收待存储的目标数据，并确定读取所述目标数据所需要的读取时间；将所述读取时间与不同休眠等级的响应时间进行对比，获得对比结果，并确定所述对比结果对应的目标区域；所述目标区域为active区域或设有休眠等级的区域，所述设有休眠等级的区域中的磁盘在写满后进入休眠状态；若所述目标区域为所述设有休眠等级的区域，则根据所述目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值；将所述目标数据中与所述目标值相等的第一部分数据存储至所述active区域，将所述目标数据中剩余的第二部分数据存储至所述目标区域，并记录所述第二部分数据在所述目标区域中的磁盘标识以及所述目标区域的区域标识，以便在接收到所述目标数据的读请求且所述磁盘标识对应的磁盘处于休眠状态时，根据所述磁盘标识和所述区域标识唤醒所述磁盘。
可见，本申请在存储目标数据的过程中，将读取目标数据所需要的读取时间与不同休眠等级的响应时间进行对比，并确定对比结果对应的目标区域；若目标区域为设有休眠等级的区域，则根据目标区域设置的休眠等级的响应时间(即从休眠状态恢复到active状态所需要的时间)和单盘读特征值计算目标值；将目标数据中与目标值相等的第一部分数据存储至active区域，将目标数据中剩余的第二部分数据存储至目标区域，并记录第二部分数据在目标区域中的磁盘标识以及目标区域的区域标识，以便在接收到目标数据的读请求且磁盘标识对应的磁盘处于休眠状态时，根据磁盘标识和区域标识唤醒所述磁盘。其中，目标区域为active区域或设有休眠等级的区域，active区域中的磁盘始终处于active状态，设有休眠等级的区域中的磁盘在写满后进入休眠状态。在需要读取该目标数据且第二部分数据所存储的磁盘处于休眠状态时，可以先从active区域中读取第一部分数据，与此同时，根据磁盘标识和区域标识唤醒第二部分数据所存储的磁盘，这样在第一部分数据读取完成后，第二部分数据所存储的磁盘就恢复到active状态了，故可以及时读取第二部分数据，从而既及时响应了读请求，又使磁盘在不使用时进入休眠状态，实现了节约功耗和IO响应效率之间的平衡。
相应地，本申请提供的一种数据处理装置、设备及可读存储介质，也同样具有上述技术效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请公开的一种数据处理方法流程图；
图2为本申请公开的一种数据存储方法流程图；
图3为本申请公开的一种数据读取方法流程图；
图4为本申请公开的一种数据处理装置示意图；
图5为本申请公开的一种数据处理设备示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
目前，存储服务器中的磁盘在不活动时，会进入休眠状态。一般地，从休眠状态恢复到active状态需要等待一段时间，若该时间超过上层应用的等待超时时间，会出现IO报错或响应延迟，导致IO响应效率低下。为此，本申请提供了一种数据处理方案，能够实现节约功耗和IO响应效率之间的平衡。
参见图1所示，本申请实施例公开了一种数据处理方法，包括：
S101、接收待存储的目标数据，并确定读取目标数据所需要的读取时间。
在一种具体实施方式中，确定读取目标数据所需要的读取时间，包括：将目标数据的数据量大小与单盘读特征值的比值，确定为读取时间。本实施例可以应用于存储服务器，若存储服务器中的所有磁盘都相同，那么单盘读特征值可以为所有磁盘读特征值的平均值。单盘读特征值可以利用FIO工具测试存储服务器中的各个磁盘获得。
S102、将读取时间与不同休眠等级的响应时间进行对比，获得对比结果，并确定对比结果对应的目标区域。
其中，目标区域为active区域或设有休眠等级的区域，设有休眠等级的区域中的磁盘在写满后进入休眠状态。
在一种具体实施方式中，设有休眠等级的区域包括：idleB、idleC和standbyZ，idleB设置的休眠等级的响应时间<idleC设置的休眠等级的响应时间<standbyZ设置的休眠等级的响应时间。可见，idleB设置的是浅度休眠等级，idleC设置的是中度休眠等级，standbyZ设置的是深度休眠等级。若休眠等级有更多，那么设有休眠等级的区域相应增加。idleB设置的休眠等级的节能效果<idleC设置的休眠等级的节能效果<standbyZ设置的休眠等级的节能效果。即：休眠等级的响应时间越长，节能效果越好。
在一种具体实施方式中，确定对比结果对应的目标区域，包括：若读取时间大于standbyZ设置的休眠等级的响应时间，则目标区域为standbyZ；若读取时间处于standbyZ设置的休眠等级的响应时间和idleC设置的休眠等级的响应时间之间，则目标区域为idleC；若读取时间处于idleB设置的休眠等级的响应时间和idleC设置的休眠等级的响应时间之间，则目标区域为idleB；若读取时间小于idleB设置的休眠等级的响应时间，则目标区域为active区域。
S103、若目标区域为设有休眠等级的区域，则根据目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值。
在一种具体实施方式中，根据目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值，包括：将目标区域设置的休眠等级的响应时间与单盘读特征值的乘积，作为目标值。单盘读特征值也可以为active区域中的所有磁盘读特征值的平均值，或者第一部分数据在active区域中所存储的目标磁盘的读特征值。
S104、将目标数据中与目标值相等的第一部分数据存储至active区域，将目标数据中剩余的第二部分数据存储至目标区域，并记录第二部分数据在目标区域中的磁盘标识以及目标区域的区域标识，以便在接收到目标数据的读请求且磁盘标识对应的磁盘处于休眠状态时，根据磁盘标识和区域标识唤醒磁盘。
在一种具体实施方式中，若目标区域为active区域，则将目标数据存储至active区域。active区域中的各个磁盘始终处于active状态。
在一种具体实施方式中，根据磁盘标识和区域标识唤醒磁盘，包括：从active区域中读取第一部分数据，在读取第一部分数据的同时，根据磁盘标识和区域标识查询并唤醒磁盘，以读取磁盘中的第二部分数据。读取磁盘中的第二部分数据之后，若该磁盘没有其他请求访问，则该磁盘再次进入休眠状态。
可见在本实施例中，active区域中的磁盘始终处于active状态，设有休眠等级的区域中的磁盘在写满后进入休眠状态。在需要读取该目标数据且第二部分数据所存储的磁盘处于休眠状态时，可以先从active区域中读取第一部分数据，与此同时，根据磁盘标识和区域标识唤醒第二部分数据所存储的磁盘，这样在第一部分数据读取完成后，第二部分数据所存储的磁盘就恢复到active状态了，故可以及时读取第二部分数据，从而既及时响应了读请求，又使磁盘在不使用时进入休眠状态，实现了节约功耗和IO响应效率之间的平衡。
参见图2所示，本申请实施例公开了一种数据存储实现步骤，包括：
Step1，使用硬盘读写工具，对存储服务器进行全盘性能摸底30min，并选取所有盘的平均读性能值作为单盘读特征值bw，如：200MB/S。
Step2，测试不同休眠等级的磁盘从休眠状态恢复至active状态所需的时间，并选取平均时间记录为t.idle.b(如0.4s)、t.idle.c(如2s)、t.standby.z(如10S)，其中，t.idle.b<t.idle.c<t.standby.z。
Step3，按照均分策略将存储服务器中的磁盘划分至active、idleB、idleC、standbyZ这4个区域，每个区域中的磁盘从N1开始到Nx进行标记，以作为磁盘标识。例如：active区域的磁盘标记为：N1.active……Nx.active；idleB区域的磁盘标记为：N1.idleb……Nx.idleb；idleC区域的磁盘标记为：N1.idlec……Nx.idlec；standbyZ区域的磁盘标记为：N1.standbyz……Nx.standbyz。
其中，idleB区域中的磁盘在写满后进入为idle.b休眠状态，idleC区域中的磁盘在写满后进入为idle.c休眠状态，standbyZ区域中的磁盘在写满后进入为standby.z休眠状态。
Step4，存储服务器接收到前端数据后，确定该数据的大小为size.input(如1.6G)，同时计算读取该数据所需的时间t.read＝size.input/bw，那么1600M/(200M/S)＝8S。
Step5，对比t.read和t.idleb、t.idlec、t.standbyz的大小。
由于8S处于2S与10S之间，因此截取200×2＝400M大小的数据存入active区域，将剩下的1.2G数据存入idelC区域，同时记录数据在idelC区域中的存储位置以及idelC区域的标识。
若t.read大于t.standbyz，则截取bw×t.standbyz大小的数据存入active区域，将剩下的数据存入standbyZ区域，同时，记录key.max。key.max中记录有数据在standbyZ区域中的存储位置以及standbyZ区域的标识。
若t.read在t.idelc和t.standbyz之间，则截取bw×t.idelc大小的数据存入active区域，将剩下的数据存入idelC区域，同时，记录key.avg。key.avg中记录有数据在idelC区域中的存储位置以及idelC区域的标识。
若t.read在t.idlec和t.idleb之间，则截取bw×t.idleb大小的数据存入active区域，将剩下的数据存入idelB区域，同时，记录key.min。key.min中记录有数据在idelB区域中的存储位置以及idelB区域的标识。
若t.read小于t.idleb，则直接将数据存入active区域。
数据存入某区域后，也会记录存入某区域的数据大小、盘标识、起始地址、结束地址等信息，这些信息连同区域的标识都可以添加在数据的LBA地址之前。例如：用LBA地址的前8bit存这些信息。
请参见图3，数据读取时，先确定相应LBA地址，根据LBA地址中的相关信息读取active区域中的数据，与此同时，唤醒即将要读取的处于休眠状态的磁盘，这样在active区域中的数据读取完后，相应磁盘也已经唤醒，因此可以及时读取剩余数据。
可见，本实施例可以节约能耗，同时可以及时响应IO请求，满足各应用的timoeout时间，实现了节约功耗和IO响应效率之间的平衡。
下面对本申请实施例提供的一种数据处理装置进行介绍，下文描述的一种数据处理装置与上文描述的一种数据处理方法可以相互参照。
参见图4所示，本申请实施例公开了一种数据处理装置，包括：
接收模块401，用于接收待存储的目标数据，并确定读取目标数据所需要的读取时间；
对比模块402，用于将读取时间与不同休眠等级的响应时间进行对比，获得对比结果，并确定对比结果对应的目标区域；目标区域为active区域或设有休眠等级的区域，设有休眠等级的区域中的磁盘在写满后进入休眠状态；
计算模块403，用于若目标区域为设有休眠等级的区域，则根据目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值；
存储模块404，用于将目标数据中与目标值相等的第一部分数据存储至active区域，将目标数据中剩余的第二部分数据存储至目标区域，并记录第二部分数据在目标区域中的磁盘标识以及目标区域的区域标识，以便在接收到目标数据的读请求且磁盘标识对应的磁盘处于休眠状态时，根据磁盘标识和区域标识唤醒磁盘。
在一种具体实施方式中，接收模块具体用于：
将目标数据的数据量大小与单盘读特征值的比值，确定为读取时间。
在一种具体实施方式中，设有休眠等级的区域包括：idleB、idleC和standbyZ，idleB设置的休眠等级的响应时间<idleC设置的休眠等级的响应时间<standbyZ设置的休眠等级的响应时间。
在一种具体实施方式中，对比模块具体用于：
若读取时间大于standbyZ设置的休眠等级的响应时间，则目标区域为standbyZ；
若读取时间处于standbyZ设置的休眠等级的响应时间和idleC设置的休眠等级的响应时间之间，则目标区域为idleC；
若读取时间处于idleB设置的休眠等级的响应时间和idleC设置的休眠等级的响应时间之间，则目标区域为idleB；
若读取时间小于idleB设置的休眠等级的响应时间，则目标区域为active区域。
在一种具体实施方式中，计算模块具体用于：
将目标区域设置的休眠等级的响应时间与单盘读特征值的乘积，作为目标值。
在一种具体实施方式中，若目标区域为active区域，则将目标数据存储至active区域。
在一种具体实施方式中，根据磁盘标识和区域标识唤醒磁盘，包括：
从active区域中读取第一部分数据，在读取第一部分数据的同时，根据磁盘标识和区域标识唤醒磁盘，以读取磁盘中的第二部分数据。
其中，关于本实施例中各个模块、单元更加具体的工作过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
可见，本实施例提供了一种数据处理装置，该装置既及时响应了读请求，又使磁盘在不使用时进入休眠状态，实现了节约功耗和IO响应效率之间的平衡。
下面对本申请实施例提供的一种数据处理设备进行介绍，下文描述的一种数据处理设备与上文描述的一种数据处理方法及装置可以相互参照。
参见图5所示，本申请实施例公开了一种数据处理设备，包括：
存储器501，用于保存计算机程序；
处理器502，用于执行所述计算机程序，以实现上述任意实施例公开的方法。
下面对本申请实施例提供的一种可读存储介质进行介绍，下文描述的一种可读存储介质与上文描述的一种数据处理方法、装置及设备可以相互参照。
一种可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述实施例公开的数据处理方法。关于该方法的具体步骤可以参考前述实施例中公开的相应内容，在此不再进行赘述。
本申请涉及的“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法或设备固有的其它步骤或单元。
需要说明的是，在本申请中涉及“第一”、“第二”等的描述仅用于描述目的，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外，各个实施例之间的技术方案可以相互结合，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在，也不在本申请要求的保护范围之内。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的可读存储介质中。
本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种数据处理方法，其特征在于，包括：
接收待存储的目标数据，并确定读取所述目标数据所需要的读取时间；
将所述读取时间与不同休眠等级的响应时间进行对比，获得对比结果，并确定所述对比结果对应的目标区域；所述目标区域为active区域或设有休眠等级的区域，所述设有休眠等级的区域中的磁盘在写满后进入休眠状态；
若所述目标区域为所述设有休眠等级的区域，则根据所述目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值；
将所述目标数据中与所述目标值相等的第一部分数据存储至所述active区域，将所述目标数据中剩余的第二部分数据存储至所述目标区域，并记录所述第二部分数据在所述目标区域中的磁盘标识以及所述目标区域的区域标识，以便在接收到所述目标数据的读请求且所述磁盘标识对应的磁盘处于休眠状态时，根据所述磁盘标识和所述区域标识唤醒所述磁盘。
2.根据权利要求1所述的数据处理方法，其特征在于，所述确定读取所述目标数据所需要的读取时间，包括：
将所述目标数据的数据量大小与所述单盘读特征值的比值，确定为所述读取时间。
3.根据权利要求1所述的数据处理方法，其特征在于，所述设有休眠等级的区域包括：idleB、idleC和standbyZ，所述idleB设置的休眠等级的响应时间<所述idleC设置的休眠等级的响应时间<所述standbyZ设置的休眠等级的响应时间。
4.根据权利要求3所述的数据处理方法，其特征在于，所述确定所述对比结果对应的目标区域，包括：
若所述读取时间大于所述standbyZ设置的休眠等级的响应时间，则所述目标区域为所述standbyZ；
若所述读取时间处于所述standbyZ设置的休眠等级的响应时间和所述idleC设置的休眠等级的响应时间之间，则所述目标区域为所述idleC；
若所述读取时间处于所述idleB设置的休眠等级的响应时间和所述idleC设置的休眠等级的响应时间之间，则所述目标区域为所述idleB；
若所述读取时间小于所述idleB设置的休眠等级的响应时间，则所述目标区域为所述active区域。
5.根据权利要求1所述的数据处理方法，其特征在于，所述根据所述目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值，包括：
将所述目标区域设置的休眠等级的响应时间与所述单盘读特征值的乘积，作为所述目标值。
6.根据权利要求1至5任一项所述的数据处理方法，其特征在于，还包括：
若所述目标区域为所述active区域，则将所述目标数据存储至所述active区域。
7.根据权利要求1至5任一项所述的数据处理方法，其特征在于，所述根据所述磁盘标识和所述区域标识唤醒所述磁盘，包括：
从所述active区域中读取所述第一部分数据，在读取所述第一部分数据的同时，根据所述磁盘标识和所述区域标识唤醒所述磁盘，以读取所述磁盘中的所述第二部分数据。
8.一种数据处理装置，其特征在于，包括：
接收模块，用于接收待存储的目标数据，并确定读取所述目标数据所需要的读取时间；
对比模块，用于将所述读取时间与不同休眠等级的响应时间进行对比，获得对比结果，并确定所述对比结果对应的目标区域；所述目标区域为active区域或设有休眠等级的区域，所述设有休眠等级的区域中的磁盘在写满后进入休眠状态；
计算模块，用于若所述目标区域为所述设有休眠等级的区域，则根据所述目标区域设置的休眠等级的响应时间和单盘读特征值计算目标值；
存储模块，用于将所述目标数据中与所述目标值相等的第一部分数据存储至所述active区域，将所述目标数据中剩余的第二部分数据存储至所述目标区域，并记录所述第二部分数据在所述目标区域中的磁盘标识以及所述目标区域的区域标识，以便在接收到所述目标数据的读请求且所述磁盘标识对应的磁盘处于休眠状态时，根据所述磁盘标识和所述区域标识唤醒所述磁盘。
9.一种数据处理设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序，以实现如权利要求1至7任一项所述的数据处理方法。
10.一种可读存储介质，其特征在于，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的数据处理方法。
CN202011139273.6A 2020-10-22 2020-10-22 一种数据处理方法、装置、设备及可读存储介质 Withdrawn CN112269544A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011139273.6A CN112269544A (zh) 2020-10-22 2020-10-22 一种数据处理方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011139273.6A CN112269544A (zh) 2020-10-22 2020-10-22 一种数据处理方法、装置、设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN112269544A true CN112269544A (zh) 2021-01-26

Family

ID=74341746

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011139273.6A Withdrawn CN112269544A (zh) 2020-10-22 2020-10-22 一种数据处理方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN112269544A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112988083A (zh) * 2021-05-19 2021-06-18 四川省商投信息技术有限责任公司 一种冷数据的存储方法和系统
CN113568570A (zh) * 2021-06-22 2021-10-29 阿里巴巴新加坡控股有限公司 数据处理方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112988083A (zh) * 2021-05-19 2021-06-18 四川省商投信息技术有限责任公司 一种冷数据的存储方法和系统
CN112988083B (zh) * 2021-05-19 2021-08-03 四川省商投信息技术有限责任公司 一种冷数据的存储方法和系统
CN113568570A (zh) * 2021-06-22 2021-10-29 阿里巴巴新加坡控股有限公司 数据处理方法及装置
CN113568570B (zh) * 2021-06-22 2024-04-12 阿里巴巴创新公司 数据处理方法及装置

Similar Documents

Publication Publication Date Title
US6546472B2 (en) Fast suspend to disk
US10031671B2 (en) Method, apparatus, and system for calculating identification threshold to distinguish cold data and hot data
CN101788995B (zh) 一种热点数据识别方法及装置
US10365842B2 (en) System and method for reducing power consumption of memory
US8392736B2 (en) Managing memory power usage
TWI515747B (zh) 用於動態記憶體功率管理之系統及方法
CN112269544A (zh) 一种数据处理方法、装置、设备及可读存储介质
US7421624B2 (en) Data recovery apparatus and method used for flash memory
TW201011524A (en) Method and controller for power management
JP2005538444A (ja) ディスクドライブの電力消費量を管理する方法及び装置
CN102314321B (zh) 存储系统、运用存储系统进行数据访问的方法和装置
US20150161388A1 (en) Memory attack detection
CN103544097B (zh) 嵌入式系统的日志存储方法、系统及日志读取方法和系统
CN101394347A (zh) 一种业务数据管理方法和系统
US20160292035A1 (en) Indicating rebuild state of storage devices
US6704810B1 (en) Method for handling persistent reservation registrations in a storage device
CN117632272A (zh) 存储设备的唤醒方法、装置、终端设备和存储介质
CN108008908B (zh) 一种管控sd卡上数据的方法和装置
CN113075992B (zh) 一种内存上电方法、装置、设备及计算机可读存储介质
CN101441507B (zh) 一种用于硬盘设备的节能方法和节能装置
CN111459261A (zh) 磁盘唤醒方法、装置、电子设备及存储介质
CN109491593B (zh) 一种数据存储管理系统及方法
TW201126327A (en) Power-saving method and system for the same
CN107407953B (zh) 降低内存功耗的方法及计算机设备
CN101600077A (zh) 一种基于流媒体文件管理的数字硬盘录像机系统及其实现方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20210126

WW01 Invention patent application withdrawn after publication