CN107357523B - 一种数据处理方法及电子设备 - Google Patents

一种数据处理方法及电子设备 Download PDF

Info

Publication number
CN107357523B
CN107357523B CN201710500191.1A CN201710500191A CN107357523B CN 107357523 B CN107357523 B CN 107357523B CN 201710500191 A CN201710500191 A CN 201710500191A CN 107357523 B CN107357523 B CN 107357523B
Authority
CN
China
Prior art keywords
storage unit
state
data operation
operation request
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710500191.1A
Other languages
English (en)
Other versions
CN107357523A (zh
Inventor
胡泽志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201710500191.1A priority Critical patent/CN107357523B/zh
Priority to PCT/CN2017/103709 priority patent/WO2019000675A1/zh
Publication of CN107357523A publication Critical patent/CN107357523A/zh
Application granted granted Critical
Publication of CN107357523B publication Critical patent/CN107357523B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0616—Improving the reliability of storage systems in relation to life time, e.g. increasing Mean Time Between Failures [MTBF]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0658—Controller construction arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0679—Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Techniques For Improving Reliability Of Storages (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种数据处理方法和电子设备，包括：获取电子设备内各存储单元的状态；接收来自程序的数据操作请求；根据所述数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元；将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果。

Description

一种数据处理方法及电子设备
技术领域
本发明涉及数据处理技术，尤其涉及一种数据处理方法及电子设备。
背景技术
固态硬盘(Solid State Drives，SSD)作为高速存储介质，其应用越来越广泛。SSD在刚投入使用时，对数据的处理速度很快；使用一段时间之后，由于SSD控制器需要消耗更多的资源用于整理数据，对数据进行坏块处理和写均衡算法处理，导致SSD对数据的处理速度会降低。
现有技术中，通常基于SSD本身的代码对SSD控制器进行优化，但是优化空间有限。
发明内容
为解决现有存在的技术问题，本发明实施例提供了一种数据处理方法及电子设备，能至少解决现有技术中存在的上述问题。
本发明实施例提供一种数据处理方法，包括：
获取电子设备内各存储单元的状态；
接收来自程序的数据操作请求；
根据所述数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元；
将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果。
上述方案中，所述获取电子设备内各存储单元的状态包括：
定时检测各存储单元的状态；
将所述各存储单元的状态存储至所述电子设备的存储区域；
在所述存储区域查询所述各存储单元的状态。
上述方案中，所述根据所述数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元，包括：
确定表征所述各存储单元的状态的多个维度的筛选条件；
根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果；
根据所述排序结果确定用于响应所述数据操作请求的目标存储单元。
上述方案中，所述根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果，包括：
根据所获取到的各存储单元的负荷值、或各存储单元的剩余写入寿命值、或各存储单元对所述数据操作的预计响应时间，对所述各存储单元进行排序，得到排序结果。
上述方案中，所述根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果，包括：
每个维度的筛选条件对应一个加权值，根据筛选条件及各筛选条件对应的加权值计算用于表征各存储单元状态的评分；
相应的，所述根据所述排序结果确定用于响应所述数据操作请求的目标存储单元，包括：
确定评分最高的存储单元为目标存储单元。
本发明实施例还提供一种电子设备，包括：
处理器，用于获取所述电子设备内各存储单元的状态，根据数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元；
收发器，用于接收来自程序的数据操作请求，发送数据操作请求至所述目标存储单元进行处理，并向所述程序返回操作处理结果。
上述方案中，所述处理器，具体用于定时检测各存储单元的状态；
将所述各存储单元的状态存储至所述电子设备的存储区域；
在所述存储区域查询所述各存储单元的状态。
上述方案中，所述处理器，具体用于确定表征所述各存储单元的状态的多个维度的筛选条件；
根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果；
根据所述排序结果确定用于响应所述数据操作请求的目标存储单元。
上述方案中，所述处理器，具体用于根据所获取到的各存储单元的负荷值、或各存储单元的剩余写入寿命值、或各存储单元对所述数据操作的预计响应时间，对所述各存储单元进行排序，得到排序结果。
上述方案中，每个维度的筛选条件对应一个加权值，所述处理器，具体用于根据筛选条件及各筛选条件对应的加权值计算用于表征各存储单元状态的评分；
确定评分最高的存储单元为目标存储单元。
本发明实施例中，电子设备获取自身的各存储单元的状态，并根据接收到的数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元。如此，通过在处理数据操作请求之前，根据各存储单元的状态确定用于响应所述数据操作请求的目标存储单元，不仅避免了计算SSD控制器的资源产生的开销，而且均衡了各存储单元的负荷。
附图说明
图1为本发明实施例一一种数据处理方法的处理流程示意图；
图2为本发明实施例二一种数据处理方法的处理流程示意图；
图3为本发明实施例根据CUP的使用率确定目标存储单元示意图；
图4为本发明实施例三一种数据处理方法的处理流程示意图；
图5为本发明实施例四一种数据处理方法的处理流程示意图；
图6为本发明实施例五一种数据处理方法的处理流程示意图；
图7为本发明实施例六一种电子设备的组成结构示意图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步详细说明。
实施例一
本发明实施例一提供一种数据处理方法，所述数据处理方法的处理流图，如图1所示，包括以下步骤：
步骤S101，获取电子设备内各存储单元的状态；
具体地，电子设备定时检测自身各存储单元的状态，将所述各存储单元的状态存储至所述电子设备的存储区域，在所述存储区域查询所述各存储单元的状态。
这里，检测各存储单元的状态的周期可根据需要灵活设定；存储所述各存储单元的状态的存储区域也可根据电子设备的属性灵活设定；如，为减小SSD读写资源的消耗，可将所述各存储单元的状态存储至SSD读写协议中某个预留字节；或将所述各存储单元的状态存储至预先设定的缓存区域等。
所述电子设备内部包括一个或多个存储单元，在电子设备内部包括多个存储单元时，获取每个存储单元的状态；所述存储单元为SSD、或其他类型的存储介质。
所述存储单元的状态至少包括：存储单元的负荷值、存储单元的剩余写入寿命值、存储单元对数据操作的预计响应时间。
步骤S102，接收来自程序的数据操作请求；
具体地，电子设备接收来自程序的数据操作请求；
这里，所述程序为安装于所述电子设备上的程序；所述数据操作请求可通过用户点击触发所述程序对应的应用或功能发送。
步骤S103，根据所述数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元；
具体地，电子设备确定表征所述各存储单元的状态的多个维度的筛选条件；根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果；根据所述排序结果确定用于响应所述数据操作请求的目标存储单元。
这里，所述筛选条件包括：存储单元的负荷值、存储单元的剩余写入寿命值、存储单元对数据操作的预计响应时间。
其中，存储单元的负荷值包括：存储单元的中央处理器(Central ProcessingUnit，CPU)使用率、存储单元的连续工作时间、存储单元的温度、存储单元的读写状态等。
步骤S104，将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
具体地，电子设备将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
这里，所述操作处理结果是指针对所述程序的数据操作请求正在处理；如，所述数据操作请求为写数据时，相应的所述操作处理结果为正在写数据；所述数据操作请求为读数据时，相应的所述操作处理结果为正在读数据。
实施例二
本发明实施例二提供一种数据处理方法，所述数据处理方法的处理流图，如图2所示，包括以下步骤：
步骤S201，电子设备定时检测自身各存储单元的状态，并存储所述各存储单元的状态；
这里，检测各存储单元的状态的周期可根据需要灵活设定；存储所述各存储单元的状态的存储区域也可根据电子设备的属性灵活设定；如，为减小SSD读写资源的消耗，可将所述各存储单元的状态存储至SSD读写协议中某个预留字节；或将所述各存储单元的状态存储至预先设定的缓存区域等。
所述电子设备内部包括一个或多个存储单元，在电子设备内部包括多个存储单元时，获取每个存储单元的状态；所述存储单元为SSD、或其他类型的存储介质。
所述存储单元的状态包括：存储单元的负荷值、存储单元的剩余写入寿命值、存储单元对数据操作的预计响应时间。
在存储区域预先存储有存储单元的状态时，检测存储单元的状态后，更新所述存储区域内已经存储的该存储单元的状态；在所述存储区域内没有存储该存储单元的状态时，检测存储单元的状态后，在所述存储区域内增加该存储单元的状态。
步骤S202，电子设备接收来自程序的数据操作请求；
这里，所述程序为安装于所述电子设备上的程序；所述数据操作请求可通过用户点击触发所述程序对应的应用或功能发送。
步骤S203，根据所述数据操作请求分析各存储单元的负荷值，确定用于响应所述数据操作请求的目标存储单元；
具体地，电子设备根据所述数据操作请求分析各存储单元的负荷值；用于表征存储单元的负荷值的参数包括：存储单元CPU的使用率、存储单元的连续工作时间、存储单元的温度、存储单元的读写状态等；
因此，在分析各存储单元的负荷值时，可以用上述的一个参数、或结合上述的多个参数来表征存储单元负荷值。
在用存储单元CPU的使用率来表征存储单元的负荷值时，对各存储单元CPU的使用率进行排序，得到排序结果；确定所述排序结果中CPU的使用率最低的存储单元为用于响应所述数据操作请求的目标存储单元。如图3所示，一个应用程序发送数据操作请求时，获取到电子设备的四个SSD的CPU的使用率分别为43％、21％、86％和13％；因此，确定CPU的使用率为13％的SSD为目标存储单元，用于响应应用程序发送的数据操作请求。
在用存储单元的读写状态来表征存储单元的负荷值时，确定处于非读写状态的存储单元为用于响应所述数据操作请求的目标存储单元；在处于非读写状态的存储单元的数量为多个时，可任意选择一个处于非读写状态的存储单元为用于响应所述数据操作请求的目标存储单元；或根据其他维度的参数来确定用于响应所述数据操作请求的目标存储单元。
在用存储单元的连续工作时间来表征存储单元的负荷值时，对各存储单元的连续工作时间进行排序，得到排序结果；确定所述排序结果中连续工作时间最短的存储单元为用于响应所述数据操作请求的目标存储单元。
步骤S204，将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
具体地，电子设备将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
这里，所述操作处理结果是指针对所述程序的数据操作请求正在处理；如，所述数据操作请求为写数据时，相应的所述操作处理结果为正在写数据；所述数据操作请求为读数据时，相应的所述操作处理结果为正在读数据。
步骤S205，目标存储单元响应所述数据操作请求；
具体地，目标存储单元响应所述数据操作请求，对所述数据进行相应的操作，如读数据或写数据等。
实施例三
本发明实施例三提供一种数据处理方法，所述数据处理方法的处理流图，如图4所示，包括以下步骤：
步骤S301，电子设备定时检测自身各存储单元的状态，并存储所述各存储单元的状态；
这里，检测各存储单元的状态的周期可根据需要灵活设定；存储所述各存储单元的状态的存储区域也可根据电子设备的属性灵活设定；如，为减小SSD读写资源的消耗，可将所述各存储单元的状态存储至SSD读写协议中某个预留字节；或将所述各存储单元的状态存储至预先设定的缓存区域等。
所述电子设备内部包括一个或多个存储单元，在电子设备内部包括多个存储单元时，获取每个存储单元的状态；所述存储单元为SSD、或其他类型的存储介质。
所述存储单元的状态包括：存储单元的负荷值、存储单元的剩余写入寿命值、存储单元对数据操作的预计响应时间。
在存储区域预先存储有存储单元的状态时，检测存储单元的状态后，更新所述存储区域内已经存储的该存储单元的状态；在所述存储区域内没有存储该存储单元的状态时，检测存储单元的状态后，在所述存储区域内增加该存储单元的状态。
步骤S302，电子设备接收来自程序的数据操作请求；
这里，所述程序为安装于所述电子设备上的程序；所述数据操作请求可通过用户点击触发所述程序对应的应用或功能发送。
步骤S303，根据所述数据操作请求分析各存储单元的剩余写入寿命值，确定用于响应所述数据操作请求的目标存储单元；
具体地，电子设备根据对所述各存储单元的剩余写入寿命值对所述各存储单元进行排序，得到排序结果；确定所述排序结果中剩余写入寿命值最大的存储单元为用于响应所述数据操作请求的目标存储单元。
步骤S304，将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果。
具体地，电子设备将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
这里，所述操作处理结果是指针对所述程序的数据操作请求正在处理；如，所述数据操作请求为写数据时，相应的所述操作处理结果为正在写数据；所述数据操作请求为读数据时，相应的所述操作处理结果为正在读数据。
步骤S305，目标存储单元响应所述数据操作请求；
具体地，目标存储单元响应所述数据操作请求，对所述数据进行相应的操作，如读数据或写数据等。
实施例四
本发明实施例四提供一种数据处理方法，所述数据处理方法的处理流图，如图5所示，包括以下步骤：
步骤S401，电子设备定时检测自身各存储单元的状态，并存储所述各存储单元的状态；
这里，检测各存储单元的状态的周期可根据需要灵活设定；存储所述各存储单元的状态的存储区域也可根据电子设备的属性灵活设定；如，为减小SSD读写资源的消耗，可将所述各存储单元的状态存储至SSD读写协议中某个预留字节；或将所述各存储单元的状态存储至预先设定的缓存区域等。
所述电子设备内部包括一个或多个存储单元，在电子设备内部包括多个存储单元时，获取每个存储单元的状态；所述存储单元为SSD、或其他类型的存储介质。
所述存储单元的状态包括：存储单元的负荷值、存储单元的剩余写入寿命值、存储单元对数据操作的预计响应时间。
在存储区域预先存储有存储单元的状态时，检测存储单元的状态后，更新所述存储区域内已经存储的该存储单元的状态；在所述存储区域内没有存储该存储单元的状态时，检测存储单元的状态后，在所述存储区域内增加该存储单元的状态。
步骤S402，电子设备接收来自程序的数据操作请求；
这里，所述程序为安装于所述电子设备上的程序；所述数据操作请求可通过用户点击触发所述程序对应的应用或功能发送。
步骤S403，根据所述数据操作请求分析各存储单元对数据操作的预计响应时间，确定用于响应所述数据操作请求的目标存储单元；
具体地，电子设备根据所述数据操作请求确定所述程序对响应所述数据操作请求的容忍延迟时间；并对各存储单元对数据操作的预计响应时间进行排序，得到排序结果；确定所述排序结果中对数据操作的预计响应时间最短的存储单元为用于响应所述数据操作请求的目标存储单元，或在所述排序结果中对数据操作的预计响应时间小于所述容忍延迟时间中任意选择一存储单元为用于响应所述数据操作请求的目标存储单元。
步骤S404，将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果。
具体地，电子设备将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
这里，所述操作处理结果是指针对所述程序的数据操作请求正在处理；如，所述数据操作请求为写数据时，相应的所述操作处理结果为正在写数据；所述数据操作请求为读数据时，相应的所述操作处理结果为正在读数据。
步骤S405，目标存储单元响应所述数据操作请求；
具体地，目标存储单元响应所述数据操作请求，对所述数据进行相应的操作，如读数据或写数据等。
实施例五
本发明实施例五提供一种数据处理方法，所述数据处理方法的处理流图，如图6所示，包括以下步骤：
步骤S501，电子设备定时检测自身各存储单元的状态，并存储所述各存储单元的状态；
这里，检测各存储单元的状态的周期可根据需要灵活设定；存储所述各存储单元的状态的存储区域也可根据电子设备的属性灵活设定；如，为减小SSD读写资源的消耗，可将所述各存储单元的状态存储至SSD读写协议中某个预留字节；或将所述各存储单元的状态存储至预先设定的缓存区域等。
所述电子设备内部包括一个或多个存储单元，在电子设备内部包括多个存储单元时，获取每个存储单元的状态；所述存储单元为SSD、或其他类型的存储介质。
所述存储单元的状态包括：存储单元的负荷值、存储单元的剩余写入寿命值、存储单元对数据操作的预计响应时间。
在存储区域预先存储有存储单元的状态时，检测存储单元的状态后，更新所述存储区域内已经存储的该存储单元的状态；在所述存储区域内没有存储该存储单元的状态时，检测存储单元的状态后，在所述存储区域内增加该存储单元的状态。
步骤S502，电子设备接收来自程序的数据操作请求；
这里，所述程序为安装于所述电子设备上的程序；所述数据操作请求可通过用户点击触发所述程序对应的应用或功能发送。
步骤S503，根据多个维度的筛选条件对各存储单元进行排序，得到排序结果；
在一具体实施方式中，每个维度的筛选条件对应一个加权值，电子设备根据筛选条件及各筛选条件对应的加权值计算用于表征各存储单元状态的评分；确定评分最高的存储单元为目标存储单元。
举例来说，筛选条件为存储单元的负荷值a，对应的加权值为A，筛选条件为存储单元的剩余写入寿命值b，对应的加权值为B，筛选条件为存储单元对数据操作的预计响应时间c，对应的加权值为C；那么，表征存储单元状态的评分S＝a*A+b*B+c*C；确定评分S最高的存储单元为用于响应所述数据操作请求的目标存储单元。
在另一具体实施方式中，可根据任意两个维度的筛选条件确定目标存储单元；具体地，在所述数据操作请求为读操作请求时，首先根据所述数据操作请求确定存储所述读操作对应的数据的存储单元，作为候选存储单元；再根据存储单元的负荷值、或剩余写入寿命值、或对所述数据操作的预计响应时间对所述候选存储单元进行排序，根据排序结果确定用于响应所述数据操作请求的目标存储单元。
在另一具体实施方式中，在所述数据操作请求为写操作请求时，首先确定所述各存储单元的读写状态，选择处于非读写状态的存储单元为候选存储单元；再根据存储单元的负荷值、或剩余写入寿命值、或对所述数据操作的预计响应时间对所述候选存储单元进行排序，根据排序结果确定用于响应所述数据操作请求的目标存储单元。
以上仅为根据两个维度的筛选条件确定目标存储单元的两个实施例，在具体实施方式中，可根据数据操作请求、结合任意两个或多个维度的筛选条件来确定用于响应所述数据操作请求的目标存储单元。
步骤S504，将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果。
具体地，电子设备将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
这里，所述操作处理结果是指针对所述程序的数据操作请求正在处理；如，所述数据操作请求为写数据时，相应的所述操作处理结果为正在写数据；所述数据操作请求为读数据时，相应的所述操作处理结果为正在读数据。
步骤S505，目标存储单元响应所述数据操作请求；
具体地，目标存储单元响应所述数据操作请求，对所述数据进行相应的操作，如读数据或写数据等。
需要说明的是，本发明上述实施例示例性的列出了用于表征各存储单元的状态的多个维度的筛选条件；但是，在实际应中，并不限定于上述筛选条件，任何表征存储单元状态的参数或指标均适用于本发明实施例。
实施例六
为实现上述数据处理方法，本发明实施例六还提供一种电子设备，所述服务器的组成结构示意图，如图7所示，包括处理器11、收发器12和存储单元13；其中，
所述处理器11，用于获取所述电子设备内各存储单元的状态，根据数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元。
其中。所述存储单元的状态至少包括：存储单元的负荷值、存储单元的剩余写入寿命值、存储单元对数据操作的预计响应时间。
所述存储单元的负荷值进一步包括：存储单元的CPU使用率、存储单元的连续工作时间、存储单元的温度、存储单元的读写状态等。
所述收发器12，用于接收来自程序的数据操作请求，发送数据操作请求至所述目标存储单元进行处理，并向所述程序返回操作处理结果。
这里，所述操作处理结果是指针对所述程序的数据操作请求正在处理；如，所述数据操作请求为写数据时，相应的所述操作处理结果为正在写数据；所述数据操作请求为读数据时，相应的所述操作处理结果为正在读数据。
上述方案中，所述处理器11，具体用于定时检测各存储单元的状态；
将所述各存储单元的状态存储至所述电子设备的存储区域；
在所述存储区域查询所述各存储单元的状态。
上述方案中，所述处理器11，具体用于确定表征所述各存储单元的状态的多个维度的筛选条件；
根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果；
根据所述排序结果确定用于响应所述数据操作请求的目标存储单元。
上述方案中，所述处理器11，具体用于根据所获取到的各存储单元的负荷值、或各存储单元的剩余写入寿命值、或各存储单元对所述数据操作的预计响应时间，对所述各存储单元进行排序，得到排序结果。
上述方案中，每个维度的筛选条件对应一个加权值，所述处理器11，具体用于根据筛选条件及各筛选条件对应的加权值计算用于表征各存储单元状态的评分；
确定评分最高的存储单元为目标存储单元。
需要说明的是，本发明实施例中所述电子设备中的处理器11和收发器12执行的功能可由电子设备上的CPU、或微处理器(MPU)、或数字信号处理器(DSP)、或可编程门阵列(FPGA)实现。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储单元中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储单元包括：SSD、移动存储设备、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者，本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储单元中。基于这样的理解，本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储单元中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储单元包括：移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种数据处理方法，其特征在于，包括：
获取电子设备内各存储单元的状态；其中，所述各存储单元的状态，是从SSD读写协议中的一个预留字节中获取的；
接收来自程序的数据操作请求；
根据所述数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元；
将所述数据操作请求发送至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
其中，所述根据所述数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元，包括：
基于所述各存储单元对数据操作的预计响应时间，对所述各存储单元进行排序得到排序结果，根据所述排序结果确定所述目标存储单元。
2.根据权利要求1所述的方法，其特征在于，所述获取电子设备内各存储单元的状态包括：
定时检测各存储单元的状态；
将所述各存储单元的状态存储至所述电子设备的存储区域；
在所述存储区域查询所述各存储单元的状态。
3.根据权利要求1所述的方法，其特征在于，所述根据所述数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元，包括：
确定表征所述各存储单元的状态的多个维度的筛选条件；
根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果；
根据所述排序结果确定用于响应所述数据操作请求的目标存储单元。
4.根据权利要求3所述的方法，其特征在于，所述根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果，包括：
根据所获取到的各存储单元的负荷值、或各存储单元的剩余写入寿命值，对所述各存储单元进行排序，得到排序结果。
5.根据权利要求3所述的方法，其特征在于，所述根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果，包括：
每个维度的筛选条件对应一个加权值，根据筛选条件及各筛选条件对应的加权值计算用于表征各存储单元状态的评分；
相应的，所述根据所述排序结果确定用于响应所述数据操作请求的目标存储单元，包括：
确定评分最高的存储单元为目标存储单元。
6.一种电子设备，其特征在于，包括：
处理器，用于获取所述电子设备内各存储单元的状态，根据数据操作请求分析所获取到的各存储单元的状态，确定用于响应所述数据操作请求的目标存储单元；其中，所述各存储单元的状态，是从SSD读写协议中的一个预留字节缓存空间中获取的；
收发器，用于接收来自程序的数据操作请求，发送数据操作请求至所述目标存储单元进行处理，并向所述程序返回操作处理结果；
其中，所述处理器，用于基于所述各存储单元对数据操作的预计响应时间，对所述各存储单元进行排序得到排序结果，根据所述排序结果确定所述目标存储单元。
7.根据权利要求6所述的电子设备，其特征在于，所述处理器，具体用于定时检测各存储单元的状态；
将所述各存储单元的状态存储至所述电子设备的存储区域；
在所述存储区域查询所述各存储单元的状态。
8.根据权利要求6所述的电子设备，其特征在于，所述处理器，具体用于确定表征所述各存储单元的状态的多个维度的筛选条件；
根据至少一个维度的筛选条件对各存储单元进行排序，得到排序结果；
根据所述排序结果确定用于响应所述数据操作请求的目标存储单元。
9.根据权利要求8所述的电子设备，其特征在于，所述处理器，具体用于根据所获取到的各存储单元的负荷值、或各存储单元的剩余写入寿命值，对所述各存储单元进行排序，得到排序结果。
10.根据权利要求8所述的电子设备，其特征在于，每个维度的筛选条件对应一个加权值，所述处理器，具体用于根据筛选条件及各筛选条件对应的加权值计算用于表征各存储单元状态的评分；
确定评分最高的存储单元为目标存储单元。
CN201710500191.1A 2017-06-27 2017-06-27 一种数据处理方法及电子设备 Active CN107357523B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710500191.1A CN107357523B (zh) 2017-06-27 2017-06-27 一种数据处理方法及电子设备
PCT/CN2017/103709 WO2019000675A1 (zh) 2017-06-27 2017-09-27 一种数据处理方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710500191.1A CN107357523B (zh) 2017-06-27 2017-06-27 一种数据处理方法及电子设备

Publications (2)

Publication Number Publication Date
CN107357523A CN107357523A (zh) 2017-11-17
CN107357523B true CN107357523B (zh) 2021-06-15

Family

ID=60273113

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710500191.1A Active CN107357523B (zh) 2017-06-27 2017-06-27 一种数据处理方法及电子设备

Country Status (2)

Country Link
CN (1) CN107357523B (zh)
WO (1) WO2019000675A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112433674B (zh) * 2020-11-16 2021-07-06 连邦网络科技服务南通有限公司 一种计算机用数据迁移系统及方法
CN117149099B (zh) * 2023-10-31 2024-03-12 江苏华鲲振宇智能科技有限责任公司 一种计算存储分体式服务器系统及控制方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9214045B1 (en) * 2014-08-29 2015-12-15 Freescale Semiconductor, Inc. Flash memory express erase and program
CN106469198A (zh) * 2016-08-31 2017-03-01 华为技术有限公司 键值存储方法、装置及系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6003610B2 (ja) * 2012-12-17 2016-10-05 日本電気株式会社 情報処理装置
WO2015042778A1 (zh) * 2013-09-24 2015-04-02 华为技术有限公司 数据迁移方法、数据迁移装置和存储设备
CN103927134A (zh) * 2014-04-09 2014-07-16 汉柏科技有限公司 硬盘负载均衡方法、操作系统及存储控制设备
US20160306822A1 (en) * 2015-04-17 2016-10-20 Samsung Electronics Co., Ltd. Load balancing of queries in replication enabled ssd storage
CN105159602B (zh) * 2015-08-03 2019-04-09 北京联想核芯科技有限公司 数据处理方法及存储设备
CN105302479A (zh) * 2015-09-29 2016-02-03 联想(北京)有限公司 一种数据管理方法及存储设备
CN105159620B (zh) * 2015-09-29 2018-07-20 华为数字技术（成都）有限公司 存储QoS控制策略的实现方法及装置
CN106802775A (zh) * 2017-01-18 2017-06-06 郑州云海信息技术有限公司 一种数据存储方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9214045B1 (en) * 2014-08-29 2015-12-15 Freescale Semiconductor, Inc. Flash memory express erase and program
CN106469198A (zh) * 2016-08-31 2017-03-01 华为技术有限公司 键值存储方法、装置及系统

Also Published As

Publication number Publication date
WO2019000675A1 (zh) 2019-01-03
CN107357523A (zh) 2017-11-17

Similar Documents

Publication Publication Date Title
CN109597685B (zh) 任务分配方法、装置和服务器
EP3229142B1 (en) Read cache management method and device based on solid state drive
US9665284B2 (en) Partition extension method and apparatus
JP6233413B2 (ja) タスク割り当て判定装置、制御方法、及びプログラム
US10255114B2 (en) Abnormality detection apparatus, control method, and program
US10712945B2 (en) Deduplication processing method, and storage device
US10025504B2 (en) Information processing method, information processing apparatus and non-transitory computer readable medium
CN107357523B (zh) 一种数据处理方法及电子设备
CN111258972B (zh) 闪存文件系统碎片化的评估方法、装置以及电子设备
CN104035823A (zh) 负载均衡方法及装置
US20210271580A1 (en) Ethod and computer storage node of shared storage system for abnormal behavior detection/analysis
CN112363886A (zh) 数据库监控方法、系统、终端及存储介质
CN107193498B (zh) 一种对数据进行去重复处理的方法及装置
CN114490160A (zh) 一种数据倾斜优化因子自动调整方法、装置、设备和介质
CN105471938B (zh) 服务器负载管理方法及装置
US8135924B2 (en) Data storage device driver
CN109144431B (zh) 数据块的缓存方法、装置、设备及存储介质
CN114281256A (zh) 基于分布式存储系统的数据同步方法、装置、设备及介质
US7953705B2 (en) Autonomic retention classes
CN112367384B (zh) 基于Kafka集群的动态限速方法、装置以及计算机设备
CN112015718A (zh) HBase集群平衡方法、装置、电子设备和存储介质
CN112118314A (zh) 负载均衡方法和装置
CN110336748B (zh) 表项下发方法、装置、数据转发设备及可读存储介质
CN115543859A (zh) 多分区ssd的磨损均衡优化方法、装置、设备及介质
CN111221749A (zh) 数据块写入方法、装置、处理器芯片及Cache

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant