CN102426552B - 存储系统服务质量控制方法、装置和系统 - Google Patents

存储系统服务质量控制方法、装置和系统 Download PDF

Info

Publication number
CN102426552B
CN102426552B CN201110337131.5A CN201110337131A CN102426552B CN 102426552 B CN102426552 B CN 102426552B CN 201110337131 A CN201110337131 A CN 201110337131A CN 102426552 B CN102426552 B CN 102426552B
Authority
CN
China
Prior art keywords
memory device
data object
address
service quality
memory address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110337131.5A
Other languages
English (en)
Other versions
CN102426552A (zh
Inventor
张冬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Huawei Technology Co Ltd
Original Assignee
Huawei Symantec Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Symantec Technologies Co Ltd filed Critical Huawei Symantec Technologies Co Ltd
Priority to CN201110337131.5A priority Critical patent/CN102426552B/zh
Publication of CN102426552A publication Critical patent/CN102426552A/zh
Priority to HUE12839208A priority patent/HUE038213T2/hu
Priority to PCT/CN2012/079539 priority patent/WO2013063965A1/zh
Priority to EP12839208.1A priority patent/EP2618261B1/en
Priority to US13/904,776 priority patent/US9594518B2/en
Application granted granted Critical
Publication of CN102426552B publication Critical patent/CN102426552B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0619—Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G06F3/0649—Lifecycle management
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种存储系统服务质量控制方法、装置和系统，其中方法包括：获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址，包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制。本发明解决了Qos控制方式存在的资源浪费及服务质量较低的问题，节约了存储系统的系统资源，并提高了存储系统的服务质量，更加能准确满足用户需求。

Description

存储系统服务质量控制方法、装置和系统
技术领域
本发明涉及存储技术，尤其涉及一种存储系统服务质量控制方法、装置和系统隔。
背景技术
主机上的数据通常在存储系统中存储，当需要访问主机上的某个数据对象时，例如某个应用程序所对应的数据地址或者文件时，主机将访问存储系统，获取存储系统中该对象所对应的数据。其中，存储系统在处理主机的访问请求时，将为本次访问分配一定的系统资源，该存储系统的系统资源例如包括内存、CPU等。存储系统中的控制模块可以通过调整各对象访问所占用的系统资源，使得各对象在访问时具有不同的服务质量，例如具有不同的带宽、时延等，这种通过调整所占用的系统资源进而调整访问服务性能的过程称为服务质量(Quality of Service，简称：Qos)控制。
现有技术中，存储系统的Qos控制一般采用逻辑单元号(logic unitnumber，简称：LUN)粒度级别的Qos控制方式。具体的，存储系统中包括多个LUN，所述LUN是存储系统的虚拟存储单元，数据存储在LUN对应的地址范围中，通过访问所述地址可以获取该地址中存储的数据。存储系统中的控制模块可以以LUN为单位对整个LUN进行QoS控制，例如，主机上的文件A存储在LUN2上，则可以对该整个LUN2给以高级别的QoS，以使得对于文件A的访问质量较高。
上述现有技术的Qos控制所存在的技术缺陷是，如上面所述的，存储系统是对整个LUN2的所有地址的I/O访问都给以高级别的QoS，但是，主机只对LUN2上的某一部分地址(文件A对应的地址)中的数据进行访问，则针对整个LUN的所有地址进行QoS控制其实对存储系统的系统资源是一种浪费；并且，系统资源是有限的，如果对某一LUN分配的资源较多，则必然对其他LUN分配的资源减少，可能影响其他LUN上数据的访问质量。即，现有的Qos控制方式存在着资源浪费以及整体服务质量较低的问题。
发明内容
本发明提供一种存储系统服务质量控制方法、装置和系统，以节约存储系统的系统资源，并提高存储系统的服务质量。
本发明提供一种存储系统服务质量控制方法，包括：
获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；
将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制。
本发明提供一种主机，包括：
地址识别单元，用于获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；
地址发送单元，用于将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制。
本发明提供一种存储系统服务质量控制系统，包括主机、存储设备；
所述主机，用于获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，将所述存储地址发送至存储设备；所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；
所述存储设备，用于对所述存储地址的访问进行服务质量控制。
本发明提供的存储系统服务质量控制方法、装置和系统，通过获取数据对象在存储设备中对应的存储地址，可以使得存储设备仅对该存储地址的访问进行Qos控制，而不需要如现有技术那样只能整个LUN进行控制，解决了Qos控制方式存在的资源浪费及服务质量较低的问题，节约了存储系统的系统资源，并提高了存储系统的服务质量，更加能准确满足用户需求。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明存储设备服务质量控制方法实施例所应用的系统结构图；
图2为本发明存储设备服务质量控制方法一实施例的流程示意图；
图3为本发明存储设备服务质量控制方法另一实施例的流程示意图；
图4为本发明存储设备服务质量控制方法另一实施例的流程示意图；
图5为本发明主机实施例的结构示意图；
图6为本发明存储设备实施例的结构示意图；
图7为本发明存储系统服务质量控制系统实施例的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供的存储系统服务质量控制方法、装置和系统，是用于SAN存储系统的；为使得以下对本发明实施例的存储设备服务质量控制方法说明更加清楚，首先对本发明所应用的系统做简单介绍。图1为本发明存储设备服务质量控制方法实施例所应用的系统结构图，如图1所示，通过主机和存储设备之间的通信实现对数据的访问，该存储设备例如为磁盘阵列。其中，主机操作系统中包含有文件系统，该文件系统用于对主机中的文件进行组织管理，这些文件所对应的数据实际是存储在存储设备中的，文件系统的作用是统一管理文件和目录，及其在存储设备中的存储地址映射关系；例如，主机操作系统下某应用程序想要访问文件A，则文件系统可以根据用户的访问请求查询到文件A在存储设备的存储地址，再向存储设备发送I/O请求，请求中携带该地址，去获取文件A的数据。在存储设备中，通常包括多个LUN，主机中的应用程序、文件等的数据存储在各个LUN中。图1中的分发器是用于将主机发送的I/O请求分配给对应的LUN去处理。
在此基础上，下面对本发明实施例的技术方案进行说明。
实施例一
图2为本发明存储设备服务质量控制方法一实施例的流程示意图，本实施例的存储设备服务质量控制方法可以是主机所执行。如图2所示，该方法可以包括：
201、主机获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址；
其中，所述的预设的数据对象可以是在主机访问存储设备之前，用户在主机侧配置的，也可以是用户在存储设备侧配置后，由存储设备发送至主机的。所述的数据对象指的是例如某个应用程序所访问的任何地址区域、或者某个文件/目录等，可以根据用户的需求具体设置；或者，用户也可以不指定具体的应用程序或文件，而只是设置为热点数据对象(例如热点文件)即可，由主机去分析得到哪个是热点数据对象，该热点数据对象指的是访问频率比较高的对象，这种情况下，主机可以预先设置一个访问频率阈值(例如为访问次数/天)，例如若某个文件访问较多，达到该阈值，则可以确定该文件为热点文件。
其中，文件/目录数据对象在存储设备中对应的存储地址例如可以从主机的文件系统获取，文件系统中通常保存有该主机上的所有文件等数据对象的组织目录，以及该数据对象在存储设备中对应的存储地址。例如，文件A存储在存储设备的LUN2中的地址空间a～b中；则主机可以查询该文件系统的记录就可以得到用户所选择的数据对象的存储地址。而应用程序所访问的任意地址，则可以使用单独的监控程序来持续监控对应的应用程序进程所发起的针对底层的任意IO访问的地址来获得，这些IO的目标可能是文件系统下的某个或者某些文件或目录，也可以是裸设备地址。
202、主机将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制。
由于SAN存储系统所能感知的最小对象为LUN，而且存储系统无法感知到LUN内的文件系统组织，所以无法感知例如单个文件在LUN上对应的地址段；则如果要对该文件做Qos控制，本发明实施例通过主机端识别数据对象的地址信息后通知给存储系统，以使得存储系统感知到对应的地址段。
其中，在主机将201中获取的数据对象的存储地址发送至存储设备后，存储设备可以仅针对该存储地址进行Qos控制即可。
例如，用户选择的数据对象是文件A，文件A的数据是存储在LUN2中的，该LUN2中存放有多个文件，文件A的数据只占用了LUN2的一部分地址空间。主机获取到该文件A对应的存储地址为LUN2中的地址空间a～b，则存储设备可以仅针对该地址空间a～b进行Qos控制，即只需要向地址空间a～b分配特定的存储系统的系统资源，而不需要如现有技术那样对整个LUN2中的所有地址都进行Qos控制，从而节约了存储系统的系统资源，存储系统就可以将其余系统资源分配给其他LUN，提高其他LUN上数据访问的服务质量。
本实施例的存储设备服务质量控制方法，通过获取数据对象在存储设备中对应的存储地址，可以使得存储设备仅对该存储地址的访问进行Qos控制，而不需要如现有技术那样只能整个LUN进行控制，解决了Qos控制方式存在的资源浪费及服务质量较低的问题，节约了存储系统的系统资源，并提高了存储系统的服务质量。
实施例二
图3为本发明存储设备服务质量控制方法另一实施例的流程示意图，本实施例的存储设备服务质量控制方法可以是存储设备所执行。如图3所示，该方法可以包括：
301、存储设备接收主机发送的预设的数据对象对应的存储地址；
其中，主机获取数据对象对应的存储地址的过程可以参见图2所示的实施例所述，不再赘述。例如，用户选择的数据对象是文件A，文件A的数据是存储在LUN2中的，该LUN2中存放有多个文件，文件A的数据只占用了LUN2的一部分地址空间。主机获取到该文件A对应的存储地址为LUN2中的地址空间a～b，则将该存储地址发送至存储设备。
302、存储设备对所述存储地址的访问进行服务质量控制。
其中，存储设备在301中接收到所述的存储地址后，将仅针对该存储地址进行Qos控制，即只需要向地址空间a～b分配存储系统的系统资源，而不需要如现有技术那样对整个LUN2中的所有地址都进行Qos控制，从而节约了存储系统的系统资源，存储系统就可以将其余系统资源分配给其他LUN，提高其他LUN上数据访问的服务质量。
本实施例的存储设备服务质量控制方法，通过接收数据对象在存储设备中对应的存储地址，并针对该存储地址的访问进行Qos控制，而不需要如现有技术那样只能整个LUN进行控制，解决了Qos控制方式存在的资源浪费及服务质量较低的问题，节约了存储系统的系统资源，并提高了存储系统的服务质量。
实施例三
图4为本发明存储设备服务质量控制方法另一实施例的流程示意图，本实施例是对主机和存储设备通信共同完成对数据访问的Qos控制的流程进行详细描述。如图4所示，该方法可以包括：
401、主机获取预设的数据对象；
其中，主机中具体执行本实施例方法的可以是第一控制模块(参见图1所示)，该第一控制模块是相对于现有技术在主机中增加的一个功能模块，通过增加该模块使得主机能够执行本实施例所述的方法。用户可以根据自身需求，手动的或者根据预先设定的策略自动的启动第一控制模块执行本实施例的Qos控制方法。
本步骤中，主机可以接收用户的配置参数，该配置参数包括用户所选择的需要进行Qos控制的数据对象。该数据对象包括但不限于：某个LUN、主机中的某个应用程序、某个文件/目录等，例如，用户需要对主机中的文件A的访问进行性能调节，则可以指定该文件A为需要进行Qos控制的数据对象。
此外，用户也不可以不具体指定应用程序或者文件，而是直接选择热点数据对象(例如“热点文件”)。例如，在实际使用中，可能用户对多个文件都有使用，但是其中只有一部分文件是使用更为频繁的，但是用户暂时无法确定哪个文件是最频繁的，则此时用户可以设置为需要做Qos控制的数据对象为“热点文件”即可，后续的步骤中可以由主机自身去分析哪个文件是热点文件。提高对热点数据对象访问的服务质量Qos，是提高存储设备整体服务质量的重要因素。
进一步的，在文件/目录，应用，热点数据这三个对象之外，主机端也可以选择对“文件系统元数据”进行Qos控制，该文件系统元数据中记录了文件系统中的某个文件存放在存储设备的某段地址上，该元数据也是存放在存储设备端，主机端通常将元数据对应的地址通知存储设备，由存储设备将元数据从该地址读出后给文件系统，文件系统再通过该元数据获取具体文件的对应的存储地址，通知存储设备对文件地址执行读写。本实施例中，主机端可以解析文件系统中元数据所对应的底层地址，并在将元数据对应的地址通知存储设备的同时，告知存储设备该地址对应的数据是元数据，并且指示存储设备对元数据的读写进行最高级别的Qos控制例如设置高优先级；相应的，上述对元数据读写的Qos控制可以在主机端由用户选择设定，即对元数据的地址做精细化Qos控制。通过对文件系统元数据的访问进行Qos控制，可以大大提高系统查询地址等处理效率。
进一步的，本步骤中，主机在获取预设的数据对象之外，还可以获取用户预设配置的与所选择的数据对象对应的QoS控制策略。所述的QoS控制策略例如可以包括：对象的优先级，各个对象之间可以有不同的优先级，对高优先级对象的访问在存储设备侧可以进行优先处理；对象被触发QoS的时间段，可以配置多个时间段，每个时间段执行不同的QoS策略；对象在各个QoS时间段内的性能值，该性能例如包括每秒进行读写(I/O)操作的次数(Input/Output Operations Per Second，简称：IOPS)、带宽、时延等；也可以设定在特定的性能需求(例如，IOPS、或者带宽)阀值达到时触发QoS。
可选的，本实施例中所述的用户配置数据对象、QoS控制策略也可以在存储设备侧进行，存储设备侧在接收用户配置的上述信息后，可以将该信息发送至主机。例如，存储设备可以通知主机用户所选择的数据对象。
402、主机获取所述数据对象在存储设备中对应的存储地址；
在401中主机获取用户所选择的数据对象后，本步骤将识别该数据对象在存储设备中对应的存储地址，以使得后续存储设备可以针对该地址进行精细化的QoS控制。
例如，若预设的数据对象为应用程序、或者文件，则主机将监控指定的应用程序所访问的任何底层地址段并做统计和分类规整从而获得可用的对应应用程序所访问的底层地址段，或者查询文件系统以获取所述预设的数据对象在存储设备中对应的存储地址。例如，主机通过查询该文件系统可以得到，文件A存储在存储设备的LUN2中的地址空间a～b中。
例如，若预设的策略为“监控热点文件”，则主机需要首先分析哪个文件是热点文件，再去获取该热点文件对应的存储地址。具体的，主机可以预先设置一个访问频率阈值(例如为访问次数/天)，并监控文件系统中的多个文件的访问情况，获取访问频率达到预设值的文件作为热点文件。然后，主机再查询文件系统得到该热点文件所对应的在存储设备中的存储地址。
与现有技术相比，现有技术中用户在配置存储设备的QoS控制策略时，是以LUN为控制最小单元的，用户只能知道其所想要进行QoS控制的数据对象例如某个文件是存储在哪个LUN上的，而无法得知该文件在LUN上的具体的存储地址，所以只能针对整个LUN进行QoS控制；而本实施例中，通过在主机中增设第一控制模块，使得主机可以根据用户所选择的数据对象，获取得到该对象在存储设备的具体的存储地址，或者获取到热点数据对应的热点存储地址，从而为后续仅针对该存储地址进行QoS控制得到基础，有利于存储设备系统资源的节约和有效利用。
进一步的，在实际的使用过程中，数据对象的存储属性有可能发生变化，该存储属性包括数据对象所包括的数据数量、数据位置等；例如，应用程序所访问的底层数据地址区域可能发生变化(可以称为数据位置的变化)，或者对应文件的大小(可以称为数据数量)发生变化。上述的数据对象变化必然会导致其在存储设备中的存储地址发生变更，则此时，主机需要获取变化后的存储地址并通知存储设备，以便存储设备及时更改所控制的地址，更加准确的对数据对象进行QoS控制。
具体的，主机可以监控例如应用程序在每次访问时所访问的文件列表、裸设备地址区域或者文件大小是否发生变化、是否进行了修改等。在应用程序或者文件变化时，其变化情况通常也会被文件系统所记录和保存；例如，文件A在10点5分被修改，大小由原来的1M增加到目前的1G，存储地址由原来的LUN2中的地址空间a～b扩展到目前的地址空间a～c等，这些文件系统都会保存。主机可以监控这些数据对象的变化，并在对象发生变化时及时获取最新的存储地址并通知(但不一定是实时、同步的通知)存储设备。同理，对于热点文件的监控也是如此，例如，原来的热点文件是文件A，但是最近一段时间文件B的访问频率超过了文件A，则文件B可以作为最新的热点文件，主机通知存储设备需要控制的最新控制地址即文件B的存储地址。其中，为减小对存储设备的性能影响，保证存储设备的可用性，在监控数据对象变化方面，主机一般不将这些变化实时的通告给外部存储系统，以避免增加存储设备负担；可以使用定期监测的方式。
进一步的，若401中主机在获取预设的数据对象之外，还获取了预设的与数据对象对应的QoS控制策略，则主机在获取上述数据对象的存储地址之后，还需要根据所述存储地址以及所述QoS控制策略，得到QoS控制指令；若401中主机仅仅获取了预设的数据对象，QoS控制策略是在存储设备侧配置，则根据存储地址以及QoS控制策略得到QoS控制指令的过程是在存储设备侧执行。下面以主机侧执行上述QoS控制指令的获取过程为例说明。
具体的，例如，用户选择的数据对象为文件A，预设的QoS控制策略包括：“文件A的优先级为高”、“在10点～15点执行第一QoS策略，在16点～18点执行第二QoS策略”、“第一QoS策略中的IOPS为30，第二QoS策略中的IOPS为4000”；则主机根据上述对象及控制策略，查看目前的时间是14点，得知应该执行第一QoS策略，则主机可以得到如下的QoS控制指令“文件A的优先级为高，执行第一QoS策略，IOPS为30”。以上只是举例说明，具体实施中QoS控制策略和指令的内容和生成方式可以根据实际需要进行变更。
403、主机将数据对象的存储地址发送至存储设备；
其中，主机可以通过带内或带外方式发送到存储设备；如果402中主机侧生成了QoS控制指令，则一并将存储地址和QoS控制指令均发送至存储设备，以使得所述存储设备根据所述服务质量控制指令，对所述存储地址的访问进行服务质量控制。例如，主机发送“LUN2中的地址空间a～b，优先级为高，IOPS为30”。
404、存储设备根据接收到的存储地址，对该地址进行QoS控制。
其中，存储设备中具体执行本实施例方法的可以是第二控制模块(参见图1所示)，该第二控制模块可以是对存储设备侧原有的控制模块改进后的功能模块，例如为磁盘阵列的阵列控制器。
存储设备在接收到主机发送的存储地址后，将对该存储地址的访问进行QoS控制，即，当存储设备再收到针对该存储地址的I/O请求时，将为该I/O的处理分配对应上述QoS控制的系统资源，调整例如CPU、I/O优先级、高速缓冲存储器(CACHE)资源、队列深度、队列数量、并发大小等参数，具体的调整方法可以采用本领域常用的方法，在此不做限制。所述的QoS控制例如可以是根据存储设备接收的主机发送的服务质量控制指令所进行。
此外，存储系统一般还监控对象访问性能的情况，以对资源的资源方向提供依据。例如，存储设备所接收到的存储地址以及QoS控制指令为“LUN2中的地址空间a～b，优先级为高，IOPS为3000”，在根据该指令对所述存储地址进行QoS控制的过程中，监控到该地址对应的访问目前的IOPS为2300，即对象访问性能还尚未达到QoS控制指令中所设定的目标，则存储设备将继续调整为该地址对应访问所分配的系统资源，例如增加其CPU的占用比例，直至达到预设性能目标IOPS为3000次。但是为这个对象所分配的资源应当有个阀值，而不是无限分配。
本实施例的存储设备服务质量控制方法，通过获取数据对象在存储设备中对应的存储地址，可以使得存储设备仅对该存储地址的访问进行Qos控制，而不需要如现有技术那样只能整个LUN进行控制，解决了Qos控制方式存在的资源浪费及服务质量较低的问题，节约了存储系统的系统资源，并提高了存储系统的服务质量，更加能准确满足用户需求。
实施例四
图5为本发明主机实施例的结构示意图，该主机可以执行本发明任意实施例的存储设备服务质量控制方法，本实施例只是对该主机的结构做简单描述，其具体的工作原理可以结合参见本发明方法实施例所述。
如图5所示，该主机可以包括：地址识别单元51、地址发送单元52。其中，地址识别单元51，用于获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；地址发送单元52，用于将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制。
进一步的，该主机还可以包括对象分析单元53，用于监控所述文件系统中的多个数据对象的访问，并获取访问频率达到预设值的数据对象作为热点数据对象；相应的，地址识别单元51，具体用于获取所述热点数据对象在存储设备中对应的存储地址。
进一步的，地址识别单元51，还用于在所述数据对象的存储属性发生变化时，获取所述数据对象在存储设备中对应的变化后的存储地址，并发送给所述存储设备；所述存储属性包括所述数据对象所包括的数据数量、或者数据位置。
进一步的，该主机还可以包括：策略配置单元54、指令生成单元55。其中，策略配置单元54，用于获取预设的与数据对象对应的服务质量控制策略；指令生成单元55，用于根据所述存储地址以及所述服务质量控制策略，得到服务质量控制指令，并将所述服务质量控制指令发送至存储设备，以使得所述存储设备根据所述服务质量控制指令，对所述存储地址的访问进行服务质量控制。
本实施例的主机，通过设置地址识别单元和地址发送单元等，获取数据对象在存储设备中对应的存储地址，可以使得存储设备仅对该存储地址的访问进行Qos控制，而不需要如现有技术那样只能整个LUN进行控制，解决了Qos控制方式存在的资源浪费及服务质量较低的问题，节约了存储系统的系统资源，并提高了存储系统的服务质量，更加能准确满足用户需求。
实施例五
图6为本发明存储设备实施例的结构示意图，该存储设备可以执行本发明任意实施例的存储设备服务质量控制方法，本实施例只是对该存储设备的结构做简单描述，其具体的工作原理可以结合参见本发明方法实施例所述。
如图6所示，该存储设备可以包括：地址接收单元61、服务控制单元62。其中，地址接收单元61，用于接收主机发送的预设的数据对象对应的存储地址；服务控制单元62，用于对所述存储地址的访问进行服务质量控制。
进一步的，该存储设备还包括指令接收单元63，用于接收主机发送的服务质量控制指令，所述服务质量控制指令是所述主机根据所述存储地址以及预设的服务质量控制策略得到；相应的，服务控制单元62，具体用于根据所述服务质量控制指令，对所述存储地址的访问进行服务质量控制。
本实施例的存储设备，通过设置地址接收单元和服务控制单元等，接收数据对象在存储设备中对应的存储地址，可以使得存储设备仅对该存储地址的访问进行Qos控制，而不需要如现有技术那样只能整个LUN进行控制，解决了Qos控制方式存在的资源浪费及服务质量较低的问题，节约了存储系统的系统资源，并提高了存储系统的服务质量，更加能准确满足用户需求。
实施例六
图7为本发明存储系统服务质量控制系统实施例的结构示意图，该控制系统可以执行本发明任意实施例的存储设备服务质量控制方法，本实施例只是对该系统的结构做简单描述，其具体的工作原理可以结合参见本发明方法实施例所述。
如图7所示，该存储系统服务质量控制系统可以包括主机71、存储设备72；其中，主机71，用于获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，将所述存储地址发送至存储设备；所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；存储设备72，用于对所述存储地址的访问进行服务质量控制。
进一步的，所述主机71，还用于向所述存储设备发送与所述数据对象对应的服务质量控制指令，所述服务质量控制指令是所述主机根据所述存储地址以及预设的与所述数据对象对应的服务质量控制策略得到；相应的，所述存储设备72，还用于根据所述服务质量控制指令，对所述存储地址的访问进行服务质量控制。
本实施例的存储系统服务质量控制系统，通过主机获取数据对象在存储设备中对应的存储地址，并且存储设备仅对该存储地址的访问进行Qos控制，而不需要如现有技术那样只能整个LUN进行控制，解决了Qos控制方式存在的资源浪费及服务质量较低的问题，节约了存储系统的系统资源，并提高了存储系统的服务质量，更加能准确满足用户需求。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (11)

1.一种存储设备服务质量控制方法，其特征在于，包括：
主机获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；
将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制。
2.根据权利要求1所述的存储设备服务质量控制方法，其特征在于，所述数据对象还包括热点数据对象，所述获取所述数据对象在存储设备中对应的存储地址之前，还包括：
监控文件系统中的多个数据对象的访问，并将访问频率达到预设值的数据对象作为热点数据对象；相应的，
所述获取所述数据对象在存储设备中对应的存储地址，具体为：获取所述热点数据对象在存储设备中对应的存储地址。
3.根据权利要求1所述的存储设备服务质量控制方法，其特征在于，还包括：
在所述数据对象的存储属性发生变化时，获取所述数据对象在存储设备中对应的变化后的存储地址，并发送给所述存储设备；所述存储属性包括所述数据对象所包括的数据数量、或者数据位置。
4.根据权利要求1所述的存储设备服务质量控制方法，其特征在于，还包括：
获取预设的与所述数据对象对应的服务质量控制策略；所述将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制包括：
将所述存储地址发送至存储设备，并且根据所述存储地址以及所述服务质量控制策略，得到服务质量控制指令，并将所述服务质量控制指令发送至存储设备，以使得所述存储设备根据所述服务质量控制指令，对所述存储地址的访问进行服务质量控制。
5.根据权利要求1所述的存储设备服务质量控制方法，其特征在于，所述数据对象还包括文件系统的元数据；
所述获取数据对象在存储设备中对应的存储地址，具体为：获取所述文件系统的元数据在存储设备中对应的存储地址；
所述将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制，具体为：将所述元数据对应的存储地址发送至存储设备，以使得所述存储设备对所述元数据对应的存储地址的访问进行服务质量控制。
6.一种主机，其特征在于，包括：
地址识别单元，用于获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；
地址发送单元，用于将所述存储地址发送至存储设备，以使得所述存储设备对所述存储地址的访问进行服务质量控制。
7.根据权利要求6所述的主机，其特征在于，所述数据对象还包括热点数据对象，所述主机还包括：
对象分析单元，用于监控文件系统中的多个数据对象的访问，并将访问频率达到预设值的数据对象作为热点数据对象；相应的，
所述地址识别单元，具体用于获取所述热点数据对象在存储设备中对应的存储地址。
8.根据权利要求6所述的主机，其特征在于，
所述地址识别单元，还用于在所述数据对象的存储属性发生变化时，获取所述数据对象在存储设备中对应的变化后的存储地址，并发送给所述存储设备；所述存储属性包括所述数据对象所包括的数据数量、或者数据位置。
9.根据权利要求6所述的主机，其特征在于，还包括：
策略配置单元，用于获取预设的与数据对象对应的服务质量控制策略；
指令生成单元，用于根据所述存储地址以及所述服务质量控制策略，得到服务质量控制指令，并将所述服务质量控制指令发送至存储设备，以使得所述存储设备根据所述服务质量控制指令，对所述存储地址的访问进行服务质量控制。
10.一种存储系统服务质量控制系统，其特征在于，包括主机、存储设备；
所述主机，用于获取预设的数据对象，并根据预设的数据对象，获取所述数据对象在存储设备中对应的存储地址，将所述存储地址发送至存储设备；所述数据对象包括应用程序或者文件；所述获取所述数据对象在存储设备中对应的存储地址包括：通过查询文件系统，获取所述文件系统中存储的所述数据对象在存储设备中对应的存储地址；
所述存储设备，用于对所述存储地址的访问进行服务质量控制。
11.根据权利要求10所述的存储系统服务质量控制系统，其特征在于，
所述主机，还用于向所述存储设备发送与所述数据对象对应的服务质量控制指令，所述服务质量控制指令是所述主机根据所述存储地址以及预设的与所述数据对象对应的服务质量控制策略得到；相应的，
所述存储设备，还用于根据所述服务质量控制指令，对所述存储地址的访问进行服务质量控制。
CN201110337131.5A 2011-10-31 2011-10-31 存储系统服务质量控制方法、装置和系统 Active CN102426552B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201110337131.5A CN102426552B (zh) 2011-10-31 2011-10-31 存储系统服务质量控制方法、装置和系统
HUE12839208A HUE038213T2 (hu) 2011-10-31 2012-08-02 QoS vezérlési eljárás és rendszer egy tárolórendszerhez
PCT/CN2012/079539 WO2013063965A1 (zh) 2011-10-31 2012-08-02 存储系统服务质量控制方法、装置和系统
EP12839208.1A EP2618261B1 (en) 2011-10-31 2012-08-02 Qos control method and system for storage system
US13/904,776 US9594518B2 (en) 2011-10-31 2013-05-29 Method, apparatus and system for controlling quality of service of storage system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110337131.5A CN102426552B (zh) 2011-10-31 2011-10-31 存储系统服务质量控制方法、装置和系统

Publications (2)

Publication Number Publication Date
CN102426552A CN102426552A (zh) 2012-04-25
CN102426552B true CN102426552B (zh) 2014-06-04

Family

ID=45960540

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110337131.5A Active CN102426552B (zh) 2011-10-31 2011-10-31 存储系统服务质量控制方法、装置和系统

Country Status (5)

Country Link
US (1) US9594518B2 (zh)
EP (1) EP2618261B1 (zh)
CN (1) CN102426552B (zh)
HU (1) HUE038213T2 (zh)
WO (1) WO2013063965A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102426552B (zh) * 2011-10-31 2014-06-04 华为数字技术（成都）有限公司 存储系统服务质量控制方法、装置和系统
US9092327B2 (en) * 2012-12-10 2015-07-28 Qualcomm Incorporated System and method for allocating memory to dissimilar memory devices using quality of service
WO2014101197A1 (zh) * 2012-12-31 2014-07-03 华为技术有限公司 一种存储资源调度方法及终端
US9400792B1 (en) * 2013-06-27 2016-07-26 Emc Corporation File system inline fine grained tiering
CN103677829B (zh) * 2013-12-13 2016-08-17 北京同有飞骥科技股份有限公司 对象操作访问控制的方法
KR102257737B1 (ko) 2014-08-12 2021-05-28 삼성전자 주식회사 전자장치의 처리량 제어장치 및 방법
US10509662B1 (en) * 2014-11-25 2019-12-17 Scale Computing Virtual devices in a reliable distributed computing system
US9489137B2 (en) * 2015-02-05 2016-11-08 Formation Data Systems, Inc. Dynamic storage tiering based on performance SLAs
CN105183375B (zh) * 2015-08-31 2019-04-23 成都华为技术有限公司 一种热点数据的服务质量的控制方法和装置
CN105242878B (zh) * 2015-09-30 2018-10-19 华为数字技术（成都）有限公司 一种QoS控制的方法及装置
CN105677240B (zh) * 2015-12-30 2019-04-23 上海联影医疗科技有限公司 数据删除方法及系统
US10592171B2 (en) * 2016-03-16 2020-03-17 Samsung Electronics Co., Ltd. Multi-stream SSD QoS management
CN108494588A (zh) * 2018-03-12 2018-09-04 深圳市瑞驰信息技术有限公司 一种集群块设备动态QoS配置的系统及方法
US10496571B1 (en) 2019-02-12 2019-12-03 International Business Machines Corporation Quality of service guarantee in a distributed storage network
US11321257B2 (en) * 2019-12-31 2022-05-03 Micron Technology, Inc. Quality of service control of logical devices for a memory sub-system
US11316917B2 (en) 2020-03-04 2022-04-26 Samsung Electronics Co., Ltd. Methods and apparatus for peer-to-peer data channels for storage devices

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1766885A (zh) * 2004-10-30 2006-05-03 惠普开发有限公司 提供受管理数据的系统及方法
CN1952941A (zh) * 2005-10-21 2007-04-25 中国科学院计算技术研究所 一种用于共享存储的资源分配方法和分配系统
CN101819543A (zh) * 2010-02-01 2010-09-01 成都市华为赛门铁克科技有限公司 快照数据处理方法和系统以及存储设备

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7225211B1 (en) * 2003-12-31 2007-05-29 Veritas Operating Corporation Multi-class storage mechanism
US7441096B2 (en) * 2004-07-07 2008-10-21 Hitachi, Ltd. Hierarchical storage management system
US20060112155A1 (en) * 2004-11-24 2006-05-25 Agami Systems, Inc. System and method for managing quality of service for a storage system
US20070083482A1 (en) * 2005-10-08 2007-04-12 Unmesh Rathi Multiple quality of service file system
US8010738B1 (en) * 2008-06-27 2011-08-30 Emc Corporation Techniques for obtaining a specified lifetime for a data storage device
CN101527736A (zh) * 2009-04-09 2009-09-09 中兴通讯股份有限公司 分布式文件系统中业务内容处理、更新方法与装置
US8230192B2 (en) 2010-02-05 2012-07-24 Lsi Corporation System and method for QoS-based storage tiering and migration technique
US9021229B2 (en) * 2010-04-14 2015-04-28 International Business Machines Corporation Optimizing a file system for different types of applications in a compute cluster using dynamic block size granularity
CN102426552B (zh) * 2011-10-31 2014-06-04 华为数字技术（成都）有限公司 存储系统服务质量控制方法、装置和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1766885A (zh) * 2004-10-30 2006-05-03 惠普开发有限公司 提供受管理数据的系统及方法
CN1952941A (zh) * 2005-10-21 2007-04-25 中国科学院计算技术研究所 一种用于共享存储的资源分配方法和分配系统
CN101819543A (zh) * 2010-02-01 2010-09-01 成都市华为赛门铁克科技有限公司 快照数据处理方法和系统以及存储设备

Also Published As

Publication number Publication date
EP2618261A4 (en) 2014-08-13
WO2013063965A1 (zh) 2013-05-10
HUE038213T2 (hu) 2018-10-29
US9594518B2 (en) 2017-03-14
US20130268738A1 (en) 2013-10-10
EP2618261B1 (en) 2017-12-13
CN102426552A (zh) 2012-04-25
EP2618261A1 (en) 2013-07-24

Similar Documents

Publication Publication Date Title
CN102426552B (zh) 存储系统服务质量控制方法、装置和系统
US12073125B2 (en) Multi-stream SSD QOS management
US11899580B2 (en) Cache space management method and apparatus
US9354989B1 (en) Region based admission/eviction control in hybrid aggregates
US9405682B2 (en) Storage device access using unprivileged software code
US9037828B2 (en) Transferring storage resources between snapshot storage pools and volume storage pools in a data storage system
US11675540B2 (en) In-line data flow for computational storage
US9182912B2 (en) Method to allow storage cache acceleration when the slow tier is on independent controller
US20110238737A1 (en) Decentralized cloud storage
JP2019508765A (ja) 記憶システムおよびソリッドステートディスク
US8886909B1 (en) Methods, systems, and computer readable medium for allocating portions of physical storage in a storage array based on current or anticipated utilization of storage array resources
US8793334B1 (en) Network-attached storage (NAS) bandwidth manager
CN102075581B (zh) 一种面向分布式文件系统的数据传输方法及装置
US7590816B2 (en) Computer system, management computer and storage system, and storage area allocation amount controlling method
WO2023184991A1 (zh) 一种流量管控方法、装置、设备及可读存储介质
EP4057150A1 (en) Systems, methods, and devices for data storage with specified data transfer rate
CN113377278A (zh) 固态硬盘、垃圾回收及控制方法、设备、系统及存储介质
CN107704213B (zh) 一种存储阵列的自动化服务质量管理方法及装置
JP2020046752A (ja) 記憶装置及び情報処理システム
CN109408412B (zh) 内存预取控制方法、装置及设备
US10254973B2 (en) Data management system and method for processing distributed data
US20050235005A1 (en) Computer system configuring file system on virtual storage device, virtual storage management apparatus, method and signal-bearing medium thereof
US7660964B2 (en) Windowing external block translations
CN117742793A (zh) 数据缓存指令的指令合并电路、方法及芯片
US20170269864A1 (en) Storage Array Operation Method and Apparatus

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: 611731 Chengdu high tech Zone, Sichuan, West Park, Qingshui River

Applicant after: HUAWEI DIGITAL TECHNOLOGIES (CHENG DU) Co.,Ltd.

Address before: 611731 Chengdu high tech Zone, Sichuan, West Park, Qingshui River

Applicant before: CHENGDU HUAWEI SYMANTEC TECHNOLOGIES Co.,Ltd.

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: CHENGDU HUAWEI SYMANTEC TECHNOLOGIES CO., LTD. TO: HUAWEI DIGITAL TECHNOLOGY (CHENGDU) CO., LTD.

C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20221012

Address after: No. 1899 Xiyuan Avenue, high tech Zone (West District), Chengdu, Sichuan 610041

Patentee after: Chengdu Huawei Technologies Co.,Ltd.

Address before: 611731 Qingshui River District, Chengdu hi tech Zone, Sichuan, China

Patentee before: HUAWEI DIGITAL TECHNOLOGIES (CHENG DU) Co.,Ltd.