JP6995728B2 - ストレージ装置、管理方法及びプログラム - Google Patents
ストレージ装置、管理方法及びプログラム Download PDFInfo
- Publication number
- JP6995728B2 JP6995728B2 JP2018184119A JP2018184119A JP6995728B2 JP 6995728 B2 JP6995728 B2 JP 6995728B2 JP 2018184119 A JP2018184119 A JP 2018184119A JP 2018184119 A JP2018184119 A JP 2018184119A JP 6995728 B2 JP6995728 B2 JP 6995728B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- storage
- pool
- volume
- amount
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0608—Saving storage space on storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/0223—User address space allocation, e.g. contiguous or non contiguous base addressing
- G06F12/023—Free address space management
- G06F12/0253—Garbage collection, i.e. reclamation of unreferenced memory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/064—Management of blocks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0647—Migration mechanisms
- G06F3/0649—Lifecycle management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/065—Replication mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0656—Data buffering arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0689—Disk arrays, e.g. RAID, JBOD
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
図1は、本発明の実施例1のストレージシステム100が実行する、追い書き方式における階層の再配置手順を示す図である。
図2は、本発明の実施例1のストレージ装置11の構成を示すブロック図である。ストレージ装置11は、1以上のストレージコントローラ22と、1以上のストレージコントローラ22に接続された種々のドライブ29とを有する。
図3は、本発明の実施例1のストレージ装置11が保持するVOL管理テーブル207の構成例を示す図である。
図4は、本発明の実施例1のストレージ装置11が保持するプール構成管理テーブル208の構成例を示す図である。
図6は、本発明の実施例1のストレージ装置11が保持するプール割当管理テーブル210の構成例を示す図である。
図8は、本発明の実施例1のストレージ装置11によって管理される論理記憶階層の構成例を示す図である。
図9は、本発明の実施例1のストレージ装置11が保持する階層管理テーブル212の構成例を示す図である。
図11は、本発明の実施例1のストレージ装置11が実行するリード処理を示すフローチャートである。
図12は、本発明の実施例1のストレージ装置11が実行するライト処理を示すフローチャートである。
図13は本発明の実施例1のストレージ装置11が実行するデステージ処理を示すフローチャートである。
図14は本発明の実施例1のストレージ装置11が実行するデータ量削減処理を示すフローチャートである。
図15は本発明の実施例1のストレージ装置11が実行する階層再配置処理を示すフローチャートである。
図16は本発明の実施例1のストレージ装置11が実行するガベージコレクション処理を示すフローチャートである。
図17は、本発明の実施例2のストレージ装置11によって管理されるクローンVOLの構成例を示す図である。
上記した実施例1、2では階層をドライブの種別や外部接続ストレージなどの物理的な記録媒体によって区別したが、これに限定されることはなく仮想的な階層であってもよい。例えば、上位階層と下位階層は圧縮アルゴリズムの差や、重複排除や暗号化の有無、データの種別によって分けられてもよい。
11 ストレージ装置
22 ストレージコントローラ
29 ドライブ
30 ホスト計算機
31 ネットワーク
202 バッファ領域
203 キャッシュ領域
204 非圧縮データ格納領域
205 圧縮データ格納領域
Claims (4)
- プロセッサと、記憶媒体を有し、データを階層管理して格納するストレージシステムにおいて、
外部の計算機からのデータを格納する記憶領域を有するボリュームと、
前記ボリュームの記憶領域に格納されたデータを格納する領域を変更して格納する記憶領域を有するプールと、
前記ボリュームのアドレスと前記プールのアドレスとのマッピングを管理する、第1管理情報と、
前記外部の計算機がアクセスした前記ボリュームのアドレスと前記アドレスに対するライトI/O量及びリードI/O量を示す、第2管理情報と、
を有し、
前記ボリュームでは、前記記憶領域は階層に分かれておらず、上書き方式にてデータが格納され、
前記プールでは、前記記憶領域は階層に分かれており、追い書き方式にてデータが格納され
前記プールは、前記ボリュームに格納されたデータのデータ量を変更して格納し、
前記ライトI/O量及び前記リードI/O量に基づいて前記データを格納する前記階層を変更可能であり、
前記データの階層が変更された場合に、
前記ボリュームでは、前記データの格納位置が変更されず、
前記プールでは、前記データの格納位置が変更され、
前記データを物理的に格納する前記記憶媒体が変更され、
前記プロセッサは、
前記外部の計算機の前記ボリュームのアドレスへのリードアクセス及びライトアクセスに対して、前記第2管理情報において、前記アクセスされたアドレスのリードI/O量及びライトI/O量を更新し、
前記第2管理情報が示す前記ボリュームのデータの前記リードI/O量及びライトI/O量から計算されたI/O負荷を表す値に基づいて、前記データを格納する前記プールにおける前記階層を決定し、
前記決定された階層に基づいて、前記第1管理情報を更新し、
前記決定した階層に応じた記憶媒体に前記プールに格納したデータを物理的に格納し、
データ圧縮、暗号化またはデータ重複排除の少なくとも一つを含むデータ量削減を行って前記記憶媒体にデータを格納することが可能であり、
前記データの階層が変更された場合に、データ毎にデータ量削減の適用要否が変更可能であり、
前記データ量削減の適用または非適用に変更して処理を行って前記データを前記記憶媒体間で移動させる
ことを特徴とするストレージシステム。 - 請求項1に記載のストレージシステムにおいて、
前記データ量の変更は、データ重複排除であり、前記プールのデータは、前記ボリュームの複数のデータと対応付けられており、
前記ボリュームの複数のデータにかかる階層のうち、前記I/O負荷を表す値が大きい方に対応する階層に基づいて、前記プールにおけるデータの階層を決定する
ことを特徴とするストレージシステム。 - プロセッサと、記憶媒体を有するストレージシステムを用いて、データを階層管理して格納するデータ記憶方法において、
前記ストレージシステムは、
外部の計算機からのデータを格納する記憶領域を有するボリュームと、
前記ボリュームの記憶領域に格納されたデータを格納する領域を変更して格納する記憶領域を有するプールと、
前記ボリュームのアドレスと前記プールのアドレスとのマッピングを管理する、第1管理情報と、
前記外部の計算機がアクセスした前記ボリュームのアドレスと前記アドレスに対するライトI/O量及びリードI/O量を示す、第2管理情報と、
を有し、
前記ボリュームでは、前記記憶領域は階層に分かれておらず、上書き方式にてデータが格納され、
前記プールでは、前記記憶領域は階層に分かれており、追い書き方式にてデータが格納され
前記プールは、前記ボリュームに格納されたデータのデータ量を変更して格納し、
前記ライトI/O量及び前記リードI/O量に基づいて前記データを格納する前記階層を変更可能であり、
前記データの階層が変更された場合に、
前記ボリュームでは、前記データの格納位置が変更されず、
前記プールでは、前記データの格納位置が変更され、
前記データを物理的に格納する前記記憶媒体が変更され、
前記データ記憶方法は、前記プロセッサが、
前記外部の計算機の前記ボリュームのアドレスへのリードアクセス及びライトアクセスに対して、前記第2管理情報において、前記アクセスされたアドレスのリードI/O量及びライトI/O量を更新し、
前記プロセッサが、前記第2管理情報が示す前記ボリュームのデータの前記リードI/O量及びライトI/O量から計算されたI/O負荷を表す値に基づいて、前記データを格納する前記プールにおける前記階層を決定し、
前記決定された階層に基づいて、前記第1管理情報を更新し、
前記プロセッサが、前記決定した階層に応じた記憶媒体に前記プールに格納したデータを物理的に格納し、
データ圧縮、暗号化またはデータ重複排除の少なくとも一つを含むデータ量削減を行って前記記憶媒体にデータを格納し、
前記データの階層が変更された場合に、データ毎にデータ量削減の適用要否を決定し、
前記データ量削減の適用または非適用に変更して処理を行って前記データを前記記憶媒体間で移動させる
ことを特徴とするデータ記憶方法。 - 請求項3に記載のデータ記憶方法において、
前記データ量の変更は、データ重複排除であり、前記プールのデータは、前記ボリュームの複数のデータと対応付けられており、
前記プロセッサが、前記ボリュームの複数のデータにかかる階層のうち、前記I/O負荷を表す値が大きい方に対応する階層に基づいて、前記プールにおけるデータの階層を決定する
ことを特徴とするデータ記憶方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018184119A JP6995728B2 (ja) | 2018-09-28 | 2018-09-28 | ストレージ装置、管理方法及びプログラム |
CN201910720466.1A CN110968262B (zh) | 2018-09-28 | 2019-08-06 | 存储装置和数据存储方法 |
US16/559,866 US11093134B2 (en) | 2018-09-28 | 2019-09-04 | Storage device, management method, and program in tiered storage system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018184119A JP6995728B2 (ja) | 2018-09-28 | 2018-09-28 | ストレージ装置、管理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020052919A JP2020052919A (ja) | 2020-04-02 |
JP6995728B2 true JP6995728B2 (ja) | 2022-01-17 |
Family
ID=69947541
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018184119A Active JP6995728B2 (ja) | 2018-09-28 | 2018-09-28 | ストレージ装置、管理方法及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11093134B2 (ja) |
JP (1) | JP6995728B2 (ja) |
CN (1) | CN110968262B (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20220264277A1 (en) | 2020-03-24 | 2022-08-18 | Nec Corporation | Gateway device, core network device, communication system, delivery method, and non-transitory computer-readable medium |
US11625370B2 (en) * | 2020-04-07 | 2023-04-11 | Vmware, Inc. | Techniques for reducing data log recovery time and metadata write amplification |
CN111737296B (zh) * | 2020-06-15 | 2024-03-01 | 中国建设银行股份有限公司 | 一种业务处理方法、装置、设备及存储介质 |
CN117215475A (zh) * | 2022-05-31 | 2023-12-12 | 上海寒武纪信息科技有限公司 | 数据存储、访问、运算方法及相关产品 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100077168A1 (en) | 2008-09-24 | 2010-03-25 | Hitachi, Ltd. | System and method for controlling automated page-based tier management in storage systems |
US20130290281A1 (en) | 2012-04-27 | 2013-10-31 | Hitachi, Ltd. | Storage apparatus and data management method |
WO2015145532A1 (ja) | 2014-03-24 | 2015-10-01 | 株式会社日立製作所 | ストレージシステム及びデータ処理方法 |
WO2016052665A1 (ja) | 2014-09-30 | 2016-04-07 | 株式会社日立製作所 | 分散型ストレージシステム |
JP2016511474A (ja) | 2013-10-28 | 2016-04-14 | 株式会社日立製作所 | 階層化ストレージにおける重複排除及びホストベースQoS |
WO2016203612A1 (ja) | 2015-06-18 | 2016-12-22 | 株式会社日立製作所 | ストレージ装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8131927B2 (en) | 2007-11-30 | 2012-03-06 | Hitachi, Ltd. | Fast accessible compressed thin provisioning volume |
WO2012082792A2 (en) * | 2010-12-13 | 2012-06-21 | Fusion-Io, Inc. | Apparatus, system, and method for auto-commit memory |
CN103299265B (zh) | 2011-03-25 | 2016-05-18 | 株式会社日立制作所 | 存储系统和存储区域分配方法 |
CN103744617B (zh) * | 2013-12-20 | 2016-09-28 | 北京奇虎科技有限公司 | 一种键-值存储系统中数据文件的合并压缩方法及装置 |
JP5707540B1 (ja) * | 2014-01-31 | 2015-04-30 | 株式会社東芝 | 階層化ストレージシステム、ストレージコントローラ、及び階層間のデータ移動を代替する方法 |
JP6118380B2 (ja) * | 2015-09-24 | 2017-04-19 | 株式会社日立製作所 | ストレージシステム及び記憶領域の割当方法 |
-
2018
- 2018-09-28 JP JP2018184119A patent/JP6995728B2/ja active Active
-
2019
- 2019-08-06 CN CN201910720466.1A patent/CN110968262B/zh active Active
- 2019-09-04 US US16/559,866 patent/US11093134B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100077168A1 (en) | 2008-09-24 | 2010-03-25 | Hitachi, Ltd. | System and method for controlling automated page-based tier management in storage systems |
US20130290281A1 (en) | 2012-04-27 | 2013-10-31 | Hitachi, Ltd. | Storage apparatus and data management method |
JP2016511474A (ja) | 2013-10-28 | 2016-04-14 | 株式会社日立製作所 | 階層化ストレージにおける重複排除及びホストベースQoS |
WO2015145532A1 (ja) | 2014-03-24 | 2015-10-01 | 株式会社日立製作所 | ストレージシステム及びデータ処理方法 |
WO2016052665A1 (ja) | 2014-09-30 | 2016-04-07 | 株式会社日立製作所 | 分散型ストレージシステム |
WO2016203612A1 (ja) | 2015-06-18 | 2016-12-22 | 株式会社日立製作所 | ストレージ装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2020052919A (ja) | 2020-04-02 |
US20200104055A1 (en) | 2020-04-02 |
US11093134B2 (en) | 2021-08-17 |
CN110968262B (zh) | 2023-04-11 |
CN110968262A (zh) | 2020-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6802209B2 (ja) | ストレージシステム | |
JP5792313B2 (ja) | ストレージシステム | |
JP6995728B2 (ja) | ストレージ装置、管理方法及びプログラム | |
JP5438827B2 (ja) | 記憶制御装置及び仮想ボリュームの制御方法 | |
US20180173632A1 (en) | Storage device and method for controlling storage device | |
JP5816303B2 (ja) | フラッシュメモリを含むストレージシステム、及び記憶制御方法 | |
JP5944587B2 (ja) | 計算機システム及び制御方法 | |
US8984221B2 (en) | Method for assigning storage area and computer system using the same | |
US10222988B2 (en) | Efficient management storage system via defining of several size units in advance | |
JP4690765B2 (ja) | ストレージ管理システム、ストレージ管理サーバ、データ再配置制御方法およびデータ再配置制御プログラム | |
WO2015145532A1 (ja) | ストレージシステム及びデータ処理方法 | |
US9792073B2 (en) | Method of LUN management in a solid state disk array | |
WO2015162758A1 (ja) | ストレージシステム | |
JP2015517697A (ja) | 二次記憶装置に基づく記憶領域をキャッシュ領域として用いるストレージシステム及び記憶制御方法 | |
US8954658B1 (en) | Method of LUN management in a solid state disk array | |
EP3662359A1 (en) | Extending ssd longevity | |
JPWO2017149592A1 (ja) | ストレージ装置 | |
US20190243758A1 (en) | Storage control device and storage control method | |
JP2008299559A (ja) | ストレージシステム及びストレージシステムにおけるデータ移行方法 | |
JP7065928B2 (ja) | ストレージシステム及びその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201119 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210614 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210622 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210817 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6995728 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |