WO2017149592A1 - ストレージ装置 - Google Patents
ストレージ装置 Download PDFInfo
- Publication number
- WO2017149592A1 WO2017149592A1 PCT/JP2016/056018 JP2016056018W WO2017149592A1 WO 2017149592 A1 WO2017149592 A1 WO 2017149592A1 JP 2016056018 W JP2016056018 W JP 2016056018W WO 2017149592 A1 WO2017149592 A1 WO 2017149592A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- deduplication
- state
- data
- partition
- block
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/064—Management of blocks
- G06F3/0641—De-duplication techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0608—Saving storage space on storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/0644—Management of space entities, e.g. partitions, extents, pools
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0653—Monitoring storage devices or systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
Definitions
- the present invention relates to a storage apparatus.
- the compression rate (or data reduction amount) may vary depending on the data content. Therefore, although the data has been compressed or deduplicated, the amount of data stored in the storage device can hardly be reduced. In that case, the access performance is also lowered, and the data holding cost is not lowered. In order to provide a high-performance storage device at a low bit cost, it is necessary to prevent such a situation from occurring.
- “Duplicate elimination process” is a process of leaving only one data in the storage apparatus and deleting other data from the storage apparatus when there are a plurality of data of the same content in the storage apparatus.
- the process of determining whether data with the same content exists in the storage device is referred to as a “duplication determination” process.
- the deduplication processing is processing including duplication determination processing.
- the storage apparatus 1 also has a management concept for managing a storage area allocated to a logical page (this is a storage area provided by a storage device), which is referred to as a “storage pool” or “pool”. Call it.
- the storage pool is represented as a cylindrical object 17.
- the storage device 1 divides the storage area of the pool into an area having the same size as the logical page (or an area larger than the logical page), and manages the divided area with an identifier. This divided area is called “physical page”, and the identifier given to the physical page is called “physical page identifier” or “physical page number”.
- the storage device 1 When a write request from the computer 5 has not arrived for a logical page with a status of X for a certain period or more, the storage device 1 changes the status of the logical page to Q.
- the logical page with the status Q is a deduplication logical page, and deduplication processing is performed.
- the storage apparatus 1 When a write request is received from the computer 5 for the logical page with the status Q (deduplication logical page), the storage apparatus 1 changes the status of the logical page to X again. This is because when data is stored in a deduplication logical page, the overhead of processing such as duplication determination increases, leading to a decrease in access performance.
- “valid” or “invalid” is stored in the deduplication 1263 of a record.
- “valid” is stored in the deduplication 1263 of a record, it means that the logical page managed by the record is a deduplication logical page, and when “invalid” is stored, the record This means that the logical page managed in is usually a logical page.
- the identifier of the deduplication block or data block any information may be used as long as it is information that can uniquely identify the deduplication block or data block.
- the address in the virtual volume to which the deduplication block belongs is used as the identifier of the deduplication block.
- the relative address in the physical page to which the data block belongs (address where the identifier of the first data block of the physical page is 0) is used as the identifier of the data block.
- the alphabet attached to the deduplication logical block shown in FIG. 4 is used as the deduplication block identifier.
- the alphabet attached to the data block is used as the identifier of the data block.
- a plurality of pieces of position information may be stored in the deduplication block 1292 of a record (a case where duplicate data exists). There may also be a plurality of records having the same fingerprint 1291 value. This is because even when the FP is calculated for a plurality of data having different contents, the respective FPs may be the same.
- the storage apparatus 1 When the data block at the end of the physical page is assigned to the deduplication block, the storage apparatus 1 newly reserves an unused physical page for storing the data block, and identifies the physical page identifier and the physical page.
- the write-once pointer 131 is updated with information including the identifier of the first data block.
- Step 704 By referring to the mapping table 127, the I / O processing unit 121 obtains the position information (a set of the physical page 1275 and the data block 1276) of the data block assigned to the area specified by the read destination address. Identify. Then, using this information, the address of the storage device 15 in which the read target data is stored is obtained.
- the identifier of the logical page is stored, and the usage status 1282 is changed to “logical page”. Further, the value of the physical page 1281 of the record selected here is stored in the physical page 1264 of the logical page record of the write data write destination among the records of the logical page management table 126.
- the migration process is a process of changing the state of a normal logical page that satisfies a predetermined condition among the logical pages of the virtual volume.
- the migration process is periodically executed for each virtual volume.
- the flow of processing when the storage apparatus 1 performs migration processing for a specific virtual volume will be described.
- Step 308 The deduplication processing unit 124 changes the physical page identified in step 307 to an unallocated state.
- the process of changing a physical page used for storing data blocks to an unallocated state is referred to as a “physical page release process”. Also, putting a physical page into an unallocated state may be expressed as “releasing a physical page”.
- FIG. 17 is a flowchart of processing executed by the physical page release processing unit 132.
- Step 807 If the processing target data block is a shared data block, the physical page release processing unit 132 moves (duplicates) the data to a data block of another physical page, and shares the processing target data block. Change so that the deduplication block that is being shared shares the data block of the copy destination. Details of step 807 will be described later.
- Step 808 The physical page release processing unit 132 determines whether steps 804 to 807 have been executed for all data blocks included in the processing-target physical page. When there is a data block that has not executed steps 804 to 807 (step 808: Y), the physical page release processing unit 132 selects a data block next to the data block to be processed (step 803), and steps 804 to 804. 807 is executed. If Steps 804 to 807 have been executed for all data blocks included in the physical page to be processed (Step 808: N), Step 809 is executed.
- Step 810 The physical page release processing unit 132 stores NULL in the deduplication block 1303 of the corresponding record of the dereference table 130 for all the data blocks included in the physical page to be processed.
- Step 1004 The physical page release processing unit 132 secures a data block as a data copy destination of the data block selected in Step 803.
- the processing contents for securing the data block are the same as in step 208 (deduplication processing).
- Step 1005 The physical page release processing unit 132 reads the data of the data block selected in Step 803 and writes it in the data block secured in Step 1003. This process is the same as step 209 (deduplication process).
- Step 1006 The physical page release processing unit 132 changes the deduplication block selected in step 904 from the reduced deduplication block to a normal deduplication block. For this reason, in step 1006, the physical page release processing unit 132 decrements the number of excluded blocks of the logical page including the deduplication block (the number of excluded blocks 1267 in the logical page management table 126) by one.
- the storage apparatus may manage information using a data structure other than a table, such as a list structure.
- the storage device may perform compression processing in addition to deduplication processing.
- the data stored in the storage device may be compressed by using a storage device having a function of compressing and storing data (compression function) as a storage device mounted in the storage apparatus.
- compression function data
- the storage apparatus may be configured such that the CPU of the storage controller compresses data stored in the storage device.
- the computer 5 and the storage apparatus 1 that are the access request source are different hardware.
- the computer 5 and the storage apparatus 1 are single. It may be implemented as hardware. That is, the storage control program executed in the storage apparatus 1 and the application program executed in the computer 5 described in the above embodiment may be executed on the same computer.
- the application program issues an I / O request to the storage control program as an access request source, and the storage control program responds to the I / O request (read data when the I / O request is a read request). May be returned to the application program that is the access request source.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
まず図1、図2、そして図4を用いて、本発明の実施例に係るストレージ装置が実施する、重複排除方法の概要を説明する。図1は、本発明の実施例に係るストレージ装置が計算機に提供する仮想ボリュームの構成を表した図である。
D=W÷P
図3は、本実施例に係るストレージ装置1を含む計算機システムのハードウェア構成例を示している。ストレージ装置1は、ストレージコントローラ10と、ストレージコントローラ10に接続された複数の記憶デバイス15を有する。
続いてストレージ装置1の有する管理情報、プログラムの内容の説明を行う。ストレージ装置1のシステムメモリ12には少なくとも、論理ページ管理テーブル126、マッピングテーブル127、プール管理テーブル128、検索テーブル129、逆参照テーブル130、追記ポインタ131の、6種類の管理情報が格納されている。以下では、これらの各種管理情報の内容について説明する。
続いて、ストレージ装置1で行われる各種処理の流れを説明する。ストレージ装置1のシステムメモリ12には少なくとも、I/O処理部121、重複排除処理部123、重複排除解除部124、論理ページ変更部125、物理ページ解放処理部132の、5種類のプログラムが格納されている。なお、システムメモリ12に格納されているこれらのプログラムのことを、「ストレージ制御プログラム」と呼ぶこともある。以下ではこれらのプログラムによって行われる処理の説明を行う。なお、本実施例に係る図面において、参照番号の前に付されている文字列“SP”は「ステップ」を意味する。
Claims (13)
- ホスト計算機から書き込み要求のあったライトデータを格納するための1以上の記憶デバイスと、前記ホスト計算機に1以上のボリュームを提供するストレージコントローラと、を有し、
前記ストレージコントローラは、前記ボリューム内の区画ごとに、前記ホスト計算機から最後にライト要求を受け付けた時刻である最終ライト時刻を保持しており、
前記ストレージコントローラは、前記最終ライト時刻から所定の期間以上ライト要求を受け付けていない前記区画について、前記ホストから前記区画に書き込まれたデータと同一のデータが前記記憶デバイスに格納済みの場合、前記区画に書き込まれたデータを前記記憶デバイスに格納しないようにする重複排除処理を実施する、
ことを特徴とする、ストレージ装置。 - 前記ストレージコントローラは、前記区画ごとに状態を管理しており、
前記区画の状態として、前記重複排除処理が実施されていない状態である第1状態と、前記重複排除処理が実施された状態である第2状態と、前記第2状態から前記重複排除処理が行われる前の状態に戻された状態である第3状態とがあり、
前記ストレージコントローラは、前記第1状態の前記区画に対して前記重複排除処理を行った結果、前記区画の重複排除率が所定の閾値未満だった場合、前記区画の状態を前記第3状態に変更する
ことを特徴とする、請求項1に記載のストレージ装置。 - 前記第3状態の前記区画は、前記ホスト計算機からのライト要求が発行されるまでは前記状態が変更されない、
ことを特徴とする、請求項2に記載のストレージ装置。 - 前記ストレージコントローラは、前記ホスト計算機から前記第2状態または前記第3状態の前記区画に対してライト要求が発行されると、前記区画の状態を前記第1状態に変更する、
ことを特徴とする、請求項3に記載のストレージ装置。 - 前記ストレージコントローラは、前記ホスト計算機から前記区画に対するライト要求とライト対象データを受領すると、前記区画に、前記区画と同サイズの前記記憶デバイスの第1記憶領域を割り当て、前記割り当てられた前記第1記憶領域に前記ライト対象データを格納し、
前記区画の状態が、前記第2状態に変更される時、前記ストレージコントローラは前記区画を複数の重複排除ブロックに区分し、前記重複排除ブロックごとに、前記重複排除ブロックと同サイズで前記第1記憶領域と異なる記憶領域であるデータブロックを割り当て、前記重複排除ブロックと前記データブロックとのマッピングを管理するよう構成されており、
前記ストレージコントローラは、前記重複排除ブロックのうち第2の重複排除ブロックに前記データブロックを割り当てる時、前記第2の重複排除ブロックに書き込まれているデータが、第1の重複排除ブロックに割り当てられている第1データブロックに格納されているデータと同一の場合、前記第2の重複排除ブロックに前記第1データブロックを割り当てる、
ことを特徴とする、請求項4に記載のストレージ装置。 - 前記ストレージコントローラは、前記重複排除ブロックに書き込まれたデータの特徴量を算出し、検索テーブルに、前記算出された特徴量と前記重複排除ブロックに割り当てられた前記データブロックとのマッピングを記録し、
前記ストレージコントローラは、前記第2の重複排除ブロックの特徴量を算出すると、前記第2の重複排除ブロックの特徴量と同一の値が前記検索テーブルに格納されていない場合、前記第2の重複排除ブロックに第2データブロックを割り当て、前記第2データブロックに前記第2の重複排除ブロックに書き込まれたデータを格納する、
ことを特徴とする、請求項5に記載のストレージ装置。 - ホスト計算機から書き込み要求のあったライトデータを格納するための1以上の記憶デバイスと、前記ホスト計算機に1以上のボリュームを提供するストレージコントローラと、を有するストレージ装置において、
前記ストレージコントローラが、
前記ボリューム内の区画ごとに、前記ホスト計算機から最後にライト要求を受け付けた時刻である最終ライト時刻を記録するステップと、
前記最終ライト時刻から所定の期間以上ライト要求を受け付けていない前記区画を検出するステップと、
前記検出された区画について、前記区画に書き込まれたデータのうち、前記記憶デバイスに格納済みのデータと異なるデータのみを前記記憶デバイスに格納する重複排除処理を実施するステップと、を実行する、
ことを特徴とする、ストレージ装置の制御方法。 - 前記ストレージコントローラは、前記区画ごとに状態を管理しており、
前記区画の状態として、前記重複排除処理が実施されていない状態である第1状態と、前記重複排除処理が実施された状態である第2状態と、前記第2状態から前記重複排除処理が行われる前の状態に戻された状態である第3状態とがあり、
前記重複排除処理を実施するステップでは、前記ストレージコントローラが、前記第1状態の前記区画に対して前記重複排除処理を行った結果、前記区画の重複排除率が所定の閾値未満だった場合、前記区画の状態を前記第3状態に変更する、
ことを特徴とする、請求項7に記載のストレージ装置の制御方法。 - 前記第3状態の前記区画は、前記ホスト計算機からのライト要求が発行されるまでは前記状態が変更されない、
ことを特徴とする、請求項8に記載のストレージ装置の制御方法。 - 前記ストレージコントローラは、前記ホスト計算機から前記第2状態または前記第3状態の前記区画に対してライト要求が発行されると、前記区画の状態を前記第1状態に変更するステップを実行する、
ことを特徴とする、請求項9に記載のストレージ装置の制御方法。 - ライトデータを格納するための1以上の記憶デバイスを有する計算機のプロセッサで実行されるプログラムを記録した記憶媒体であって、 前記プログラムは前記プロセッサに、
ボリュームに対するライト要求を受け付けるステップと、
前記ボリューム内の区画ごとに、最後にライト要求を受け付けた時刻である最終ライト時刻を保持するステップと、
前記最終ライト時刻から所定の期間以上ライト要求を受け付けていない前記区画を検出するステップと、
前記検出された区画について、前記区画に書き込まれたデータのうち、前記記憶デバイスに格納済みのデータと異なるデータのみを前記記憶デバイスに格納する重複排除処理を実施するステップと、を実行させる、
ことを特徴とする、プログラムを記録した記憶媒体。 - 前記プログラムはさらに前記プロセッサに、前記区画ごとの状態を管理させ、
前記区画の状態として、前記重複排除処理が実施されていない状態である第1状態と、前記重複排除処理が実施された状態である第2状態と、前記第2状態から前記重複排除処理が行われる前の状態に戻された状態である第3状態とがあり、
前記重複排除処理を実施するステップでは、前記プロセッサが前記第1状態の前記区画に対して前記重複排除処理を行った結果、前記区画の重複排除率が所定の閾値未満だった場合、前記区画の状態を前記第3状態に変更させる、
ことを特徴とする、請求項11に記載のプログラムを記録した記憶媒体。 - 前記プロセッサに、
前記第2状態または前記第3状態の前記区画に対するライト要求を受領すると、前記区画の状態を前記第1状態に変更するステップを実行させる、
ことを特徴とする、請求項12に記載のプログラムを記録した記憶媒体。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018502866A JP6678230B2 (ja) | 2016-02-29 | 2016-02-29 | ストレージ装置 |
US15/769,424 US10572171B2 (en) | 2016-02-29 | 2016-02-29 | Storage system |
CN201680081226.6A CN108604165B (zh) | 2016-02-29 | 2016-02-29 | 存储装置 |
PCT/JP2016/056018 WO2017149592A1 (ja) | 2016-02-29 | 2016-02-29 | ストレージ装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2016/056018 WO2017149592A1 (ja) | 2016-02-29 | 2016-02-29 | ストレージ装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2017149592A1 true WO2017149592A1 (ja) | 2017-09-08 |
Family
ID=59742597
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2016/056018 WO2017149592A1 (ja) | 2016-02-29 | 2016-02-29 | ストレージ装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10572171B2 (ja) |
JP (1) | JP6678230B2 (ja) |
CN (1) | CN108604165B (ja) |
WO (1) | WO2017149592A1 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109725849A (zh) * | 2017-10-27 | 2019-05-07 | 株式会社日立制作所 | 存储系统和存储系统的控制方法 |
CN110209888A (zh) * | 2019-05-08 | 2019-09-06 | 无线生活(杭州)信息科技有限公司 | 接口请求的存储方法及装置 |
JP2020086477A (ja) * | 2018-11-15 | 2020-06-04 | 株式会社日立製作所 | 大規模ストレージシステム及び大規模ストレージシステムにおけるデータ配置方法 |
CN111858577A (zh) * | 2019-04-29 | 2020-10-30 | 伊姆西Ip控股有限责任公司 | 存储管理的方法、设备和计算机程序产品 |
US20220253222A1 (en) * | 2019-11-01 | 2022-08-11 | Huawei Technologies Co., Ltd. | Data reduction method, apparatus, computing device, and storage medium |
JP7476715B2 (ja) | 2020-08-07 | 2024-05-01 | 富士通株式会社 | 情報処理装置及び重複率見積もりプログラム |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6724534B2 (ja) * | 2016-05-09 | 2020-07-15 | 富士通株式会社 | 情報処理装置、重複除去プログラム、及び重複除去方法 |
JP2019121195A (ja) * | 2018-01-05 | 2019-07-22 | 東芝メモリ株式会社 | メモリシステム及びプロセッサシステム |
US10860555B2 (en) | 2018-08-27 | 2020-12-08 | Dell Products, L.P. | Method and apparatus for two tier data deduplication using weighted graphs |
US10776029B2 (en) * | 2018-12-21 | 2020-09-15 | Dell Products, L.P. | System and method for dynamic optimal block size deduplication |
CN110427347A (zh) * | 2019-07-08 | 2019-11-08 | 新华三技术有限公司成都分公司 | 重复数据删除的方法、装置、存储节点及存储介质 |
US11989415B2 (en) | 2022-08-10 | 2024-05-21 | Hewlett Packard Enterprise Development Lp | Enabling or disabling data reduction based on measure of data overwrites |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011065314A (ja) * | 2009-09-16 | 2011-03-31 | Hitachi Ltd | ファイル管理方法及びストレージシステム |
JP2012523023A (ja) * | 2009-09-18 | 2012-09-27 | 株式会社日立製作所 | 重複したデータを排除するストレージシステム |
WO2014157243A1 (ja) * | 2013-03-29 | 2014-10-02 | 富士通株式会社 | ストレージ制御装置、ストレージ制御装置の制御方法およびストレージ制御装置の制御プログラム |
JP2015528928A (ja) * | 2012-10-31 | 2015-10-01 | 株式会社日立製作所 | ストレージ装置及びストレージ装置の制御方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5379956B2 (ja) * | 2007-03-19 | 2013-12-25 | 株式会社日立製作所 | ストレージ装置及び記憶領域配置方法 |
JP2009093571A (ja) * | 2007-10-11 | 2009-04-30 | Hitachi Ltd | 記憶制御装置、記憶制御装置のデータアーカイブ方法及びストレージシステム |
US8825617B2 (en) * | 2008-03-14 | 2014-09-02 | International Business Machines Corporation | Limiting deduplication based on predetermined criteria |
US8359444B2 (en) * | 2008-09-24 | 2013-01-22 | Hitachi, Ltd. | System and method for controlling automated page-based tier management in storage systems |
US8539148B1 (en) * | 2010-12-22 | 2013-09-17 | Emc Corporation | Deduplication efficiency |
US8799601B1 (en) * | 2012-06-28 | 2014-08-05 | Emc Corporation | Techniques for managing deduplication based on recently written extents |
US9152325B2 (en) * | 2012-07-26 | 2015-10-06 | International Business Machines Corporation | Logical and physical block addressing for efficiently storing data |
CA2896585A1 (en) * | 2014-08-11 | 2016-02-11 | Dot Hill Systems Corporation | Method and apparatus for processing asynchronous streams |
US10001942B1 (en) * | 2016-12-21 | 2018-06-19 | Netapp Inc. | Asynchronous semi-inline deduplication |
-
2016
- 2016-02-29 WO PCT/JP2016/056018 patent/WO2017149592A1/ja active Application Filing
- 2016-02-29 CN CN201680081226.6A patent/CN108604165B/zh active Active
- 2016-02-29 US US15/769,424 patent/US10572171B2/en active Active
- 2016-02-29 JP JP2018502866A patent/JP6678230B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011065314A (ja) * | 2009-09-16 | 2011-03-31 | Hitachi Ltd | ファイル管理方法及びストレージシステム |
JP2012523023A (ja) * | 2009-09-18 | 2012-09-27 | 株式会社日立製作所 | 重複したデータを排除するストレージシステム |
JP2015528928A (ja) * | 2012-10-31 | 2015-10-01 | 株式会社日立製作所 | ストレージ装置及びストレージ装置の制御方法 |
WO2014157243A1 (ja) * | 2013-03-29 | 2014-10-02 | 富士通株式会社 | ストレージ制御装置、ストレージ制御装置の制御方法およびストレージ制御装置の制御プログラム |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109725849A (zh) * | 2017-10-27 | 2019-05-07 | 株式会社日立制作所 | 存储系统和存储系统的控制方法 |
JP2019079448A (ja) * | 2017-10-27 | 2019-05-23 | 株式会社日立製作所 | ストレージシステム及びストレージシステムの制御方法 |
JP2020086477A (ja) * | 2018-11-15 | 2020-06-04 | 株式会社日立製作所 | 大規模ストレージシステム及び大規模ストレージシステムにおけるデータ配置方法 |
CN111858577A (zh) * | 2019-04-29 | 2020-10-30 | 伊姆西Ip控股有限责任公司 | 存储管理的方法、设备和计算机程序产品 |
CN111858577B (zh) * | 2019-04-29 | 2024-05-17 | 伊姆西Ip控股有限责任公司 | 存储管理的方法、设备和计算机程序产品 |
CN110209888A (zh) * | 2019-05-08 | 2019-09-06 | 无线生活(杭州)信息科技有限公司 | 接口请求的存储方法及装置 |
US20220253222A1 (en) * | 2019-11-01 | 2022-08-11 | Huawei Technologies Co., Ltd. | Data reduction method, apparatus, computing device, and storage medium |
US12079472B2 (en) * | 2019-11-01 | 2024-09-03 | Huawei Technologies Co., Ltd. | Data reduction method, apparatus, computing device, and storage medium for forming index information based on fingerprints |
JP7476715B2 (ja) | 2020-08-07 | 2024-05-01 | 富士通株式会社 | 情報処理装置及び重複率見積もりプログラム |
Also Published As
Publication number | Publication date |
---|---|
CN108604165A (zh) | 2018-09-28 |
US10572171B2 (en) | 2020-02-25 |
CN108604165B (zh) | 2021-09-24 |
JP6678230B2 (ja) | 2020-04-08 |
JPWO2017149592A1 (ja) | 2018-09-27 |
US20180307433A1 (en) | 2018-10-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6678230B2 (ja) | ストレージ装置 | |
US11216185B2 (en) | Memory system and method of controlling memory system | |
US9792073B2 (en) | Method of LUN management in a solid state disk array | |
JP6526233B2 (ja) | 記憶システムにおける重複排除のための方法、記憶システムおよびコントローラ | |
CN107924291B (zh) | 存储系统 | |
WO2015162758A1 (ja) | ストレージシステム | |
WO2016046911A1 (ja) | ストレージシステム及びストレージシステムの管理方法 | |
US8694563B1 (en) | Space recovery for thin-provisioned storage volumes | |
JP6608468B2 (ja) | ストレージ装置及びその制御方法 | |
JP6685334B2 (ja) | ストレージ装置 | |
US8954658B1 (en) | Method of LUN management in a solid state disk array | |
CN114860163A (zh) | 一种存储系统、内存管理方法和管理节点 | |
KR101017067B1 (ko) | 낸드 플래시 메모리를 위한 지역성 기반의 가비지 컬렉션기법 | |
JP6298932B2 (ja) | ストレージ装置 | |
US11093134B2 (en) | Storage device, management method, and program in tiered storage system | |
US20190243758A1 (en) | Storage control device and storage control method | |
US11079956B2 (en) | Storage system and storage control method | |
US20180307615A1 (en) | Storage control apparatus and storage control method | |
US10853257B1 (en) | Zero detection within sub-track compression domains | |
WO2018061161A1 (ja) | ストレージ装置およびその制御方法 | |
US11144445B1 (en) | Use of compression domains that are more granular than storage allocation units | |
CN115328387A (zh) | 一种数据压缩方法及装置 | |
JPWO2016103356A1 (ja) | 階層化ストレージシステム、ストレージコントローラ及びレプリケーション初期化方法 | |
US20240338322A1 (en) | Bin-less metadata pages allocator for storage cluster with log-structured metadata | |
US20230418798A1 (en) | Information processing apparatus and information processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WWE | Wipo information: entry into national phase |
Ref document number: 15769424 Country of ref document: US |
|
ENP | Entry into the national phase |
Ref document number: 2018502866 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 16892437 Country of ref document: EP Kind code of ref document: A1 |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 16892437 Country of ref document: EP Kind code of ref document: A1 |