JP5008845B2 - ストレージシステムとストレージ装置及びその制御方法 - Google Patents

ストレージシステムとストレージ装置及びその制御方法 Download PDF

Info

Publication number
JP5008845B2
JP5008845B2 JP2005252989A JP2005252989A JP5008845B2 JP 5008845 B2 JP5008845 B2 JP 5008845B2 JP 2005252989 A JP2005252989 A JP 2005252989A JP 2005252989 A JP2005252989 A JP 2005252989A JP 5008845 B2 JP5008845 B2 JP 5008845B2
Authority
JP
Japan
Prior art keywords
data
flash memory
host computer
hdd
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005252989A
Other languages
English (en)
Other versions
JP2007066129A (ja
Inventor
崇仁 中村
和久 藤本
昭 藤林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2005252989A priority Critical patent/JP5008845B2/ja
Priority to US11/247,161 priority patent/US7464221B2/en
Priority to EP06250654A priority patent/EP1764677A1/en
Publication of JP2007066129A publication Critical patent/JP2007066129A/ja
Priority to US12/250,694 priority patent/US8332582B2/en
Application granted granted Critical
Publication of JP5008845B2 publication Critical patent/JP5008845B2/ja
Priority to US13/688,447 priority patent/US8631199B2/en
Priority to US14/098,575 priority patent/US9251063B2/en
Priority to US14/989,965 priority patent/US9495105B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0626—Reducing size or complexity of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/0223—User address space allocation, e.g. contiguous or non contiguous base addressing
    • G06F12/023—Free address space management
    • G06F12/0238—Memory management in non-volatile memory, e.g. resistive RAM or ferroelectric memory
    • G06F12/0246—Memory management in non-volatile memory, e.g. resistive RAM or ferroelectric memory in block erasable memory, e.g. flash memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
    • G06F12/0866—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches for peripheral storage systems, e.g. disk cache
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G06F3/0649—Lifecycle management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0658—Controller construction arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0688—Non-volatile semiconductor memory arrays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0689—Disk arrays, e.g. RAID, JBOD
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11C—STATIC STORES
    • G11C16/00—Erasable programmable read-only memories
    • G11C16/02—Erasable programmable read-only memories electrically programmable
    • G11C16/06—Auxiliary circuits, e.g. for writing into memory
    • G11C16/10—Programming or data input circuits
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11C—STATIC STORES
    • G11C16/00—Erasable programmable read-only memories
    • G11C16/02—Erasable programmable read-only memories electrically programmable
    • G11C16/06—Auxiliary circuits, e.g. for writing into memory
    • G11C16/26—Sensing or reading circuits; Data output circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/10—Providing a specific technical effect
    • G06F2212/1041—Resource optimization
    • G06F2212/1044—Space efficiency improvement
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/20—Employing a main memory using a specific memory technology
    • G06F2212/202—Non-volatile memory
    • G06F2212/2022—Flash memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/26—Using a specific storage system architecture
    • G06F2212/263—Network storage, e.g. SAN or NAS
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/31—Providing disk cache in a specific location of a storage system
    • G06F2212/314—In storage network, e.g. network attached cache
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/60—Details of cache memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/72—Details relating to flash memory management
    • G06F2212/7211—Wear leveling
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Description

本発明は、ストレージ装置に関し、また、その制御の方法に関するものである。
近年、データセンタなどの情報ビジネスの現場において、ストレージシステムの総所有コスト（ＴＣＯ）の削減がますます重要になってきている。その一方で、データを長期的かつ確実に記録する要求も高まってきている。このことに関する例としては、金融機関および医療機関などの文書データは、消去せずに蓄積されることが法律によって義務付けられていることなどが挙げられる。こうした背景において、高信頼で大容量のストレージシステムが必要とされている。しかしながら、ハードディスクドライブ（以降では「ＨＤＤ」という）を用いた大規模なストレージシステムでは、一般に、ストレージ容量に比例して電力消費量が増大する。つまり、大容量のストレージシステムを所有することは、電気料金が含まれる総所有コストが上昇してしまうことを示している。こうした状況を鑑み、キャッシュ管理アルゴリズムにより、ＨＤＤの消費する電力を低減させる技術が提案されている（非特許文献１）。また、問題は、電気料金に限られたことではない。一般に、ストレージシステムの容量が大きくなるほど、設置するための床面積が増大する。このことも総所有コストの上昇につながってしまっている。
ところで、近年、不揮発メディアとして、フラッシュメモリが注目されている。フラッシュメモリは、一般にＨＤＤと比較し、数十倍以上低消費電力であり、高速に読み出しが可能である。また、ＨＤＤのように機械的な駆動部分が不要なため小型である。
しかしながら、フラッシュメモリには、情報を保持するセルの物理的な理由により、書き込み回数の制限がある。こうした制限に対し、上位装置に示すアドレスとセル位置との対応をもち、各セルに書き込まれる回数を均等化するように制御を行う、ウェアレベリングと呼ばれる技術などにより、フラッシュメモリの書き込み可能回数の向上が図られている。なお、以降では、情報を保持するための素子を単に「フラッシュメモリ」といい、上記のウェアレベリングや、上位装置に対するプロトコル処理などを行う機構を含めたものを「フラッシュメモリデバイス」という。こういった技術により、フラッシュメモリデバイスとしての書き込み回数制限に対する効率化が図られているものの、フラッシュメモリデバイスの書き込み回数制限は依然存在している。また、それに加えて、フラッシュメモリに書き込む際に、消去と呼ばれる操作が必要になる場合はＨＤＤ同等程度の速度となってしまうデメリットも存在している。
このようなフラッシュメモリを用いたストレージシステムを構成する技術としては、例えば特許文献１がある。特許文献１は、ＲＡＩＤ構成などにおいて頻繁にアクセスされるパリティデータをフラッシュメモリなどの半導体ディスクにおき、ストレージシステムの性能を向上させる技術を示している。しかし、ストレージシステムとしての書き込み回数制限を回避する手段は示されていない。また、ＨＤＤとフラッシュメモリを混在して１つのＲＡＩＤグループ、すなわち１つの仮想デバイスを構成するので、それぞれのメディアの特徴を考慮した仮想デバイスの制御はできていない。
特開平６−３２４８１５号公報 ZHU, Q., DAVID, F., ZHOU, Y., DEVARAJ, C., AND CAO, P. ,"ReducingEnergy Consumption of Disk Storage Using Power-Aware Cache Management". InProc. of the 10th Intl. Symp. on High Performance Computer Architecture(HPCA-10) (Feb. 2004).
以上のような背景から、低消費電力であり、設置面積が小さく、かつ、大容量を得ることのできる大規模まで構成可能なストレージシステムを提供することが課題となっている。
また、データを格納するメディアに応じた、高いシステム性能を提供することも課題となっている。
また、ストレージシステムとしての信頼性、可用性の向上も課題である。書き込み回数制限を有するメディアに対してはストレージシステムとして緩和を行わなくてはならない。
本発明は、ホストコンピュータからのデータを保存するメディアを制御するメディア制御部、チャネルを介して前記ホストコンピュータに接続するチャネル制御部、及び前記ホストコンピュータからのデータを一時的に保存する揮発メモリであるキャッシュメモリ部を備え、前記メディアは、ＨＤＤと、フラッシュメモリとからなり、前記ホストコンピュータからのリードの要求を受けた際に、格納先が前記ＨＤＤか前記フラッシュメモリかを判別し、格納先が前記ＨＤＤの場合には前記ＨＤＤから読み出したデータを前記キャッシュメモリ部に格納した後に前記ホストコンピュータに応答し、格納先が前記フラッシュメモリの場合には前記フラッシュメモリから読み出したデータを前記キャッシュメモリ部には格納せずに前記ホストコンピュータに応答し、前記フラッシュメモリに対する書き込み回数を平均化するように、デステージするデータを選択することを特徴とする。
すなわち、本発明は、ホストコンピュータからのデータを保存する１以上のメディアと、前記メディアを制御するメディア制御部、チャネルを介して前記ホストコンピュータに接続するチャネル制御部、及び前記ホストコンピュータからのデータを一時的に保存する揮発メモリであるキャッシュメモリ部を備えるストレージ装置を具備するストレージシステムにおいて、前記メディアは、ＨＤＤと、フラッシュメモリとからなり、前記ホストコンピュータからのリードの要求を受けた際に、格納先が前記ＨＤＤか前記フラッシュメモリかを判別し、格納先が前記ＨＤＤの場合には前記ＨＤＤから読み出したデータを前記キャッシュメモリ部に格納した後に前記ホストコンピュータに応答し、格納先が前記フラッシュメモリの場合には前記フラッシュメモリから読み出したデータを前記キャッシュメモリ部には格納せずに前記ホストコンピュータに応答し、前記ストレージ装置は、前記フラッシュメモリに対する書き込み回数を平均化するように、デステージするデータを選択し、各々のフラッシュメモリに対するデステージした回数を記録し、デステージするデータを選択する際に、各々の前記フラッシュメモリに対するデステージした回数を比較し、デステージした回数が少ないものから優先的にデステージするデータを決定することを特徴とするストレージシステムである。
本発明のストレージシステムでは、低消費電力であり、設置面積が小さく、かつ、大規模まで構成可能であり、また、データを格納するメディアに応じた、高いシステム性能を提供することもできる。また、各メディアに対する書き込み回数の低減を図るので、書き込み回数制限を有するメディアに対してもストレージシステムとして、信頼性、可用性の向上可能になるといった利点がある。
本発明を実施するための最良の形態を説明する。
以下に本発明のストレージシステムとストレージ装置及びその制御方法の実施例について、図面に基づいて説明する。
実施例１を説明する。図１は、本発明の第１の実施の形態のストレージシステムの構成のブロック図である。ストレージシステムは、ストレージ制御装置１およびハードディスクドライブ（ＨＤＤ）５０、フラッシュメモリデバイス（本図ではＦＭ制御部１６の内部にフラッシュメモリデバイスを備える例を示している）から構成されている。ストレージ制御装置１は、チャネル４を通じて、ＳＡＮスイッチ３などで構成されるＳＡＮ（Storage Area Network）を経て、ホストコンピュータ２に接続される。また、ディスク側チャネル６０を通じてデータを格納するメディアである複数のＨＤＤ５０と接続されている。ストレージ制御装置１は、複数のチャネル制御部１１と複数のキャッシュメモリ１３と制御メモリ部１７と複数のディスク制御部１４および複数のＦＭ制御部１６と、これらを、内部パス１５を介して接続する内部スイッチ１２から成る。チャネル制御部１１は、チャネル４を通じてホストコンピュータ２からの入出力要求を受け取り、この入出力要求の要求種類（例えば、リード要求、ライト要求）や対象アドレスなどを解釈し、図７以降で述べるような処理を行う。キャッシュメモリ部はＨＤＤやフラッシュメモリに格納されるべきデータやホストコンピュータ２に返すべきデータを一時的に格納する。制御メモリ部１７は、キャッシュメモリ部１３のディレクトリ情報や、ストレージシステムの構成情報を格納している。ディスク制御部１４は、チャネル制御部１１などの要求に基づき、ディスク側チャネル６０を通じてＨＤＤ５０の制御を行い、ホストコンピュータ２から要求されたデータを取り出しや格納を行う。この際、ディスク制御部１４がＨＤＤ５０に対してＲＡＩＤ制御を行いストレージシステムの信頼性、可用性および性能を向上させてもよい。ＦＭ制御部１６は、フラッシュメモリまたはフラッシュメモリデバイスの制御を行う。チャネル制御部１１などの要求に基づき、フラッシュメモリまたはフラッシュメモリデバイスにホストコンピュータ２から要求されたデータを取り出しや格納を行う。この際、ＦＭ制御部１６がフラッシュメモリデバイスに対してＲＡＩＤ制御を行いストレージシステムの信頼性、可用性および性能を向上させてもよい。なお、本実施例では、ストレージシステムはＨＤＤ５０と接続されているが、ＨＤＤ５０ならびにディスク制御部１４を持たない構成でもよい。また、制御メモリ部１７に格納される情報は、物理的にキャッシュメモリ部１３と同一のメモリ上に配置してもよい。
図２はチャネル制御部１１の詳細の構成のブロック図である。チャネル制御部１１は、複数のプロセッサ１１１、メモリモジュール１１２、周辺処理部１１３、及び、複数のチャネルプロトコル処理部１１４と内部ネットワークインタフェース部１１７から成る。プロセッサ１１１はバス等で周辺処理部１１３に接続される。周辺処理部１１３は、メモリモジュール１１２に接続され、メモリモジュールの制御を行う。また、制御系バス１１５を介してチャネルプロトコル処理部１１４および内部ネットワークインタフェース部１１７にも接続される。周辺処理部１１３は、接続されるプロセッサ１１１及びチャネルプロトコル処理部１１４及び内部ネットワークインタフェース部１１７からのパケットを受け、パケットの示す転送先アドレスがメモリモジュール１１２上ならばその処理を行い、必要ならばデータを返す。また転送先アドレスがそれ以外ならば、適切なフォワーディングを行う。また、周辺処理部１１３は、その他のプロセッサ１１１がこの周辺処理部１１３に接続されるプロセッサ１１１と通信を行うためのメールボックス１１３１を持つ。プロセッサ１１１は、周辺処理部１１３を通してメモリモジュール１１２にアクセスし、メモリモジュール１１２に格納された制御プログラム１１２１に基づいて処理を行う。また、メモリモジュール１１２には、チャネルプロトコル処理部１１４がＤＭＡ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ）を行うための転送リスト１１２３も格納されている。チャネルプロトコル処理部１１４は、チャネル４上のプロトコル制御を行い、ストレージシステム１内部で処理ができるようなプロトコル方式に変換する。チャネルプロトコル処理部１１４は、チャネル４を通じてホストコンピュータ２からの入出力要求を受けると、その入出力要求のホストコンピュータ番号やＬＵＮ（Logical Unit Number）やアクセス先アドレスなどをプロセッサ１１１に通知する。プロセッサ１１１は、その通知に基づき、ディレクトリ情報１３２３にアクセスし、入出力要求のデータを格納すべきアドレスまたは入出力要求のデータが存在する場合はメモリモジュール１１２上に転送リスト１１２３を作成し、それに基づきチャネルプロトコル処理部１１４に転送を行わせる。ホストコンピュータ２がリード要求したデータがキャッシュメモリ１３上にない場合で、ＨＤＤ５０に格納されているならば、ディスク制御部１４に、ＨＤＤ５０に格納されている要求データをキャッシュメモリ１３に格納する（この動作を「ステージング」という）ように指示を与えた後に転送リスト１１２３により転送させる。フラッシュメモリ上に格納されているならば、フラッシュメモリのアドレスを転送リストにセットする。転送リストは、キャッシュメモリ１３もしくはフラッシュメモリ上のアドレスのリストになっており、入出力要求がライトならば、データ転送系バス１１５を介して接続された内部ネットワークインタフェース部１１７を通じ、ホストコンピュータからのデータをリストに記載されたアドレスに書き込んでいく。またリードならば、同様にリストに記載されたアドレスからデータを読み込み、それをホストコンピュータに返す。これらの動作の詳細に関しては図７以降を用いて説明する。内部ネットワークインタフェース部１１７は、チャネル制御部１１内と他のストレージシステム１内部と内部パス１５を経て通信を行う際の、インタフェースとなる部位である。
なお、ディスク制御部１４もチャネル制御部１１とほぼ同じ構造を持つ。ただし、制御プログラム１１２１の内容が異なり、また、チャネルプロトコル処理部１１４はＨＤＤ５０との通信を行う（チャネル４とディスク側チャネル６０のプロトコルは異なってもよい。しかし、ディスク側チャネル６０上のプロトコル処理を行い、ストレージシステム１内部で処理が出来るように変換する意味ではチャネル制御部１１のチャネルプロトコル処理部１１４と同様）。プロセッサ１１１はチャネル制御部１１からの要求や一定時間間隔で、キャッシュメモリ１３上のデータをハードディスクドライブ５０に書き込みを行う。また、キャッシュメモリ１３上にホストコンピュータから要求されたデータが存在していない場合は、チャネル制御部１１からの指示を受け、ＨＤＤ５０からデータを読み込み、キャッシュメモリ１３にそのデータを書き込む。これらの際には、プロセッサ１１１は、制御メモリ部１７に格納されたディレクトリ情報にアクセスし、ホストコンピュータ２の要求するデータを読み出すべきまたは格納すべきキャッシュメモリのアドレスを調査する。そして、要求されたデータがキャッシュメモリ１３上に存在しない場合でキャッシュメモリ１３に空き領域がないときは、要求されたデータを格納するため空き領域を作るべく、すでにあるデータをＨＤＤ５０に格納する（この動作をデステージと呼ぶ）。これらＨＤＤ５０の操作においては、ディスク制御部１４がディスク側チャネル６０を通じてＨＤＤ５０を制御する。この際、ＨＤＤ５０全体としての可用性および性能を向上させるため、ディスク制御部１４はＨＤＤ５０群に対してＲＡＩＤ制御を行う。
図３は、ＦＭ制御部１６の詳細の構成のブロック図であり、フラッシュメモリを一体化している。ＦＭ制御部１６は、内部ネットワークインタフェース部１６１、ＤＭＡコントローラ１６２、揮発メモリであるメモリモジュール１６４およびその制御を行うメモリコントローラ１６３、ならびにフラッシュメモリ１６６（図中ではＦＭ）とそれを制御するＦＭコントローラ１６５が備えられている。内部ネットワークインタフェース部１６１は、ＦＭ制御部１６内と他のストレージ制御装置１内部と内部パス１５を経て通信を行う際の、インタフェースとなる部位である。ＦＭ制御部１６内のＤＭＡコントローラ１６２は、ホストコンピュータ２からのライトの要求を処理する際キャッシュメモリに空き領域を作るなどの場合に、チャネル制御部１１のプロセッサ１１１がセットする転送リスト１６４１により、キャッシュメモリ部１３からフラッシュメモリ１６６へのデータの転送を行う。ＦＭコントローラ１６５は、内部ネットワークを通してなされたチャネル制御部１１からの読み込み要求や、ＤＭＡコントローラ１６２の書き込み要求により、フラッシュメモリ１６６を制御しデータのやり取りを行う。図３において、フラッシュメモリ１６６の実装形態としては、基板に直接配置することができる。この際は図４のコネクタやＦＭプロトコル処理部、図５のＦＭ側チャネルなどの部品が不要になるので、よりコンパクトにストレージシステムを実現することが可能になる。また、ＦＭコントローラ１６５にてそれぞれのフラッシュメモリ１６６に対するウェアレベリングなどを行ってもよい。
図４は、ＦＭ制御部１６の別の詳細の構成のブロック図である。ここでは、記憶素子としてフラッシュメモリデバイス１６９を用いており、フラッシュメモリデバイスを別体としている。フラッシュメモリデバイス１６９は、コネクタ１６８を介してＦＭ制御部１６と接続されているため、脱着が可能となっている。そのため、フラッシュメモリデバイス１６９が故障した際には、交換することも可能となる（これを行うためには、チャネル制御部１１のプロセッサ１１１が、予めフラッシュメモリデバイス１６９間で冗長構成をとるように、転送リスト１６４１をセットしていればよい）。また、フラッシュメモリデバイス１６９自体をより容量の大きなものに交換することも可能となる。このフラッシュメモリデバイス１６９は、内部においてウェアレベリングなどの技術により信頼性、性能の向上が図られているものであり、外部とのやり取りは、専用プロトコルで行われる。そのため、ＦＭプロトコル処理部１６７にて、ストレージ制御装置１内部で処理できる形式に変換を行っている。
図５は、ＦＭ制御部１６の別の詳細の構成のブロック図である。ここでは、フラッシュメモリデバイス１６９をＦＭ側チャネル１６１０により接続している。この構成をとることにより、図４の特徴に加え、より多数のフラッシュメモリデバイス１６９を接続でき、大容量のストレージシステムを実現することができる。また、あるフラッシュメモリデバイス１６９の一部の領域は、後に説明する緊急デステージ領域１６９０としてもよい。
図６は、内部スイッチ部１２の詳細の構成のブロック図である。内部スイッチ部１２は、内部ネットワークインタフェース部１２１と複数のセレクタ１２２からなっている。セレクタ１２２は、ストレージ制御装置１の内部のチャネル制御部１１など各部から送られてきた要求の要求先を解析し、その要求先に接続される内部パス１５を制御する内部ネットワークインタフェース部１２１に要求を転送する。その際、各セレクタ間で要求転送先の内部ネットワークインタフェース部１２１競合を行う。この内部スイッチ部１２により、チャネル制御部１１からは、キャッシュメモリ部１３、制御メモリ部１７およびＦＭ制御部１６と直接のやり取りを行うことができる。ＦＭ制御部１６はチャネル制御部１１、キャッシュメモリ部１３および制御メモリ部１７とやり取りができる。また、ディスク制御部１４からは、キャッシュメモリ部１３と制御メモリ部１７に直接のやり取りができる。ＦＭ制御部１６とディスク制御部１４の接続に関する相違は、この内部スイッチ部１２はチャネル制御部ＦＭ制御部間接続１２３を備えていることにより、ＦＭ制御部１６はチャネル制御部１１と直接のやり取りが行える点である。
図７は、ホストコンピュータ２から、ＨＤＤ５０領域へのリードの要求が行われた場合の処理の流れを表す図である。ホストコンピュータ２からリード要求を、チャネル４を通じてチャネル制御部１１が受信する（ｓ７０１）。チャネル制御部１１のプロセッサ１１１は、受信した要求を解析し、ＬＵＮや対象論理ブロックアドレスを得る。ここでは、該当データがＨＤＤ５０に格納される領域のものであることを知る（ｓ７０２）。さらにチャネル制御部１１のプロセッサ１１１は、制御メモリ部１７に格納された、ライトキャッシュ領域ならびにリードキャッシュ領域のディレクトリ情報にアクセスし、キャッシュメモリ部１３に該当データの格納の有無を確認する（ｓ７０３、ｓ７０４。図中では１回のアクセスになっているが、実際には複数回のアクセスになる場合もある。以下も同様）。該当データがキャッシュメモリ部１３に既に存在していればｓ７１５以降の処理によりホストコンピュータ２に応答するが、ここでは、該当データがキャッシュメモリ部１３に存在しなかったとする。この場合、ディスク制御部に該当データをキャッシュメモリ部１３に転送させる（ステージング）が、キャッシュメモリ部１３に空き領域がない場合は、ステージングの前にデータを格納すべきキャッシュ領域を作らなければならない。どの領域に空き領域にすべきかを決定し、その操作をおこなうステップがｓ７０５、ｓ７０６である。領域が確保された後で、ステージングの要求を、制御メモリ部１７の通信領域１７３にメッセージを書き込むことを介してディスク制御部１４に通知する（ｓ７０７）。ディスク制御部１４は定期的もしくは一連の処理の終了毎に、制御メモリ部１７の通信領域１７３を読み込むことによりチャネル制御部１１からの要求があることを知る（ｓ７０８、ｓ７０９）。なお、こうした方式でチャネル制御部１１とディスク制御部１４が連携を行うのは、ＨＤＤ５０からデータを得られる時間が不定で、その他の処理時間と比較して長いためであり、この方式によりバックグラウンドで他の要求の処理などを行うことができる。ステージングの要求を認知したディスク制御部１４は、該当データが得られるようにディスク側チャネル６０を通じてＨＤＤ５０を制御する（ｓ７１０）。ＨＤＤ５０からのデータが得られると、ｓ７０５、ｓ７０６により確保した領域に、該当データを書き込む（ｓ７１１。ステージング）。また、ステージングが終了したことを、通信領域１７３を用いてチャネル制御部１１に通知する（ｓ７１２）。チャネル制御部１１は、ディスク制御部１４同様に通信領域１７３を読み込んでおり、ステージング終了のメッセージの存在を知る（ｓ７１３、ｓ７１４）。その後、チャネル制御部１１のプロセッサ１１１は、転送リスト１１２３をセットし（あらかじめステージング要求直後にセットしておいてもよい）、転送の指示を行う。チャネルプロトコル処理部１１４は、キャッシュメモリ部１３から該当データを読み込み、ホストコンピュータ２に転送する（ｓ７１５、ｓ７１６、ｓ７１７）。以上が、ＨＤＤ５０に格納されたデータのリードの処理の流れである。ＨＤＤ５０の速度が、不定であり、遅いため、キャッシュメモリ部１３を介したデータのやり取りが必要となる。
図８は、ホストコンピュータ２から、フラッシュメモリ領域へのリードの要求が行われた場合の処理の流れを表す図である。ホストコンピュータ２からリード要求を、チャネル４を通じてチャネル制御部１１が受信する（ｓ８０１）。チャネル制御部１１のプロセッサ１１１は、受信した要求を解析し、ＬＵＮや対象論理ブロックアドレスを得る。ここでは、該当データがフラッシュメモリに格納される領域のものであることを知る（ｓ８０２）。さらにチャネル制御部１１のプロセッサ１１１は、制御メモリ部１７に格納された、ライトキャッシュ領域のディレクトリ情報にアクセスし、キャッシュメモリ部１３のライトキャッシュ領域１３２に該当データの格納の有無を確認する（ｓ８０３、ｓ８０４）。図７の場合と違い、ライトキャッシュ領域１３２に対する調査のみでよい。ここでは、該当データがキャッシュメモリ部１３に存在しなかったとする。チャネル制御部１１のプロセッサ１１１は、転送リスト１１２３をセットし、チャネルプロトコル処理部１１４に転送の指示を行う。チャネルプロトコル処理部１１４は、内部スイッチ部１２のチャネル制御部ＦＭ制御部間接続１２３を介して、ＦＭ制御部１６にデータの要求を行う（ｓ８０５）。ＦＭ制御部１６は、フラッシュメモリ１６６もしくはフラッシュメモリデバイス１６９からデータを取り出し（ｓ８０６）、チャネル制御部１１にデータを返す（ｓ８０７）。こうして得たデータをチャネルプロトコル処理部はホストコンピュータ２に転送する（ｓ８０８）。以上が、フラッシュメモリ１６６もしくはフラッシュメモリデバイス１６９に格納されたデータのリード手順であった。フラッシュメモリの読み出し速度が一定で、高速のため（ｓ８０６）、キャッシュメモリ部１３を介さずにデータのやり取りが可能になる。また、直接転送を行うため、リードに関してはキャッシュ処理を行わず、リードキャッシュ領域１３１の調査（ｓ７０３、ｓ７０４）やキャッシュ領域の確保（ｓ７０５、ｓ７０６）の処理が不要になり、メディアからの読み出し高速化のみならず、付随する処理の高速化も可能になる。また、フラッシュメモリに対しては、リードキャッシュ領域１３１が不要なため、キャッシュメモリ部１３やそのリードキャッシュディレクトリ情報１７１１を格納する制御メモリ部１７の容量を小さくすることが可能になる効果もある。
続いて、フラッシュメモリ１６６またはフラッシュメモリデバイス１６９に好適なキャッシュメモリ部１３の制御方法を説明するが、まずその前に、ホストコンピュータ２からライト要求が行われた場合の処理の流れと、キャッシュメモリ部１３に関わる情報の説明を行う。
図１１Ａは、ホストコンピュータ２からライトの要求が行われた場合で、すでにキャッシュメモリ部１３上に該当アドレスのデータが存在する場合の処理の流れを表す図である。ライト要求については、対象がＨＤＤ５０領域、フラッシュメモリ領域いずれの場合もデータをキャッシュメモリ部１３に一時的に格納する。まず、ホストコンピュータ２からライト要求を、チャネル４を通じてチャネル制御部１１が受信する（ｓ１１０１）。チャネル制御部１１のプロセッサ１１１は、受信した要求を解析し、ＬＵＮや対象論理ブロックアドレスを得る（ｓ１１０２）。さらにチャネル制御部１１のプロセッサ１１１は、制御メモリ部１７に格納された、ライトキャッシュ領域ならびにリードキャッシュ領域のディレクトリ情報にアクセスし、キャッシュメモリ部１３に該当データの格納の有無を確認する（ｓ１１０３、ｓ１１０４。なお、リードキャッシュ領域１３１に存在した場合は、後に述べるような手順で該当スロットを無効化し、新たにライトキャッシュディレクトリ情報１７１２に加える）。ここでは、該当アドレスのデータがライトキャッシュ領域１３２に既に存在していたとする。この場合、同じキャッシュメモリのスロット（キャッシュの制御単位。後で詳述）にデータを格納する。チャネル制御部１１は、 ホストコンピュータ２にデータの送信要求を行い（ｓ１１０５）つつ、データを該当するスロットへ格納するように転送リスト１１２３をセットする。チャネル制御部１１のチャネルプロトコル処理部１１４は、応答したホストコンピュータ２からのデータを受信し（ｓ１１０６）、それを転送リスト１１２３に基づきキャッシュメモリ部１３に格納する（ｓ１１０７）。このような場合、フラッシュメモリに対するライト要求であったとしても、フラッシュメモリに書き込みをしなくともよく、書き込み回数の低減が図れる。このため、ライト要求の場合は、リード要求の場合と異なり、データの格納メディアがフラッシュメモリ１６６もしくはフラッシュメモリデバイス１６９の場合でも、キャッシュメモリ部１３を用いた処理を行う。
次に図１１Ｂを用いて、ホストコンピュータ２から、ライトの要求が行われた場合で、キャッシュメモリ部１３上に該当アドレスのデータが存在しないが既に空いているスロットがない場合の処理の流れを説明する。ｓ１１２４までは、図１１Ａのｓ１１０４と同様であるが、この図においては、該当アドレスのデータがライトキャッシュ領域１３２に存在しておらず、空きのスロットはない場合とする。そこで、まず、既にキャッシュメモリ部１３上に存在するデータを、格納されるべきＨＤＤ５０、フラッシュメモリに格納し（デステージング）、今回のホストコンピュータ２からのデータを格納するための領域を作る。まず、ＬＲＵ（Ｌｅａｓｔ Ｒｅｃｅｎｔｌｙ Ｕｓｅｄ）アルゴリズムなどで、デステージするデータを決定する（ｓ１１２５）。デステージするデータが決まったら、チャネル制御部１１のプロセッサ１１１は、ＦＭ制御部１６に、キャッシュメモリ部１３上のアドレスと格納先のフラッシュメモリ１６６もしくはフラッシュメモリデバイス１６９のアドレスの対応が記された転送リスト１６４１をセットする（ｓ１１２７）。なお、対象がＨＤＤ５０の場合は、図７同様に通信領域１７３を用いてディスク制御部１４にメッセージを送信することにより、デステージの要求が行われる。続いて、転送リスト１６４１に基づき、ＦＭ制御部１６のＤＭＡコントローラ１６２はキャッシュメモリ部１３から該当データを読み込み（ｓ１１２７、ｓ１１２８）、フラッシュメモリ１６６もしくはフラッシュメモリデバイス１６９に書き込む（ｓ１１２９）。一連の処理が終了するとＤＭＡコントローラ１６２はデステージが完了した旨をチャネル制御部１１のプロセッサ１１１に通知する（ｓ１１３０）。プロセッサ１１１は、デステージしたスロットに今回のホストコンピュータ２からのデータを格納するために、ディレクトリ情報を更新し（ｓ１１３１、ｓ１１３２）、ホストコンピュータ２にデータの送信要求を行い（ｓ１１３３）つつ、データを該当するスロットへ格納するように転送リスト１１２３をセットする。チャネル制御部１１のチャネルプロトコル処理部１１４は、応答したホストコンピュータ２からのデータを受信し（ｓ１１３４）、それを転送リスト１１２３に基づきキャッシュメモリ部１３に格納する（ｓ１１３５）。
次に、これまで述べてきたキャッシュメモリ部１３に関する情報を説明する。図９は、キャッシュメモリ部１３ならびに制御メモリ部１７に格納されるデータの詳細を示したブロック図である。キャッシュメモリ部１３は、リードキャッシュ領域１３１とライトキャッシュ領域１３２を持つ。リードキャッシュ領域１３１は、ホストコンピュータ２からリード要求されたデータを一時的に格納する。これにより、格納されているデータに対して再びホストコンピュータ２からリード要求を受け付けた場合に、ＨＤＤ５０から再び読み込むことなくリードキャッシュ領域１３１のデータを応答することによりストレージシステムとしての処理の高速化を図る。本実施例では、ＨＤＤ５０の読み出しまでの時間が不定であり、低速であるためリードキャッシュ領域１３１を設けているが、フラッシュメモリに格納されているデータに対してはリードキャッシュ領域１３１を用いない。ライトキャッシュ領域１３２は、ホストコンピュータ２からライト要求されたデータを一時的に格納し、格納されているデータと同じアドレスに対して再びライト要求を受け付けた場合には、ライトキャッシュ領域１３２上の該当データを上書きする。ＨＤＤ５０領域に対しては、高速なキャッシュメモリ部１３に一時的に書き込んでおくことで性能の向上も期待できる。また、キャッシュメモリ部１３上で上書きさせるため、フラッシュメモリに書き込む回数を低減することができ、ストレージシステムの信頼性、可用性を向上させることができる。なお、これらの管理している単位をここではスロットという。
次に制御メモリ部１７について説明する。制御メモリ部１７は、ディレクトリ情報１７１、構成情報１７２ならびに通信領域１７３を格納している。構成情報１７２は、ストレージシステムに関する情報である。例えば、チャネル制御部１１がいくつ存在していて、それぞれ接続されているチャネル４にどういったＬＵ（Ｌｏｇｉｃａｌ Ｕｎｉｔ）を提供し、そのＬＵは、どのＨＤＤ５０もしくはフラッシュメモリデバイス１６６を用いてデータを格納するか、またそれはどういった形で仮想的に提供するか、といった情報である。通信領域１７３は、チャネル制御部１１とディスク制御部１４とが互いにメッセージを書き込みまたは読み込みを行い協調動作するための領域である。また、ディレクトリ情報１７１は、キャッシュメモリ部１３にどのようなデータが格納されているかを示す情報であり、どのＬＵＮや論理ブロックアドレス（ＬＢＡ、Ｌｏｇｉｃａｌ Ｂｌｏｃｋ Ａｄｄｒｅｓｓ）などで示されるホストコンピュータ２からのアドレスのデータがキャッシュメモリ部１３上のどこに格納されているかを示すリードキャッシュディレクトリ情報１７１１、ライトキャッシュディレクトリ情報１１７２、および、新しいデータをキャッシュメモリ部１３に格納するために、どの元からあるデータを無効化するかを決定するための基準となるリードおよびライトのアクセス順序リスト１７１３、１７１４を持つ。
なお、キャッシュメモリ部１３、制御メモリ部１７は、高速で書き込み回数制限のない揮発性のメモリで構成される。しかし、停電などに備え、一定時間は内容を保持できるバッテリバックアップの機能を備えている。しかし、そのバッテリの保つことの出来る時間を越えると考えられる更に大規模な停電の際には、図１１Ｂのｓ１１２５からｓ１１２９の処理を用いて、全ての一時的に格納されたキャッシュメモリ部１３上のデータをメディアに書き込み、バックアップバッテリが切れた際にもデータを失わないようにする。もしくは、ｓ１１２５からｓ１１２９を用いた処理はプロセッサ１１１の計算量が必要となってしまうのでこの方法を用いず、メディア上に予め用意された緊急デステージ領域に、キャッシュメモリ部１３および制御メモリ部１７のイメージをそのまま書き込む。これは、転送リスト１６４１をキャッシュメモリ部１３および制御メモリ部１７の全域を獲得するようにセットすることによって実行しても、ＤＭＡコントローラ１６２に、キャッシュメモリ部１３および制御メモリ部１７のイメージを取得する機能を設けることによって実行してもよい。特にフラッシュメモリは、低消費電力であるので、バックアップバッテリの限られた時間と電力で実行せねばならないこの処理のメディアとして適している。つまり、この緊急デステージ領域をフラッシュメモリ１６６もしくはフラッシュメモリデバイス１６９上に設けることにより大きな効果が得られる。例えば、図５ではあるフラッシュメモリデバイス１６９の一部の領域に緊急デステージ領域１６９０を割り当てている。
図１０Ａは、リードキャッシュディレクトリ情報１７１１、ライトキャッシュディレクトリ情報１１７２の詳細を示したブロック図である。ディレクトリ情報は、ＬＵＮ欄１００１、ＬＢＡ欄１００２、最終的にそのデータが格納されるメディアを示すメディア欄１００３および、それに続く、ホストコンピュータ２から指定されるアドレス（ＬＢＡ）とそのデータが格納されているキャッシュメモリ部１３上のアドレスの対応がリスト形式で格納されているホスト−キャッシュアドレス対応リスト１００４から成る。キャッシュメモリ部１３上のホストコンピュータ２の要求したデータがあるかどうかを調査する場合（図７のｓ７０３、ｓ７０４や図８のｓ８０３、ｓ８０４の操作に相当）、まず受領した要求のＬＵＮと一致するものをＬＵＮ欄１００１から見つける。次に対応するポインタが指し示すテーブルのＬＢＡ欄１００２と、受領した要求のＬＢＡの一致するものを調査する。ＬＢＡ欄１００２はＬＢＡの範囲が示されており、一致するＬＢＡ範囲のデータに関する情報が、その欄に対応するポインタが指す先の、ホスト−キャッシュアドレス対応リスト１００４に格納されている。これには、（範囲ではなく）ＬＢＡの値と、そのデータが格納されているキャッシュのアドレス（スロット番号）が記されている。このホスト−キャッシュアドレス対応リスト１００４の中に対応するＬＢＡがなければキャッシュメモリ部１３には該当データが格納されていないことになる。
図１０Ｂは、従来のアクセス順序リスト１７１３、１７１４の詳細を示したブロック図である。これは、どのスロットのデータが何番目に最近アクセスされたのかを示す情報である。先頭に格納されているものが最も最近にアクセスされたスロット、最後尾に格納されているものが最も昔にアクセスされたスロットである。リードキャッシュ領域１３１、ライトキャッシュ領域１３２のそれぞれに対応する情報がリスト構造で格納されている。例えば、ホストコンピュータ２からキャッシュメモリ部１３に格納されていないデータに対してのアクセス要求を受領した場合など、キャッシュメモリ部１３に開きスロットを作る場合、一般的なＬＲＵアルゴリズムを用いるとすると、キャッシュに新たな空きスロットを作る場合、最も昔にアクセスされたもの、すなわち、リストの最後尾に示されているスロットを無効化する。その後、新しいデータを該当スロットに格納し、該当スロットは最も最近にアクセスされたことになるので、アクセス順序リスト１７１３、１７１４の先頭に該当スロットをおく。このリスト操作の手順としては、まず、最後尾にあった該当スロットの情報をdelete操作により外し、先頭に該当スロットの情報をinsert操作により追加する。なお、この際、キャッシュディレクトリ情報１７１１または１７１２も更新する。該当スロットに元に格納されていたものを示す情報をホスト−キャッシュアドレス対応リスト１００４からdelete操作により外し、新たなＬＢＡに対応するものをこの該当スロット番号とともにinsert操作により追加する。また、ホストコンピュータ２からの要求を受けたが、キャッシュメモリ部１３に、すでに格納されていた場合は、上記の手順によりアクセス順序リスト１７１３、１７１４のみを更新し、キャッシュディレクトリ情報１７１１、１７１２は更新しない。
以上に示した、図１０Ｂのアクセス順序リストをフラッシュメモリ１６６およびフラッシュメモリデバイス１６９に用いると次のような不都合が起こる。アクセス順序によりデステージするスロットを決定しているので、あるメディアにばかりデステージすなわち書き込みが起こってしまうことがある。例えば、スロット数が３のキャッシュメモリが備わっている場合に、ＦＭ１に対するアドレスＡ、Ｂに対するデータと、ＦＭ２に対するアドレスＣ、Ｄに対するデータを、Ａ、Ｂ、Ｃ、Ａ、Ｂ、Ｄのパターンの繰り返しでライト要求された場合は、ＦＭ２に集中してデステージが起こってしまう。こういった状況では、メディアの書き込み制限回数に早々に到達してしまい、ストレージシステムとして十分な信頼性、可用性を提供できない恐れがある。なお、本実施例では、ＬＲＵアルゴリズムを用いて説明しているが、アクセス頻度を用いるなどのＬＲＵ以外のアルゴリズムを用いた場合も同様のことが起こりうる。
以下では、こうした不都合を回避するキャッシュ制御方法を説明する。図１０Ｃは、好適なキャッシュ制御を行うためのアクセス順序リスト１７１３、１７１４の詳細を示したブロック図である。図１０Ｂと異なり、書き込み回数制限があるフラッシュメモリに関しては、各メディア毎（各フラッシュメモリデバイス１６９毎）にリスト１０６１が設けられている。ＨＤＤ５０に関しては、各々のＨＤＤ５０毎に設けても、またはＨＤＤ５０全体として１つのリスト１０６２としてもよい。さらに、各リストにデステージ回数欄１０６３、アクセス回数欄１０６４、容量欄１０６５を持つ表を備える。デステージ回数欄１０６３は、そのメディアにデステージを行った総回数を示す。アクセス回数欄１０６４は、そのメディアに領域に対して起こったリード、ライトも含めたアクセス回数を示す。これはキャッシュメモリ部１３上にデータが存在した場合も回数に含めている。また容量欄１０６５は、そのメディアの容量を示している。同じ頻度でフラッシュメモリデバイス１６９にデステージしたとしても、容量が大きいほど、フラッシュメモリ内部の１つのセルに書き込まれる頻度は少なくなることを考慮する場合に用いる。さらに、各メディアにリストを持つ。リストの内容は図１０Ｂの場合とほぼ同様で、ＬＲＵアルゴリズムを用いるとすると、どのスロットが何番目に最近アクセスされたのかを示す情報が格納されている。ただし、この情報は、このメディアに格納されるべきデータに関するもののみである。なお、ＨＤＤ５０に関するリストにはデステージ制限欄１０６６がある。この欄が「なし」の場合は、フラッシュメモリとＨＤＤ５０で異なるキャッシュ制御を行い、次に説明する図１２Ａのｓ１２０１でメディア種類をＨＤＤと認識する。この場合、ライトキャッシュ領域１３２は、予めＨＤＤ５０領域とフラッシュメモリ領域に分けられている。こうした分割をなくキャッシュメモリをより柔軟に用いたい場合は、この欄を「あり」とし、フラッシュメモリと同等のキャッシュ制御を行う。この場合は、メディア種類がＨＤＤであっても、図１２Ａのｓ１２０１でフラッシュメモリとして処理が選択される。また、デステージ回数欄１０６３は、一定時間間隔でゼロにリセットしてもよい。リセットを行う際は全メディアに関してのデステージ回数欄１０６３をゼロにする。
次に、図１０Ｃのアクセス順序リスト１７１３、１７１４を用いた、デステージするスロットを決定する処理の説明を、図１２Ａを用いて行う。これは、チャネル制御部１１のプロセッサ１１１により実行されるもので、デステージを行わねばならないことが判明した後の処理である図１１Ｂのｓ１１２５以降の処理に相当する。まず、ホストコンピュータ２から受領したライト要求が、ＨＤＤに対するものかフラッシュメモリに対するものか、メディア種類を判別する（ｓ１２０１）。これは、ディレクトリ情報のメディア欄１００３を用いて知ることができる。メディア種類がＨＤＤならば、ＨＤＤのアクセス順序リスト１０６２を用いて最も昔にアクセスされたスロットを探し、そのスロットをデステージさせるメッセージを送り、ｓ１２０７に処理を移す（ｓ１２０２）。メディア種類がフラッシュメモリ、もしくはＨＤＤであってもデステージ制限欄１０６６が「あり」の場合は、各メディアのデステージ回数欄１０６３を比較して、デステージ回数が最小のメディアを探す（ｓ１２０３）。そのメディアのリストの要素数を調べることで、使用しているスロットがあるかを調査する（ｓ１２０４）。ないならば、次にデステージ回数の少ないメディアを探して再びｓ１２０４に処理を移す（ｓ１２０５）。あるならば、そのアクセス順序リスト１０６１を用いて最も昔にアクセスされたスロットを探し、そのスロットをデステージするように指示する（ｓ１２０６）。次に該当メディアのデステージ回数欄１０６３に１を足す（ｓ１２０７）。さらに、該当スロットをディレクトリ情報およびアクセス順序リストから外し（ｓ１２０８）、さらにステージするデータに関してディレクトリ情報およびアクセス順序リストの最新に追加する（ｓ１２０９）。その後、該当スロットに今回受領したデータを書き込むことを行う（ｓ１２１０）。なお、ｓ１２０３でデステージ回数の最小のメディアを探すが、容量欄１０６５の説明で述べたとおりセル自体の書き込み回数を考慮するならば、その評価関数として、デステージ回数を容量で除算したものを用いてもよい。
また、デステージ回数のみでなく、アクセス回数も考慮した場合の同処理を、図１２Ｂを用いて説明する。まず、各メディアのデステージ回数欄１０６３とアクセス回数欄１０６４について調査し、α、βを定数とし、αとデステージ回数の積とβをアクセス回数で除したものの和を評価関数とし、これが最少となるメディアを探す（ｓ１２４１）。そのメディアのリストの要素数を調べることで、使用しているスロットがあるかを調査する（ｓ１２４２）。ないならば、次に少ないメディアを探して再びｓ１２４２に処理を移す（ｓ１２４３）。あるならば、そのアクセス順序リスト１０６１、１０６２を用いて最も昔にアクセスされたスロットを探し、そのスロットをデステージするように指示する（ｓ１２４４）。以降の処理は、図１２Ａのｓ１２０７と同様である。この処理を用いた場合は、フラッシュメモリ領域とＨＤＤ領域に分けておく必要もなく、またメディアがＨＤＤの場合のライト要求後に同じデータに対するリード要求が多発するなどの、キャッシュメモリを用いた性能向上が可能なパターンなどにも、柔軟に対応することができる。なお、メディアをインデックス順で選択することも可能である。
実施例２を説明する。図１３に本発明の第２の実施の形態のストレージシステムのブロック図を示す。この形態では、ＦＭ制御部がキャッシュメモリ部１３や制御メモリ部１５と同等の位置に実装されている。一般にキャッシュメモリ部１３や制御メモリ部１５は、チャネル制御部１１やディスク制御部１４と異なり、チャネル４やディスク側チャネル６０が接続できる位置に実装しなくてもよい。例えば、チャネル４接続する作業が容易なように装置の前面に配置するといったことや、ディスク側チャネル６０の伝送路的制限からＨＤＤ５０の付近に配置せねばならないといった実装上の制限はない。そのため、この位置に配置することにより、さらにコンパクトに実装できる。この場合は、図３あるいは図４のＦＭ制御部１６の形式が好適である。
さらに、図１４にＦＭ制御部１６を高機能にした高機能ＦＭ制御部１６０のブロック図を示す。さらに大規模な構成をとる場合は、高機能ＦＭ制御部１６０の使用がより好ましい。ここでは、ＦＭ制御部１６もチャネル制御部１１同様に複数のプロセッサ１１１を備え、制御プログラム１１２１に処理方法を設定することにより高度な信頼性、可用性を得るための制御や管理性向上に向けた制御が行えるようになっている。
以上実施例で説明したが、本発明の他の実施形態１は、前記ストレージ装置は、前記第１のメディアを制御する第１のメディア制御部から前記チャネル制御部に直接に転送するパスを備えるストレージシステムである。
本発明の他の実施形態２は、前記ストレージ装置は、前記キャッシュメモリ部から、前記第１のメディアを制御する第１のメディア制御部に直接に転送するパスを備えるストレージシステムである。
本発明の他の実施形態３は、前記メディアは、書き込み回数に制限を有する第１のメディアと、書き込み回数に制限のない第２のメディアとからなるストレージシステムである。
本発明の他の実施形態４は、前記第２のメディアは、前記第１のメディアよりも読み込み速度が遅く、消費電力が大きいが、第１のメディアよりも書き込み可能回数がはるかに多いメディアであるストレージシステムである。
本発明の他の実施形態５は、前記ストレージ装置は、前記第２のメディアを制御する第２のメディア制御部から、該第２のメディアに格納されたデータを一時的に格納するキャッシュメモリ部に転送するパスを備えるストレージシステムである。
本発明の他の実施形態６は、前記チャネル制御部は、前記ホストコンピュータからのリード要求を受領し、該リード要求の対象データが前記キャッシュメモリ部に格納されていないが前記第１のメディアに格納されている場合、該第１のメディアを制御する第１のメディア制御部に対し、該当データを直接に転送するストレージシステムである。
本発明の他の実施形態７は、前記ストレージ装置は、前記第１のメディアに対する書き込み回数を平均化するように、デステージするデータを選択するストレージシステムである。
本発明の他の実施形態８は、前記ストレージ装置は、各々の第１のメディアに対するデステージした回数を記録するストレージシステムである。
本発明の他の実施形態９は、前記ストレージ装置は、デステージするデータを選択する際に、各々の前記第１のメディアに対するデステージした回数を比較し、デステージした回数が少ないものから優先的にデステージするデータを決定するストレージシステムである。
本発明の他の実施形態１０は、前記ストレージ装置は、各々の第１のメディアに格納されるべきデータに対するアクセスの時間または頻度の情報を、各々の第１のメディアに関連して記録するストレージシステムである。
本発明の他の実施形態１１は、前記ストレージ装置は、デステージするデータを選択する際に、各々の前記第１のメディアに対するデステージした回数およびアクセス回数を基に評価関数を算出し、評価関数が少ないものから優先的にデステージするデータを決定するストレージシステムである。
本発明の他の実施形態１２は、前記ストレージ装置は、キャッシュメモリ部をバックアップするバッテリを備えるストレージシステムである。
本発明の他の実施形態１３は、前記第１のメディア制御部は、前記チャネル制御部の機能の一部を行う高機能メディア制御部であるストレージシステムである。
本発明の他の実施形態１４は、ホストコンピュータからのデータを保存するメディアを制御するメディア制御部、チャネルを介して前記ホストコンピュータに接続するチャネル制御部、及び前記ホストコンピュータからのデータを一時的に保存する揮発メモリであるキャッシュメモリ部を備えるストレージ制御装置において、前記メディアのうちの書き込み回数に制限を有する第１のメディアを制御する第１のメディア制御部から前記チャネル制御部に直接に転送するパスを備えるストレージ装置である。
本発明の他の実施形態１５は、前記キャッシュメモリ部から、前記第１のメディアを制御する第１のメディア制御部に直接に転送するパスを備えるストレージ装置である。
本発明の他の実施形態１６は、前記第１のメディアよりも読み込み速度が遅く、消費電力が大きいが、第１のメディアよりも書き込み可能回数がはるかに多い第２のメディアを制御する第２のメディア制御部から、該第２のメディアに格納されたデータを一時的に格納するキャッシュメモリ部に転送するパスを備えるストレージ装置である。
本発明の他の実施形態１７は、前記チャネル制御部は、前記ホストコンピュータからのリード要求を受領し、該リード要求の対象データが前記キャッシュメモリ部に格納されていないが前記第１のメディアに格納されている場合、該第１のメディアを制御する第１のメディア制御部に対し、該当データを直接に転送するよう指示するストレージ装置である。
本発明の他の実施形態１８は、ホストコンピュータからのデータを保存するメディアを制御するメディア制御部、チャネルを介して前記ホストコンピュータに接続するチャネル制御部、及び前記ホストコンピュータからのデータを一時的に保存する揮発メモリであるキャッシュメモリ部を備えるストレージ制御装置を制御する方法において、前記チャネル制御部が前記ホストコンピュータからのリード要求を受領し、該要求の対象データが前記キャッシュメモリ部に格納されていないが書き込み回数に制限を有する第１のメディアに格納されている場合、該第１のメディアを制御する第１のメディア制御部に対し、該当データを直接転送するよう指示するストレージ装置の制御方法である。
本発明の他の実施形態１９は、前記第１のメディアに対する書き込み回数を平均化するように、デステージするデータを選択するストレージ装置の制御方法である。
実施例１のストレージシステムの構成のブロック図。 チャネル制御部１１の詳細の構成のブロック図。 ＦＭ制御部１６の詳細の構成のブロック図。 ＦＭ制御部１６の別の詳細の構成のブロック図。 ＦＭ制御部１６の別の詳細の構成のブロック図。 内部スイッチ部１２の詳細の構成のブロック図。 ホストコンピュータ２から、ＨＤＤ５０領域へのリードの要求が来た場合の処理の流れを表す図。 ホストコンピュータ２から、フラッシュメモリ領域へのリードの要求が来た場合の処理の流れを表す図。 キャッシュメモリ部１３ならびに制御メモリ部１７に格納されるデータの詳細を示したブロック図。 リードキャッシュディレクトリ情報１７１１、ライトキャッシュディレクトリ情報１１７２の詳細を示したブロック図。 従来のアクセス順序リスト１７１３、１７１４の詳細を示したブロック図。 好適なキャッシュ制御を行うためのアクセス順序リスト１７１３、１７１４の詳細を示したブロック図。 ホストコンピュータ２から、ライトの要求が来た場合で、すでにキャッシュメモリ部１３上に該当アドレスのデータが存在する場合の処理の流れを表す図。 ホストコンピュータ２から、ライトの要求が来た場合で、キャッシュメモリ部１３上に該当アドレスのデータが存在しないが既に空いているスロットがない場合の処理の流れを表す図。 デステージするスロットを決定する処理を表す図。 ステージ回数のみでなく、アクセス回数も考慮した場合のスロット決定の処理を表す図。 実施例２のストレージシステムのブロック図。 高機能ＦＭ制御部１６０のブロック図。
符号の説明
１ ストレージ制御装置
２ ホストコンピュータ
３ ＳＡＮスイッチ
４ チャネル
１１ チャネル制御部
１２ 内部スイッチ
１３ キャッシュメモリ部
１４ ディスク制御部
１５ 内部パス
１６ ＦＭ制御部
１７ 制御メモリ部
５０ ハードディスクドライブ
６０ ディスク側チャネル
１１１ プロセッサ
１１２、１６４ メモリモジュール
１１３ 周辺処理部
１１４ チャネルプロトコル処理部
１１５ データ転送系バス
１１６ 制御系バス
１１７、１２１、１６１ 内部ネットワークインタフェース部
１２２ セレクタ
１２３ チャネル制御部ＦＭ制御部間接続
１３１ リードキャッシュ領域
１３２ ライトキャッシュ領域
１６０ 高機能ＦＭ制御部
１６２ ＤＭＡコントローラ
１６３ メモリコントローラ
１６５ ＦＭコントローラ
１６６ フラッシュメモリ
１６７ ＦＭプロトコル処理部
１６８ コネクタ
１６９ フラッシュメモリデバイス
１７２ 構成情報
１７３ 通信領域
１００１ ＬＵＮ欄
１００２ ＬＢＡ欄
１００３ メディア欄
１００４ ホスト−キャッシュアドレス対応リスト
１０６１、１０６２、１７１３、１７１４ アクセス順序リスト
１０６３ デステージ回数欄
１０６４ アクセス回数欄
１０６５ 容量欄
１０６６ デステージ制限欄
１１２１ 制御プログラム
１１２２ メールボックス
１１２３、１６４１ 転送リスト
１６１０ ＦＭ側チャネル
１６９０ 緊急デステージ領域
１７１１ リードキャッシュディレクトリ情報
１７１２ ライトキャッシュディレクトリ情報

Claims (3)

  1. ホストコンピュータからのデータを保存する１以上のメディアと、前記メディアを制御するメディア制御部、チャネルを介して前記ホストコンピュータに接続するチャネル制御部、及び前記ホストコンピュータからのデータを一時的に保存する揮発メモリであるキャッシュメモリ部を備えるストレージ装置を具備するストレージシステムにおいて、
    前記メディアは、ＨＤＤと、フラッシュメモリとからなり、
    前記ホストコンピュータからのリードの要求を受けた際に、格納先が前記ＨＤＤか前記フラッシュメモリかを判別し、格納先が前記ＨＤＤの場合には前記ＨＤＤから読み出したデータを前記キャッシュメモリ部に格納した後に前記ホストコンピュータに応答し、格納先が前記フラッシュメモリの場合には前記フラッシュメモリから読み出したデータを前記キャッシュメモリ部には格納せずに前記ホストコンピュータに応答し、
    前記ストレージ装置は、前記フラッシュメモリに対する書き込み回数を平均化するように、デステージするデータを選択し、各々のフラッシュメモリに対するデステージした回数を記録し、デステージするデータを選択する際に、各々の前記フラッシュメモリに対するデステージした回数を比較し、デステージした回数が少ないものから優先的にデステージするデータを決定することを特徴とするストレージシステム。
  2. ホストコンピュータからのデータを保存する１以上のメディアと、前記メディアを制御するメディア制御部、チャネルを介して前記ホストコンピュータに接続するチャネル制御部、及び前記ホストコンピュータからのデータを一時的に保存する揮発メモリであるキャッシュメモリ部を備えるストレージ装置を具備するストレージシステムにおいて、
    前記メディアは、ＨＤＤと、フラッシュメモリとからなり、
    前記ホストコンピュータからのリードの要求を受けた際に、格納先が前記ＨＤＤか前記フラッシュメモリかを判別し、格納先が前記ＨＤＤの場合には前記ＨＤＤから読み出したデータを前記キャッシュメモリ部に格納した後に前記ホストコンピュータに応答し、格納先が前記フラッシュメモリの場合には前記フラッシュメモリから読み出したデータを前記キャッシュメモリ部には格納せずに前記ホストコンピュータに応答し、
    前記ストレージ装置は、前記フラッシュメモリに対する書き込み回数を平均化するように、デステージするデータを選択し、デステージするデータを選択する際に、各々の前記フラッシュメモリに対するデステージした回数およびアクセス回数を基に評価関数を算出し、評価関数が少ないものから優先的にデステージするデータを決定することを特徴とするストレージシステム。
  3. ホストコンピュータからのデータを保存するメディアを制御するメディア制御部、チャネルを介して前記ホストコンピュータに接続するチャネル制御部、及び前記ホストコンピュータからのデータを一時的に保存する揮発メモリであるキャッシュメモリ部を備えるストレージ装置を制御する方法において、
    前記メディアは、ＨＤＤと、フラッシュメモリとからなり、
    前記ホストコンピュータからのリードの要求を受けた際に、格納先が前記ＨＤＤか前記フラッシュメモリかを判別し、格納先が前記ＨＤＤの場合には前記ＨＤＤから読み出したデータを前記キャッシュメモリ部に格納した後に前記ホストコンピュータに応答し、格納先が前記フラッシュメモリの場合には前記フラッシュメモリから読み出したデータを前記キャッシュメモリ部には格納せずに前記ホストコンピュータに応答し、
    前記フラッシュメモリに対する書き込み回数を平均化するように、デステージするデータを選択することを特徴とするストレージ装置の制御方法。
JP2005252989A 2005-09-01 2005-09-01 ストレージシステムとストレージ装置及びその制御方法 Expired - Fee Related JP5008845B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2005252989A JP5008845B2 (ja) 2005-09-01 2005-09-01 ストレージシステムとストレージ装置及びその制御方法
US11/247,161 US7464221B2 (en) 2005-09-01 2005-10-12 Storage system, storage device, and control method thereof
EP06250654A EP1764677A1 (en) 2005-09-01 2006-02-07 Storage system, storage device, and control method thereof
US12/250,694 US8332582B2 (en) 2005-09-01 2008-10-14 Storage system, storage device, and control method thereof
US13/688,447 US8631199B2 (en) 2005-09-01 2012-11-29 Storage system, storage device, and control method thereof
US14/098,575 US9251063B2 (en) 2005-09-01 2013-12-06 Storage system including a plurality of flash memory devices
US14/989,965 US9495105B2 (en) 2005-09-01 2016-01-07 System managing a plurality of flash memory devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005252989A JP5008845B2 (ja) 2005-09-01 2005-09-01 ストレージシステムとストレージ装置及びその制御方法

Publications (2)

Publication Number Publication Date
JP2007066129A JP2007066129A (ja) 2007-03-15
JP5008845B2 true JP5008845B2 (ja) 2012-08-22

Family

ID=36968876

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005252989A Expired - Fee Related JP5008845B2 (ja) 2005-09-01 2005-09-01 ストレージシステムとストレージ装置及びその制御方法

Country Status (3)

Country Link
US (5) US7464221B2 (ja)
EP (1) EP1764677A1 (ja)
JP (1) JP5008845B2 (ja)

Families Citing this family (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4818812B2 (ja) * 2006-05-31 2011-11-16 株式会社日立製作所 フラッシュメモリストレージシステム
JP5008845B2 (ja) 2005-09-01 2012-08-22 株式会社日立製作所 ストレージシステムとストレージ装置及びその制御方法
US8706968B2 (en) 2007-12-06 2014-04-22 Fusion-Io, Inc. Apparatus, system, and method for redundant write caching
US8161353B2 (en) 2007-12-06 2012-04-17 Fusion-Io, Inc. Apparatus, system, and method for validating that a correct data segment is read from a data storage device
US9116823B2 (en) 2006-12-06 2015-08-25 Intelligent Intellectual Property Holdings 2 Llc Systems and methods for adaptive error-correction coding
US8719501B2 (en) 2009-09-08 2014-05-06 Fusion-Io Apparatus, system, and method for caching data on a solid-state storage device
US9104599B2 (en) 2007-12-06 2015-08-11 Intelligent Intellectual Property Holdings 2 Llc Apparatus, system, and method for destaging cached data
US9495241B2 (en) 2006-12-06 2016-11-15 Longitude Enterprise Flash S.A.R.L. Systems and methods for adaptive data storage
US8443134B2 (en) 2006-12-06 2013-05-14 Fusion-Io, Inc. Apparatus, system, and method for graceful cache device degradation
US8402201B2 (en) 2006-12-06 2013-03-19 Fusion-Io, Inc. Apparatus, system, and method for storage space recovery in solid-state storage
US8074011B2 (en) 2006-12-06 2011-12-06 Fusion-Io, Inc. Apparatus, system, and method for storage space recovery after reaching a read count limit
US8489817B2 (en) 2007-12-06 2013-07-16 Fusion-Io, Inc. Apparatus, system, and method for caching data
US8151082B2 (en) * 2007-12-06 2012-04-03 Fusion-Io, Inc. Apparatus, system, and method for converting a storage request into an append data storage command
US8935302B2 (en) 2006-12-06 2015-01-13 Intelligent Intellectual Property Holdings 2 Llc Apparatus, system, and method for data block usage information synchronization for a non-volatile storage volume
JP5111965B2 (ja) * 2007-07-24 2013-01-09 株式会社日立製作所 記憶制御装置及びその制御方法
JP5124217B2 (ja) * 2007-09-18 2013-01-23 株式会社日立製作所 ストレージ装置
US7836226B2 (en) 2007-12-06 2010-11-16 Fusion-Io, Inc. Apparatus, system, and method for coordinating storage requests in a multi-processor/multi-thread environment
US8316277B2 (en) 2007-12-06 2012-11-20 Fusion-Io, Inc. Apparatus, system, and method for ensuring data validity in a data storage process
US8195912B2 (en) 2007-12-06 2012-06-05 Fusion-io, Inc Apparatus, system, and method for efficient mapping of virtual and physical addresses
US9519540B2 (en) 2007-12-06 2016-12-13 Sandisk Technologies Llc Apparatus, system, and method for destaging cached data
JP2009205335A (ja) * 2008-02-27 2009-09-10 Hitachi Ltd ２種のメモリデバイスをキャッシュに用いるストレージシステム及びそのストレージシステムを制御する方法
JP2009238094A (ja) 2008-03-28 2009-10-15 Hitachi Ltd ストレージシステム及びデータ保存方法
WO2009131560A1 (en) * 2008-04-22 2009-10-29 Lsi Corporation Distributed cache system in a drive array
US8296782B2 (en) * 2008-04-22 2012-10-23 Lsi Corporation System eliminating hardware duplication during application testing of an internal storage array across different operating systems
JP5075761B2 (ja) * 2008-05-14 2012-11-21 株式会社日立製作所 フラッシュメモリを用いたストレージ装置
US20090292882A1 (en) * 2008-05-23 2009-11-26 Inventec Corporation Storage area network server with parallel processing cache and access method thereof
JP2010049502A (ja) * 2008-08-21 2010-03-04 Hitachi Ltd ストレージサブシステム、及びこれを有するストレージシステム
JP2010128808A (ja) * 2008-11-27 2010-06-10 Hitachi Ltd ストレージ制御装置
TWI371686B (en) * 2009-04-02 2012-09-01 Lsi Corp System and method to reduce drive overhead using a mirrored cache volume in a storage array
WO2011021237A1 (en) * 2009-08-20 2011-02-24 Hitachi,Ltd. Storage subsystem and its data processing method
US8601222B2 (en) 2010-05-13 2013-12-03 Fusion-Io, Inc. Apparatus, system, and method for conditional and atomic storage operations
US9223514B2 (en) 2009-09-09 2015-12-29 SanDisk Technologies, Inc. Erase suspend/resume for memory
CN102597910B (zh) 2009-09-09 2015-03-25 弗森-艾奥公司 存储设备中用于功率减小管理的装置、系统及方法
WO2011031903A2 (en) * 2009-09-09 2011-03-17 Fusion-Io, Inc. Apparatus, system, and method for allocating storage
US9122579B2 (en) 2010-01-06 2015-09-01 Intelligent Intellectual Property Holdings 2 Llc Apparatus, system, and method for a storage layer
US8266501B2 (en) * 2009-09-29 2012-09-11 Micron Technology, Inc. Stripe based memory operation
JP5374313B2 (ja) * 2009-10-16 2013-12-25 ファナック株式会社 不揮発性メモリ保護機能を備えた情報処理装置
WO2012016089A2 (en) 2010-07-28 2012-02-02 Fusion-Io, Inc. Apparatus, system, and method for conditional and atomic storage operations
US8725934B2 (en) 2011-12-22 2014-05-13 Fusion-Io, Inc. Methods and appratuses for atomic storage operations
US8850114B2 (en) 2010-09-07 2014-09-30 Daniel L Rosenband Storage array controller for flash-based storage devices
US8984216B2 (en) 2010-09-09 2015-03-17 Fusion-Io, Llc Apparatus, system, and method for managing lifetime of a storage device
US10817421B2 (en) 2010-12-13 2020-10-27 Sandisk Technologies Llc Persistent data structures
WO2012082792A2 (en) 2010-12-13 2012-06-21 Fusion-Io, Inc. Apparatus, system, and method for auto-commit memory
US9280477B2 (en) * 2010-12-13 2016-03-08 Seagate Technology Llc Data storage management in a memory device
US9208071B2 (en) 2010-12-13 2015-12-08 SanDisk Technologies, Inc. Apparatus, system, and method for accessing memory
US9323670B2 (en) 2010-12-13 2016-04-26 Seagate Technology Llc Protecting volatile data of a storage device in response to a state reset
US10817502B2 (en) 2010-12-13 2020-10-27 Sandisk Technologies Llc Persistent memory management
US9047178B2 (en) 2010-12-13 2015-06-02 SanDisk Technologies, Inc. Auto-commit memory synchronization
US9218278B2 (en) 2010-12-13 2015-12-22 SanDisk Technologies, Inc. Auto-commit memory
US20120239860A1 (en) 2010-12-17 2012-09-20 Fusion-Io, Inc. Apparatus, system, and method for persistent data management on a non-volatile storage media
WO2012100087A2 (en) 2011-01-19 2012-07-26 Fusion-Io, Inc. Apparatus, system, and method for managing out-of-service conditions
US8966184B2 (en) 2011-01-31 2015-02-24 Intelligent Intellectual Property Holdings 2, LLC. Apparatus, system, and method for managing eviction of data
US8874823B2 (en) 2011-02-15 2014-10-28 Intellectual Property Holdings 2 Llc Systems and methods for managing data input/output operations
US9003104B2 (en) 2011-02-15 2015-04-07 Intelligent Intellectual Property Holdings 2 Llc Systems and methods for a file-level cache
US9201677B2 (en) 2011-05-23 2015-12-01 Intelligent Intellectual Property Holdings 2 Llc Managing data input/output operations
US9141527B2 (en) 2011-02-25 2015-09-22 Intelligent Intellectual Property Holdings 2 Llc Managing cache pools
US9563555B2 (en) 2011-03-18 2017-02-07 Sandisk Technologies Llc Systems and methods for storage allocation
WO2012129191A2 (en) 2011-03-18 2012-09-27 Fusion-Io, Inc. Logical interfaces for contextual storage
US9058275B2 (en) 2011-06-10 2015-06-16 International Business Machines Corporation Data returned responsive to executing a start subchannel instruction
US9116634B2 (en) 2011-06-10 2015-08-25 International Business Machines Corporation Configure storage class memory command
US9116788B2 (en) 2011-06-10 2015-08-25 International Business Machines Corporation Using extended asynchronous data mover indirect data address words
US9058243B2 (en) 2011-06-10 2015-06-16 International Business Machines Corporation Releasing blocks of storage class memory
US9037907B2 (en) 2011-06-10 2015-05-19 International Business Machines Corporation Operator message commands for testing a coupling facility
US9021180B2 (en) 2011-06-10 2015-04-28 International Business Machines Corporation Clearing blocks of storage class memory
US9116789B2 (en) 2011-06-10 2015-08-25 International Business Machines Corporation Chaining move specification blocks
US9021226B2 (en) 2011-06-10 2015-04-28 International Business Machines Corporation Moving blocks of data between main memory and storage class memory
US9021179B2 (en) * 2011-06-10 2015-04-28 International Business Machines Corporation Store storage class memory information command
US9323668B2 (en) 2011-06-10 2016-04-26 International Business Machines Corporation Deconfigure storage class memory command
US8645618B2 (en) * 2011-07-14 2014-02-04 Lsi Corporation Flexible flash commands
US9274937B2 (en) 2011-12-22 2016-03-01 Longitude Enterprise Flash S.A.R.L. Systems, methods, and interfaces for vector input/output operations
US9251052B2 (en) 2012-01-12 2016-02-02 Intelligent Intellectual Property Holdings 2 Llc Systems and methods for profiling a non-volatile cache having a logical-to-physical translation layer
US9767032B2 (en) 2012-01-12 2017-09-19 Sandisk Technologies Llc Systems and methods for cache endurance
US10102117B2 (en) 2012-01-12 2018-10-16 Sandisk Technologies Llc Systems and methods for cache and storage device coordination
US9251086B2 (en) 2012-01-24 2016-02-02 SanDisk Technologies, Inc. Apparatus, system, and method for managing a cache
US9116812B2 (en) 2012-01-27 2015-08-25 Intelligent Intellectual Property Holdings 2 Llc Systems and methods for a de-duplication cache
US10359972B2 (en) 2012-08-31 2019-07-23 Sandisk Technologies Llc Systems, methods, and interfaces for adaptive persistence
US10019353B2 (en) 2012-03-02 2018-07-10 Longitude Enterprise Flash S.A.R.L. Systems and methods for referencing data on a storage medium
WO2013171789A1 (en) * 2012-05-16 2013-11-21 Hitachi, Ltd. Storage system and method of controlling data transfer in storage system
US10339056B2 (en) 2012-07-03 2019-07-02 Sandisk Technologies Llc Systems, methods and apparatus for cache transfers
US9612966B2 (en) 2012-07-03 2017-04-04 Sandisk Technologies Llc Systems, methods and apparatus for a virtual machine cache
US9557800B2 (en) * 2012-08-31 2017-01-31 Micron Technology, Inc. Sequence power control
JP2015532985A (ja) * 2012-09-06 2015-11-16 ピーアイ−コーラル、インク． 大規模なデータ記憶および受け渡しシステム
US10509776B2 (en) 2012-09-24 2019-12-17 Sandisk Technologies Llc Time sequence data management
US10318495B2 (en) 2012-09-24 2019-06-11 Sandisk Technologies Llc Snapshots for a non-volatile device
US9612956B2 (en) 2013-03-15 2017-04-04 Seagate Technology Llc Multi-tiered caching for data storage management in a device
US9842053B2 (en) 2013-03-15 2017-12-12 Sandisk Technologies Llc Systems and methods for persistent cache logging
US10102144B2 (en) 2013-04-16 2018-10-16 Sandisk Technologies Llc Systems, methods and interfaces for data virtualization
US10558561B2 (en) 2013-04-16 2020-02-11 Sandisk Technologies Llc Systems and methods for storage metadata management
JP6248435B2 (ja) * 2013-07-04 2017-12-20 富士通株式会社 ストレージ装置、およびストレージ装置の制御方法
US9842128B2 (en) 2013-08-01 2017-12-12 Sandisk Technologies Llc Systems and methods for atomic storage operations
US10019320B2 (en) 2013-10-18 2018-07-10 Sandisk Technologies Llc Systems and methods for distributed atomic storage operations
US10073630B2 (en) 2013-11-08 2018-09-11 Sandisk Technologies Llc Systems and methods for log coordination
JP5949816B2 (ja) 2014-03-19 2016-07-13 日本電気株式会社 キャッシュ制御装置及びその制御方法、ストレージ装置、並びにコンピュータ・プログラム
JP2016014957A (ja) 2014-07-01 2016-01-28 株式会社東芝 ストレージ装置及びそのデータ処理方法
US9946607B2 (en) 2015-03-04 2018-04-17 Sandisk Technologies Llc Systems and methods for storage error management
US10009438B2 (en) 2015-05-20 2018-06-26 Sandisk Technologies Llc Transaction log acceleration
KR20170075359A (ko) * 2015-12-23 2017-07-03 에스케이하이닉스 주식회사 메모리 시스템 및 메모리 콘트롤러의 동작 방법
US10013370B2 (en) * 2015-12-29 2018-07-03 EMC IP Holding Company LLC Method and system for providing access of a storage system using a shared storage module as a transport mechanism
US9836243B1 (en) * 2016-03-31 2017-12-05 EMC IP Holding Company LLC Cache management techniques
US9990134B2 (en) * 2016-06-15 2018-06-05 Seagate Technology Llc Command tunneling in a hybrid data storage device
US10089025B1 (en) 2016-06-29 2018-10-02 EMC IP Holding Company LLC Bloom filters in a flash memory
US10146438B1 (en) 2016-06-29 2018-12-04 EMC IP Holding Company LLC Additive library for data structures in a flash memory
US10331561B1 (en) 2016-06-29 2019-06-25 Emc Corporation Systems and methods for rebuilding a cache index
US10037164B1 (en) * 2016-06-29 2018-07-31 EMC IP Holding Company LLC Flash interface for processing datasets
US10055351B1 (en) 2016-06-29 2018-08-21 EMC IP Holding Company LLC Low-overhead index for a flash cache

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4075686A (en) * 1976-12-30 1978-02-21 Honeywell Information Systems Inc. Input/output cache system including bypass capability
JPH0675836A (ja) * 1992-08-25 1994-03-18 Nippon Densan Corp 補助記憶装置
KR970008188B1 (ko) * 1993-04-08 1997-05-21 가부시끼가이샤 히다찌세이사꾸쇼 플래시메모리의 제어방법 및 그것을 사용한 정보처리장치
JPH06324815A (ja) 1993-05-13 1994-11-25 Nec Corp ディスクアレイ装置
US5636359A (en) * 1994-06-20 1997-06-03 International Business Machines Corporation Performance enhancement system and method for a hierarchical data cache using a RAID parity scheme
US5606529A (en) * 1994-12-20 1997-02-25 Hitachi, Ltd. Semiconductor disk storage
US5950230A (en) * 1997-05-28 1999-09-07 International Business Machines Corporation RAID array configuration synchronization at power on
JP3214444B2 (ja) * 1998-05-19 2001-10-02 日本電気株式会社 磁気ディスク装置の制御方法と制御装置
JP2000276402A (ja) * 1999-03-24 2000-10-06 Kokusai Electric Co Ltd フラッシュメモリ駆動方法及びフラッシュメモリ装置
US6684306B1 (en) * 1999-12-16 2004-01-27 Hitachi, Ltd. Data backup in presence of pending hazard
US6950837B2 (en) * 2001-06-19 2005-09-27 Intel Corporation Method for using non-temporal streaming to improve garbage collection algorithm
JP4280055B2 (ja) * 2001-11-28 2009-06-17 株式会社Ａｃｃｅｓｓ メモリ制御方法および装置
US6925534B2 (en) * 2001-12-31 2005-08-02 Intel Corporation Distributed memory module cache prefetch
US7533214B2 (en) * 2002-02-27 2009-05-12 Microsoft Corporation Open architecture flash driver
US6971003B1 (en) * 2002-04-02 2005-11-29 Adaptec, Inc. Method and apparatus for minimizing option ROM BIOS code
JP2004021811A (ja) * 2002-06-19 2004-01-22 Hitachi Ltd 不揮発メモリを使用したディスク制御装置
US6981112B2 (en) * 2002-08-26 2005-12-27 International Business Machines Corporation Dynamic cache disable
JP4287631B2 (ja) * 2002-09-06 2009-07-01 株式会社日立コミュニケーションテクノロジー 記憶装置
JP3974538B2 (ja) * 2003-02-20 2007-09-12 株式会社日立製作所 情報処理システム
JP3811149B2 (ja) * 2003-08-18 2006-08-16 株式会社日立製作所 キャッシュメモリバックアップ装置
JP2005115603A (ja) * 2003-10-07 2005-04-28 Hitachi Ltd 記憶デバイス制御装置及びその制御方法
JP2005115857A (ja) * 2003-10-10 2005-04-28 Sony Corp ファイル記憶装置
US7136973B2 (en) * 2004-02-04 2006-11-14 Sandisk Corporation Dual media storage device
KR100526190B1 (ko) 2004-02-06 2005-11-03 삼성전자주식회사 플래시 메모리의 재사상 방법
JP2005222404A (ja) * 2004-02-06 2005-08-18 Hitachi Ltd 仮想記憶ユニットを備えた記憶制御サブシステム
US7761678B1 (en) * 2004-09-29 2010-07-20 Verisign, Inc. Method and apparatus for an improved file repository
US7769849B2 (en) * 2004-10-25 2010-08-03 Lsi Corporation Method for detecting changes in a storage area network without external tools and hardware
US7502964B2 (en) * 2005-04-29 2009-03-10 Network Appliance, Inc. Selecting and using storage devices based on functional tests and probable time to failure
JP5008845B2 (ja) 2005-09-01 2012-08-22 株式会社日立製作所 ストレージシステムとストレージ装置及びその制御方法
US7653783B2 (en) * 2005-10-07 2010-01-26 Agere Systems Inc. Ping-pong state machine for storage-device array
US8402201B2 (en) * 2006-12-06 2013-03-19 Fusion-Io, Inc. Apparatus, system, and method for storage space recovery in solid-state storage

Also Published As

Publication number Publication date
US7464221B2 (en) 2008-12-09
EP1764677A1 (en) 2007-03-21
US9495105B2 (en) 2016-11-15
US9251063B2 (en) 2016-02-02
JP2007066129A (ja) 2007-03-15
US20140095776A1 (en) 2014-04-03
US20130086314A1 (en) 2013-04-04
US20070050571A1 (en) 2007-03-01
US8332582B2 (en) 2012-12-11
US8631199B2 (en) 2014-01-14
US20090043961A1 (en) 2009-02-12
US20160179380A1 (en) 2016-06-23

Similar Documents

Publication Publication Date Title
JP5008845B2 (ja) ストレージシステムとストレージ装置及びその制御方法
CN102576293B (zh) 固态存储设备和分层存储系统中的数据管理
US9684591B2 (en) Storage system and storage apparatus
JP4900807B2 (ja) ストレージシステム及びデータ管理方法
JP6097845B2 (ja) 不揮発性キャッシュメモリにデータをバックアップするストレージシステム
JP6459644B2 (ja) ストレージ制御装置、制御システム及び制御プログラム
JP2005258918A (ja) ストレージシステムおよびストレージシステムのキャッシュメモリ制御方法
JP2007156597A (ja) ストレージ装置
US7984260B2 (en) Storage system provided with a plurality of controller modules
JP2009043030A (ja) ストレージシステム
US20130311706A1 (en) Storage system and method of controlling data transfer in storage system
US8862819B2 (en) Log structure array
US9223655B2 (en) Storage system and method for controlling storage system
US8566554B2 (en) Storage apparatus to which thin provisioning is applied and including logical volumes divided into real or virtual areas
US10915401B2 (en) Data saving caused by a partial failure of the memory device
JP2008065559A (ja) ストレージ装置、ストレージシステム、ストレージ装置の制御方法
JP2001184172A (ja) ディスク制御システムおよびデータ再配置方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080109

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101012

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101208

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110823

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111014

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120529

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120530

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5008845

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150608

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees