JP5957647B2 - スケーラブルな記憶装置 - Google Patents
スケーラブルな記憶装置 Download PDFInfo
- Publication number
- JP5957647B2 JP5957647B2 JP2013515573A JP2013515573A JP5957647B2 JP 5957647 B2 JP5957647 B2 JP 5957647B2 JP 2013515573 A JP2013515573 A JP 2013515573A JP 2013515573 A JP2013515573 A JP 2013515573A JP 5957647 B2 JP5957647 B2 JP 5957647B2
- Authority
- JP
- Japan
- Prior art keywords
- storage
- host
- agent
- request
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003860 storage Methods 0.000 title claims description 1094
- 238000000034 method Methods 0.000 claims description 163
- 238000012546 transfer Methods 0.000 claims description 81
- 238000004891 communication Methods 0.000 claims description 65
- 230000004044 response Effects 0.000 claims description 30
- 239000003795 chemical substances by application Substances 0.000 description 682
- 230000008569 process Effects 0.000 description 46
- 230000015654 memory Effects 0.000 description 37
- 239000011232 storage material Substances 0.000 description 36
- 230000005540 biological transmission Effects 0.000 description 29
- 238000011084 recovery Methods 0.000 description 26
- 230000006870 function Effects 0.000 description 25
- 238000012545 processing Methods 0.000 description 21
- 238000005516 engineering process Methods 0.000 description 18
- 230000002093 peripheral effect Effects 0.000 description 12
- 230000009471 action Effects 0.000 description 11
- 238000006243 chemical reaction Methods 0.000 description 9
- 238000013500 data storage Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 238000012544 monitoring process Methods 0.000 description 7
- 230000014759 maintenance of location Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 238000011982 device technology Methods 0.000 description 5
- 238000013507 mapping Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000013403 standard screening design Methods 0.000 description 5
- 230000002776 aggregation Effects 0.000 description 4
- 238000004220 aggregation Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000012005 ligant binding assay Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 239000007787 solid Substances 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005538 encapsulation Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000005012 migration Effects 0.000 description 2
- 238000013508 migration Methods 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 238000011895 specific detection Methods 0.000 description 2
- 235000013599 spices Nutrition 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 102100024406 60S ribosomal protein L15 Human genes 0.000 description 1
- 101001117935 Homo sapiens 60S ribosomal protein L15 Proteins 0.000 description 1
- 101001077478 Homo sapiens RNA guanine-N7 methyltransferase activating subunit Proteins 0.000 description 1
- 102100025054 RNA guanine-N7 methyltransferase activating subunit Human genes 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000004931 aggregating effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000012508 change request Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 239000004557 technical material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/14—Handling requests for interconnection or transfer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/38—Information transfer, e.g. on bus
- G06F13/40—Bus structure
- G06F13/4004—Coupling between buses
- G06F13/4022—Coupling between buses using switching circuits, e.g. switching matrix, connection or expansion network
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0626—Reducing size or complexity of storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0631—Configuration or reconfiguration of storage systems by allocating resources to storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0662—Virtualisation aspects
- G06F3/0664—Virtualisation aspects at device level, e.g. emulation of a storage device or system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0688—Non-volatile semiconductor memory arrays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2213/00—Indexing scheme relating to interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F2213/0026—PCI express
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Mathematical Physics (AREA)
- Computer Hardware Design (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Computer And Data Communications (AREA)
- Hardware Redundancy (AREA)
Description
2011年6月16日付で出願されたTimothy Lawrence Canepa(第一発明者)による米国仮特許出願第61/497,525号(整理番号第 SF−10−05B号)「SCALABLE STORAGE DEVICES」(スケーラブルな記憶装置)
この出願の発明に関連する先行技術文献情報としては、以下のものがある(国際出願日以降国際段階で引用された文献及び他国に国内移行した際に引用された文献を含む)。
(先行技術文献)
(特許文献)
(特許文献1) 米国特許第3,623,014号明細書
(特許文献2) 米国特許第4,396,984号明細書
(特許文献3) 米国特許第4,455,605号明細書
(特許文献4) 米国特許第5,404,508号明細書
(特許文献5) 米国特許第5,574,863号明細書
(特許文献6) 米国特許第5,594,900号明細書
(特許文献7) 米国特許第5,604,862号明細書
(特許文献8) 米国特許第5,608,865号明細書
(特許文献9) 米国特許第5,615,329号明細書
(特許文献10) 米国特許第5,619,644号明細書
(特許文献11) 米国特許第5,621,884号明細書
(特許文献12) 米国特許第5,644,698号明細書
(特許文献13) 米国特許第5,673,382号明細書
(特許文献14) 米国特許第5,680,580号明細書
(特許文献15) 米国特許第5,682,513号明細書
(特許文献16) 米国特許第5,692,155号明細書
(特許文献17) 米国特許第5,870,537号明細書
(特許文献18) 米国特許第5,802,394号明細書
(特許文献19) 米国特許第6,292,878号明細書
(特許文献20) 米国特許第6,385,673号明細書
(特許文献21) 米国特許第6,408,400号明細書
(特許文献22) 米国特許第6,425,049号明細書
(特許文献23) 米国特許第6,654,831号明細書
(特許文献24) 米国特許第6,304,980号明細書
(特許文献25) 米国特許出願公開第2010/0011177号明細書
(特許文献26) 米国特許第6,442,709号明細書
(特許文献27) 台湾特許第286690号公報
(特許文献28) 台湾特許第285304号公報
(特許文献29) 台湾特許第274353号公報
(特許文献30) 台湾特許第233551号公報
(非特許文献)
(非特許文献1) "Direct and Indirect Accessing of Peripheral Devices",IBM Technical Disclosure Bulletin,vol.33,No.lA,Jun.1990.
(非特許文献2) H.D.Meij et al.,"P/DAS and Enhancements to the IBM 3990−6 and RAMAC Array Family",May 1996.
(非特許文献3) "Maintaining Data Integrity Across Redundant I/O Device Take−Overs",IBM Technical Disclosure Bulletin,vol.36,No.06A,Jun.1993,pp.577−578.
(非特許文献4) Crump,George,"What is Scale−Out Storage?",Aug.23,2010,http://www.storage−switzerland.com/Articles/Entries/2010/8/23_What_Is_Scale−Out_Storage.html.
(非特許文献5) International Search Report and the Written Opinion in the parent PCT/US11/40996,9 pages,Feb.23,2012.
本序論は、以降の詳細な説明をより短時間で理解できるよう含めたものである。いかなる序論も必然的に当該主題全体を概説するものであり、完全または限定的な説明を意図したものではないため、本発明は本序論に示す概念(明示的な例がある場合はそれを含む)に限定されるものではない。例えば、以下では、本明細書の紙面および構成の制限上、特定の実施形態だけに関する概要を提供している。本明細書の残りの部分では、最終的に請求項と整合するものも含め、他の実施形態を多数説明している。
ここで定義された種々の略称または頭字語の少なくとも一部は、本明細書で使用される特定の要素を指している。
実施例
ストレージの1つのアドレスにアクセスする要求をホストから受け付ける手段と、
前記アドレスに少なくとも部分的に基づいて、前記要求が複数の記憶装置のうちのいずれの1若しくはそれ以上の記憶装置に対応するかを決定する手段と、
前記アドレスに少なくとも部分的に基づいて、前記決定された各記憶装置に対応する各サブ要求を決定する手段と、
前記対応する決定された記憶装置に前記サブ要求を送信する手段と、
前記決定された各記憶装置から各サブステータスを受け付ける手段と、
各前記サブステータスに少なくとも部分的に基づいて、全体的なステータスを決定する手段と、
前記全体的なステータスを前記ホストに提供する手段と
を有し、
前記要求を受け付ける手段は、ホストインターフェース・プロトコルと互換性があり、前記サブ要求を送信する手段および前記サブステータスを受け付ける手段は、前記ホストから独立して動作可能なピアツーピアプロトコルと互換性があり、
前記記憶装置のうちの少なくとも1つは、前記サブ要求の1つを介してアクセスできるストレージを実装しており、当該記憶装置のうちの当該少なくとも1つは、前記実装されたストレージへの前記ホストインターフェース・プロトコルを介したアクセスを無効化するものである
システム。
前記要求を受け付ける手段、前記記憶装置を決定する手段、前記サブ要求を決定する手段、前記サブ要求を送信する手段、前記サブステータスを受け付ける手段、前記全体的なステータスを決定する手段、および前記全体的なステータスを提供する手段を有する前記記憶装置のうちの特定の1つを有するものであるシステム。
ユニバーサルシリアルバス(USB)インターフェース規格と、
コンパクトフラッシュ(登録商標)(CF)インターフェース規格と、
マルチメディアカード(MMC)インターフェース規格と、
セキュアデジタル(SD)インターフェース規格と、
メモリースティック・インターフェース規格と、
xDピクチャーカード・インターフェース規格と
統合ドライブエレクトロニクス(IDE)インターフェース規格と
シリアル・アドバンスド・テクノロジー・アタッチメント(SATA)インターフェース規格と、
外部シリアルATA(eSATA)インターフェース規格と、
スモール・コンピュータ・システム・インターフェース(SCSI)インターフェース規格と、
シリアル・アタッチド・スモール・コンピュータ・システム・インターフェース(SAS)インターフェース規格と、
ファイバーチャネル・インターフェース規格と、
イーサネット(登録商標)・インターフェース規格と、
周辺機器相互接続エクスプレス(PCIe)インターフェース規格と
のうち1若しくはそれ以上と互換性があるものであるシステム。
前記ホストの全部または任意部分を有するものであるシステム。
コンピュータと、
ワークステーション・コンピュータと、
サーバー・コンピュータと、
ストレージ・サーバーと、
パーソナルコンピュータ(PC)と、
ラップトップ・コンピュータと、
ノートブック・コンピュータと、
ネットブック・コンピュータと、
携帯情報端末(PDA)と、
メディアプレーヤーと、
メディアレコーダーと、
デジタルカメラと、
携帯電話ハンドセットと、
コードレスホン・ハンドセットと、
電子ゲームと
のうち1若しくはそれ以上を有するものであるシステム。
前記記憶装置の全部または任意部分を有するものであるシステム。
前記記憶装置のうち1若しくはそれ以上に有されるフラッシュメモリを有するものであるシステム。
ホストからストレージの1つのアドレスにアクセスする要求を受け付ける工程を管理する工程と、
前記アドレスに少なくとも部分的に基づいて、複数の記憶装置のうちのいずれの1若しくはそれ以上に前記要求が対応するかを決定する工程を管理する工程と、
前記アドレスに少なくとも部分的に基づいて、前記決定された各記憶装置に対応する各サブ要求を決定する工程を管理する工程と、
前記対応する決定された記憶装置に前記サブ要求を送信する工程を管理する工程と、
前記決定された各記憶装置から各サブステータスを受け付ける工程を管理する工程と、
各前記サブステータスに少なくとも部分的に基づいて、全体的なステータスを決定する工程を管理する工程と、
前記全体的なステータスを前記ホストに提供する工程を管理する工程と
を有する動作が実行され、
前記要求を受け付ける工程は、ホストインターフェース・プロトコルを介し、前記サブ要求を送信する工程および前記サブステータスを受け付ける工程は、前記ホストから独立して動作可能なピアツーピアプロトコルを介するものであり、
前記記憶装置のうちの少なくとも1つは、前記サブ要求の1つを介してアクセスできるストレージを実装しており、当該記憶装置のうちの少なくとも1つは、前記実装されたストレージへの前記ホストインターフェース・プロトコルを介したアクセスを無効化するものである
コンピュータ可読媒体。
ストレージの1つのアドレスにアクセスする要求をホストから受け付ける工程と、
前記アドレスに少なくとも部分的に基づいて、複数の記憶装置のうちいずれの1若しくはそれ以上に前記要求が対応するかを決定する工程と、
前記アドレスに少なくとも部分的に基づいて、前記決定された各記憶装置に対応する各サブ要求を決定する工程と、
前記対応する決定された記憶装置に前記サブ要求を送信する工程と、
前記決定された各記憶装置から各サブステータスを受け付ける工程と、
各前記サブステータスに少なくとも部分的に基づいて、全体的なステータスを決定する工程と、
前記全体的なステータスを前記ホストに提供する工程と
を有し、
前記要求を受け付ける工程は、ホストインターフェース・プロトコルと互換性があり、前記サブ要求を送信する工程および前記サブステータスを受け付ける工程は、前記ホストから独立して動作可能なピアツーピアプロトコルと互換性があり、
前記記憶装置のうちの少なくとも1つは、前記サブ要求の1つを介してアクセスできるストレージを実装しており、当該記憶装置のうちの当該少なくとも1つは、前記実装されたストレージへの前記ホストインターフェース・プロトコルを介したアクセスを無効化するものである
方法。
ストレージの1つのアドレスにアクセスする要求をホストから受け付けることのできるホストインターフェース論理ハードウェアと、
制御論理ハードウェアであって、
前記アドレスに少なくとも部分的に基づいて、複数の記憶装置のうちどの1若しくはそれ以上に前記要求が対応するか、ならびに前記決定された各記憶装置に対応する各サブ要求を決定し、
前記対応する決定された記憶装置に前記サブ要求を送信し、
前記決定された各記憶装置から各サブステータスを受け付け、
各前記サブステータスに少なくとも部分的に基づいて、全体的なステータスを決定する
ことのできる制御論理ハードウェアと
を有し、
前記ホストインターフェース論理ハードウェアは、さらに、前記全体的なステータスを前記ホストに提供でき、
前記要求を受け付ける工程は、ホストインターフェース・プロトコルと互換性があり、前記サブ要求を送信する工程および前記サブステータスを受け付ける工程は、前記ホストから独立して動作可能なピアツーピアプロトコルと互換性があり、
前記記憶装置のうちの少なくとも1つは、前記サブ要求の1つを介してアクセスできるストレージを実装しており、当該記憶装置のうちの当該少なくとも1つは、前記実装されたストレージへの前記ホストインターフェース・プロトコルを介したアクセスを無効化するものである
システム。
第1の記憶装置が、複数のホスト要求キューのうちの第1のホスト要求キューから第1の要求を読み出す工程と、
第2の記憶装置が、前記ホスト要求キューのうちの第2のホスト要求キューから第2の要求を読み出す工程であって、前記第2のホスト要求キューは、前記第1のホスト要求キューと区別可能であり、当該第2の記憶装置が読み出す工程は、前記第1の記憶装置が読み出す工程から独立したものである、工程と、
前記第1の記憶装置が、前記第1の要求の少なくとも一部を前記第2の記憶装置に転送する工程と、
前記第2の記憶装置が、前記第2の要求の少なくとも一部を前記第1の記憶装置に転送する工程であって、当該第2の記憶装置が転送する工程は、前記第1の記憶装置が転送する工程から独立したものである、工程と、
前記第1の記憶装置が、前記第2の要求の前記少なくとも一部に基づいて、当該第1の記憶装置の第1のストレージにアクセスし、当該第1の記憶装置がアクセスする工程に少なくとも部分的に基づいて、第1のサブステータスを前記第2の記憶装置に送信する工程と、
前記第2の記憶装置が、前記第1の要求の前記少なくとも一部に基づいて、当該第2の記憶装置の第2のストレージにアクセスし、当該第2の記憶装置がアクセスする工程に少なくとも部分的に基づいて、第2のサブステータスを前記第1の記憶装置に送信する工程と
を有する方法。
第1の記憶装置が、複数のホスト要求キューのうちの第1のホスト要求キューから第1の要求を読み出す手段と、
第2の記憶装置が、前記ホスト要求キューのうちの第2のホスト要求キューから第2の要求を読み出す手段であって、前記第2のホスト要求キューは、前記第1のホスト要求キューと区別可能であり、当該第2の記憶装置による読み出しは、前記第1の記憶装置による読み出しから独立したものである、手段と、
前記第1の記憶装置が、前記第1の要求の少なくとも一部を前記第2の記憶装置に転送する手段と、
前記第2の記憶装置が、前記第2の要求の少なくとも一部を前記第1の記憶装置に転送する手段であって、当該第2の記憶装置による転送は、前記第1の記憶装置による転送から独立したものである、手段と、
前記第1の記憶装置が、前記第2の要求の前記少なくとも一部に基づいて、当該第1の記憶装置の第1のストレージにアクセスし、当該第1の記憶装置によるアクセスに少なくとも部分的に基づいて、第1のサブステータスを前記第2の記憶装置に送信する手段と、
前記第2の記憶装置が、前記第1の要求の前記少なくとも一部に基づいて、当該第2の記憶装置の第2のストレージにアクセスし、当該第2の記憶装置によるアクセスに少なくとも部分的に基づいて、第2のサブステータスを前記第1の記憶装置に送信する手段と
を有するシステム。
複数のホスト要求キューのうちの第1のホスト要求キューから第1の要求を読み出せる第1の記憶装置のホストインターフェース論理ハードウェアと、
前記ホスト要求キューのうちの第2のホスト要求キューから第2の要求を読み出せる第2の記憶装置のホストインターフェース論理ハードウェアであって、前記第2のホスト要求キューは、前記第1のホスト要求キューと区別可能であり、当該第2の記憶装置による読み出しは、前記第1の記憶装置による読み出しから独立したものである、第2の記憶装置のホストインターフェース論理ハードウェアと、
前記第1の要求の少なくとも一部を前記第2の記憶装置に転送できる前記第1の記憶装置の要求転送論理ハードウェアと、
前記第2の要求の少なくとも一部を前記第1の記憶装置に転送できる前記第2の記憶装置の要求転送論理ハードウェアであって、当該第2の記憶装置による転送は、前記第1の記憶装置による転送から独立したものである、前記第2の記憶装置の要求転送論理ハードウェアと、
前記第2の要求の前記少なくとも一部に基づいて前記第1の記憶装置の第1のストレージにアクセスできる前記第1の記憶装置のストレージインターフェース論理ハードウェアと、
前記第1の記憶装置によるアクセスに少なくとも部分的に基づいて第1のサブステータスを決定できる前記第1の記憶装置のサブステータス生成論理ハードウェアと、
前記第1のサブステータスを前記第2の記憶装置に転送できる前記第1の記憶装置のサブステータス転送論理ハードウェアと、
前記第1の要求の前記少なくとも一部に基づいて前記第2の記憶装置の第2のストレージにアクセスできる前記第2の記憶装置のストレージインターフェース論理ハードウェアと、
前記第2の記憶装置によるアクセスに少なくとも部分的に基づいて第2のサブステータスを決定できる前記第2の記憶装置のサブステータス生成論理ハードウェアと、
前記第2のサブステータスを前記第1の記憶装置に転送できる前記第2の記憶装置のサブステータス転送論理ハードウェアと
を有するシステム。
第1の記憶装置が、複数のホスト要求キューのうちの第1のホスト要求キューから第1の要求を読み出す工程と、
第2の記憶装置が、前記ホスト要求キューのうちの第2のホスト要求キューから第2の要求を読み出す工程であって、前記第2のホスト要求キューは、前記第1のホスト要求キューと区別可能であり、当該第2の記憶装置が読み出す工程は、前記第1の記憶装置が読み出す工程から独立したものである、工程と、
前記第1の記憶装置が、前記第1の要求の少なくとも一部を前記第2の記憶装置に転送する工程と、
前記第2の記憶装置が、前記第2の要求の少なくとも一部を前記第1の記憶装置に転送する工程であって、当該第2の記憶装置が転送する工程は、前記第1の記憶装置が転送する工程から独立したものである、工程と、
前記第1の記憶装置が、前記第2の要求の前記少なくとも一部に基づいて、第1のストレージにアクセスし、当該第1の記憶装置がアクセスする工程に少なくとも部分的に基づいて、複数のホスト・ステータス・キューのうちの第1のホスト・ステータス・キューに第1のステータスを書き込む工程と、
前記第2の記憶装置が、前記第1の要求の前記少なくとも一部に基づいて、第2のストレージにアクセスし、当該第2の記憶装置がアクセスする工程に少なくとも部分的に基づいて、前記ホスト・ステータス・キューのうちの第2のホスト・ステータス・キューに第2のステータスを書き込む工程であって、前記第2の記憶装置がアクセスする工程は、前記第1の記憶装置がアクセスする工程から独立したものであり、前記第2のストレージは前記第1のストレージと区別可能である、工程と
を有する方法。
第1の記憶装置が、複数のホスト要求キューのうちの第1のホスト要求キューから第1の要求を読み出す手段と、
第2の記憶装置が、前記ホスト要求キューのうちの第2のホスト要求キューから第2の要求を読み出す手段であって、前記第2のホスト要求キューは、前記第1のホスト要求キューと区別可能であり、当該第2の記憶装置による読み出しは、前記第1の記憶装置による読み出しから独立したものである、手段と、
前記第1の記憶装置が、前記第1の要求の少なくとも一部を前記第2の記憶装置に転送する手段と、
前記第2の記憶装置が、前記第2の要求の少なくとも一部を前記第1の記憶装置に転送する手段であって、当該第2の記憶装置による転送は、前記第1の記憶装置による転送から独立したものである、手段と、
前記第1の記憶装置が、前記第2の要求の前記少なくとも一部に基づいて、第1のストレージにアクセスし、当該第1の記憶装置によるアクセスに少なくとも部分的に基づいて、複数のホスト・ステータス・キューのうちの第1のホスト・ステータス・キューに第1のステータスを書き込む手段と、
前記第2の記憶装置が、前記第1の要求の前記少なくとも一部に基づいて、第2のストレージにアクセスし、当該第2の記憶装置によるアクセスに少なくとも部分的に基づいて、前記ホスト・ステータス・キューのうちの第2のホスト・ステータス・キューに第2のステータスを書き込む手段であって、前記第2の記憶装置によるアクセスは、前記第1の記憶装置によるアクセスから独立したものであり、前記第2のストレージは前記第1のストレージと区別可能である、手段と
を有するシステム。
複数のホスト要求キューのうちの第1のホスト要求キューから第1の要求を読み出せる第1の記憶装置のホストインターフェース論理ハードウェアと、
前記ホスト要求キューのうちの第2のホスト要求キューから第2の要求を読み出せる第2の記憶装置のホストインターフェース論理ハードウェアであって、前記第2のホスト要求キューは、前記第1のホスト要求キューと区別可能であり、当該第2の記憶装置による読み出しは、前記第1の記憶装置による読み出しから独立したものである、第2の記憶装置のホストインターフェース論理ハードウェアと、
前記第1の要求の少なくとも一部を前記第2の記憶装置に転送できる前記第1の記憶装置の要求転送論理ハードウェアと、
前記第2の要求の少なくとも一部を前記第1の記憶装置に転送できる前記第2の記憶装置の要求転送論理ハードウェアであって、当該第2の記憶装置による転送は、前記第1の記憶装置による転送から独立したものである、前記第2の記憶装置の要求転送論理ハードウェアと、
前記第2の要求の前記少なくとも一部に基づいて第1のストレージにアクセスできる前記第1の記憶装置のストレージインターフェース論理ハードウェアと、
前記第1の記憶装置によるアクセスに少なくとも部分的に基づいて第1のステータスを決定でき、さらに、複数のホスト・ステータス・キューのうちの第1のホスト・ステータス・キューに前記第1のステータスが書き込まれるよう前記第1の記憶装置の前記ホストインターフェース論理ハードウェアに前記第1のステータスを提供できる、前記第1の記憶装置のステータス生成論理ハードウェアと、
前記第1の要求の前記少なくとも一部に基づいて第2のストレージにアクセスできる前記第2の記憶装置のストレージインターフェース論理ハードウェアと、
前記第2の記憶装置によるアクセスに少なくとも部分的に基づいて第2のステータスを決定でき、さらに、前記ホスト・ステータス・キューのうちの第2のホスト・ステータス・キューに前記第2のステータスが書き込まれるよう前記第2の記憶装置の前記ホストインターフェース論理ハードウェアに前記第2のステータスを提供できる前記第1の記憶装置のステータス生成論理ハードウェアであって、前記第2の記憶装置によるアクセスは、前記第1の記憶装置によるアクセスから独立したものであり、前記第2のストレージは前記第1のストレージと区別可能である、前記第1の記憶装置のステータス生成論理ハードウェアと
を有するシステム。
複数の物理的記憶装置にわたって分散された複数の記憶範囲の集約体に、単一の論理インターフェースとしてホストがアクセスできるようにする手段であって、前記物理的記憶装置のうち1つは一次エージェントとして動作でき、前記物理的記憶装置のうち1若しくはそれ以上は二次エージェントとして動作できる、手段と、
前記一次エージェントと、前記二次エージェントのうち少なくとも1つとの間のピアツーピアトラフィックを通信する手段と
を有し、
前記一次エージェントは、冗長データ記憶用に前記二次エージェントの少なくとも一部を管理でき、
前記ピアツーピアトラフィックは、前記冗長データ記憶を実施するための冗長トラフィックを有するものである
システム。
前記ホストからの書き込みデータに少なくとも部分的に基づいたパリティデータと、
前記ホストからの書き込みデータに少なくとも部分的に基づいた排他的論理和(XOR)データと、
小型ディスク冗長アレイ(RAID)実施態様に少なくとも部分的に基づいた冗長性情報と
のうち1若しくはそれ以上を有するものであるシステム。
前記ホストと前記一次エージェント間でホストトラフィックを通信する手段を有するものであるシステム。
複数の物理的記憶装置にわたって分散された複数のストレージ範囲の集約体に、単一の論理インターフェースとしてホストがアクセスできるようにする工程であって、前記物理的記憶装置のうち1つは一次エージェントとして動作でき、前記物理的記憶装置のうち1若しくはそれ以上は二次エージェントとして動作できる、工程と、
前記一次エージェントと、前記二次エージェントのうち少なくとも1つとの間のピアツーピアトラフィックを通信する工程と
を有し、
前記一次エージェントは、冗長データ記憶用に前記二次エージェントの少なくとも一部を管理でき、
前記ピアツーピアトラフィックは、前記冗長データ記憶を実施するための冗長トラフィックを有するものである
システム。
ホストインターフェース論理ハードウェアと、
少なくとも部分的に前記ホストインターフェース論理ハードウェアを介してホストと選択的に通信できる複数の物理的記憶装置であって、前記物理的記憶装置のうち少なくとも1つは一次エージェントとして動作でき、前記物理的記憶装置のうち1若しくはそれ以上それぞれの二次エージェントとして動作できる、複数の物理的記憶装置と、
前記一次エージェントと、前記二次エージェントのうち少なくとも1つとの間のピアツーピアトラフィックを可能にするピアツーピア通信論理ハードウェアと
を有し、
前記物理的記憶装置は、当該物理的記憶装置に分散された複数のストレージ範囲の集約を実装し、
前記一次エージェントは、冗長データ記憶を実施するよう前記二次エージェントの少なくとも一部を管理でき、
前記ピアツーピアトラフィックは、前記冗長データ記憶を実施するための冗長トラフィックを有するものである
システム。
ピアツーピアプロトコルを介して複数の記憶エージェント間をインターフェース接続する手段と、
前記記憶エージェントのうち障害の発生した1つの記憶エージェントの障害を検出する手段であって、前記障害とは、前記障害の発生した記憶エージェントがもはやストレージの特定部分を実装しないことである、障害を検出する手段と、
前記ストレージの前記特定部分を実装する再割り当て対象ストレージを割り当てる手段であって、前記再割り当て対象ストレージは、前記記憶エージェントのうち障害の発生していない記憶エージェントにより実装されるストレージの任意の組み合わせを有する、手段と
を有するシステム。
ローカルストレージを有し、前記割り当ての対象であるストレージは、前記ローカルストレージをさらに有するものであるシステム。
1若しくはそれ以上の冗長性技術によりデータを回復する手段を有するものであるシステム。
ピアツーピアプロトコルを介して複数の記憶エージェント間をインターフェース接続する工程と、
前記記憶エージェントのうち障害の発生した1つの記憶エージェントの障害を検出する工程であって、前記障害とは、前記障害の発生した記憶エージェントがもはやストレージの特定部分を実装しないことである、工程と、
前記ストレージの前記特定部分を実装する再割り当て対象ストレージを割り当てる工程であって、前記再割り当て対象ストレージは、前記記憶エージェントのうち障害の発生していない記憶エージェントにより実装されるストレージの任意の組み合わせを有する、工程と
を有する方法。
複数の記憶エージェント間のピアツーピアプロトコル通信を可能にするピアツーピア通信論理ハードウェアと、
前記記憶エージェントのうち障害の発生した1つの記憶エージェントの障害を検出する障害検出論理ハードウェアであって、前記障害とは、前記障害の発生した記憶エージェントがもはやストレージの特定部分を実装しないことである、障害検出論理ハードウェアと、
命令を実行できるプロセッサであって、前記命令が当該プロセッサにより実行されると、当該プロセッサは、前記ストレージの前記特定部分を実装する再割り当て対象ストレージを割り当てる工程を有する動作を実施し、前記再割り当て対象ストレージは、前記記憶エージェントのうち障害の発生していない記憶エージェントにより実装されるストレージの任意の組み合わせを有する、プロセッサと
を有するシステム。
ピアツーピアプロトコルを介して複数の記憶エージェント間をインターフェース接続する工程を管理する工程と、
前記記憶エージェントのうち障害の発生した1つの記憶エージェントの障害を検出する工程を管理する工程であって、前記障害とは、前記障害の発生した記憶エージェントがもはやストレージの特定部分を実装しないことである、工程と、
前記ストレージの前記特定部分を実装する再割り当て対象ストレージを割り当てる工程を管理する工程であって、前記再割り当て対象ストレージは、前記記憶エージェントのうち障害の発生していない記憶エージェントにより実装されるストレージの任意の組み合わせを有する、工程と
を有する動作が実行される、コンピュータ可読媒体。
複数の記憶エージェントのうち障害の発生した1つの記憶エージェントの障害を検出する手段であって、前記障害とは、前記障害の発生した記憶エージェントが、もはや、前記複数の記憶エージェントに分散された複数のストレージ範囲の集約体に、単一の論理インターフェースとしてホストがアクセスできるようにしないことである、障害を検出する手段と、
前記障害の発生した記憶エージェントに置き換わる交換用記憶エージェントを識別する手段と、
前記交換用記憶エージェントを設定して前記単一の論理インターフェースを提供する手段と
を有するシステム。
ホストインターフェース・プロトコルを介して前記ホストにインターフェース接続する手段であって、前記ホストへのインターフェース接続は、送信キュー内のエントリからの記憶要求読み出しを有し、当該インターフェース接続する手段は、前記単一の論理インターフェース提供に基づくものである、前記ホストにインターフェース接続する手段を有するものであるシステム。
前記記憶要求のアドレス情報に少なくとも部分的に基づいて、1若しくはそれ以上の記憶サブ要求を決定する手段を有するものであるシステム。
前記記憶エージェントのうちの二次エージェントに前記サブ要求を転送する手段を有するものであるシステム。
それぞれ前記サブ要求に対応したサブステータス情報を受信し、且つ前記受信されたサブステータス情報に少なくとも部分的に基づいて全体的なステータスを前記ホストに返す手段を有するものであるシステム。
前記記憶エージェント間でピアツーピアトラフィックを通信する手段を有するものであるシステム。
複数の記憶エージェントのうち障害の発生した1つの記憶エージェントの障害を検出する工程であって、前記障害とは、前記障害の発生した記憶エージェントが、もはや、前記複数の記憶エージェントに分散された複数のストレージ範囲の集約体に、単一の論理インターフェースとしてホストがアクセスできるようにしないことである、障害を検出する工程と、
前記障害の発生した記憶エージェントに置き換わる交換用記憶エージェントを識別する工程と、
前記交換用記憶エージェントを設定して前記単一の論理インターフェースを提供する工程と
を有する方法。
複数の記憶エージェントのうち障害の発生した1つの記憶エージェントの障害を検出する障害検出論理ハードウェアであって、前記障害とは、前記障害の発生した記憶エージェントが、もはや、前記複数の記憶エージェントに分散された複数のストレージ範囲の集約体に、単一の論理インターフェースとしてホストがアクセスできるようにしないことである、障害検出論理ハードウェアと、
命令を実行できるプロセッサであって、前記命令が当該プロセッサにより実行されると、当該プロセッサは、
前記障害の発生した記憶エージェントに置き換わる交換用記憶エージェントを識別する工程と、
前記交換用記憶エージェントを設定して前記単一の論理インターフェースを提供する工程と
を有する動作を実施する、プロセッサと
を有するシステム。
複数の記憶エージェントのうち障害の発生した1つの記憶エージェントの障害を検出する工程を管理する工程であって、前記障害とは、前記障害の発生した記憶エージェントが、もはや、前記複数の記憶エージェントに分散された複数のストレージ範囲の集約体に、単一の論理インターフェースとしてホストがアクセスできるようにしないことである、工程と、
前記障害の発生した記憶エージェントに置き換わる交換用記憶エージェントを識別する工程を管理する工程と、
前記交換用記憶エージェントを設定して前記単一の論理インターフェースを提供する工程を管理する工程と
を有する動作が実行される、コンピュータ可読媒体。
大容量ストレージにインターフェース接続するストレージインターフェース手段と、
ホストインターフェース・プロトコルを介してホストにインターフェース接続するホストインターフェース手段であって、送信キュー内のエントリから記憶要求を読み出す手段を有する、ホストインターフェース手段と、
ピアツーピアプロトコルを介して一次エージェントにインターフェース接続する一次エージェントインターフェース手段と、
前記記憶インターフェース手段を介して前記大容量ストレージにアクセスするための少なくとも1つのアドレスを決定するアドレス決定手段であって、前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて動作可能である、アドレス決定手段と、
記憶容量がゼロである旨を前記ホストに報告し、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する記憶容量報告手段と
を有し、
前記ホストインターフェース手段および前記一次エージェントインターフェース手段は、同じ物理チャネルにより少なくとも部分的に実装されるものである
システム。
前記アドレス情報に少なくとも部分的に基づいて、蓄積されたパリティデータを転送するため少なくとも1つの送信先を決定する送信先決定手段を有するものであるシステム。
大容量ストレージにインターフェース接続する工程と、
ホストインターフェース・プロトコルを介してホストにインターフェース接続する工程であって、送信キュー内のエントリから記憶要求を読み出す工程を有する、ホストにインターフェース接続する工程と、
ピアツーピアプロトコルを介して一次エージェントにインターフェース接続する工程と、
前記大容量ストレージにインターフェース接続する工程を介して前記大容量ストレージにアクセスするための少なくとも1つのアドレスを決定する工程であって、前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて動作可能である、工程と、
記憶容量がゼロである旨を前記ホストに報告し、且つ前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する工程と
を有し、
前記ホストにインターフェース接続する工程および前記一次エージェントにインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
方法。
大容量ストレージとインターフェース接続できる大容量ストレージ・ハードウェア・インターフェースと、
ホストとのインターフェース接続を可能にし、ホストインターフェース・プロトコルと互換性があり、且つ送信キュー内のエントリから記憶要求を読み出せるホストインターフェース論理ハードウェアと、
ピアツーピアプロトコルを介して一次エージェントとのインターフェース接続を可能にするピアツーピア通信論理ハードウェアと、
前記大容量ストレージ・ハードウェア・インターフェースを介して前記大容量ストレージにアクセスするための少なくとも1つのアドレスを決定できるアクセスアドレス決定論理ハードウェアであって、前記決定は、前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて動作可能である、アクセスアドレス決定論理ハードウェアと、
記憶容量がゼロである旨を前記ホストに報告でき、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告できる記憶容量報告論理ハードウェアと
を有し、
前記ホストとのインターフェース接続および前記一次エージェントとのインターフェース接続は、同じ物理チャネルにより少なくとも部分的に実施されるものである
システム。
大容量ストレージにインターフェース接続する工程を管理する工程と、
ホストインターフェース・プロトコルを介してホストにインターフェース接続する工程を管理する工程であって、前記ホストにインターフェース接続する工程は、送信キュー内のエントリから記憶要求を読み出す工程を有する、工程と、
ピアツーピアプロトコルを介して一次エージェントにインターフェース接続する工程を管理する工程と、
前記大容量ストレージにインターフェース接続する工程を介して前記大容量ストレージにアクセスするための少なくとも1つのアドレスを決定する工程を管理する工程であって、前記決定する工程は、前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて動作可能である、工程と、
記憶容量がゼロである旨を前記ホストに報告する工程を管理し、且つ前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する工程と
を有する動作が実行され、
前記ホストにインターフェース接続する工程および前記一次エージェントにインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
コンピュータ可読媒体。
大容量ストレージにインターフェース接続するストレージインターフェース手段と、
ホストインターフェース・プロトコルを介してホストにインターフェース接続するホストインターフェース手段であって、前記ホストと前記大容量ストレージ間でデータを転送する手段を有する、ホストインターフェース手段と、
ピアツーピアプロトコルを介して一次エージェントにインターフェース接続する一次エージェントインターフェース手段であって、前記一次エージェントから転送されてくる記憶要求を受信する手段を有する、一次エージェントインターフェース手段と、
前記大容量ストレージにアクセスするための少なくとも1つのアドレスを決定するアドレス決定手段であって、前記転送されてくる記憶要求に有されるアドレス情報に少なくとも部分的に基づいて動作可能である、アドレス決定手段と
を有し、
前記転送されてくる記憶要求は、送信キューから取得される要求に対応し、前記要求および前記転送されてくる要求は、同一の1若しくはそれ以上のアドレス範囲を参照し、
前記ホストインターフェース手段および前記一次エージェントインターフェース手段は、同じ物理チャネルにより少なくとも部分的に実装されるものである
システム。
前記アドレス情報に少なくとも部分的に基づいて、蓄積されたパリティデータを転送するため少なくとも1つの送信先を決定する送信先決定手段を有するものであるシステム。
記憶容量がゼロである旨を前記ホストに報告し、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する記憶容量報告手段を有するものであるシステム。
大容量ストレージにインターフェース接続する工程と、
ホストインターフェース・プロトコルを介してホストにインターフェース接続する工程であって、前記ホストと前記大容量ストレージ間でデータを転送する工程を有する、ホストにインターフェース接続する工程と、
ピアツーピアプロトコルを介して一次エージェントにインターフェース接続する工程であって、前記一次エージェントから転送されてくる記憶要求を受信する工程を有する、一次エージェントにインターフェース接続する工程と、
前記大容量ストレージにインターフェース接続する工程を介して前記大容量ストレージにアクセスするための少なくとも1つのアドレスを決定する工程であって、前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて動作可能である、工程と
を有し、
前記転送されてくる記憶要求は、送信キューから取得される要求に対応し、前記要求および前記転送されてくる要求は、同一の1若しくはそれ以上のアドレス範囲を参照し、
前記ホストにインターフェース接続する工程および前記一次エージェントにインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
方法。
大容量ストレージとインターフェース接続できる大容量ストレージ・ハードウェア・インターフェースと、
ホストとのインターフェース接続を可能にし、ホストインターフェース・プロトコルと互換性があり、且つ少なくとも部分的に前記大容量ストレージ・ハードウェア・インターフェースを介して前記ホストと前記大容量ストレージ間でデータを転送できる、ホストインターフェース論理ハードウェアと、
ピアツーピアプロトコルを介して一次エージェントとのインターフェース接続を可能にするピアツーピア通信論理ハードウェアと、
少なくとも部分的に前記ピアツーピア通信論理ハードウェアを介して前記一次エージェントから転送されてくる記憶要求の受信を可能にする記憶要求受け付け論理ハードウェアと、
前記大容量ストレージ・ハードウェア・インターフェースを介して前記大容量ストレージにアクセスするための少なくとも1つのアドレスを決定できるアクセスアドレス決定論理ハードウェアであって、前記決定は、前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて動作可能である、アクセスアドレス決定論理ハードウェアと
を有し、
前記転送されてくる記憶要求は、送信キューから取得される要求に対応し、前記要求および前記転送されてくる要求は、同一の1若しくはそれ以上のアドレス範囲を参照し、
前記ホストとのインターフェース接続および前記一次エージェントとのインターフェース接続は、同じ物理チャネルにより少なくとも部分的に実施されるものである
システム。
大容量ストレージにインターフェース接続する工程を管理する工程と、
ホストインターフェース・プロトコルを介してホストにインターフェース接続する工程を管理する工程であって、前記ホストにインターフェース接続する工程は、前記ホストと前記大容量ストレージ間でデータを転送する工程を有する、工程と、
ピアツーピアプロトコルを介して一次エージェントにインターフェース接続する工程を管理する工程であって、前記一次エージェントにインターフェース接続する工程は、前記一次エージェントから転送されてくる記憶要求を受信する工程を有する、工程と、
前記大容量ストレージにインターフェース接続する工程を介して前記大容量ストレージにアクセスするための少なくとも1つのアドレスを決定する工程を管理する工程であって、前記決定する工程は、前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて動作可能である、工程と
を有する動作が実行され、
前記転送されてくる記憶要求は、送信キューから取得される要求に対応し、前記要求および前記転送されてくる要求は、同一の1若しくはそれ以上のアドレス範囲を参照し、
前記ホストにインターフェース接続する工程および前記一次エージェントにインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
コンピュータ可読媒体。
ホストインターフェース・プロトコルを介してホストにインターフェース接続するホストインターフェース手段であって、送信キュー内のエントリから記憶要求を読み出す手段を有する、ホストインターフェース手段と、
ピアツーピアプロトコルを介して二次エージェントにインターフェース接続する二次エージェントインターフェース手段であって、前記二次エージェントに記憶サブ要求を転送する手段を有する、二次エージェントインターフェース手段と、
前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて、前記サブ要求を決定するサブ要求生成手段と、
前記二次エージェントの記憶容量に少なくとも部分的に基づく合計記憶容量を前記ホストに報告する記憶容量報告手段と
を有し、
前記ホストインターフェース手段および前記二次エージェントインターフェース手段は、同じ物理チャネルにより少なくとも部分的に実装されるものである
システム。
大容量ストレージにインターフェース接続するストレージインターフェース手段を有するものであるシステム。
ホストインターフェース・プロトコルを介してホストとインターフェース接続する工程であって、送信キュー内のエントリから記憶要求を読み出す工程を有する、ホストとインターフェース接続する工程と、
ピアツーピアプロトコルを介して二次エージェントとインターフェース接続する工程であって、前記二次エージェントに記憶サブ要求を転送する工程を有する、二次エージェントとインターフェース接続する工程と、
前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて、前記サブ要求を決定する工程と、
前記二次エージェントの記憶容量に少なくとも部分的に基づく合計記憶容量を前記ホストに報告する工程と
を有し、
前記ホストとインターフェース接続する工程および前記二次エージェントとインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
方法。
ホストとのインターフェース接続を可能にし、ホストインターフェース・プロトコルと互換性があり、且つ送信キュー内のエントリから記憶要求を読み出せるホストインターフェース論理ハードウェアと、
ピアツーピアプロトコルを介して二次エージェントとのインターフェース接続を可能にするピアツーピア通信論理ハードウェアと、
少なくとも部分的に前記ピアツーピア通信論理ハードウェアを介して前記二次エージェントに記憶サブ要求を転送できる要求転送論理ハードウェアと、
前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて、前記サブ要求を決定できるサブ要求決定論理ハードウェアと、
前記二次エージェントの記憶容量に少なくとも部分的に基づく合計記憶容量を前記ホストに報告できる記憶容量報告論理ハードウェアと
を有し、
前記ホストとのインターフェース接続および前記二次エージェントとのインターフェース接続は、同じ物理チャネルにより少なくとも部分的に実施されるものである
システム。
ホストインターフェース・プロトコルを介してホストとインターフェース接続する工程を管理する工程であって、前記ホストとインターフェース接続する工程は、送信キュー内のエントリから記憶要求を読み出す工程を有する、工程と、
ピアツーピアプロトコルを介して二次エージェントとインターフェース接続する工程を管理する工程であって、前記二次エージェントとインターフェース接続する工程は、前記二次エージェントに記憶サブ要求を転送する工程を有する、工程と、
前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて、前記サブ要求を決定する工程を管理する工程と、
前記二次エージェントの記憶容量に少なくとも部分的に基づく合計記憶容量を前記ホストに報告する工程を管理する工程と
を有する動作が実行され、
前記ホストとインターフェース接続する工程および二次エージェントとインターフェース接続する工程を管理する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
コンピュータ可読媒体。
大容量ストレージにインターフェース接続するストレージインターフェース手段と、
ホストインターフェース・プロトコルを介してホストにインターフェース接続するホストインターフェース手段であって、前記ホストと前記大容量ストレージ間でデータを転送する手段を有する、ホストインターフェース手段と、
ピアツーピアプロトコルを介して一次エージェントにインターフェース接続する一次エージェントインターフェース手段であって、前記一次エージェントから転送されてくる記憶サブ要求を受信する手段を有する、一次エージェントインターフェース手段と、
記憶容量がゼロである旨を前記ホストに報告し、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する記憶容量報告手段と
を有し、
前記ホストインターフェース手段および前記一次エージェントインターフェース手段は、同じ物理チャネルにより少なくとも部分的に実装されるものである
システム。
大容量ストレージにインターフェース接続する工程と、
ホストインターフェース・プロトコルを介してホストとインターフェース接続する工程であって、前記ホストと前記大容量ストレージ間でデータを転送する工程を有する、ホストとインターフェース接続する工程と、
ピアツーピアプロトコルを介して一次エージェントとインターフェース接続する工程であって、前記一次エージェントから転送されてくる記憶サブ要求を受信する工程を有する、一次エージェントとインターフェース接続する工程と、
記憶容量がゼロである旨を前記ホストに報告し、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する工程と
を有し、
前記ホストとインターフェース接続する工程および前記一次エージェントとインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
方法。
大容量ストレージとインターフェース接続できる大容量ストレージ・ハードウェア・インターフェースと、
ホストとのインターフェース接続を可能にし、ホストインターフェース・プロトコルと互換性があり、且つ少なくとも部分的に前記大容量ストレージ・ハードウェア・インターフェースを介して前記ホストと前記大容量ストレージ間でデータを転送できる、ホストインターフェース論理ハードウェアと、
ピアツーピアプロトコルを介して一次エージェントとのインターフェース接続を可能にするピアツーピア通信論理ハードウェアと、
少なくとも部分的に前記ピアツーピア通信論理ハードウェアを介して前記一次エージェントから転送されてくる記憶サブ要求を受信できるサブ要求受信論理ハードウェアと、
記憶容量がゼロである旨を前記ホストに報告でき、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告できる記憶容量報告論理ハードウェアと
を有し、
前記ホストとのインターフェース接続および前記一次エージェントとのインターフェース接続は、同じ物理チャネルにより少なくとも部分的に実施されるものである
システム。
大容量ストレージにインターフェース接続する工程を管理する工程と、
ホストインターフェース・プロトコルを介してホストとインターフェース接続する工程を管理する工程であって、前記ホストとインターフェース接続する工程は、前記ホストと前記大容量ストレージ間でデータを転送する工程を有する、工程と、
ピアツーピアプロトコルを介して一次エージェントとインターフェース接続する工程を管理する工程であって、前記一次エージェントとインターフェース接続する工程は、前記一次エージェントから転送されてくる記憶サブ要求を受信する工程を有する、工程と、
記憶容量がゼロである旨を前記ホストに報告する工程を管理し、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する工程と
を有する動作が実行され、
前記ホストとインターフェース接続する工程および前記一次エージェントとインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
コンピュータ可読媒体。
大容量ストレージにインターフェース接続するストレージインターフェース手段と、
ホストインターフェース・プロトコルを介してホストにインターフェース接続するホストインターフェース手段であって、前記ホストと前記大容量ストレージ間でデータを転送する手段を有する、ホストインターフェース手段と、
ピアツーピアプロトコルを介して一次エージェントにインターフェース接続する一次エージェントインターフェース手段であって、当該一次エージェントインターフェース手段は、前記一次エージェントから転送されてくるサブ要求を受信する手段および前記一次エージェントにサブステータスを送信する手段を有し、前記サブステータスは、前記サブ要求に基づく前記大容量ストレージへのアクセスの結果に少なくとも部分的に基づいたものである、一次エージェントインターフェース手段と、
記憶容量がゼロである旨を前記ホストに報告し、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する記憶容量報告手段と
を有し、
前記ホストインターフェース手段および前記一次エージェントインターフェース手段は、同じ物理チャネルにより少なくとも部分的に実装されるものである
システム。
大容量ストレージにインターフェース接続する工程と、
ホストインターフェース・プロトコルを介してホストとインターフェース接続する工程であって、前記ホストと前記大容量ストレージ間でデータを転送する工程を有する、ホストとインターフェース接続する工程と、
ピアツーピアプロトコルを介して一次エージェントとインターフェース接続する工程であって、当該一次エージェントとインターフェース接続する工程は、前記一次エージェントから転送されてくるサブ要求を受信する工程および前記一次エージェントにサブステータスを送信する手段を有し、前記サブステータスは、前記サブ要求に基づく前記大容量ストレージへのアクセスの結果に少なくとも部分的に基づいたものである、一次エージェントとインターフェース接続する工程と、
記憶容量がゼロである旨を前記ホストに報告し、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する工程と
を有し、
前記ホストとインターフェース接続する工程および前記一次エージェントとインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
方法。
大容量ストレージとインターフェース接続できる大容量ストレージ・ハードウェア・インターフェースと、
ホストとのインターフェース接続を可能にし、ホストインターフェース・プロトコルと互換性があり、且つ少なくとも部分的に前記大容量ストレージ・ハードウェア・インターフェースを介して前記ホストと前記大容量ストレージ間でデータを転送できる、ホストインターフェース論理ハードウェアと、
ピアツーピアプロトコルを介して一次エージェントとのインターフェース接続を可能にするピアツーピア通信論理ハードウェアと、
少なくとも部分的に前記ピアツーピア通信論理ハードウェアを介して前記一次エージェントから転送されてくる記憶サブ要求を受信できるサブ要求受信論理ハードウェアと、
前記サブ要求に基づいて前記大容量ストレージ・ハードウェア・インターフェースを介した前記大容量ストレージへのアクセスに少なくとも部分的に基づいて、サブステータスを決定できるサブステータス決定論理ハードウェアと、
少なくとも部分的に前記ピアツーピア通信論理ハードウェアを介して前記一次エージェントに前記サブステータスを転送できるサブステータス転送論理ハードウェアと、
記憶容量がゼロである旨を前記ホストに報告でき、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告できる記憶容量報告論理ハードウェアと
を有し、
前記ホストとのインターフェース接続および前記一次エージェントとのインターフェース接続は、同じ物理チャネルにより少なくとも部分的に実施されるものである
システム。
大容量ストレージにインターフェース接続する工程を管理する工程と、
ホストインターフェース・プロトコルを介してホストとインターフェース接続する工程を管理する工程であって、前記ホストとインターフェース接続する工程は、前記ホストと前記大容量ストレージ間でデータを転送する工程を有する、工程と、
ピアツーピアプロトコルを介して一次エージェントとインターフェース接続する工程を管理する工程であって、前記一次エージェントとインターフェース接続する工程は、前記一次エージェントから転送されてくるサブ要求を受信する工程および前記一次エージェントにサブステータスを送信する工程を有し、前記サブステータスは、前記サブ要求に基づく前記大容量ストレージへのアクセスの結果に少なくとも部分的に基づいたものである、工程と、
記憶容量がゼロである旨を前記ホストに報告する工程を管理し、さらに前記大容量ストレージの記憶容量に基づいた記憶容量を前記一次エージェントに報告する工程を管理する工程と
を有する動作が実行され、
前記ホストとインターフェース接続する工程および前記一次エージェントとインターフェース接続する工程は、同じ物理チャネルにより少なくとも部分的に実施されるものである
コンピュータ可読媒体。
ストレージの1つのアドレスにアクセスする要求をホストから受け付ける工程と、
前記アドレスに少なくとも部分的に基づいて、複数の記憶装置のうちいずれの1若しくはそれ以上に前記要求が対応するかを決定する工程と、
前記アドレスに少なくとも部分的に基づいて、前記決定された各記憶装置に対応する各サブ要求を決定する工程と、
前記対応する決定された記憶装置に前記サブ要求を送信する工程と、
前記決定された各記憶装置から各サブステータスを受け付ける工程と、
各前記サブステータスに少なくとも部分的に基づいて、全体的なステータスを決定する工程と、
前記全体的なステータスを前記ホストに提供する工程と
を有し、
前記要求を受け付ける工程、前記記憶装置を決定する工程、前記サブ要求を決定する工程、前記サブ要求を送信する工程、前記サブステータスを受け付ける工程、前記全体的なステータスを決定する工程、および前記全体的なステータスを提供する工程は、前記記憶装置のうち特定の1つにより実行され、
前記要求を受け付ける工程は、ホストインターフェース・プロトコルを介し、前記サブ要求を送信する工程および前記サブステータスを受け付ける工程は、前記ホストから独立して動作可能なピアツーピアプロトコルを介し、
前記記憶装置のうちの少なくとも1つは、前記サブ要求の1つを介してアクセスできるストレージを実装しており、当該記憶装置のうちの当該少なくとも1つは、前記実装されたストレージへの前記ホストインターフェース・プロトコルを介したアクセスを無効化するものである
方法。
各前記決定された記憶装置により、前記サブ要求に対応するデータ転送部分を独立して実行する工程を有するものである方法。
第1の記憶装置が、複数のホスト要求キューのうちの第1のホスト要求キューから第1の要求を読み出す工程と、
第2の記憶装置が、前記ホスト要求キューのうちの第2のホスト要求キューから第2の要求を読み出す工程であって、前記第2のホスト要求キューは、前記第1のホスト要求キューと区別可能であり、当該第2の記憶装置が読み出す工程は、前記第1の記憶装置が読み出す工程から独立したものである、工程と、
前記第1の記憶装置が、前記第1の要求の少なくとも一部を前記第2の記憶装置に転送する工程と、
前記第2の記憶装置が、前記第2の要求の少なくとも一部を前記第1の記憶装置に転送する工程であって、当該第2の記憶装置が転送する工程は、前記第1の記憶装置が転送する工程から独立したものである、工程と、
前記第1の記憶装置が、前記第2の要求の前記少なくとも一部に基づいて、第1のストレージにアクセスし、当該第1の記憶装置がアクセスする工程に少なくとも部分的に基づいて、第1のステータスを前記第2の記憶装置に返す工程と
前記第2の記憶装置が、前記第1の要求の前記少なくとも一部に基づいて、第2のストレージにアクセスし、当該第2の記憶装置がアクセスする工程に少なくとも部分的に基づいて、前記第1の記憶装置に第2のステータスを返す工程であって、前記第2の記憶装置がアクセスする工程は、前記第1の記憶装置がアクセスする工程から独立したものであり、前記第2のストレージは前記第1のストレージと区別可能である、工程と
を有する方法。
複数の物理的記憶装置への単一の論理インターフェースをホストに提供する工程であって、前記物理的記憶装置のうち1つは一次エージェントとして動作し、前記物理的記憶装置のうち1若しくはそれ以上は二次エージェントとして動作する、工程
を有し、
前記提供する工程は、
前記一次エージェントが、ストレージにアクセスする要求を前記ホストから受け付け、前記要求を1若しくはそれ以上のサブ要求として前記二次エージェントの全部または任意部分に転送し、前記サブ要求の転送先である前記二次エージェントから、前記サブ要求に関連付けられたサブステータスを受け付け、且つ少なくとも前記サブステータスに基づいて全体的なステータスを前記ホストに提供する工程と、
前記二次エージェントの全部または任意部分が、前記サブ要求を受け付け、前記サブ要求のホストコンテキストアドレス指定情報をローカルコンテキストアドレス指定情報に変換し、前記ローカルコンテキストアドレス指定情報に少なくとも部分的に基づいてローカルストレージにアクセスし、且つ前記一次エージェントに前記サブステータスを提供する工程と
を有し、
前記一次エージェントは、記憶容量について前記ホストからクエリーを受けると、前記一次エージェントにより実装されたストレージおよび前記二次エージェントにより実装されたストレージに少なくとも部分的に基づく記憶容量を報告し、
各前記二次エージェントは、記憶容量について前記ホストからクエリーを受けると、前記一次エージェントにより報告される記憶容量に少なくとも部分的に基づいて各々の記憶容量を報告する
方法。
ホストインターフェース・プロトコルを介してホストにインターフェース接続でき、且つピアツーピアプロトコルを介して二次エージェントにインターフェース接続できるホストインターフェース論理であって、前記ホストへのインターフェース接続は、送信キュー内のエントリから記憶要求を読み出す工程を有し、前記二次エージェントへのインターフェース接続は、前記二次エージェントに記憶サブ要求を転送する工程を有し、前記ホストへのインターフェース接続および前記二次エージェントへのインターフェース接続は、同じ物理チャネルを介したものである、ホストインターフェース論理と、
前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて、前記サブ要求を決定できるサブ要求生成論理と、
前記二次エージェントの記憶容量に少なくとも部分的に基づく合計記憶容量を前記ホストに報告できる記憶容量報告論理と
を有するシステム。
前記ホスト、前記二次エージェント、およびスイッチであって、前記ホストインターフェース論理および/または前記二次エージェントに前記ホストを連結するスイッチ、のうち1若しくはそれ以上を有するものであるシステム。
ストレージインターフェース論理および大容量ストレージを有し、前記ストレージインターフェース論理は、前記大容量ストレージにインターフェース接続でき、前記合計記憶容量は、さらに前記大容量ストレージの記憶容量に基づいたものであるシステム。
ホストインターフェース・プロトコルを介してホストにインターフェース接続でき、且つピアツーピアプロトコルを介して二次エージェントにインターフェース接続できるホストインターフェース論理であって、前記ホストへのインターフェース接続は、送信キュー内のエントリから記憶要求を読み出す工程を有し、前記二次エージェントへのインターフェース接続は、前記二次エージェントに記憶サブ要求を転送する工程を有し、前記ホストへのインターフェース接続および前記二次エージェントへのインターフェース接続は、同じ物理チャネルを介したものである、ホストインターフェース論理と、
前記記憶要求に有されるアドレス情報に少なくとも部分的に基づいて、前記サブ要求を決定できるサブ要求生成論理と、
前記二次エージェントの記憶容量に少なくとも部分的に基づく合計記憶容量を前記ホストに報告できる記憶容量報告論理と
を有するシステム。
前記ホスト、前記一次エージェント、スイッチであって、前記ホストインターフェース論理および/または前記一次エージェントに前記ホストを連結するスイッチ、および前記大容量ストレージの全部または任意部分のうち1若しくはそれ以上を有するものであるシステム。
複数の物理的記憶装置と複数のポートを備える物理的スイッチ部分とを有する物理的構成要素を有するストレージサブシステムと、
専用ポイントツーポイントリンクを介して前記複数のポートのうち専用ポートに連結されたホストと
を有し、
各物理的記憶装置は、
少なくとも1つのストレージ範囲と、
各ポイントツーポイントリンクを介して前記複数の各ポートに連結できる少なくとも1つのポートと、
前記物理的記憶装置が、前記ストレージサブシステムの1若しくはそれ以上の一次エージェントおよび1若しくはそれ以上の二次エージェントのうちの少なくとも1つのエージェントとして動作することを可能にするエージェント論理であって、各一次エージェントは、ホストが開始したストレージアクセス要求を受け付け、サブ要求を生成し、且つサブステータスを蓄積することができ、各二次エージェントは、前記サブ要求のうちの少なくとも1つを受け付け、前記サブステータスのうちの少なくとも1つを生成することができるものである、前記エージェント論理と
を有し、
前記ストレージサブシステムは、1若しくはそれ以上の論理記憶装置を動作させることができ、各論理記憶装置により、前記ホストは、前記一次エージェントのうちの1つの一次エージェントおよび前記二次エージェントのうちの少なくとも1つの二次エージェントに対応する前記記憶装置にわたって分散されたストレージ範囲の集約体に、単一の論理インターフェースを介してアクセスすることが可能となるものである
システム。
前記エージェント論理は、前記物理的記憶装置が、少なくとも一部の場合、前記一次エージェントのうちの少なくとも1つとして動作し、少なくとも一部の場合、前記二次エージェントのうちの少なくとも1つとして動作することを可能にする設定可能性(コンフィギュアビリティ)論理を有するものであるシステム。
前記エージェント論理は、前記物理的記憶装置が、前記一次エージェントのうちの少なくとも1つとして、および前記二次エージェントのうちの少なくとも1つとして、並行して動作することを可能にする並行性論理を有するものであるシステム。
前記エージェント論理は、前記物理的記憶装置が、前記一次エージェントおよび前記二次エージェントのうちの1つの専用エージェントとして動作することを可能にする専用エージェント論理を有するものであるシステム。
前記論理記憶装置のうちの第1の論理記憶装置は、前記一次エージェントのうちの少なくとも第1の一次エージェントと、1若しくはそれ以上の前記二次エージェントとを有し、
前記物理的スイッチ部分は、前記第1の一次エージェントと各前記二次エージェントとの間で、ホストから遮蔽されたピアツーピア通信を可能にするものである
システム。
前記複数のポートを備える物理的スイッチ部分は、第1の複数のポートを備える第1の物理的スイッチ部分であり、前記物理的構成要素は、さらに、第2の複数のポートを備える第2の物理的スイッチ部分を有し、
各物理的記憶装置は、さらに、各ポイントツーポイントリンクを介して各前記第2の複数のポートに連結できる少なくとも1つのポートを有するものである
システム。
前記第2の物理的スイッチ部分は、前記第1の物理的スイッチ部分を介した通信に利用可能な帯域幅に大きな影響を及ぼさずに、ピアツーピア通信により実施されるストレージ冗長性技術を可能にするものであるシステム。
前記ピアツーピア通信は、前記第2の物理的スイッチ部分を介し、制御情報、未変換冗長性データ、および変換済み冗長性データのうち1若しくはそれ以上を有するものであるシステム。
一単位の物理的スイッチは、前記第1の物理的スイッチ部分と、前記第2の物理的スイッチ部分とを有するものであるシステム。
前記単一の論理インターフェースは、ホストから遮蔽された前記一次および二次エージェント間のピアツーピア通信により実施されるミラーリング、ストライプ化、RAIDパリティ、およびフェイルオーバーのうち1若しくはそれ以上を可能にするものであるシステム。
前記一次エージェントは、第1の一次エージェントと、第2の一次エージェントとを有し、
前記二次エージェントは、第1の二次エージェントと、第2の二次エージェントとを有し、
前記物理的記憶装置は、第1の物理的記憶装置と、第2の物理的記憶装置とを有し、
前記論理記憶装置は、第1の論理記憶装置と、第2の論理記憶装置とを有し、
前記要求の第1のサブセットに対し、前記第1の物理的記憶装置は、前記第1の一次エージェントおよび前記第1の二次エージェントとして動作し、
前記要求の第2のサブセットに対し、前記第2の物理的記憶装置は、前記第2の一次エージェントおよび前記第2の二次エージェントとして動作し、
前記第1の論理記憶装置は、前記第1の一次エージェントと、前記第2の二次エージェントとを有し、前記第2の論理記憶装置は、前記第2の一次エージェントと、前記第1の二次エージェントとを有し、前記第1の論理記憶装置は、前記第2の論理記憶装置と並行して動作するものである
システム。
前記要求の前記第1のサブセットは第1のホスト要求キューからであり、前記要求の前記第2のサブセットは第2のホスト要求キューからであるシステム。
前記ホストは第1のホストであり、前記要求の前記第1のサブセットは第1のホストからであり、前記要求の前記第2のサブセットは第2のホストからであるシステム。
前記要求の前記第1のサブセットおよび前記要求の前記第2のサブセットは同一のホスト要求キューからであるシステム。
前記論理記憶装置のうちの第1の論理記憶装置は、前記一次エージェントのうちの少なくとも第1の一次エージェントと、前記二次エージェントのうちの少なくとも第1の二次エージェントとを有し、
前記第1の論理記憶装置の前記エージェントの前記ストレージ範囲の前記集約体は、第1の論理ストレージのサブ領域であり、
前記エージェント論理はストレージ復旧論理を有し、このストレージ復旧論理は、前記第1の一次エージェントが、1若しくはそれ以上の前記エージェントにより提供される利用可能な空きストレージを識別することを可能にし、且つ前記第1の論理ストレージのサブ領域の特定部分がもはや前記エージェントの1つにより提供されないことが決定された後、前記空きストレージからの割り当てを行うことにより、以前提供されていた前記特定部分を回復することを可能にするものである
システム。
前記論理記憶装置のうちの第1の論理記憶装置は、前記一次エージェントのうちの少なくとも第1の一次エージェントと、前記二次エージェントのうちの少なくとも第1の二次エージェントとを有し、
前記物理的記憶装置は、第1の物理的記憶装置と、第2の物理的記憶装置とを有し、
前記第1の物理的装置は、初期、前記第1の一次エージェントとして動作するものであり、
当該システムは、さらに、
前記第1の一次エージェントに障害が発生したことを決定し、他の前記エージェントから選択される1つのエージェントに一次エージェント交換要求を送信することが可能な監視エージェントを有し、
前記第2の物理的装置の前記エージェント論理は、前記第2の物理記憶装置が、前記監視エージェントから前記一次エージェント交換要求を受信すると、それに応答して前記第1の一次エージェントの交換装置として動作することを可能にする一次エージェント交換論理を有するものである
システム。
一次エージェントとして第1の記憶装置を動作させ、1若しくはそれ以上の二次エージェントとして少なくとも1つの第2の記憶装置を動作させる工程であって、前記一次および二次エージェントの各記憶装置は、それぞれ少なくとも1つのストレージ範囲を有するものである、前記動作させる工程と、
前記一次エージェントが論理インターフェースを提供する工程であって、この論理インターフェースは、前記ホストが、前記一次エージェントおよび二次エージェントの前記記憶装置にわたって分散されたストレージ範囲の集約体に、一単位の論理装置としてアクセスすることを可能にし、当該論理インターフェースを介した一次エージェントの前記ホストとの通信は、前記ホストから送信され、前記一次エージェントにより受け付けられるストレージアクセス要求と、前記一次エージェントにより前記ホストへ送信される全体的なステータスとを含むものである、前記提供する工程と、
前記一次エージェントが、1若しくはそれ以上のサブ要求として受け付けられた各要求を前記二次エージェントの全部または任意部分に転送し、前記サブ要求の転送先である前記二次エージェントから、前記サブ要求に関連付けられたサブステータスを受け付け、少なくとも前記サブステータスに基づいて送信される全体的なステータスの各々を算出する工程と、
前記二次エージェントの全部または任意部分が、前記サブ要求を受け付け、前記サブ要求のホストコンテキストのアドレス指定情報をローカルコンテキストのアドレス指定情報に変換し、前記ローカルコンテキストのアドレス指定情報に少なくとも部分的に基づいてローカルストレージにアクセスし、前記一次エージェントに前記サブステータスを提供する工程と
を有する方法。
前記一次エージェントが、前記一次および二次エージェントの前記ストレージ範囲に少なくとも部分的に基づいて、前記一単位の論理装置の集約記憶容量を決定する工程と、
前記ホストが記憶容量について前記一単位の論理装置にクエリーを実行した場合、それに応答して前記一次エージェントが前記集約記憶容量を報告する工程と、
前記ホストが記憶容量について前記二次エージェントにクエリーを実行した場合、それに応答して、各前記二次エージェントが、前記集約記憶容量における当該二次エージェントのストレージ範囲に相当する部分を除外した各々の記憶容量を報告する工程と
を有するものである方法。
前記ホストが記憶容量について前記二次エージェントのうち特定の1つの二次エージェントにクエリーを実行した場合、それに応答して、当該特定の二次エージェントが、前記一次エージェントにより決定される前記集約記憶容量において当該特定の二次エージェントにより実装されたストレージに相当する部分を除外した特定の記憶容量を報告する工程を有するものである方法。
ホストインターフェース・プロトコルに基づいて、前記一次エージェントの前記ホストとの通信の少なくとも一部を実行する工程を有するものである方法。
同じ物理リンクを共有することにより、前記一次エージェントの前記ホストとの通信の少なくとも一部、および前記一次エージェントの、前記二次エージェントのうち少なくとも1つとの通信の少なくとも一部を実行する工程
を有し、
前記一次エージェントの、前記二次エージェントのうち少なくとも1つとの通信は、前記サブ要求の少なくとも一部と、前記一次エージェントと前記二次エージェントとの間で交換される前記サブステータスの少なくとも一部を有するものである
方法。
ピアツーピアプロトコルに基づいて、一次エージェントの前記二次エージェントとの通信の少なくとも一部を実行する工程
を有し、
前記一次エージェントの前記二次エージェントとの通信は、少なくとも前記サブ要求と、前記一次エージェントと前記二次エージェントとの間で交換される前記サブステータスを有するものである
方法。
前記一次エージェントの前記二次エージェントとの通信は、さらに、ピアツーピアプロトコルを介して冗長性情報を交換する工程を有するものである方法。
一次エージェントとして第1の記憶装置を動作させ、1若しくはそれ以上の二次エージェントとして少なくとも第2の記憶装置を動作させる手段であって、前記一次および二次エージェントの各記憶装置は、それぞれ少なくとも1つのストレージ範囲を有するものである、前記動作させる手段と、
前記一次エージェントが論理インターフェースを提供する手段であって、この論理インターフェースは、前記ホストが、前記一次エージェントおよび二次エージェントの前記記憶装置にわたって分散された前記ストレージ範囲の集約体に、一単位の論理装置としてアクセスすることを可能にし、当該論理インターフェースを介した一次エージェントの前記ホストとの通信は、前記ホストへ送信され、前記一次エージェントにより受け付けられたストレージアクセス要求と、前記一次エージェントにより前記ホストへ送信される全体的なステータスとを有するものである、前記提供する手段と、
前記一次エージェントが、1若しくはそれ以上のサブ要求として受け付けられた各要求を前記二次エージェントの全部または任意部分に転送し、前記サブ要求の転送先である前記二次エージェントから、前記サブ要求に関連付けられたサブステータスを受け付け、少なくとも前記サブステータスに基づいて送信される各全体的なステータスを算出する手段と、
前記二次エージェントの全部または任意部分が、前記サブ要求を受け付け、前記サブ要求のホストコンテキストのアドレス指定情報をローカルコンテキストのアドレス指定情報に変換し、前記ローカルコンテキストのアドレス指定情報に少なくとも部分的に基づいてローカルストレージにアクセスし、前記一次エージェントに前記サブステータスを提供する手段と
を有する装置。
前記一次エージェントが、前記一次および二次エージェントの前記ストレージ範囲に少なくとも部分的に基づいて、前記一単位の論理装置の集約記憶容量を決定する手段と、
前記ホストが記憶容量について前記一単位の論理装置にクエリーを実行した場合、それに応答して前記一次エージェントが前記集約記憶容量を報告する手段と、
前記ホストが記憶容量について前記二次エージェントにクエリーを実行した場合、それに応答して、各前記二次エージェントが、前記集約記憶容量における当該二次エージェントのストレージ範囲に相当する部分を除外した各々の記憶容量を報告する手段と
を有するものである装置。
前記ホストが記憶容量について前記二次エージェントのうち特定の1つの二次エージェントにクエリーを実行した場合、それに応答して、当該特定の二次エージェントが、前記一次エージェントにより決定される前記集約記憶容量において当該特定の二次エージェントにより実装されたストレージに相当する部分を除外した特定の記憶容量を報告する手段を有するものである装置。
ホストインターフェース・プロトコルに基づいて、前記一次エージェントの前記ホストとの通信の少なくとも一部を実行する手段を有するものである装置。
同じ物理リンクを共有することにより、前記一次エージェントの前記ホストとの通信の少なくとも一部、および前記一次エージェントの、前記二次エージェントのうち少なくとも1つとの通信の少なくとも一部を実行する手段
を有し、
前記一次エージェントの、前記二次エージェントのうち少なくとも1つとの通信は、前記サブ要求の少なくとも一部と、前記一次エージェントと前記二次エージェントとの間で交換される前記サブステータスの少なくとも一部を有するものである
装置。
ピアツーピアプロトコルに基づいて、一次エージェントの前記二次エージェントとの通信の少なくとも一部を実行する手段
を有し、
前記一次エージェントの前記二次エージェントとの通信は、少なくとも前記サブ要求と、前記一次エージェントと前記二次エージェントとの間で交換される前記サブステータスを有するものである
装置。
前記一次エージェントの前記二次エージェントとの通信は、さらに、ピアツーピアプロトコルを介して交換される冗長性情報を有するものである装置。
図1Aは、スケーラブルな記憶装置用技術の一実施形態の構造を一部選んで詳しく例示したもので、ホストと、それぞれ一次エージェントとして動作可能な1若しくはそれ以上の記憶装置を有し、ホストから見える(host visible)ストレージと、それぞれ二次エージェントとして動作可能な1若しくはそれ以上の記憶装置を有し、ホストから見えない(host invisible)ストレージとを含む。ホスト100は、ホスト−記憶装置連結部180を通じて、ホストから見えるストレージ110およびホストから見えないストレージ120に連結される。前記ホスト−記憶装置連結部に加え、前記ホストから見えるストレージおよびホストから見えないストレージは、プラガブル(pluggable)なモジュール(アドインカード190Aとして図示)として任意選択的に実装され、かつ/または連結部101がケーブルとして任意選択的に実装される。一部の実施形態では、前記アドインカードの全部または任意部分がSSDとして実装される。前記ホストから見えるストレージは、1若しくはそれ以上の記憶装置(記憶装置110.Aおよび記憶装置110.Nとして図示)を有する。同様に、前記ホストから見えないストレージは、1若しくはそれ以上の記憶装置(記憶装置120.Aおよび記憶装置120.Nとして図示)を有する。種々の実施形態では、前記記憶装置のうちいずれか1つ若しくはそれ以上が、SSDなどの物理的記憶装置である。
図2は、スケーラブルな記憶装置用技術の実施形態の処理を一部選んで詳しく例示した図である。一次エージェントとして機能する記憶装置(例えば、図1Aの前記ホストから見えるストレージ110の要素のうち1若しくはそれ以上)により「一次アクション」209として実行されるアクションのほか、二次エージェントとして機能する記憶装置(例えば、図1Aの前記ホストから見えないストレージ120の要素のうち1若しくはそれ以上および/または前記ホストから見えるストレージ110の他の要素のうち1若しくはそれ以上)により「二次アクション」219として実行されるアクションが例示されている。
図3は、スケーラブルな記憶装置用技術の実施形態におけるホスト、一次エージェント、および二次エージェントのアドレス指定を一部選んで詳しく例示した図である。この図では、ホスト(例えば、図1Aのホスト100)から見たストレージアドレス空間の窓(ホストアドレス空間310)の例を示している。前記ホストのストレージアドレス空間は、ホストLBA範囲1〜5 311〜315を有する。さらに、この図では、一次エージェント(例えば、図1Aの前記ホストから見えるストレージ110の要素のいずれか1つ)から見たストレージアドレス空間の窓(一次アドレス空間320)の例を示している。前記一次エージェントのストレージアドレス空間は、一次LBA範囲1〜3 321〜323を有する。さらに、この図では、2つの二次エージェント(二次エージェントAおよびB、例えば図1Aの前記ホストから見えないストレージ120の要素のいずれか2つ、および/または前記ホストから見えるストレージ110の他の要素のいずれか)から見たストレージアドレス空間の窓(二次アドレス空間330)の例を示している。前記二次エージェントAのストレージアドレス空間は、二次A LBA範囲1〜3 331A、332A、および333Aを有する。前記二次エージェントBのストレージアドレス空間は、二次B LBA範囲1〜2 331Bおよび332Bを有する。特定の縮尺どおりに描画されているわけではないが、この図中、種々のアドレス範囲要素の縦方向の高さは異なっており、これら各範囲内の位置数の違いを概念的に表している。
図4は、一次エージェント、具体的には図1Aの記憶装置110.Aとして動作できるスケーラブルな記憶装置の一実施形態の構造を一部選んで詳しく例示したものである。この記憶装置には、PCIeバスへのインターフェース(PCIeインターフェース401)が含まれる。前記PCIeインターフェースにはDMAユニットが含まれ、これにより直接ホストメモリと前記PCIeインターフェースのバッファとの間で任意選択的および/または選択的な転送が可能になり、例えば、完了またはステータスキューエントリの読み出しまたは書き込み、および/またはホストメモリとの直接的なデータ転送が可能になる。前記PCIeインターフェースは、変換ブロック(LBA、長さ変換論理402)に連結される。前記変換ブロックは、例えば、図2の「ローカルLBAに変換」204について説明したように、ホストストレージアドレス情報(例えば、LBAおよび長さ)をローカルストレージアドレス情報に変換できる。この変換ブロックは、1若しくはそれ以上の大容量ストレージユニット(まとめて大容量ストレージ404と図示)に連結された大容量ストレージインターフェース(ストレージインターフェース論理403)に連結される。前記大容量ストレージユニットには、フラッシュストレージユニット(フラッシュ404F)、磁気ディスクストレージユニット(磁気404M)、光ディスクストレージユニット(光404O)、および/または任意タイプの不揮発性ストレージユニットのうちいずれか1つ若しくはそれ以上が含まれる。種々の実施形態において、前記フラッシュストレージユニットは、1若しくはそれ以上のフラッシュメモリチップおよび/またはダイ、例えばNANDフラッシュまたはNORフラッシュを有する。
障害シナリオ
一次エージェントおよび1若しくはそれ以上の二次エージェントが単一の論理インターフェースとしてホストに見える種々の実施形態および/または使用シナリオでは、いくつかの障害復旧技術が可能である。それらの復旧技術は、ホストに対して完全にトランスペアレントであるか、あるいはホスト上で動作する装置ドライバだけに見える。
上記説明では一定の選択を行っているが、これは単に文章と図面を作成する便宜上のもので、別段の断りがない限り、これらの選択自体が、上記実施形態の構造または動作に関する追加情報を包含すると解釈すべきではない。前記選択の例は、図の参照番号について使用される指定の具体的な構成または割り当て、ならびに前記実施形態の特徴および要素を識別および参照するため使用した前記要素識別子の具体的な構成または割り当て(各要素の囲み線または参照番号)などである。
Claims (15)
- システムであって、
各々前記システムの内部に供えられた複数の物理的記憶装置と複数のポートを備える物理的スイッチ部分とを有する物理的構成要素を有するストレージサブシステムと、
専用のポイントツーポイントリンクを介して前記複数のポートのうち専用ポートに連結されたホストと
を有し、
各物理的記憶装置は、
少なくとも1つのストレージ領域と、
前記システム内におけるピアツーピア接続を介して前記複数のポートの各ポートに連結できる少なくとも1つのポートと、
前記物理的記憶装置が、前記ストレージサブシステムの1若しくはそれ以上の一次エージェントおよび1若しくはそれ以上の二次エージェントのうちの少なくとも1つのエージェントとして動作することを可能にするエージェント論理であって、各一次エージェントは、ホストが開始したストレージアクセス要求を受け付け、サブ要求を生成し、且つサブステータスを蓄積することができ、各二次エージェントは、前記サブ要求のうち少なくとも1つを受け付け、前記サブステータスのうちの少なくとも1つを生成することができるものである、前記エージェント論理と
を有し、
前記ストレージサブシステムは、1若しくはそれ以上の論理記憶装置を動作させることができ、各論理記憶装置により、前記ホストは、前記一次エージェントのうちの1つの一次エージェントおよび前記二次エージェントのうちの少なくとも1つの二次エージェントに対応する前記物理的記憶装置にわたって分散されたストレージ領域の集約体に、単一の論理インターフェースを介してアクセスすることが可能となるものである
システム。 - 請求項1記載のシステムにおいて、さらに、
前記エージェント論理は、前記物理的記憶装置が、少なくとも一部の場合、前記一次エージェントのうちの少なくとも1つとして動作し、少なくとも一部の場合、前記二次エージェントのうちの少なくとも1つとして動作することを可能にする設定可能性(コンフィギュアビリティ)論理を有するものであるシステム。 - 請求項1記載のシステムにおいて、さらに
前記エージェント論理は、前記物理的記憶装置が、前記一次エージェントのうちの少なくとも1つ、および前記二次エージェントのうちの少なくとも1つとして、並行して動作することを可能にする並行性論理を有するものであるシステム。 - 請求項1記載のシステムにおいて、さらに、
前記エージェント論理は、前記物理的記憶装置が、前記一次エージェントおよび前記二次エージェントのうちの1つの専用エージェントとして動作することを可能にする専用エージェント論理を有するものであるシステム。 - 請求項1記載のシステムにおいて、さらに、
前記論理記憶装置のうちの第1の論理記憶装置は、前記一次エージェントのうちの少なくとも第1の一次エージェントと、1若しくはそれ以上の前記二次エージェントとを有し、
前記物理的スイッチ部分は、前記第1の一次エージェントと各前記二次エージェントとの間で、ホストから遮蔽されたピアツーピア通信を可能にするものである
システム。 - 方法であって、
ホストに接続された装置内で、一次エージェントとして第1の記憶装置を動作させ、1若しくはそれ以上の二次エージェントとして少なくとも1つの前記装置内の第2の記憶装置を動作させる工程であって、前記一次および二次エージェントの各記憶装置は、それぞれ少なくとも1つのストレージ領域を有するものである、前記動作させる工程と、
前記一次エージェントが論理インターフェースを提供する工程であって、この論理インターフェースは、前記ホストが、前記一次エージェントおよび二次エージェントの前記記憶装置にわたって分散されたストレージ領域の集約体に、一単位の論理装置としてアクセスすることを可能にし、当該論理インターフェースを介した一次エージェントの前記ホストとの通信は、前記ホストから送信され、前記一次エージェントにより受け付けれられるストレージアクセス要求と、前記一次エージェントにより前記ホストへ送信される全体的なステータスとを含むものである、前記提供する工程と、
前記一次エージェントが、1若しくはそれ以上のサブ要求として受け付けられた各要求を前記二次エージェントの全部または任意部分にピアツーピア接続により転送し、前記サブ要求の転送先である前記二次エージェントから、前記サブ要求に関連付けられたサブステータスを受け付け、少なくとも前記サブステータスに基づいて送信される全体的なステータスの各々を算出する工程と、
前記二次エージェントの全部または任意部分が、前記サブ要求を受け付け、前記サブ要求のホストコンテキストのアドレス指定情報をローカルコンテキストのアドレス指定情報に変換し、前記ローカルコンテキストのアドレス指定情報に少なくとも部分的に基づいてローカルストレージにアクセスし、前記一次エージェントに前記サブステータスを提供する工程と
を有する方法。 - 請求項6記載の方法において、さらに、
前記一次エージェントが、前記一次および二次エージェントの前記ストレージ領域に少なくとも部分的に基づいて、前記一単位の論理装置の集約記憶容量を決定する工程と、
前記ホストが記憶容量について前記一単位の論理装置にクエリーを実行した場合、それに応答して前記一次エージェントが前記集約記憶容量を報告する工程と、
前記ホストが記憶容量について前記二次エージェントにクエリーを実行した場合、それに応答して、各前記二次エージェントが、前記集約記憶容量における当該二次エージェントのストレージ領域に相当する部分を除外した各々の記憶容量を報告する工程と
を有するものである方法。 - 請求項6記載の方法において、さらに、
前記ホストが記憶容量について前記二次エージェントのうち特定の1つの二次エージェントにクエリーを実行した場合、それに応答して、当該特定の二次エージェントが、前記一次エージェントにより決定される集約記憶容量において当該特定の二次エージェントにより実装されたストレージに相当する部分を除外した特定の記憶容量を報告する工程を有するものである方法。 - 請求項6記載の方法において、さらに、
ピアツーピアプロトコルに基づいて、一次エージェントの前記二次エージェントとの通信の少なくとも一部を実行する工程
を有し、
前記一次エージェントの前記二次エージェントとの通信は、少なくとも前記サブ要求と、前記一次エージェントと前記二次エージェントとの間で交換される前記サブステータスを有するものである
方法。 - 請求項9記載の方法において、
前記一次エージェントの前記二次エージェントとの通信は、さらに、ピアツーピアプロトコルを介して冗長性情報を交換する工程を有するものである方法。 - ホストに接続された装置であって、
一次エージェントとして第1の記憶装置を動作させ、1若しくはそれ以上の二次エージェントとして少なくとも第2の記憶装置を動作させる手段であって、前記一次および二次エージェントの各記憶装置は、前記装置内にあって互いにピアツーピア接続され、それぞれ少なくとも1つのストレージ領域を有するものである、前記動作させる手段と、
前記一次エージェントが論理インターフェースを提供する手段であって、この論理インターフェースは、前記ホストが、前記一次エージェントおよび二次エージェントの前記記憶装置にわたって分散されたストレージ領域の集約体に、一単位の論理装置としてアクセスすることを可能にし、当該論理インターフェースを介した一次エージェントの前記ホストとの通信は、前記ホストから送信され、前記一次エージェントにより受け付けられたストレージアクセス要求と、前記一次エージェントにより前記ホストへ送信される全体的なステータスとを有するものである、前記提供する手段と、
前記一次エージェントが、1若しくはそれ以上のサブ要求として受け付けられた各要求を前記二次エージェントの全部または任意部分に転送し、前記サブ要求の転送先である前記二次エージェントから、前記サブ要求に関連付けられたサブステータスを受け付け、少なくとも前記サブステータスに基づいて送信される各全体的なステータスを算出する手段と、
前記二次エージェントの全部または任意部分が、前記サブ要求を受け付け、前記サブ要求のホストコンテキストのアドレス指定情報をローカルコンテキストのアドレス指定情報に変換し、前記ローカルコンテキストのアドレス指定情報に少なくとも部分的に基づいてローカルストレージにアクセスし、前記一次エージェントに前記サブステータスを提供する手段と
を有する装置。 - 請求項11記載の装置において、さらに、
前記一次エージェントが、前記一次および二次エージェントの前記ストレージ領域に少なくとも部分的に基づいて、前記一単位の論理装置の集約記憶容量を決定する手段と、
前記ホストが記憶容量について前記一単位の論理装置にクエリーを実行した場合、それに応答して前記一次エージェントが前記集約記憶容量を報告する手段と、
前記ホストが記憶容量について前記二次エージェントにクエリーを実行した場合、それに応答して、各前記二次エージェントが、前記集約記憶容量における当該二次エージェントのストレージ領域に相当する部分を除外した各々の記憶容量を報告する手段と
を有する装置。 - 請求項11記載の装置において、さらに、
前記ホストが記憶容量について前記二次エージェントのうち特定の1つの二次エージェントにクエリーを実行した場合、それに応答して、当該特定の二次エージェントが、前記一次エージェントにより決定される前記集約記憶容量において当該特定の二次エージェントにより実装されたストレージに相当する部分を除外した特定の記憶容量を報告する手段を有するものである装置。 - 請求項11記載の装置において、さらに、
ピアツーピアプロトコルに基づいて、一次エージェントの前記二次エージェントとの通信の少なくとも一部を実行する手段
を有し、
前記一次エージェントの前記二次エージェントとの通信は、少なくとも前記サブ要求と、前記一次エージェントと前記二次エージェントとの間で交換される前記サブステータスとを有するものである
装置。 - 請求項14記載の装置において、
前記一次エージェントの前記二次エージェントとの通信は、さらに、ピアツーピアプロトコルを介して交換される冗長性情報を有するものである装置。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US35644310P | 2010-06-18 | 2010-06-18 | |
US61/356,443 | 2010-06-18 | ||
US201161497525P | 2011-06-16 | 2011-06-16 | |
US61/497,525 | 2011-06-16 | ||
PCT/US2011/040996 WO2011160094A2 (en) | 2010-06-18 | 2011-06-17 | Scalable storage devices |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013532339A JP2013532339A (ja) | 2013-08-15 |
JP2013532339A5 JP2013532339A5 (ja) | 2014-08-07 |
JP5957647B2 true JP5957647B2 (ja) | 2016-07-27 |
Family
ID=45348918
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013515573A Expired - Fee Related JP5957647B2 (ja) | 2010-06-18 | 2011-06-17 | スケーラブルな記憶装置 |
Country Status (7)
Country | Link |
---|---|
US (3) | US8677068B2 (ja) |
EP (1) | EP2583184A4 (ja) |
JP (1) | JP5957647B2 (ja) |
KR (2) | KR101466592B1 (ja) |
CN (2) | CN104166441B (ja) |
TW (1) | TWI475379B (ja) |
WO (1) | WO2011160094A2 (ja) |
Families Citing this family (96)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8671265B2 (en) | 2010-03-05 | 2014-03-11 | Solidfire, Inc. | Distributed data storage system providing de-duplication of data using block identifiers |
US9838269B2 (en) | 2011-12-27 | 2017-12-05 | Netapp, Inc. | Proportional quality of service based on client usage and system metrics |
US9054992B2 (en) | 2011-12-27 | 2015-06-09 | Solidfire, Inc. | Quality of service policy sets |
WO2013101209A1 (en) * | 2011-12-30 | 2013-07-04 | Intel Corporation | Thin translation for system access of non volatile semicondcutor storage as random access memory |
US9875001B2 (en) * | 2012-08-26 | 2018-01-23 | Avaya Inc. | Network device management and visualization |
US9501437B2 (en) * | 2012-11-15 | 2016-11-22 | Empire Technology Development Llc | Scalable storage system having multiple storage channels |
US9122515B2 (en) | 2012-12-19 | 2015-09-01 | Dell Products L.P. | Completion notification for a storage device |
CN103902472B (zh) * | 2012-12-28 | 2018-04-20 | 华为技术有限公司 | 基于内存芯片互连的内存访问处理方法、内存芯片及系统 |
US9720627B2 (en) * | 2013-01-17 | 2017-08-01 | Western Digital Technologies, Inc. | Data management for a data storage device |
TWI614670B (zh) * | 2013-02-12 | 2018-02-11 | Lsi公司 | 連鎖且可擴展之儲存系統及在一連鎖且可擴展之儲存系統中存取資料之方法 |
US9348537B2 (en) * | 2013-09-10 | 2016-05-24 | Qualcomm Incorporated | Ascertaining command completion in flash memories |
BR112016009230B1 (pt) | 2013-11-27 | 2022-07-26 | Intel Corporation | Sistema de computador, módulo de memória multiportas e método de manutenção para arquitetura de servidor |
US10067829B2 (en) | 2013-12-13 | 2018-09-04 | Intel Corporation | Managing redundancy information in a non-volatile memory |
US9430599B2 (en) * | 2014-02-18 | 2016-08-30 | Optima Design Automation Ltd | Determining soft error infliction probability |
US20150244795A1 (en) | 2014-02-21 | 2015-08-27 | Solidfire, Inc. | Data syncing in a distributed system |
WO2015128976A1 (ja) * | 2014-02-27 | 2015-09-03 | 三菱電機株式会社 | データ記憶装置 |
KR102318478B1 (ko) * | 2014-04-21 | 2021-10-27 | 삼성전자주식회사 | 스토리지 컨트롤러, 스토리지 시스템 및 상기 스토리지 컨트롤러의 동작 방법 |
KR101512181B1 (ko) * | 2014-04-23 | 2015-04-16 | 주식회사 백프로 | 내부 저장모듈을 구비한 sas 데이터 컨버팅 시스템 |
US8868825B1 (en) * | 2014-07-02 | 2014-10-21 | Pure Storage, Inc. | Nonrepeating identifiers in an address space of a non-volatile solid-state storage |
US9652415B2 (en) | 2014-07-09 | 2017-05-16 | Sandisk Technologies Llc | Atomic non-volatile memory data transfer |
US9904621B2 (en) | 2014-07-15 | 2018-02-27 | Sandisk Technologies Llc | Methods and systems for flash buffer sizing |
KR101459750B1 (ko) * | 2014-07-15 | 2014-11-13 | 주식회사 백프로 | 안정성을 개선한 sas 데이터 컨버팅 시스템 |
US9645744B2 (en) | 2014-07-22 | 2017-05-09 | Sandisk Technologies Llc | Suspending and resuming non-volatile memory operations |
KR102173089B1 (ko) | 2014-08-08 | 2020-11-04 | 삼성전자주식회사 | 인터페이스 회로 및 그것의 패킷 전송 방법 |
JP2016057876A (ja) * | 2014-09-10 | 2016-04-21 | 富士通株式会社 | 情報処理装置、入出力制御プログラム、及び入出力制御方法 |
US9952978B2 (en) | 2014-10-27 | 2018-04-24 | Sandisk Technologies, Llc | Method for improving mixed random performance in low queue depth workloads |
US9558125B2 (en) | 2014-10-27 | 2017-01-31 | Sandisk Technologies Llc | Processing of un-map commands to enhance performance and endurance of a storage device |
US9753649B2 (en) | 2014-10-27 | 2017-09-05 | Sandisk Technologies Llc | Tracking intermix of writes and un-map commands across power cycles |
US9824007B2 (en) | 2014-11-21 | 2017-11-21 | Sandisk Technologies Llc | Data integrity enhancement to protect against returning old versions of data |
US9817752B2 (en) | 2014-11-21 | 2017-11-14 | Sandisk Technologies Llc | Data integrity enhancement to protect against returning old versions of data |
CN104486384A (zh) * | 2014-11-28 | 2015-04-01 | 华为技术有限公司 | 一种存储系统及交换扩展装置 |
US20160202924A1 (en) * | 2015-01-13 | 2016-07-14 | Telefonaktiebolaget L M Ericsson (Publ) | Diagonal organization of memory blocks in a circular organization of memories |
US10912428B2 (en) * | 2015-02-12 | 2021-02-09 | Visibelle Derma Institute, Inc. | Tip for skin cleansing device |
US9647697B2 (en) | 2015-03-16 | 2017-05-09 | Sandisk Technologies Llc | Method and system for determining soft information offsets |
US9772796B2 (en) * | 2015-04-09 | 2017-09-26 | Sandisk Technologies Llc | Multi-package segmented data transfer protocol for sending sub-request to multiple memory portions of solid-state drive using a single relative memory address |
US9864545B2 (en) | 2015-04-14 | 2018-01-09 | Sandisk Technologies Llc | Open erase block read automation |
US9753653B2 (en) | 2015-04-14 | 2017-09-05 | Sandisk Technologies Llc | High-priority NAND operations management |
US10372529B2 (en) | 2015-04-20 | 2019-08-06 | Sandisk Technologies Llc | Iterative soft information correction and decoding |
US9778878B2 (en) | 2015-04-22 | 2017-10-03 | Sandisk Technologies Llc | Method and system for limiting write command execution |
US10223000B2 (en) * | 2015-05-21 | 2019-03-05 | International Business Machines Corporation | Data compression for grid-oriented storage systems |
US9870149B2 (en) | 2015-07-08 | 2018-01-16 | Sandisk Technologies Llc | Scheduling operations in non-volatile memory devices using preference values |
US9715939B2 (en) | 2015-08-10 | 2017-07-25 | Sandisk Technologies Llc | Low read data storage management |
US10228990B2 (en) | 2015-11-12 | 2019-03-12 | Sandisk Technologies Llc | Variable-term error metrics adjustment |
US10108377B2 (en) | 2015-11-13 | 2018-10-23 | Western Digital Technologies, Inc. | Storage processing unit arrays and methods of use |
TWI597953B (zh) * | 2015-11-25 | 2017-09-01 | 財團法人工業技術研究院 | 具故障轉移能力的快速周邊元件互連網路系統與操作方法 |
US10126970B2 (en) | 2015-12-11 | 2018-11-13 | Sandisk Technologies Llc | Paired metablocks in non-volatile storage device |
US9837146B2 (en) | 2016-01-08 | 2017-12-05 | Sandisk Technologies Llc | Memory system temperature management |
US10732856B2 (en) | 2016-03-03 | 2020-08-04 | Sandisk Technologies Llc | Erase health metric to rank memory portions |
US10929022B2 (en) | 2016-04-25 | 2021-02-23 | Netapp. Inc. | Space savings reporting for storage system supporting snapshot and clones |
EP3261302B1 (en) * | 2016-04-29 | 2020-01-15 | Huawei Technologies Co., Ltd. | Storage network element discovery method and device |
US20170329640A1 (en) * | 2016-05-10 | 2017-11-16 | HGST Netherlands B.V. | Systems and methods for designating storage processing units as communication hubs and allocating processing tasks in a storage processor array |
US10481830B2 (en) | 2016-07-25 | 2019-11-19 | Sandisk Technologies Llc | Selectively throttling host reads for read disturbs in non-volatile memory system |
US10642763B2 (en) | 2016-09-20 | 2020-05-05 | Netapp, Inc. | Quality of service policy sets |
KR102631351B1 (ko) * | 2016-10-07 | 2024-01-31 | 삼성전자주식회사 | 피어-투 피어 통신을 수행할 수 있는 저장 장치와 이를 포함하는 데이터 저장 시스템 |
US11216194B2 (en) | 2016-10-19 | 2022-01-04 | Aliane Technologies Corporation | Memory management system and method thereof |
US20180107392A1 (en) * | 2016-10-19 | 2018-04-19 | Aliane Technologies Co., | Memory management system and method thereof |
US10628196B2 (en) * | 2016-11-12 | 2020-04-21 | Vmware, Inc. | Distributed iSCSI target for distributed hyper-converged storage |
CN108614746A (zh) * | 2016-12-09 | 2018-10-02 | 中国移动通信有限公司研究院 | 一种数据处理方法及其系统、服务器 |
US10255134B2 (en) * | 2017-01-20 | 2019-04-09 | Samsung Electronics Co., Ltd. | Control plane method and apparatus for providing erasure code protection across multiple storage devices |
US10860508B2 (en) * | 2017-05-25 | 2020-12-08 | Western Digital Technologies, Inc. | Offloaded disaggregated storage architecture |
US10430333B2 (en) | 2017-09-29 | 2019-10-01 | Intel Corporation | Storage system with interconnected solid state disks |
US10608951B2 (en) * | 2017-09-30 | 2020-03-31 | Oracle International Corporation | Live resegmenting of partitions in distributed stream-processing platforms |
DE102018125297A1 (de) | 2017-11-17 | 2019-05-23 | Samsung Electronics Co., Ltd. | Speichereinrichtung, die Peer-to-Peer-Kommunikation mit externer Einrichtung ohne Eingriff eines Host durchführt |
US10419265B2 (en) | 2017-11-29 | 2019-09-17 | Bank Of America Corporation | Request processing system using a combining engine |
KR102446733B1 (ko) | 2017-11-30 | 2022-09-23 | 삼성전자주식회사 | 스토리지 장치 및 스토리지 장치를 포함하는 전자 장치 |
CN108365926A (zh) * | 2018-01-17 | 2018-08-03 | 北京和利时智能技术有限公司 | 一种新型冗余系统 |
US10740181B2 (en) | 2018-03-06 | 2020-08-11 | Western Digital Technologies, Inc. | Failed storage device rebuild method |
US10860446B2 (en) | 2018-04-26 | 2020-12-08 | Western Digital Technologiies, Inc. | Failed storage device rebuild using dynamically selected locations in overprovisioned space |
US10929319B2 (en) * | 2018-05-11 | 2021-02-23 | Seagate Technology Llc | Data storage device with front end bus |
KR102570581B1 (ko) | 2018-06-07 | 2023-08-24 | 삼성전자 주식회사 | 스토리지 장치와 재구성 가능 로직 칩을 포함하는 스토리지 장치 세트 및 이를 포함하는 스토리지 시스템 |
KR102471219B1 (ko) | 2018-06-30 | 2022-11-25 | 후아웨이 테크놀러지 컴퍼니 리미티드 | NVMe 기반의 데이터 판독 방법, 장치, 및 시스템 |
US10725941B2 (en) | 2018-06-30 | 2020-07-28 | Western Digital Technologies, Inc. | Multi-device storage system with hosted services on peer storage devices |
US10409511B1 (en) * | 2018-06-30 | 2019-09-10 | Western Digital Technologies, Inc. | Multi-device storage system with distributed read/write processing |
EP3792743A4 (en) | 2018-06-30 | 2021-06-30 | Huawei Technologies Co., Ltd. | NVME-BASED DATA WRITING PROCESS, DEVICE AND SYSTEM |
US10831603B2 (en) | 2018-08-03 | 2020-11-10 | Western Digital Technologies, Inc. | Rebuild assist using failed storage device |
US10649843B2 (en) * | 2018-08-03 | 2020-05-12 | Western Digital Technologies, Inc. | Storage systems with peer data scrub |
US10824526B2 (en) * | 2018-08-03 | 2020-11-03 | Western Digital Technologies, Inc. | Using failed storage device in peer-to-peer storage system to perform storage-centric task |
US10901848B2 (en) | 2018-08-03 | 2021-01-26 | Western Digital Technologies, Inc. | Storage systems with peer data recovery |
US10592144B2 (en) | 2018-08-03 | 2020-03-17 | Western Digital Technologies, Inc. | Storage system fabric with multichannel compute complex |
US11061604B2 (en) | 2018-09-28 | 2021-07-13 | Infortrend Technology, Inc. | Method and storage system architecture for accessing data by means of a compatible module |
EP3857859B1 (en) | 2018-11-16 | 2023-07-19 | VMWare, Inc. | Active-active architecture for distributed iscsi target in hyper-converged storage |
US11182258B2 (en) | 2019-01-04 | 2021-11-23 | Western Digital Technologies, Inc. | Data rebuild using dynamic peer work allocation |
JP6942163B2 (ja) * | 2019-08-06 | 2021-09-29 | 株式会社日立製作所 | ドライブボックス、ストレージシステム及びデータ転送方法 |
US20210042255A1 (en) * | 2019-08-09 | 2021-02-11 | Sony Interactive Entertainment LLC | Methods for Using High-Speed Data Communication Fabric to Enable Cross-System Command Buffer Writing for Data Retrieval in Cloud Gaming |
KR20210087628A (ko) | 2020-01-03 | 2021-07-13 | 삼성전자주식회사 | 네트워크 기반 스토리지 장치의 구동 방법 및 이를 이용한 스토리지 시스템의 구동 방법 |
US11507409B2 (en) | 2020-01-22 | 2022-11-22 | Vmware, Inc. | Object-based load balancing approaches in distributed storage system |
US11500667B2 (en) | 2020-01-22 | 2022-11-15 | Vmware, Inc. | Object-based approaches to support internet small computer system interface (ISCSI) services in distributed storage system |
US11316917B2 (en) | 2020-03-04 | 2022-04-26 | Samsung Electronics Co., Ltd. | Methods and apparatus for peer-to-peer data channels for storage devices |
US11734131B2 (en) * | 2020-04-09 | 2023-08-22 | Micron Technology, Inc. | Memory device having redundant media management capabilities |
US11372785B2 (en) * | 2020-05-06 | 2022-06-28 | Microsoft Technology Licensing, Llc | Local non-volatile memory express virtualization device |
US11468169B1 (en) | 2021-04-28 | 2022-10-11 | Dell Products L.P. | Dark storage support for as-a-service model |
US20230110067A1 (en) * | 2021-10-07 | 2023-04-13 | Samsung Electronics Co., Ltd. | Systems, methods, and devices for near storage elasticity |
US11734207B1 (en) * | 2022-02-02 | 2023-08-22 | Western Digital Technologies, Inc. | Dynamic port allocation in PCIe bifurcation system |
US11983428B2 (en) * | 2022-06-07 | 2024-05-14 | Western Digital Technologies, Inc. | Data migration via data storage device peer channel |
US12019917B2 (en) | 2022-06-27 | 2024-06-25 | Western Digital Technologies, Inc. | Peer RAID control among peer data storage devices |
CN117687889B (zh) * | 2024-01-31 | 2024-04-05 | 苏州元脑智能科技有限公司 | 一种内存扩展设备的性能测试装置及方法 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6304980B1 (en) * | 1996-03-13 | 2001-10-16 | International Business Machines Corporation | Peer-to-peer backup system with failure-triggered device switching honoring reservation of primary device |
US6442709B1 (en) * | 1999-02-09 | 2002-08-27 | International Business Machines Corporation | System and method for simulating disaster situations on peer to peer remote copy machines |
US6654831B1 (en) * | 2000-03-07 | 2003-11-25 | International Business Machine Corporation | Using multiple controllers together to create data spans |
US20040103163A1 (en) * | 2002-11-27 | 2004-05-27 | Hao-Hsing Lin | Serial bus disk extender and portable storage device |
US7174433B2 (en) * | 2003-04-03 | 2007-02-06 | Commvault Systems, Inc. | System and method for dynamically sharing media in a computer network |
US7574529B2 (en) * | 2004-06-22 | 2009-08-11 | International Business Machines Corporation | Addressing logical subsystems in a data storage system |
TWI274353B (en) * | 2005-02-21 | 2007-02-21 | Transcend Information Inc | Flash disk with expansion capacity, stackable mobile storage device and control circuit thereof |
JP4990505B2 (ja) * | 2005-04-04 | 2012-08-01 | 株式会社日立製作所 | 記憶制御装置及びストレージシステム |
WO2007014296A2 (en) * | 2005-07-25 | 2007-02-01 | Parascale, Inc. | Scalable distributed file storage access and management |
WO2007024740A2 (en) * | 2005-08-25 | 2007-03-01 | Silicon Image, Inc. | Smart scalable storage switch architecture |
TWI286690B (en) * | 2005-08-29 | 2007-09-11 | Via Tech Inc | Expanded structure of peripheral storage device having a connector port multiplier |
TWI285304B (en) * | 2005-10-20 | 2007-08-11 | Quanta Comp Inc | Extendable storage apparatus for blade server system |
US7685227B2 (en) * | 2006-11-10 | 2010-03-23 | Gerber Robert H | Message forwarding backup manager in a distributed server system |
JP2009175824A (ja) * | 2008-01-22 | 2009-08-06 | Hitachi Ltd | メインフレーム用記憶制御装置及びメインフレーム用ボリュームの仮想化方法 |
US8090907B2 (en) * | 2008-07-09 | 2012-01-03 | International Business Machines Corporation | Method for migration of synchronous remote copy service to a virtualization appliance |
US8234470B2 (en) * | 2009-08-25 | 2012-07-31 | International Business Machines Corporation | Data repository selection within a storage environment |
-
2011
- 2011-06-17 KR KR1020147019871A patent/KR101466592B1/ko active IP Right Grant
- 2011-06-17 JP JP2013515573A patent/JP5957647B2/ja not_active Expired - Fee Related
- 2011-06-17 CN CN201410374503.5A patent/CN104166441B/zh active Active
- 2011-06-17 EP EP11796563.2A patent/EP2583184A4/en not_active Ceased
- 2011-06-17 US US13/702,976 patent/US8677068B2/en not_active Expired - Fee Related
- 2011-06-17 WO PCT/US2011/040996 patent/WO2011160094A2/en active Application Filing
- 2011-06-17 KR KR1020137001262A patent/KR101491484B1/ko active IP Right Grant
- 2011-06-17 TW TW100121300A patent/TWI475379B/zh not_active IP Right Cessation
- 2011-06-17 CN CN201180040009.XA patent/CN103080917B/zh not_active Expired - Fee Related
-
2013
- 2013-02-12 US US13/765,253 patent/US20130159622A1/en not_active Abandoned
-
2014
- 2014-03-04 US US14/197,010 patent/US9116624B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN103080917A (zh) | 2013-05-01 |
US9116624B2 (en) | 2015-08-25 |
TWI475379B (zh) | 2015-03-01 |
CN104166441A (zh) | 2014-11-26 |
KR101466592B1 (ko) | 2014-12-01 |
WO2011160094A2 (en) | 2011-12-22 |
US20130086336A1 (en) | 2013-04-04 |
CN104166441B (zh) | 2018-05-11 |
US20130159622A1 (en) | 2013-06-20 |
TW201214105A (en) | 2012-04-01 |
WO2011160094A3 (en) | 2012-04-26 |
EP2583184A4 (en) | 2014-07-09 |
CN103080917B (zh) | 2014-08-20 |
US20140258598A1 (en) | 2014-09-11 |
US8677068B2 (en) | 2014-03-18 |
KR20140107487A (ko) | 2014-09-04 |
KR20130055632A (ko) | 2013-05-28 |
EP2583184A2 (en) | 2013-04-24 |
KR101491484B1 (ko) | 2015-02-10 |
JP2013532339A (ja) | 2013-08-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5957647B2 (ja) | スケーラブルな記憶装置 | |
US10445018B2 (en) | Switch and memory device | |
US10509731B1 (en) | Methods and apparatus for memory tier page cache coloring hints | |
US9740409B2 (en) | Virtualized storage systems | |
JP5833756B2 (ja) | 二重化共有メモリアクセス方法と二重化共有メモリアクセス方法を用いたストレージ装置 | |
US20070067432A1 (en) | Computer system and I/O bridge | |
JP2015532985A (ja) | 大規模なデータ記憶および受け渡しシステム | |
US20090307435A1 (en) | Distributed Computing Utilizing Virtual Memory | |
WO2015080690A1 (en) | Method and apparatus for storing data | |
US11409454B1 (en) | Container ownership protocol for independent node flushing | |
KR20210075038A (ko) | 분산형 블록 저장시스템, 방법, 장치, 장비와 매체 | |
US11809720B2 (en) | Techniques for storage management | |
US8893160B2 (en) | Block storage interface for virtual memory | |
US9239681B2 (en) | Storage subsystem and method for controlling the storage subsystem | |
US20230280917A1 (en) | Storage system and method of operating the same | |
CN116401043A (zh) | 一种计算任务的执行方法和相关设备 | |
US11201788B2 (en) | Distributed computing system and resource allocation method | |
Choi et al. | A scale-out enterprise storage architecture | |
US20240126469A1 (en) | Apparatus and method for controlling a pooled memory device or a memory expander | |
US12112074B2 (en) | Maintaining quality of service of non-volatile memory devices in heterogeneous environment | |
US20240345770A1 (en) | Exclusive ownership of logical address slices and associated metadata | |
JP2015043226A (ja) | ストレージシステム及びストレージシステムのデータ転送方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140617 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140617 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150514 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150630 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20150930 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20151024 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151029 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160329 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20160427 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160428 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160608 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5957647 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |