JP5026305B2 - 視覚化および地理的分散データセンタ用記憶装置およびサーバプロビジョニング - Google Patents

視覚化および地理的分散データセンタ用記憶装置およびサーバプロビジョニング Download PDF

Info

Publication number
JP5026305B2
JP5026305B2 JP2008043739A JP2008043739A JP5026305B2 JP 5026305 B2 JP5026305 B2 JP 5026305B2 JP 2008043739 A JP2008043739 A JP 2008043739A JP 2008043739 A JP2008043739 A JP 2008043739A JP 5026305 B2 JP5026305 B2 JP 5026305B2
Authority
JP
Japan
Prior art keywords
data center
server
application
data
storage device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008043739A
Other languages
English (en)
Other versions
JP2009048607A (ja
Inventor
高 大枝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Publication of JP2009048607A publication Critical patent/JP2009048607A/ja
Application granted granted Critical
Publication of JP5026305B2 publication Critical patent/JP5026305B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485—Task life-cycle, e.g. stopping, restarting, resuming execution
    • G06F9/4856—Task life-cycle, e.g. stopping, restarting, resuming execution resumption being on a different machine, e.g. task migration, virtual machine migration
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

[0002] 本発明は概して、記憶装置および情報システムに関する。
[0004] 大企業および他の企業は、事業を行うのに使用する多数のデータセンタを有することができる。例えば、電話およびインターネット関連サービスを提供するキャリヤは普通、そのサービスエリアをカバーする多数の地理的分散データセンタを有する。これらの企業は、データセンタでサーバおよび記憶システムを使用して、音声伝送、ｅメール、インターネットアクセス、メッセージング、ビデオストリーミングなどを含む様々な異なるサービスを運営することができる。したがって、これらのデータセンタ内のサーバおよび記憶システムなどのリソースの効果的および効率的使用は、これらの企業の上手い運営に必要である。
[0005] サーバ仮想化は、単一の物理サーバが仮想マシンソフトウェアを使用して複数の仮想サーバ環境を提供することを可能にすることによって、データセンタなどの特定の情報システム配置内のサーバ統合を可能にする技術である。この技術では、１つまたは複数の物理サーバを、それぞれ異なるサーバ環境で運転する多数の専用物理サーバを有する代わりに、多数の仮想サーバ環境に分割することができる。サーバ仮想化は、データセンタ内に多数の異なる物理サーバを有する必要性をなくし、それによってサーバ利用可能性を改善しながら、サーバリソースのより効率的な使用を可能にするために使用することができる。また、サーバ仮想化は、費用全体を減らし、電力消費を減らし、サーバプロビジョニング時間を短くし、サーバ管理および運営を集中化し、迅速なサービス展開を助け、災害回復能力を改善させるのを助けることができる。さらに、仮想化によるサーバ統合に加えて、仮想化によるサーバのクラスタ化はまた、負荷バランシング、高い利用可能性、および災害回復用のデータセンタで一般的になってきている。クラスタ化により、サーバ上の負荷はより良く分配することができ、利用可能性を改善することができる。
[0006] しかし、サーバ仮想化管理と記憶仮想化管理の間の調整の問題が現在、地理的に分散されたデータセンタを含む環境でのリソースプロビジョニングに対して存在する。例えば、サーバ仮想化技術を使用して、ユーザは１つのデータセンタのサーバから別のデータセンタのサーバまでアプリケーションを移行させることができる。これにより、アプリケーションの観点からの問題が引き起こされない。というのは、１つのデータセンタのサーバのＣＰＵリソースは普通、別のデータセンタのものと交換可能であるからである。しかし、アプリケーションによって使用されるデータを含む記憶リソースはまた、移行させたアプリケーションに利用可能にする必要がある。
[0007] 加えて、サーバ統合が進行するにつれて、データセンタでの特定体積毎の電力消費が大きくなってくる。ＣＵＰチップおよび他の構成部品によって直接消費される電力が問題となってくるだけでなく、サーバ、記憶システムなどに対する冷却要件も問題となってきている。したがって、電気の費用が、いくつかのデータセンタの運用の合計費用のかなりの部分となるように大きくなってきている。さらに、許容電力消費率は時に電力供給者との契約によって制限されている。このようなデータセンタは、特定の制限以上の電力量を使用することを契約では認められていなく、制限を上げることによりデータセンタの月額料金がより高くなることにつながる。したがって、データセンタオペレータは、アプリケーション利用可能性と電力消費費用の間のトレードオフを監視する必要がある。
[0008] 関連技術としては、「記憶装置をコンピュータに割り当てるコンピュータシステムおよび方法」という名称のＫｉｔａｍｕｒａ他の米国特許第６，８５４，０３４号が挙げられ、その開示を参照として本明細書に援用する。しかし、従来技術は、データ複製および電力消費の利用可能性を考慮した、サーバ仮想化管理および記憶仮想化管理を組み合わせたプロビジョニング方法を開示していない。
[0009] 本発明の目的は、サーバおよび記憶装置管理を組み合わせた仮想化環境でのリソースプロビジョニングを行うことである。
いくつかの実施形態では、本発明を改善した機能および効率のために地理的に分散させたデータセンタで適用することができる。本発明のこれらおよび他の特徴および利点は、好ましい実施形態の以下の詳細な説明を鑑みて当業者に明らかになるだろう。
[0010] 上に与えた一般的な説明、および以下に与える好ましい実施形態の詳細な説明と合わせて、添付の図面は、現時点で考えられる最良の形態の好ましい実施形態の原則を例示および説明するように働く。
[0030] 本発明の以下の詳細な説明では、開示の一部を形成し、本発明を実施することができる特定の実施形態を限定ではなく、例として示した添付の図面に言及する。図面では、同様の番号は、いくつかの図全体を通してほぼ同様の構成部品を説明している。さらに、図面、前述の議論、および以下の説明は例示的および説明的なものであり、あらゆる方法で本発明または本出願の範囲を限定することを意図したものではない。
[0031] いくつかの実施形態では、本発明はワイドエリアネットワーク（ＷＡＮ）を介した通信のために動作可能に接続された地理的に分散されたデータセンタに適用される。各データセンタは、サーバ仮想化技術を使用するサーバグループと、記憶装置仮想化技術を使用する記憶装置グループを備えることができる。記憶領域ネットワーク（ＳＡＮ）は、サーバと記憶装置間のデータ伝送、および異なる記憶装置間のデータ伝送を可能にするように各データセンタで実施することができる。また、ローカルエリアネットワーク（ＬＡＮ）は、リソース管理を含むあらゆるデータ伝送に使用することができる。管理ソフトウェアは、構成管理、物理から論理マッピング、パフォーマンス管理、故障管理、および電力消費管理を含む、サーバ仮想化および記憶装置仮想化を管理するために実施される。加えて、本発明のソフトウェアは、コンピュータ読取可能記憶媒体内で実現することができる。
[0032] サーバ仮想化は、仮想マシンソフトウェアを使用して、本発明のサーバ内で実施することができる。仮想マシンソフトウェアの例としては、カリフォルニア州Ｐａｌｏ ＡｌｔｏのＶＭｗａｒｅ，Ｉｎｃ．、およびワシントン州ＲｅｄｍｏｎｄのＭｉｃｒｏｓｏｆｔ Ｃｏｒｐ．から市販されているＭｉｃｒｏｓｏｆｔ Ｖｉｒｔｕａｌ Ｓｅｒｖｅｒが挙げられる。１つまたは複数の仮想マシンはホストサーバ上でセットアップすることができ、ゲストオペレーティングシステムは各仮想マシンにインストールすることができる。サービスを顧客に提供するためなどのアプリケーションはその後、ゲストオペレーティングシステムを使用して、仮想マシン上で運用することができる。アプリケーションはまた、以下にさらに論じるように、本発明による仮想化記憶装置を使用することもできる。
[0033] 本発明は、１つのサーバから別のサーバまでの１つまたは複数のアプリケーションの自動および動的移行のための方法を含んでいる。本発明によるアプリケーションの移行の際、アプリケーションソフトウェアは、好ましくは本サーバ上と同じ設定で運転するように、別個のサーバ上でセットアップされる。例えば、アプリケーションおよびゲストオペレーティングシステムは、仮想マシンソフトウェアを使用して、遠隔データセンタで目的サーバ上にセットアップすることができる。移行後のアプリケーションに対する設定は、移行前と同じであるように設定することができ、それによって移行させたアプリケーションを元のアプリケーションが停止した場所で取り上げる（すなわち、開始させる）ことができる。また、移行を途切れなくするために、元のデータセンタでアプリケーションによって使用されるあらゆる論理ユニットを、目的データセンタに複製し、最新に保持する必要があり、それによって移行させたアプリケーションは、元のアプリケーションが停止された場合、または故障、災害回復などの間に、元のアプリケーションによって行われるサービスを保証することが可能である。
[0034] いくつかの実施形態では、本発明はサーバ仮想化管理および記憶装置仮想化管理の組合せに適用される。ゲストＯＳ上でアプリケーションを移行させる場合、適当な候補サーバおよび記憶装置リソースが、データ複製利用可能性、適当なサーバリソース利用可能性、およびインパクト解析に基づき選択される。記憶装置設定の変更は、サーバ設定の変更に同期される。また、ゲストＯＳ上でアプリケーションを移行させる場合、適当な候補サーバおよび記憶装置リソースは、電力消費を考慮しながら提供される。例えば、特定のデータセンタに対する所定の制限内に電力消費が維持される。さらに、インパクト解析は移行後に行うことができ、移行が電力消費制限を超える場合に通知を送ることができる。
[0035] データセンタの例示的な構成
[0036] 図１は、それぞれネットワークゲートウェイ（ＧＷ）３１０、３２０、３３０、３４０、３５０を介してワイドエリアネットワーク（ＷＡＮ）２１０を通して互いに通信するために動作可能に接続された複数のデータセンタ１１０、１２０、１３０、１４０、１５０を含む、情報システムの例示的な構成を示している。ゲートウェイ３１０、３２０、３３０、３４０、３５０は、ＷＡＮネットワークプロトコルを、データセンタ内部での通信のために使用されるローカルエリアネットワーク（ＬＡＮ）ネットワークプロトコルに変換する。ゲートウェイ３１０、３２０、３３０、３４０、３５０は、ＷＡＮの効果的な使用のためのデータ圧縮を含む、指定パケット形成および／またはＷＡＮ最適化の機能を含むことができる。例として、ＷＡＮ２１０はインターネットであってもよく、ＬＡＮはローカルイーサネット（登録商標）ネットワークであってもよいが、本発明はあらゆる特定のネットワークタイプに限るものではない。
[0037] 図２は、サーバ仮想化技術および記憶装置仮想化技術を使用する、データセンタ内部の一般的構成の例を示している。データセンタ１１０が例示されており、データセンタ１２０、１３０、１４０、１５０は同じまたは同様の構成を有することができることが分かるが、データセンタ１２０、１３０、１４０、１５０の全てが図２に示す構成部品全てを有する必要があるわけではない。
[0038] データセンタ１１０では、サーバ仮想化管理サーバ６１０は、サーバ仮想化マネージャソフトウェア６２０を使用して、物理サーバからゲストＯＳへのマッピングを含むサーバ仮想化を管理する。記憶装置仮想化管理サーバ９１０は、仮想化マネージャソフトウェア９２０を使用して、物理記憶装置から論理容量マッピングを含む記憶装置仮想化を管理する。サーバグループ５１０は、図３を参照して以下に論じるように、複数の仮想化サーバを備えており、記憶装置グループ８１０は、図４を参照して以下に論じるように、他の記憶装置システムおよび仮想化記憶装置システムを仮想化する記憶装置システムからなる。記憶領域ネットワーク（ＳＡＮ）７１０は、記憶装置グループ８１０内の記憶システム間、および／またはサーバグループ５１０内のサーバと記憶装置グループ８１０内の記憶装置システムの間でデータ伝送を行う。ローカルエリアネットワーク（ＬＡＮ）４１０は、データの記憶に限らないデータ伝送を行う。普通の記憶装置システムは、管理の目的でＬＡＮ通信インターフェイスを備えている。記憶装置仮想化マネージャ９２０は、記憶装置システムを管理および構成するために、ＬＡＮ４１０を介して記憶装置グループ８１０内の記憶装置システムと通信することが可能である。同様に、サーバ仮想化マネージャ６２０は、サーバグループ５１０内のサーバを管理および構成するために、ＬＡＮ４１０を介してサーバグループ５１０と通信することが可能である。
[0039] データセンタ１１０内のローカルリソースマネージャ６５０は、データセンタ内の仮想マシンまたは別のコンピュータまたはサーバ上で運用することができ、サーバリソースおよび記憶装置リソースなどのデータセンタ内部の全てのリソースのリストを維持し、これらのリソースの状態を追跡するプログラムである。加えて、複数のデータセンタ１１０、１２０、１３０、１４０、１５０のうち少なくとも１つのデータセンタは、データセンタ内で仮想マシンまたは別のコンピュータまたはサーバ上で運用することができ、これらの他のデータセンタそれぞれからリソースおよびその状態のリストを収集して、全てのデータセンタ１１０、１２０、１３０、１４０、１５０の全てのリソースのリストを作成し、維持するように、各データセンタ１１０、１２０、１３０、１４０、１５０で各ローカルリソースマネージャ６５０と通信するプログラムであるグローバルリソースマネージャ６７０を備えている。遠隔データセンタ内の利用可能なリソースの調査に必要な場合に、グローバルリソースマネージャ６７０にアクセスすることが可能な限り、全てのデータセンタがグローバルリソースマネージャ６７０を維持するのに必要なわけではない。
[0040] 図３は、サーバ１０００、１１００、２０００、２１００などの複数の物理サーバからなるサーバグループ５１０の例示的な配置を示している。各サーバ１０００、１１００、２０００、２１００は、サーバハードウェアの上部にあり、ゲストオペレーティングシステム（Ｇ−ＯＳ）１０４０、１０４１、１０４２、１１４０、１１４１、１１４２、２０４０用の専用サーバハードウェアをエミュレートする仮想マシン（ＶＭ）ハイパーバイザ１０３０を有する。ゲストオペレーティングシステムは、様々な異なるアプリケーション（ＡＰＰ）１０５０、１０５１、１０５２、１１５０、１１５１、１１５２、２０５０がサーバ１０００、１１００、２０００、２１００上で同時におよび独立して運用することを可能にするように仮想マシンソフトウェアを通して同時におよびそれぞれ独立して機能することが可能である。ＶＭマネージャエージェント１０６０は、各サーバ１０００、１１００、２０００、２１００上で構成および状況情報を収集および維持する。加えて、各サーバは、ＳＡＮ７１０およびＬＡＮポート１０２０との通信を可能にしてＬＡＮ４１０との通信を可能にするＳＡＮポート１０１０を備えている。
[0041] 図４は、記憶装置システム３０００および４０００などの１つまたは複数の記憶装置システムを備えた記憶装置グループ８１０を示している。仮想化を備えた記憶装置システム３０００は、１つまたは複数の記憶装置システム４０００から物理記憶容量を仮想化する仮想化機能を含む記憶装置システムである。このような仮想化システムでは、記憶装置システム３０００は、仮想容量に対する物理記憶容量がＲＡＩＤコントローラ４０９０などによって記憶デバイス４０７１上に構成されたＬＵによって記憶装置システム４０００に提供される場合に、これらの実際の容量３０７４が記憶装置システム３０００に提供されているように、明らかな記憶装置リソースとして１つまたは複数の仮想記憶容量（仮想論理ユニット、ＶＬＵ）３０７４を提示するように構成されている。したがって、サーバの視点から、各仮想容量３０７４は、物理記憶容量が１つまたは複数の記憶装置システム４０００で記憶デバイス４０７１上に実際に配置される場合に、記憶装置システム３０００内に配置された物理容量から構成された記憶容量である。
[0042] 記憶装置システム３０００は、記憶装置グループ８１０内の全ての記憶装置システムの単点管理を行うことが可能であり、効果的な管理スキームを提供し、サーバは遠隔コピー機能および高パフォーマンスキャッシュなどの記憶装置システム３０００によって提供される追加機能を使用することが可能である。記憶装置システム３０００は、ＳＡＮポート３０１０を介してＳＡＮ７１０上でサーバと通信するホストアダプタ３０３０を備えている。仮想化記憶装置アダプタ３０７５は、記憶装置システム４０００との通信を行い、それによって仮想容量３０７４に記憶されたデータはＳＡＮポート３０１２を介して記憶システム４０００上の論理ユニット４０７０に伝達される。また、記憶システム３０００は、ハードディスクドライブ、固体メモリ、光学ドライブなどの１つまたは複数の記憶デバイス３０７１を備えることができる。この実施形態では、１つまたは複数のディスクアダプタ３０６０は、サーバにローカル論理容量（ＬＵ）３０７０を提供することができる。しかし、他の実施形態では、記憶装置システム３０００は、あらゆる物理記憶デバイス３０７１を備えておらず、仮想化装置としてのみ働く。
[0043] ＬＵ３０７０および仮想ＬＵ３０７４は、ＳＣＳＩ（小型コンピュータシステムインターフェイス）プロトコルなどを使用して、サーバから特定される。各ＬＵ３０７０、３０７４、４０７０は、固定バイトブロックで単一の論理連続メモリとして規定されている。キャッシュ３０５０、４０５０は、より優れたパフォーマンスを提供し、また遠隔コピー、スナップショットなどを含む記憶機能にデータ伝送バッファを提供するように、それぞれ記憶デバイス３０７１、４０７１内のアクセス遅延から得られるアクセス待ち時間を補償するように提供される。ＳＡＮ７１０と通信するＳＡＮポート３０１２を有する遠隔コピーアダプタ３０７６は、以下にも論じるように、遠隔コピー機能を行うように記憶装置システム３０００内に含まれている。キャッシュスイッチ３０４０は、ホストアダプタ３０３０、キャッシュ３０５０、ディスクアダプタ３０６０、仮想化アダプタ３０７５、および遠隔コピーアダプタ３０７６を接続させる。キャッシュスイッチ３０４０は、記憶装置システム３０００に必要なパフォーマンス拡張性を提供する。サービスプロセッサ（ＳＶＰ）３０８０、４０８０は、それぞれ記憶装置システム３０００、４０００に管理機能を提供する。ＳＶＰ３０８０はＬＡＮポート３０２０を備えており、ＳＶＰ４０８０は、記憶装置仮想化管理サーバ９１０およびローカルリソースマネージャ６５０との通信を可能にするようにＬＡＮ４１０に接続されたＬＡＮポート４０２０を備えている。ＳＶＰ３０８０は、それぞれ記憶装置システム３０００のそれぞれの機構を管理する、構成マネージャ３５００、記憶装置仮想化エージェント３５１０、遠隔コピーマネージャ３５２０、障害マネージャ３５３０、電力マネージャ３５４０、およびパフォーマンスマネージャ３５５０を含むいくつかの管理モジュールを実行するために使用される。同様に、記憶装置システム４０００上のＳＶＰ４０８０は、構成マネージャ４５００、障害マネージャ４５２０、電力マネージャ４５３０、およびパフォーマンスマネージャ４５４０を実行する。
[0044] 遠隔コピー（ＬＵ複製）
[0045] 図５は、本発明による遠隔コピー構成の例を示している。遠隔コピーは、企業記憶装置システム内に組み込まれた一般的な機構であり、第１のデータセンタ内の第１のＬＵと第２のデータセンタ内の第２のＬＵの間の複製ペアを作り出すことを必要とする。正側容量として第１の記憶装置システム内で１つのＬＵに書き込まれたデータは、第２の容量としてもう一方の記憶装置システム内の第２のＬＵに複製される。記憶装置システムは、サーバのいずれかを通してデータを送信する必要なく、遠隔コピー機能を自立的に行うことが可能である。図５では、データセンタ１１０での記憶装置システム３０００−１上の第１の容量のデータは、ＷＡＮ２１０およびＧＷ３１０、３２０を介して遠隔コピーアダプタ３０７６−１、３０７６−２を使用して、データセンタ１２０で記憶装置システム３０００−２上の第２の容量に複製される。データセンタ１１０での災害の場合、記憶装置システム３０００−１上の容量３０７０−１を使用してサーバ１０００−１上のアプリケーション１０５０−１によって行われるサービスは、容量３０７０−２を使用してサーバ１０００−２上のアプリケーション１０５０−２によってデータセンタ１２０でサーバ１０００−２によって引き継ぐことができる。このような場合、サーバ仮想化管理サーバ６１０−１上のサーバ仮想化マネージャ６２０−１は、ＶＭマネージャエージェント１０６０−１、１０６０−２を介したアプリケーション１０５０−１の移行を示している。その結果、アプリケーション１０５０−２はデータセンタ１２０のサーバ１０００−２上で開始される。論理容量３０７０が図５で遠隔コピーに対して示されているが、いずれかのデータセンタでの仮想容量３０７４はまた遠隔コピーに対する複製ペアの一部とすることができることに留意すべきである。加えて、安全かつ信頼性のある引継ぎのために、アプリケーション移行プロセスおよびデータ複製プロセスは同期すべきである。この同期は、図１３および１４を参照して以下にさらに説明する。
[0046] リソーステーブル
[0047] いくつかのリソーステーブルは、図６〜１２を参照して以下に説明するように、本発明により維持され、使用される。図６は、情報システム内のサーバ上に情報を含む、サーバリソーステーブル１２１０の例示的なデータ構造を示している。サーバリソーステーブル１２１０は、サーバ識別子（ＩＤ）１２１０１、位置フィールド１２１０２、ＣＰＵパフォーマンスフィールド１２１０３、メインメモリ容量１２１０４、インターフェイスに対するＩＰアドレスおよびＭＡＣアドレスなどのＬＡＮ Ｉ／Ｆパフォーマンスおよびアドレス１２１０５、インターフェイス用ＷＷＮを含むＳＡＮ Ｉ／Ｆパフォーマンスおよびアドレス１２１０６、接続可能記憶装置システムフィールド１２１０７、およびサーバ用管理ポートのＩＰアドレス１２１０８を含んでいる。
[0048] 図７は、サーバ仮想化マネージャ６２０に使用され、サーバ上の仮想マシンおよびアプリケーションの情報を含む、サーバ仮想化テーブル１２２０の例示的なデータ構造を示している。サーバ仮想化テーブル１２２０は、アプリケーションが使用する、サーバＩＤフィールド１２２０１、ＶＭハイパーバイザＩＤ１２２０２、ハイパーバイザタイプフィールド１２２０３、ゲストＯＳ ＩＤ１２２０４、ゲストＯＳタイプ１２２０５、アプリケーションＩＤ１２２０６、アプリケーションタイプ１２２０７、サーバのＬＡＮ Ｉ／Ｆのアドレス１２２０８、サーバのＳＡＮ Ｉ／Ｆのアドレス１２２０９、およびＬＵ ＩＤフィールド１２２１０を含んでいる。サーバ仮想化テーブル１２２０は、ゲストＯＳをアプリケーションＩＤおよびＬＵ ＩＤに関連させるように、サーバ仮想化マネージャ６２０によって使用される。例えば、ゲストＯＳが移行されると、正しいＬＵを接続可能にする、または移行させる必要がある。
[0049] 図８は、情報システム内の記憶装置システム上に情報を含む記憶装置リソーステーブル１２３０の例示的なデータ構造を示している。記憶装置リソーステーブル１２３０は、記憶装置ＩＤ１２３０１、記憶装置システムの位置１２３０２、どのＬＵがＳＡＮ Ｉ／Ｆに接続可能であるかを特定するＳＡＮ Ｉ／Ｆパフォーマンス、アドレスおよびパスＩＤ１２３０３、キャッシュメモリの容量１２３０４、いくつかのＬＵ１２３０５、合計使用可能容量１２３０６、まだサーバに割り当てられていない合計容量の量である未割当容量１２３０７、および記憶装置システムの管理ポートのＩＰアドレス１２３０８を含んでいる。
[0050] 図９は、情報システム内の論理ユニット上に情報を含む記憶装置ＬＵテーブル１２４０の例示的なデータ構造を示している。記憶装置ＬＵテーブル１２４０は、記憶装置ＩＤ１２４０１、特定の記憶装置システムによって内部で使用される容量ＩＤであるＬＵ ＩＤ１２４０２、パスＩＤ１２４０３、ターゲットＩＤ１２４０４、ＳＣＳＩ命令内で使用され、ＬＵ ＩＤ１２４０２とは異なっていてもよい論理ユニット番号（ＬＵＮ）１２４０５、ＬＵの容量１２４０６、ＲＡＩＤタイプ、アプリケーション用途などを含むことができるＬＵタイプ１２４０７、「オンライン」、「障害」または「未割当」などのＬＵステータス１２４０８、およびＬＵが仮想化ＬＵであるかどうかを示し、記憶装置ＩＤおよびＬＵ ＩＤを特定することによって、記憶装置システム４０００の１つの上のどのＬＵ４０７０がＬＵに関連しているかを特定する仮想化ＬＵ情報１２４０９を含んでいる。
[0051] 図１０は、データセンタで電力消費を管理するのに使用することができる電力消費管理テーブル１２５０の例示的データ構造を示している。電力消費管理テーブル１２５０は、データセンタＩＤ１２５０１、契約に基づいて認められた最大電力消費１２５０２、上限閾値１２５０３、下限閾値１２５０４、およびある期間にわたって測定された平均消費である典型的電力消費１２５０５を含んでいる。上限閾値１２５０３を超えると、アドミニストレータは電力消費を少なくするように測定を行うべきであり、それによって消費は下限閾値１２５０４以下に落ちる。例えば、電力消費が上限閾値１２５０３を超えると、１つまたは複数のアプリケーションはローカルデータセンタでの電力消費を少なくするように他のデータセンタに移行させることができる。また、各データセンタの電力消費レベルがどのデータセンタがアプリケーションの移行を受けるべきであるかを判断するための検討事項である場合に、図１０の電力消費テーブル１２５０は、各データセンタでの十分な電力リソースが図１８のステップ６３２０を行う場合に判断することができる移行アプリケーションに割り当てられるように利用可能であるかどうかを判断するように使用される。
[0052] 図１１は、複製ペアとして論理ユニットを管理するためにローカルおよび遠隔コピー構成を管理するために使用される複製テーブル１２６０の例示的データ構造を示している。複製テーブル１２６０は、以下に論じるように、複製ペアを特定する複製ＩＤ１２６０１の入力、正側記憶装置システムを示す正側記憶装置ＩＤ１２６０２、正側記憶装置システム上の正側容量のＩＤを示す正側ＬＵ ＩＤ１２６０３、副側記憶装置システムを示す副側記憶装置ＩＤ１２６０４、正側容量で複製ペアを作り出す副側記憶装置システム上の副側容量を示す副側ＬＵ ＩＤ１２６０５、および図１３に示す段階に対応する複製ステータス１２６０６を含んでいる。したがって、複製ペアは同じデータセンタで２つの論理ユニット間、および／またはローカルデータセンタの論理ユニットと遠隔データセンタの論理ユニットの間で確立することができる。
[0053] 図１２は、アプリケーションの移行を管理するアプリケーション移行テーブル１２７０の例示的なデータ構造を示している。アプリケーション移行テーブル１２７０は、以下に論じるように、アプリケーション移行ＩＤ１２７０１、正側サーバ上で使用される正側アプリケーションＩＤ１２７０２、正側サーバＩＤ１２７０３、正側データセンタＩＤ１２７０４、副側サーバ上で使用される副側アプリケーションＩＤ１２７０５、副側サーバＩＤ１２０６、副側データセンタＩＤ１２７０７、および図１４に示す段階に対応する移行ステータス１２７０８を含んでいる。例えば、正側サーバがアプリケーションを実行しており、副側サーバがアプリケーションを実行していない場合、「ペア」ステータスは、副側サーバ上のアプリケーションを起動するための構成情報およびキーデータが副側サーバに移行され、それによってアプリケーションは正側サーバ上のアプリケーションの障害がある場合に副側サーバ上で適切に開始および運用することが保証されることを示している。
[0054] 複製およびアプリケーション移行ステータス図
[0055] 図１３は、複製処理内のステータス遷移の概念図を示している。遠隔コピーなどの複製は、普通は別の記憶装置システム上で、副側ＬＵに１つの記憶装置システム上の正側ＬＵのデータを複製するように記憶装置システムによって行われる機能である。例えば、遠隔コピー関係が２つのＬＵの間で確立される前に、各ＬＵのステータスが単純５０００である。遠隔コピーペアを作り出すために、ペアを形成する正側および副側ＬＵを特定しなければならない。遠隔コピー関係が２のＬＵの間で確立されると、初期データコピー５００１が開始されて、現時点で正側ＬＵ内のデータ全てを副側ＬＵにコピーする。ペアステータス５００２は初期コピー５００１が終了した場合に確立され、データの全てのブロックは正側ＬＵと副側ＬＵの間で同一である。ペアステータス５００２の間に、正側ＬＵへの全ての更新Ｉ／Ｏ操作（すなわち、書き込まれたあらゆる新規データ）は、２つのＬＵの内容を同一に保持するように副側ＬＵにコピーされる（すなわち、ミラーペア）。いくつかの場合では、ネットワークリンクがダウンした場合など、ペアステータス５００２が一時停止され、複製ペアのステータスが一時停止ステータス５００３になる。一時停止ステータスは、正側ＬＵへの更新Ｉ／Ｏ操作が副側ＬＵにコピーされないが、差分ビットマップが正側記憶装置システム上で更新された正側ＬＵ内のブロックのトラックを保持するように維持されることを意味する。その後、一時停止ステータス５００３からペアステータス５００２まで戻るように複製ペアを再同期させるために、差分ビットマップは、差分ビットマップ内に挙げられた更新ブロック全てが副側ＬＵにコピーされた差分コピー段階５００４の間に使用される。差分コピー５００４が終了すると、ステータスはペア５００２になる。これらのステータスは、アプリケーションまたは管理サーバから受けた命令に基づき、図５のＳＶＰ３０８０−１、３０８０−２によって管理されている。
[0056] 図１４は、遠隔コピーに対して上で論じたものと同様のステータスを含む、アプリケーション移行ステータス遷移を示す概念図を示している。単純ステータス５０１０は、移行関係のないステータスである。すなわち、１つのサーバから別のサーバまでのアプリケーションの移行がまだ開始されていない。例えば、図５に示す構成を参照すると、アプリケーション１０５０−１がデータセンタ１１０のサーバ１０００−１上で実行されている。アプリケーション１０５０−１がデータセンタ１２０でサーバ１０００−２に移行される場合、初期化段階５０１１の間に、サーバ仮想化マネージャ６２０−２は移行をサポートするのに必要なサーバリソースを得て、仮想マシンソフトウェアを使用してアプリケーションに対応するゲストＯＳ１０４０−２をセットアップする。ゲストＯＳ１０４０−２がサーバ１０００−２上にセットアップされると、ペアステータス５０１２はアプリケーション１０５０−２がゲストＯＳ１０４２−２上に作り出され、操作を引き継ぐために準備されたことを示している。データセンタ１１０からデータセンタ１２０へのデータの引継ぎを行うため、ステータスは一時停止５０１３に変更される。副側アプリケーション１０５０−２は次に、一時アプリケーション１０５０−１の代わりにクライアントに対するサービスを開始する。ステータスは、データセンタ１１０に戻るアプリケーションの移行を行う必要がない場合に、ペアセットアップ５０１４に変えることができる。
[0057] サーバ移行および記憶装置遠隔コピー同期
[0058] アプリケーションが別の位置に移行されると、関連ＬＵ内のデータはアプリケーションで複製する必要があり、それによってアプリケーションは移行の後に正確に機能し続けることが可能である。アプリケーション移行は、サーバ仮想化マネージャ６２０によって管理され、遠隔コピーは記憶装置仮想化管理サーバ９１０などのサーバからの命令に基づき、ＳＶＰ３０８０によって管理される。アプリケーションの移行、およびＬＵのコピーは、データおよび信頼性のある事業連続性を保証するために同期させなければならない。例えば、ＬＵがペアステータス５００２にあると、アプリケーション移行が初期化５０１１される。アプリケーションがペアステータス５０１２になると、アプリケーションを静止させることができ、サービスまたは取引を一時的に停止させ、副側ＬＵの上にあらゆる汚れたページを書き込むこと（差分コピー５００４）を意味する。その後、遠隔コピーは副側ＬＵに対して一時停止５００３される、またはＬＵはちょうど単純５０００にされ、それによって副側サーバ（すなわち、目的地サーバ）上のアプリケーションは、一時ＬＵ上のあらゆる更新によって影響を受けることなく副側記憶装置上の副側ＬＵのデータを使用することができる。さらに、アプリケーション操作を元のデータセンタに戻して移行させる必要がある場合、逆複製ペアを確立することができ、それによって副側記憶装置システム上の副側ＬＵは一時ＬＵとなり、前に一時ＬＵであったＬＵが遠隔コピーを受けるために副側ＬＵとして使用され、それによって初期コピー５００１に対する必要がなくなる。
[0059] アプリケーションを移行させる場合のリソースプロビジョニングプロセス
[0060] 図１５は、１つのサーバから別のサーバまでアプリケーションおよびゲストオペレーティングシステムを移行させるためにリソースをプロビジョニングするプロセスのフローチャートを示している。図１５のプロセスは、１つのアドミニストレータによって手動でトリガすることができる、または自動でトリガすることができ、仮想化マネージャ６２０、またはデータセンタで実行している他のプログラムとして実行することができる。例えば、プロセスはローカルデータセンタでの電力消費が電力消費テーブル１２５０内の上限閾値１２５０３を超えた場合に、アプリケーションを自動的に移行させるようにトリガすることができる。別のトリガは、アプリケーションのパフォーマンスが高い利用可能性またはミッションクリティカルアプリケーションに必要な所定のレベルより下になる場合であってもよく、それによって１つまたは複数のアプリケーションを遠隔データセンタに移行させることによって、ローカルデータセンタ上の負荷を少なくするために負荷バランシングまたは負荷分配が必要である。プロセスは、ローカルデータセンタでの障害の場合、アプリケーションを引き継ぐ不測の事態として遠隔データセンタをセットアップするアドミニストレータによって手動でトリガすることができる。また、ローカルデータセンタ内でのアプリケーションの移行は、新規機器の設置、既存の機器の間の負荷バランシング、電力消費の最適化などの場合に望ましい可能性がある。
[0061] ステップ６０１０：図１６を参照して以下にさらに説明するように、移行をプロビジョニングするのに必要なリソースが特定される。
[0062] ステップ６０１５：必要なリソースが特定されると、図１７を参照して以下に説明するように、プロセスはローカルデータセンタ内のリソースを調査する。
[0063] ステップ６０２０：所要のリソースがＬＵの複製なしでローカルデータセンタ内において見つかると、プロセスはステップ６０４５にスキップする。一方、ＬＵを複製することなくローカルデータセンタ内に所要のリソースがない場合、プロセスはステップ６０２５に進む。例えば、ＬＵ複製を避け、移行がローカルデータセンタ内で起こり、それによって移行が単純化されることが望ましい。したがって、これらの要件を満たすことができるリソースは、アプリケーションを実行し、同じＬＵを使用することが可能な第２のローカルサーバである。しかし、このような解決法は、例えば、移行の目的がデータセンタでの電力消費を少なくし、正側サイトの障害に対して保護するために第２のサイトでの冗長性を提供すること、または他のこのような検討事項である場合、特定のリソース要件を満たさない可能性がある。
[0064] ステップ６０２５：プロセスは次に、ＬＵ複製が行われる場合に、所要のサーバリソースがローカルデータセンタ内で十分であるかどうかを判断する。ＬＵ複製が要件を満たす場合、プロセスはステップ６０４５に進み、その後、ＬＵ複製はステップ６０４５内で選択された候補を使用して以下のステップ６０６０で行われる。例えば、いくつかのデータセンタでは、サーバはその他ではなく、いくつかの記憶装置システム上のＬＵと通信することが可能である。したがって、アプリケーションが、負荷バランシングのためなどに、別のサーバからこのサーバに移行される場合、ＬＵを移行させる必要があり、他のサーバはこれらにアクセスすることが可能である。
[0065] ステップ６０３０：ローカルデータセンタ内の所要のリソースの調査が、要件を満たすリソースを配置することができなかった場合、図１８を参照して以下に説明するように、プロセスは遠隔データセンタ内の所要のリソースに対する調査を開始する。
[0066] ステップ６０３５：ＬＵ複製（すなわち、遠隔コピー）がローカルデータセンタから１つまたは複数の他のデータセンタまで既に確立された場合、これらの複製ＬＵを有するデータセンタは、アプリケーションの移行のための候補ターゲットである可能性がある。というのは、ＬＵは移行をサポートするために再び複製する必要がないからである。したがって、遠隔データセンタがＬＵの複製を必要とすることなく所要のリソースを有する場合、遠隔データセンタを選択することができ、プロセスはステップ６０４５に進む。一方、所要のＬＵの遠隔コピーがない場合、または遠隔コピーが行われたデータセンタが所要のリソースを有していない場合、プロセスはステップ６０４０に進む。
[0067] ステップ６０４０：複製ＬＵを備えたデータセンタで利用可能な所要のリソースがないが、いくつかの他の遠隔データセンタ上に十分なリソースがある場合、そのデータセンタは候補として選択され、所要のＬＵを複製する必要があるだろう。一方、所要のリソースがいかなるデータセンタでも利用可能でない場合、プロセスは終了する。
[0068] ステップ６０４５：リソース候補が、要件に従って、また上記検討事項を考慮して選択される。
[0069] ステップ６０５０：移行に対する多数の候補がある場合、アドミニストレータはこれらの１つを選択することができる。
[0070] ステップ６０５５：プロセスは、選択した候補がＬＵ移行を必要としているかどうかを判断する。そうである場合、プロセスはステップ６０６０に進み、ソース記憶装置システムから目的地記憶装置システムまでの移行を行う。あるいは、プロセスはステップ６０６５にスキップする。
[0071] ステップ６０６５：関連リソーステーブルが更新される。例えば、サーバ仮想化テーブル１２２０は少なくとも、アプリケーションが移行された場合に更新する必要がある。ＬＵが移行された場合、記憶装置ＬＵテーブル１２４０などの追加のテーブルを更新しなければならない。移行の実際の状態によって、リソーステーブルのその他を更新する必要があるだろう。
[0072] 図１６は、図１５のプロセスのステップ６０１０で移行を行うために、所要のリソースを特定するプロセスのフローチャートを示している。
[0073] ステップ６１１０：プロセスは、移行する特定のアプリケーションを判断し、図７のサーバ仮想化テーブル１２２０に言及し、アプリケーションに対して入力を配置する。
[0074] ステップ６１１５：プロセスは、サーバ仮想化テーブル１２２０内に挙げられた対応するＬＵ ＩＤを特定し、これらのＬＵの位置を判断する。
[0075] 図１７は、図１５のステップ６０１５の間に行われるローカルデータセンタ内のリソースを調査するプロセスのフローチャートを示している。
[0076] ステップ６２１０：プロセスは、ローカルリソースマネージャ６５０およびリソーステーブル１２１０、１２２０を参照することによって、アプリケーションで使用する必要があるＬＵの既存の複製があるかどうかをチェックする。
[0077] ステップ６２１５：ローカルデータセンタ内に既存の複製ＬＵがある場合、プロセスは図１１の複製テーブル１２６０を使用して既存の複製ＬＵを配置する。この場合、複製テーブル１２６０内では、正側記憶装置ＩＤ入力１２６０２および副側記憶装置ＩＤ入力１２６０４は、ローカルデータセンタ内で両方である記憶装置システムに対するものであり、いくつかの実施形態では、同じ記憶装置システムであってもよい。
[0078] ステップ６２２０：プロセスは、図６のサーバリソーステーブル１２１０、および図７のサーバ仮想化テーブル１２２０を使用して、ローカルデータセンタ内の複製ＬＵに関連する十分なサーバリソースがあるかどうかをチェックする。例えば、アプリケーションは特定のレベルのパフォーマンスを必要とし、特定の量の処理能力、メモリ、または他のサーバリソースを必要とする可能性がある。十分な量のサーバリソースが既存の複製ＬＵへの接続のためにローカルデータセンタ内で利用可能でない場合、プロセスはその後ステップ６２２５に進む、あるいは、プロセスはステップ６２３５に進む。
[0079] ステップ６２２５：プロセスは、既存の複製ＬＵに関連する十分なサーバリソースがないことを報告し、それによってアドミニストレータは既存の複製ＬＵリソースを利用するように、サーバ構成を変更する機会を有する。複製ＬＵはかなりの量の時間をとる可能性があるので、いくつかの例では、アドミニストレータがサーバリソースを代わりに解放することが望ましい可能性がある。アドミニストレータが十分なサーバリソースを解放することが可能である場合、プロセスはその後ステップ６２３５に進み、あるいはアドミニストレータが必要でない場合、またはアドミニストレータが十分なサーバリソースを解放することが可能でない場合、プロセスはステップ６２３０に続く。
[0080] ステップ６２３０：プロセスは、ローカルデータセンタ内で十分な所要のサーバリソースに接続可能である十分な未割当ＬＵリソースがあるかどうかをチェックする。例えば、特定量の記憶容量は普通、アプリケーションがそのデータを実行および維持するのに必要である。これらの要件は、アプリケーションによって変わる。
[0081] ステップ６２３２：プロセスは、関連ＬＵの複製を受けるのに使用することができるローカルデータセンタ内に候補未割当ＬＵを配置する。
[0082] ステップ６２３４：プロセスは、十分なサーバリソースがこれらの候補ＬＵに接続可能であることをチェックする。
[0083] ステップ６２３５：十分なサーバおよび記憶装置リソースがローカル記憶装置システム内に配置されている場合、プロセスは移行の候補ターゲットとして配置したリソースを報告する。
[0084] ステップ６２４０：一方、十分なサーバまたは記憶装置リソースをローカルデータセンタ内に配置することができない場合、プロセスはローカルデータセンタ内に移行候補ターゲットがないことを報告する。
[0085] 図１８は、遠隔データセンタ内のリソースを調査するプロセスを示すフローチャートを示している。いくつかの例では、移行の要件の１つは、ローカルデータセンタでの電力消費を少なくする、負荷バランシングをする、災害回復の準備をするためなどに、遠隔データセンタに対して移行を行うということである。したがって、これらの状況では、プロセスはローカルデータセンタ内に要件を満たすあらゆるリソースを配置することが可能ではなく、遠隔データセンタ内の利用可能なリソースを調査するだろう。
[0086] ステップ６３１０：プロセスは、グローバルリソースマネージャ６７０を参照することによって、遠隔データセンタのいずれかで定位置に既に移行されるアプリケーションが必要とするＬＵのあらゆる既存の複製があるかどうかをチェックする。
[0087] ステップ６３１５：プロセスは、図１１の遠隔コピーテーブル１２６０を使用して既存の複製ＬＵを配置する。
[0088] ステップ６３２０：プロセスは、図７のサーバ仮想化テーブル１２２０、および図６のサーバリソーステーブル１２１０を参照することによって、これらの既存の複製ＬＵに接続可能である遠隔データセンタ内で利用可能な十分なサーバリソースがあるかどうかをチェックする。十分なサーバリソースをチェックするこのステップの間、プロセスはまた、十分な処理能力およびメモリをチェックすることに加えて、電力消費および負荷バランシングを含む、移行の特定の要件をチェックすることができる。例えば、ローカルデータセンタでの電力消費を少なくするように移行する場合、遠隔データセンタがその電力消費制限を超えさせないようにすることが望ましい。したがって、プロセスは電力消費テーブル１２５０に言及して、既存の複数ＬＵを有する遠隔データセンタに対する入力を配置することができる。典型的な電力消費入力１２５０５が下限閾値１２５０４より下である場合、遠隔データセンタはアプリケーションの移行を受ける優れた候補である。一方、典型的な電力消費１２５０５が下限閾値１２５０４の近く、またはそれ以上である場合、遠隔データセンタは移行を受ける優れた候補ではない。さらに、別の国に配置されたデータセンタと比較した場合、電力は１つの国に配置されたデータセンタでかなり高価ではなくなる可能性がある。したがって、利用可能なリソースを調査する場合に、電力費用の検討事項もサーバリソース要件に加えられる可能性がある。
[0089] 同様に、負荷バランシングに関して、プロセスは遠隔データセンタが、アプリケーションに対する特定のパフォーマンス要件を満たすのに十分な利用可能な帯域幅および処理能力を有するかどうかを判断することができる。所要の帯域幅および処理能力がその遠隔データセンタで利用可能でない場合、遠隔データセンタは移行させたアプリケーションを受けるための優れた候補である。図１９は、データセンタ間の負荷バランシングを管理するのに使用することができる例示的なサーバリソース消費テーブル１２８０を示している。図示した例では、サーバリソース消費テーブル１２８０は、各データセンタ用のアイドルサーバの所定の閾値数を示している。サーバリソース消費テーブル１２８０は、データセンタＩＤ１２８０１に対する入力、アイドルサーバの上限閾値１２８０２およびアイドルサーバの下限閾値１２８０３、およびアイドルサーバの現在の割合１２８０４を含んでいる。下限ＣＰＵ負荷を有するデータセンタ内のサーバは、「アイドル」と分類することができる。例えば、特定の期間にわたって測定されるようにサーバのＣＰＵが、５〜１０パーセントなどの特定の割合の時間より少ない使用である場合、そのサーバはアイドルとして分類することができる。多くのオペレーティングシステムは今日、サーバ上のＣＰＵ負荷を測定する機能を有する。したがって、ローカルリソースマネージャ６５０は、データセンタ内でどれだけ多くのサーバがアイドルとして現在分類することができるかを判断し、これをグローバルリソースマネージャ６７０に報告することが可能である。その後、サーバリソース消費テーブル１２８０を参照することによって、プロセスはデータセンタが十分なサーバリソースを有するかどうかを検討する場合に、サーバ負荷を考慮することが可能である。さらに、アプリケーションは、現在のデータセンタ内のアイドルサーバの現在の割合が下限閾値１２８０３より下になった場合に、上限閾値１２８０２より大きいアイドルサーバ１２８０４の現在の割合を有する別のデータセンタに移行することができる。例えば図１９では、データセンタ１内のアイドルサーバ１２８０４の現在の割合は２パーセントであり、データセンタ２の割合は２５パーセントである。したがって、プロセスは、データセンタ１でのアイドルサーバの現在の割合が上限閾値１２８０２を通過するまで、自動的にデータセンタ１からデータセンタ２までアプリケーションを移行させようと試みる可能性がある。
[0090] これは、本発明によるデータセンタ間で起こる可能性がある負荷バランシングの一例である。図６では、ＣＰＵ負荷以外に、メモリ、ＬＡＮ Ｉ／Ｆ（ネットワーク帯域幅）、ＳＡＮ Ｉ／Ｆ（記憶装置アクセス帯域幅）などの他の規定されたサーバリソースがある。これらのリソースはまた、統合したリソースのどの割合が特定のデータセンタで使用されているかを計算することなどにより、データセンタの負荷を判断する場合に考慮することもできる。
[0091] ステップ６３２５：複製ＬＵを既に有する遠隔データセンタのリソースが不十分である場合、プロセスは複製ＬＵに関連するサーバリソースが不十分であり、それによってアドミニストレータが既存の複製ＬＵリソースを利用するようにサーバ構成を変更する機会を有することを報告する。複製ＬＵはかなりの時間をとる可能性があるので、いくつかの例では、遠隔データセンタでアドミニストレータが代わりにサーバリソースを解放することが望ましい可能性がある。アドミニストレータが十分なサーバリソースを解放することができない場合、プロセスはステップ６３３５に進み、あるいは、アドミニストレータが必要ない場合、またはアドミニストレータが十分なサーバリソースを解放することができない場合、プロセスはステップ６３３０に進む。
[0092] ステップ６３３０：プロセスは、遠隔データセンタのいずれかで未割当ＬＵリソースに関連する十分なサーバリソースがあるかどうかを判断する。プロセスはまた、遠隔データセンタが、電力消費、負荷バランシング、パフォーマンスなどの、上に論じたような移行のための他の要件を満たすかどうかチェックする。
[0093] ステップ６３３２：プロセスは、関連ＬＵの複製を受けるのに使用することができる遠隔データセンタの１つまたは複数内に候補未割当ＬＵを配置する。
[0094] ステップ６３３４：プロセスは、適用可能なような、電力消費、負荷バランシングなどを含む、移行用の要件を考慮して、十分なサーバリソースがこれらの候補ＬＵに接続可能であることをチェックする。
[0095] ステップ６３３５：プロセスは、図１５のステップ６０４０および６０４５内で移行ターゲット候補としてこれらのＬＵおよびサーバリソースを報告する。
[0096] ステップ６３４０：一方、要件に一致するリソースが遠隔データセンタのいずれにも配置されていない場合、プロセスはアプリケーションの移行をサポートするのに利用可能なリソースが十分ない反応を戻す。
[0097] 前述のことから、本発明はサーバ仮想化技術および記憶装置仮想化技術を使用して情報技術インフラで、特に地理的に分散させてデータセンタを組み込んだアーキテクチャで、使用することができることが明らかである。本発明は、複数のデータセンタでの様々な状態を考慮するように、アプリケーションおよびゲストオペレーティングシステムを自動的および動的に移行させることが可能である。本発明は、処理リソースおよびデータ容量リソースだけでなく、データ複製利用可能性、電力消費、パフォーマンス、負荷バランシングなどを考慮することが可能であり、それによって効果的および動的な情報システムインフラをローカルおよび遠隔データセンタ上で達成することができる。
[0098] したがって、本発明は、様々な検討事項を満たすために、複数のデータセンタの間でアプリケーション、オペレーティングシステム、および関連データ容量を動的に移行させることが可能であることが分かるだろう。さらに、特定の実施形態を本明細書で例示および記載したが、当業者は同じ目的を達成するために計算されるあらゆる配置を開示した特定の実施形態に置き換えることができることが分かるだろう。本開示は、本発明のあらゆるおよび全ての応用形態または変更形態を含むことを意図しており、上の記載は制限的なものではなく、例示的なものとして行ったことを理解するものとする。したがって、本発明の範囲は、頭記の特許請求の範囲を参照してこのような特許請求の範囲が与えられる相当物の全範囲と共に適切に判断させるべきものである。
[0011]本発明で実行することができる、地理的に分散されたデータセンタの配置の例を示す図である。 [0012]本発明で実行することができる、データセンタの例示的な構成を示す図である。 [0013]サーバグループの例示的な構成を示す図である。 [0014]記憶装置グループの例示的な構成を示す図である。 [0015]２つのデータセンタ間の例示的な遠隔コピー構成を示す図である。 [0016]本発明のサーバリソーステーブルの例示的なデータ構造を示す図である。 [0017]本発明のサーバ仮想化テーブルの例示的なデータ構造を示す図である。 [0018]本発明の記憶リソーステーブルの例示的なデータ構造を示す図である。 [0019]本発明の記憶論理ユニットテーブルの例示的なデータ構造を示す図である。 [0020]本発明の電力消費テーブルの例示的なデータ構造を示す図である。 [0021]本発明の遠隔コピーテーブルの例示的なデータ構造を示す図である。 [0022]本発明のアプリケーション移行テーブルの例示的なデータ構造を示す図である。 [0023]遠隔コピー状態移行の例示的な構成を示す図である。 [0024]アプリケーション移行状態移行の例示的な構成を示す図である。 [0025]本発明によるリソースをプロビジョニングする例示的なプロセスを示す図である。 [0026]プロビジョニングに必要なリソースを特定する例示的なプロセスを示す図である。 [0027]ローカルデータセンタ内の所要のリソースの調査のための例示的なプロセスを示す図である。 [0028]遠隔データセンタ内の所要のリソースの調査のための例示的なプロセスを示す図である。 [0029]本発明のサーバリソース消費テーブルの例示的なデータ構造を示す図である。

Claims (2)

  1. ネットワークを介して互いに接続される複数のデータセンタに、記憶装置システムと、前記記憶装置システムとデータの授受を行うサーバと、自データセンタ内のリソースのリストを収集するローカルリソースマネージャと、前記各データセンタ内のリソースのリストを収集するグローバルリソースマネージャと、前記サーバのハードウェアを仮想化した仮想マシン上で動作するアプリケーション及びゲストオペレーティングシステムを管理するサーバ仮想化マネージャとが、それぞれ配置され、前記各データセンタに配置された各部が、前記ネットワーク又は前記各データセンタ内のネットワークに接続される情報システムにおける方法であって、
    前記各データセンタのうち第１のデータセンタに配置された第１のサーバ仮想化マネージャは、
    前記第１のデータセンタで消費される電力量が、前記第１のデータセンタに対して設定された所定の電力消費閾値を超えたことを条件に、前記第１のデータセンタに配置された第１のサーバのハードウェアを仮想化した第１の仮想マシン上で動作するアプリケーションの情報を参照して、前記第１の仮想マシン上で動作するアプリケーションのうち特定のアプリケーションを移行するための第１のアプリケーションとして判断するステップと、
    前記第１のデータセンタに配置された第１のグローバルリソースマネージャの収集したリストを参照して、前記第１のデータセンタに配置された第１の記憶装置システム上の論理ユニットであって、前記第１のアプリケーションが使用する必要がある第１の論理ユニットの複製が、前記いずれかのデータセンタ内に存在するか否かを判定し、前記いずれかのデータセンタ内に、前記第１の論理ユニットの複製が存在する場合、前記第１の論理ユニットの複製が存在するデータセンタを候補データセンタとして提供するステップと、
    前記第１のアプリケーションを移行するためのデータセンタとして前記候補データセンタが選択された場合、前記第１のアプリケーション及び第１のゲストオペレーティングシステムを前記候補データセンタへ移行させるステップと、を実行し、
    前記候補データセンタに配置された第２のサーバ仮想化マネージャは、
    前記第１のデータセンタから移行された第１のアプリケーション及び第１のゲストオペレーティングシステムを、前記候補データセンタに配置された第２のサーバの第２の仮想マシンにセットアップするステップを実行することを特徴とする方法。
  2. ネットワークを介して互いに接続される複数のデータセンタに、記憶装置システムと、前記記憶装置システムとデータの授受を行うサーバと、自データセンタ内のリソースのリストを収集するローカルリソースマネージャと、前記各データセンタ内のリソースのリストを収集するグローバルリソースマネージャと、前記サーバのハードウェアを仮想化した仮想マシン上で動作するアプリケーション及びゲストオペレーティングシステムを管理するサーバ仮想化マネージャとが、それぞれ配置され、前記各データセンタに配置された各部が、前記ネットワーク又は前記各データセンタ内のネットワークに接続される情報システムであって、
    前記各データセンタのうち第１のデータセンタに配置された第１のサーバ仮想化マネージャは、
    前記第１のデータセンタで消費される電力量が、前記第１のデータセンタに対して設定された所定の電力消費閾値を超えたことを条件に、前記第１のデータセンタに配置された第１のサーバのハードウェアを仮想化した第１の仮想マシン上で動作するアプリケーションの情報を参照して、前記第１の仮想マシン上で動作するアプリケーションのうち特定のアプリケーションを移行するための第１のアプリケーションとして判断し、
    前記第１のデータセンタに配置された第１のグローバルリソースマネージャの収集したリストを参照して、前記第１のデータセンタに配置された第１の記憶装置システム上の論理ユニットであって、前記第１のアプリケーションが使用する必要がある第１の論理ユニットの複製が、前記いずれかのデータセンタ内に存在するか否かを判定し、前記いずれかのデータセンタ内に、前記第１の論理ユニットの複製が存在する場合、前記第１の論理ユニットの複製が存在するデータセンタを候補データセンタとして提供し、
    前記第１のアプリケーションを移行するためのデータセンタとして前記候補データセンタが選択された場合、前記第１のアプリケーション及び第１のゲストオペレーティングシステムを前記候補データセンタへ移行させ、
    前記候補データセンタに配置された第２のサーバ仮想化マネージャは、
    前記第１のデータセンタから移行された第１のアプリケーション及び第１のゲストオペレーティングシステムを、前記候補データセンタに配置された第２のサーバの第２の仮想マシンにセットアップすることを特徴とする情報システム。
JP2008043739A 2007-08-20 2008-02-26 視覚化および地理的分散データセンタ用記憶装置およびサーバプロビジョニング Expired - Fee Related JP5026305B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/892,045 2007-08-20
US11/892,045 US7970903B2 (en) 2007-08-20 2007-08-20 Storage and server provisioning for virtualized and geographically dispersed data centers

Publications (2)

Publication Number Publication Date
JP2009048607A JP2009048607A (ja) 2009-03-05
JP5026305B2 true JP5026305B2 (ja) 2012-09-12

Family

ID=39811796

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008043739A Expired - Fee Related JP5026305B2 (ja) 2007-08-20 2008-02-26 視覚化および地理的分散データセンタ用記憶装置およびサーバプロビジョニング

Country Status (3)

Country Link
US (3) US7970903B2 (ja)
EP (1) EP2028592A1 (ja)
JP (1) JP5026305B2 (ja)

Families Citing this family (195)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2486103A1 (en) * 2004-10-26 2006-04-26 Platespin Ltd. System and method for autonomic optimization of physical and virtual resource use in a data center
US8682916B2 (en) 2007-05-25 2014-03-25 F5 Networks, Inc. Remote file virtualization in a switched file system
US20090307508A1 (en) * 2007-10-30 2009-12-10 Bank Of America Corporation Optimizing the Efficiency of an Organization's Technology Infrastructure
US20090119233A1 (en) * 2007-11-05 2009-05-07 Microsoft Corporation Power Optimization Through Datacenter Client and Workflow Resource Migration
US8548953B2 (en) 2007-11-12 2013-10-01 F5 Networks, Inc. File deduplication using storage tiers
US7801994B2 (en) * 2007-11-29 2010-09-21 Hitachi, Ltd. Method and apparatus for locating candidate data centers for application migration
WO2009108579A2 (en) 2008-02-26 2009-09-03 Vmware, Inc. Extending server-based desktop virtual machine architecture to client machines
JP4724730B2 (ja) * 2008-04-09 2011-07-13 株式会社日立製作所 情報処理システムの運用管理方法、運用管理プログラム、および運用管理装置、ならびに情報処理システム
US8849971B2 (en) * 2008-05-28 2014-09-30 Red Hat, Inc. Load balancing in cloud-based networks
US20090307276A1 (en) * 2008-06-06 2009-12-10 Microsoft Corporation Migration using file system links
US8549582B1 (en) 2008-07-11 2013-10-01 F5 Networks, Inc. Methods for handling a multi-protocol content name and systems thereof
JP5157717B2 (ja) * 2008-07-28 2013-03-06 富士通株式会社 仮想バッテリを備えた仮想マシンシステムおよび仮想バッテリを備えた仮想マシンシステム用プログラム
JP2010039626A (ja) * 2008-08-01 2010-02-18 Fujitsu Ltd ネットワーク設定プログラム，ネットワーク設定方法及びネットワーク設定装置
JP2010039730A (ja) * 2008-08-05 2010-02-18 Fujitsu Ltd ネットワーク設定プログラム，ネットワーク設定方法及びネットワーク設定装置
US20100037225A1 (en) * 2008-08-07 2010-02-11 International Business Machines Corporation Workload routing based on greenness conditions
US9367257B2 (en) * 2008-09-11 2016-06-14 Microsoft Technology Licensing, Llc Techniques for resource location and migration across data centers
US8255806B2 (en) * 2008-09-15 2012-08-28 Vmware, Inc. Unified secure virtual machine player and remote desktop client
US20100076856A1 (en) * 2008-09-25 2010-03-25 Microsoft Corporation Real-Time Auction of Cloud Computing Resources
US8732308B1 (en) * 2008-10-01 2014-05-20 Hewlett-Packard Development Company, L. P. Coordinated management in virtualized systems using management brokers and management channels
US8266618B2 (en) * 2008-11-21 2012-09-11 International Business Machines Corporation Graphics hardware resource usage in a fully virtualized computing environment
US20100161922A1 (en) * 2008-12-19 2010-06-24 Richard William Sharp Systems and methods for facilitating migration of virtual machines among a plurality of physical machines
US8245226B2 (en) * 2009-01-13 2012-08-14 Microsoft Corporation Offline migration from prior operating system installation
US9778718B2 (en) 2009-02-13 2017-10-03 Schneider Electric It Corporation Power supply and data center control
US9519517B2 (en) * 2009-02-13 2016-12-13 Schneider Electtic It Corporation Data center control
US20100223364A1 (en) * 2009-02-27 2010-09-02 Yottaa Inc System and method for network traffic management and load balancing
EP2401841A4 (en) * 2009-02-27 2012-08-15 Yottaa Inc ADAPTIVE NETWORK WITH AUTOMATIC SCALE
US20100228819A1 (en) * 2009-03-05 2010-09-09 Yottaa Inc System and method for performance acceleration, data protection, disaster recovery and on-demand scaling of computer applications
US9154385B1 (en) 2009-03-10 2015-10-06 Hewlett-Packard Development Company, L.P. Logical server management interface displaying real-server technologies
US8549123B1 (en) 2009-03-10 2013-10-01 Hewlett-Packard Development Company, L.P. Logical server management
US9547455B1 (en) 2009-03-10 2017-01-17 Hewlett Packard Enterprise Development Lp Allocating mass storage to a logical server
US8832235B1 (en) * 2009-03-10 2014-09-09 Hewlett-Packard Development Company, L.P. Deploying and releasing logical servers
US8676946B1 (en) 2009-03-10 2014-03-18 Hewlett-Packard Development Company, L.P. Warnings for logical-server target hosts
US8291036B2 (en) * 2009-03-16 2012-10-16 Microsoft Corporation Datacenter synchronization
US8285948B2 (en) * 2009-03-23 2012-10-09 International Business Machines Corporation Reducing storage system power consumption in a remote copy configuration
JP5445739B2 (ja) * 2009-03-23 2014-03-19 日本電気株式会社 リソース割当装置、リソース割当方法、及びプログラム
AU2010234958A1 (en) * 2009-03-31 2011-10-13 Coach Wei System and method for access management and security protection for network accessible computer services
JP5277062B2 (ja) * 2009-04-20 2013-08-28 株式会社エヌ・ティ・ティ・データ コンピュータリソース提供システム、コンピュータリソース提供方法、リソース取引装置およびリソース取引プログラム
US20100274886A1 (en) * 2009-04-24 2010-10-28 Nelson Nahum Virtualized data storage in a virtualized server environment
US8751627B2 (en) * 2009-05-05 2014-06-10 Accenture Global Services Limited Method and system for application migration in a cloud
US8683250B2 (en) * 2009-06-25 2014-03-25 International Business Machines Corporation Minimizing storage power consumption
JP5428581B2 (ja) * 2009-06-30 2014-02-26 富士通株式会社 仮想マシン管理プログラム及び仮想マシン管理方法
DE102009032133A1 (de) * 2009-07-08 2011-01-13 Deutsche Telekom Ag Verfahren zum Kontrollieren eines Betriebs eines Rechennetzwerks
JP2011018167A (ja) * 2009-07-08 2011-01-27 Fujitsu Ltd 負荷分散プログラム、負荷分散装置及び負荷分散方法
US8527697B2 (en) * 2009-07-20 2013-09-03 Netapp, Inc. Virtualized data storage in a network computing environment
US8352953B2 (en) * 2009-12-03 2013-01-08 International Business Machines Corporation Dynamically provisioning virtual machines
US8443373B2 (en) * 2010-01-26 2013-05-14 Microsoft Corporation Efficient utilization of idle resources in a resource manager
US9195500B1 (en) 2010-02-09 2015-11-24 F5 Networks, Inc. Methods for seamless storage importing and devices thereof
US8631405B2 (en) * 2010-02-26 2014-01-14 Red Hat Israel, Ltd. Identification and placement of new virtual machines based on similarity of software configurations with hosted virtual machines
US8650563B2 (en) * 2010-02-26 2014-02-11 Red Hat Israel, Ltd. Identification and placement of new virtual machines to reduce memory consumption based on shared images with hosted virtual machines
US8243960B2 (en) * 2010-03-04 2012-08-14 Bose Corporation Planar audio amplifier output inductor with current sense
US8627123B2 (en) * 2010-03-25 2014-01-07 Microsoft Corporation Managing power provisioning in distributed computing
JP5309259B2 (ja) * 2010-03-25 2013-10-09 株式会社日立製作所 ストレージ装置及びその制御方法
US9811532B2 (en) 2010-05-03 2017-11-07 Panzura, Inc. Executing a cloud command for a distributed filesystem
US9852150B2 (en) 2010-05-03 2017-12-26 Panzura, Inc. Avoiding client timeouts in a distributed filesystem
US9613064B1 (en) * 2010-05-03 2017-04-04 Panzura, Inc. Facilitating the recovery of a virtual machine using a distributed filesystem
US20110276963A1 (en) * 2010-05-04 2011-11-10 Riverbed Technology, Inc. Virtual Data Storage Devices and Applications Over Wide Area Networks
US20110289329A1 (en) * 2010-05-19 2011-11-24 Sumit Kumar Bose Leveraging smart-meters for initiating application migration across clouds for performance and power-expenditure trade-offs
US11449394B2 (en) 2010-06-04 2022-09-20 Commvault Systems, Inc. Failover systems and methods for performing backup operations, including heterogeneous indexing and load balancing of backup and indexing resources
US8504526B2 (en) 2010-06-04 2013-08-06 Commvault Systems, Inc. Failover systems and methods for performing backup operations
US20110307291A1 (en) * 2010-06-14 2011-12-15 Jerome Rolia Creating a capacity planning scenario
US8239863B2 (en) 2010-06-29 2012-08-07 Hewlett-Packard Development Company, L.P. Method and system for migrating a virtual machine
JP5512442B2 (ja) * 2010-07-22 2014-06-04 株式会社インテック ディザスタリカバリシステムのための管理装置、方法及びプログラム
JP5678508B2 (ja) * 2010-07-29 2015-03-04 日本電気株式会社 シンクライアントシステム、管理サーバ、仮想マシン作成管理方法及び仮想マシン作成管理プログラム
US8640127B2 (en) 2010-09-21 2014-01-28 International Business Machines Corporation Relocating guest machine using proxy tool having multiple virtual machines where one virtual machines provides host route for relocation
US8856775B2 (en) * 2010-09-22 2014-10-07 International Business Machines Corporation Unstacking software components for migration to virtualized environments
CN103238143B (zh) * 2010-09-27 2016-11-16 费希尔-罗斯蒙特系统公司 用于虚拟化过程控制系统的方法和设备
US8959173B1 (en) * 2010-09-30 2015-02-17 Emc Corporation Non-disruptive load-balancing of virtual machines between data centers
US8615600B2 (en) * 2010-09-30 2013-12-24 International Business Machines Corporation Communication between a host operating system and a guest operating system
US9286298B1 (en) 2010-10-14 2016-03-15 F5 Networks, Inc. Methods for enhancing management of backup data sets and devices thereof
JP5666620B2 (ja) * 2010-12-07 2015-02-12 株式会社日立製作所 ネットワークシステム、及びそのサービス品質制御方法
KR101591371B1 (ko) * 2010-12-09 2016-02-18 한국전자통신연구원 클라우드 컴퓨팅 기반 가상 머신의 개인화 정보를 관리하기 위한 시스템 및 그 방법
FR2969443B1 (fr) * 2010-12-21 2013-03-15 Thales Sa Procede de gestion de services sur un reseau
US20120166005A1 (en) * 2010-12-22 2012-06-28 Mayhew David E Shifting of computational load based on power criteria
EP2687061A4 (en) 2011-03-17 2015-03-25 Hewlett Packard Development Co SELF-ORGANIZATION OF A SATELLITE NETWORK
US9235482B2 (en) 2011-04-29 2016-01-12 International Business Machines Corporation Consistent data retrieval in a multi-site computing infrastructure
US9189765B2 (en) * 2011-05-10 2015-11-17 Iii Holdings 1, Llc System and method for managing a resource
US8719627B2 (en) * 2011-05-20 2014-05-06 Microsoft Corporation Cross-cloud computing for capacity management and disaster recovery
WO2012174441A1 (en) * 2011-06-17 2012-12-20 Huawei Technologies Co., Ltd. Cloud service control and management architecture expanded to interface the network stratum
US10013281B2 (en) * 2011-06-29 2018-07-03 Microsoft Technology Licensing, Llc Controlling network utilization
US20180074905A1 (en) * 2011-07-06 2018-03-15 International Business Machines Corporation Storage container reassignment based on dynamic parameters
US8924548B2 (en) 2011-08-16 2014-12-30 Panduit Corp. Integrated asset tracking, task manager, and virtual container for data center management
JP5790312B2 (ja) * 2011-08-25 2015-10-07 富士通株式会社 通信方法、通信装置、および、通信プログラム
US9225944B2 (en) 2011-09-08 2015-12-29 Schneider Electric It Corporation Method and system for displaying a coverage area of a camera in a data center
US9026837B2 (en) * 2011-09-09 2015-05-05 Microsoft Technology Licensing, Llc Resource aware placement of applications in clusters
US9342375B2 (en) 2011-10-26 2016-05-17 Hewlett Packard Enterprise Development Lp Managing workload at a data center
US8918363B2 (en) * 2011-11-14 2014-12-23 Google Inc. Data processing service
US9804928B2 (en) 2011-11-14 2017-10-31 Panzura, Inc. Restoring an archived file in a distributed filesystem
US9106469B1 (en) 2011-11-29 2015-08-11 Amazon Technologies, Inc. Interfaces to manage last-mile connectivity for direct network peerings
US9692732B2 (en) 2011-11-29 2017-06-27 Amazon Technologies, Inc. Network connection automation
US8724642B2 (en) 2011-11-29 2014-05-13 Amazon Technologies, Inc. Interfaces to manage direct network peerings
US8495199B2 (en) 2011-12-22 2013-07-23 Amazon Technologies, Inc. Interfaces to manage service marketplaces accessible via direct network peerings
US10015083B2 (en) 2011-12-22 2018-07-03 Amazon Technologies, Inc. Interfaces to manage inter-region connectivity for direct network peerings
US20130151688A1 (en) * 2011-12-07 2013-06-13 Alcatel-Lucent Usa Inc. Optimization mechanisms for latency reduction and elasticity improvement in geographically distributed data centers
US8977735B2 (en) * 2011-12-12 2015-03-10 Rackspace Us, Inc. Providing a database as a service in a multi-tenant environment
US8959203B1 (en) 2011-12-19 2015-02-17 Amazon Technologies, Inc. Dynamic bandwidth management using routing signals in networks with direct peerings
US9141947B1 (en) 2011-12-19 2015-09-22 Amazon Technologies, Inc. Differential bandwidth metering for networks with direct peerings
US20130198476A1 (en) * 2012-01-26 2013-08-01 Hitachi, Ltd. Management system of information memory system and management method thereof
US9020912B1 (en) 2012-02-20 2015-04-28 F5 Networks, Inc. Methods for accessing data in a compressed file system and devices thereof
CN102662757A (zh) * 2012-03-09 2012-09-12 浪潮通信信息系统有限公司 一种云计算程序平滑迁移的资源需求预估方法
US20140215041A1 (en) * 2012-03-16 2014-07-31 Eric K. Mann Workload migration determination at multiple compute hierarchy levels
WO2013140522A1 (ja) * 2012-03-19 2013-09-26 富士通株式会社 情報処理システム，情報処理方法，プログラム
JP5740652B2 (ja) * 2012-03-28 2015-06-24 株式会社日立製作所 計算機システム及びサブシステム管理方法
WO2013158139A1 (en) * 2012-04-16 2013-10-24 Hewlett-Packard Development Company, L.P. Virtual computing resource orchestration
US9232005B1 (en) * 2012-06-15 2016-01-05 Qlogic, Corporation Methods and systems for an intelligent storage adapter used for both SAN and local storage access
US9451393B1 (en) 2012-07-23 2016-09-20 Amazon Technologies, Inc. Automated multi-party cloud connectivity provisioning
US8935496B2 (en) * 2012-08-31 2015-01-13 Hitachi, Ltd. Management method of virtual storage system and remote copy system
US9519501B1 (en) 2012-09-30 2016-12-13 F5 Networks, Inc. Hardware assisted flow acceleration and L2 SMAC management in a heterogeneous distributed multi-tenant virtualized clustered system
US9323628B2 (en) * 2012-10-09 2016-04-26 Dh2I Company Instance level server application monitoring, load balancing, and resource allocation
US20140101656A1 (en) * 2012-10-10 2014-04-10 Zhongwen Zhu Virtual firewall mobility
JP5892031B2 (ja) 2012-10-22 2016-03-23 富士通株式会社 リソース管理システム、リソース管理方法、およびリソース管理プログラム
US9547858B2 (en) 2012-11-28 2017-01-17 Bank Of America Corporation Real-time multi master transaction
US8965845B2 (en) 2012-12-07 2015-02-24 International Business Machines Corporation Proactive data object replication in named data networks
US9934054B2 (en) * 2012-12-14 2018-04-03 International Business Machines Corporation Evaluating distributed application performance in a new environment
US20140223427A1 (en) * 2013-02-04 2014-08-07 Thomas C. Bootland System, Method and Apparatus for Determining Virtual Machine Performance
US10375155B1 (en) 2013-02-19 2019-08-06 F5 Networks, Inc. System and method for achieving hardware acceleration for asymmetric flow connections
US9554418B1 (en) 2013-02-28 2017-01-24 F5 Networks, Inc. Device for topology hiding of a visited network
US10244080B2 (en) * 2013-03-15 2019-03-26 VCE IP Holding Company LLC Accessing multiple converged IT infrastructures
EP2975518A4 (en) * 2013-03-15 2016-11-02 Nec Corp INFORMATION PROCESSING SYSTEM AND METHOD FOR RE-POSITIONING AN APPLICATION
US9483362B2 (en) 2013-05-08 2016-11-01 Commvault Systems, Inc. Use of auxiliary data protection software in failover operations
US9749039B1 (en) 2013-06-10 2017-08-29 Amazon Technologies, Inc. Portable connection diagnostic device
US9294407B2 (en) 2013-06-26 2016-03-22 Vmware, Inc. Network device load balancing in a virtualized computing environment
JP6216048B2 (ja) 2013-07-01 2017-10-18 エンパイア テクノロジー ディベロップメント エルエルシー ストレージネットワークにおけるデータ移行
US10348628B2 (en) * 2013-09-12 2019-07-09 Vmware, Inc. Placement of virtual machines in a virtualized computing environment
US10817916B2 (en) * 2013-09-16 2020-10-27 Amazon Technologies, Inc. Client-selectable power source options for network-accessible service units
US20150081907A1 (en) * 2013-09-16 2015-03-19 Alcatel Lucent Mechanism for optimized, network-aware cloud bursting
US9471350B2 (en) * 2013-09-26 2016-10-18 Intel Corporation Live migration of virtualized systems
US9471391B1 (en) 2013-11-20 2016-10-18 Google Inc. Aggregating resource requests
US10616127B1 (en) 2013-12-05 2020-04-07 Open Invention Network Llc Dynamic resource allocation of cloud instances and enterprise application migration to cloud architecture
US11749988B2 (en) 2014-01-09 2023-09-05 Nautilus True, Llc System and method for intelligent data center power management and energy market disaster recovery
US20150190704A1 (en) * 2014-01-09 2015-07-09 Patrick McDowell Mounting bracket and brake assembly
US9454305B1 (en) 2014-01-27 2016-09-27 Qlogic, Corporation Method and system for managing storage reservation
US20150234644A1 (en) * 2014-02-10 2015-08-20 Empire Technology Development Llc Automatic collection and provisioning of resources to migrate applications from one infrastructure to another infrastructure
DE112014005348T5 (de) * 2014-02-17 2016-08-11 Hitachi, Ltd. Computer und Hypervisor-basiertes Betriebsmittelplanungsverfahren
US10217145B1 (en) 2014-02-18 2019-02-26 Amazon Technologies, Inc. Partitioned private interconnects to provider networks
US9811427B2 (en) 2014-04-02 2017-11-07 Commvault Systems, Inc. Information management by a media agent in the absence of communications with a storage manager
US9423980B1 (en) 2014-06-12 2016-08-23 Qlogic, Corporation Methods and systems for automatically adding intelligent storage adapters to a cluster
US9436654B1 (en) 2014-06-23 2016-09-06 Qlogic, Corporation Methods and systems for processing task management functions in a cluster having an intelligent storage adapter
JP2016024656A (ja) * 2014-07-22 2016-02-08 富士通株式会社 ストレージ制御装置、ストレージシステム及びストレージ制御プログラム
US9477424B1 (en) 2014-07-23 2016-10-25 Qlogic, Corporation Methods and systems for using an intelligent storage adapter for replication in a clustered environment
JP6451149B2 (ja) 2014-09-01 2019-01-16 富士通株式会社 管理装置、マイグレーション制御プログラム、情報処理システム
US9460017B1 (en) 2014-09-26 2016-10-04 Qlogic, Corporation Methods and systems for efficient cache mirroring
US20160100004A1 (en) 2014-10-06 2016-04-07 International Business Machines Corporation Data replication across servers
WO2016057036A1 (en) 2014-10-08 2016-04-14 Hewlett Packard Enterprise Development Lp Resource federation
CN105743808B (zh) * 2014-12-08 2017-09-19 华为技术有限公司 一种适配QoS的方法和装置
WO2016100545A1 (en) * 2014-12-16 2016-06-23 Noderprime, Inc. Computer servers for datacenter managment
US9483207B1 (en) 2015-01-09 2016-11-01 Qlogic, Corporation Methods and systems for efficient caching using an intelligent storage adapter
US10834065B1 (en) 2015-03-31 2020-11-10 F5 Networks, Inc. Methods for SSL protected NTLM re-authentication and devices thereof
US10228969B1 (en) * 2015-06-25 2019-03-12 Amazon Technologies, Inc. Optimistic locking in virtual machine instance migration
US10970110B1 (en) 2015-06-25 2021-04-06 Amazon Technologies, Inc. Managed orchestration of virtual machine instance migration
US10498664B2 (en) * 2015-06-29 2019-12-03 Vmware, Inc. Hybrid cloud resource scheduling
JP6540356B2 (ja) * 2015-08-10 2019-07-10 富士通株式会社 システム複製制御装置およびシステムの複製制御方法
CN106484379B (zh) * 2015-08-28 2019-11-29 华为技术有限公司 一种应用的处理方法及装置
US10025611B2 (en) 2015-10-20 2018-07-17 International Business Machines Corporation Server build optimization
US10404698B1 (en) 2016-01-15 2019-09-03 F5 Networks, Inc. Methods for adaptive organization of web application access points in webtops and devices thereof
US10936966B2 (en) * 2016-02-23 2021-03-02 At&T Intellectual Property I, L.P. Agent for learning and optimization execution
US10652125B2 (en) * 2016-04-05 2020-05-12 Vmware, Inc. System and method for managing multiple remote-office and branch-office (ROBO) sites
US20180032376A1 (en) * 2016-07-27 2018-02-01 Samsung Electronics Co .. Ltd. Apparatus and method for group-based scheduling in multi-core processor system
US11223537B1 (en) * 2016-08-17 2022-01-11 Veritas Technologies Llc Executing custom scripts from the host during disaster recovery
GB201616413D0 (en) * 2016-09-28 2016-11-09 International Business Machines Corporation Monitoring network addresses and managing data transfer
US10747630B2 (en) 2016-09-30 2020-08-18 Commvault Systems, Inc. Heartbeat monitoring of virtual machines for initiating failover operations in a data storage management system, including operations by a master monitor node
US10530468B2 (en) * 2016-10-19 2020-01-07 Vector Launch Inc. State transfer among virtualized nodes in spaceborne or airborne systems
US10805001B2 (en) 2016-10-19 2020-10-13 Lockheed Martin Corporation State transfer among spaceborne and airborne devices
US10412198B1 (en) 2016-10-27 2019-09-10 F5 Networks, Inc. Methods for improved transmission control protocol (TCP) performance visibility and devices thereof
US10698713B2 (en) * 2016-11-29 2020-06-30 Red Hat Israel, Ltd. Virtual processor state switching virtual machine functions
US10212229B2 (en) 2017-03-06 2019-02-19 At&T Intellectual Property I, L.P. Reliable data storage for decentralized computer systems
US10545805B2 (en) * 2017-03-29 2020-01-28 Macronix International Co., Ltd. Memory system, reading method thereof and writing method thereof
US10567492B1 (en) 2017-05-11 2020-02-18 F5 Networks, Inc. Methods for load balancing in a federated identity environment and devices thereof
US10581995B1 (en) 2017-07-13 2020-03-03 Parallels International Gmbh High availability virtual desktop infrastructure
US10491710B2 (en) 2017-07-19 2019-11-26 Vector Launch Inc. Role-specialization in spaceborne and airborne computing platforms
US11113088B2 (en) * 2017-07-26 2021-09-07 Dell Products, L.P. Generating and managing groups of physical hosts associated with virtual machine managers in an information handling system
US11544117B2 (en) 2017-09-27 2023-01-03 Telefonaktiebolaget Lm Ericsson (Publ) Methods and arrangements for automated improving of quality of service of a data center
CN109582433B (zh) * 2017-09-29 2022-02-01 腾讯科技（深圳）有限公司 一种资源调度方法、装置、云计算系统及存储介质
US11223689B1 (en) 2018-01-05 2022-01-11 F5 Networks, Inc. Methods for multipath transmission control protocol (MPTCP) based session migration and devices thereof
US10613893B2 (en) 2018-02-02 2020-04-07 Nutanix, Inc. System and method for reducing downtime during hypervisor conversion
US10606630B2 (en) 2018-02-02 2020-03-31 Nutanix, Inc. System and method for preserving entity identifiers
US20190243674A1 (en) * 2018-02-08 2019-08-08 Nutanix, Inc. System and method for entity management
US10749959B2 (en) 2018-02-09 2020-08-18 Lockheed Martin Corporation Distributed storage management in a spaceborne or airborne environment
US10833943B1 (en) 2018-03-01 2020-11-10 F5 Networks, Inc. Methods for service chaining and devices thereof
US11265243B2 (en) 2018-07-31 2022-03-01 Vmware, Inc. Support for multi-AZ management appliance networking
US11169893B2 (en) 2018-07-31 2021-11-09 Vmware, Inc. Reserving failover capacity in cloud computing
US10747580B2 (en) * 2018-08-17 2020-08-18 Vmware, Inc. Function as a service (FaaS) execution distributor
US12003422B1 (en) 2018-09-28 2024-06-04 F5, Inc. Methods for switching network packets based on packet data and devices
US11200124B2 (en) 2018-12-06 2021-12-14 Commvault Systems, Inc. Assigning backup resources based on failover of partnered data storage servers in a data storage management system
US11012508B2 (en) 2018-12-14 2021-05-18 Commvault Systems, Inc. Region-based distributed information management system
US11588698B2 (en) * 2019-06-19 2023-02-21 Hewlett Packard Enterprise Development Lp Pod migration across nodes of a cluster
CN111092776A (zh) * 2019-12-31 2020-05-01 联想(北京)有限公司 一种基于批量设备的综合管理方法、管理服务器及系统
US11868622B2 (en) 2020-02-25 2024-01-09 Pure Storage, Inc. Application recovery across storage systems
US11637896B1 (en) 2020-02-25 2023-04-25 Pure Storage, Inc. Migrating applications to a cloud-computing environment
US11099956B1 (en) 2020-03-26 2021-08-24 Commvault Systems, Inc. Snapshot-based disaster recovery orchestration of virtual machine failover and failback operations
CN111562967B (zh) * 2020-05-09 2023-04-07 广东工业大学 基于启发式算法的虚拟机整合方法
KR102188132B1 (ko) * 2020-05-27 2020-12-07 비코어(주) 데이터 적재 및 처리 시스템 및 그 방법
US11645175B2 (en) 2021-02-12 2023-05-09 Commvault Systems, Inc. Automatic failover of a storage manager
US20230088318A1 (en) * 2021-09-20 2023-03-23 International Business Machines Corporation Remotely healing crashed processes
CN114185650B (zh) * 2021-12-14 2023-07-25 平安壹账通云科技(深圳)有限公司 Linux系统下识别SCSI设备的方法、系统、设备及存储介质
CN116560796B (zh) * 2023-05-12 2024-02-02 深圳天融信创新科技有限公司 数据加载方法、装置、设备及介质

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6442663B1 (en) * 1998-06-19 2002-08-27 Board Of Supervisors Of Louisiana University And Agricultural And Mechanical College Data collection and restoration for homogeneous or heterogeneous process migration
US6854034B1 (en) * 1999-08-27 2005-02-08 Hitachi, Ltd. Computer system and a method of assigning a storage device to a computer
US20020055972A1 (en) * 2000-05-08 2002-05-09 Weinman Joseph Bernard Dynamic content distribution and data continuity architecture
JP2001337790A (ja) * 2000-05-24 2001-12-07 Hitachi Ltd 記憶システム及びその階層管理制御方法
US7028083B2 (en) * 2000-05-26 2006-04-11 Akomai Technologies, Inc. Method for extending a network map
US20040055004A1 (en) * 2002-04-30 2004-03-18 Xian-He Sun Method for efficient process state transfer between two computers using data transfer mechanisms embedded to the migration-enabled process
JP4341897B2 (ja) * 2002-08-29 2009-10-14 株式会社日立製作所 記憶装置システム及びデータ複製方法
US7484208B1 (en) * 2002-12-12 2009-01-27 Michael Nelson Virtual machine migration
US7587422B2 (en) * 2003-04-24 2009-09-08 Neopath Networks, Inc. Transparent file replication using namespace replication
US7831641B2 (en) * 2003-04-24 2010-11-09 Neopath Networks, Inc. Large file support for a network file server
US6934805B2 (en) * 2003-05-19 2005-08-23 International Business Machines Corporation Method and apparatus for managing computer storage devices for improved operational availability
JP4278445B2 (ja) * 2003-06-18 2009-06-17 株式会社日立製作所 ネットワークシステム及びスイッチ
US20050015407A1 (en) * 2003-07-17 2005-01-20 International Business Machines Corporation System and method of relational configuration mirroring
KR100491541B1 (ko) * 2003-08-01 2005-05-25 니트젠테크놀러지스 주식회사 네트웍 환경에서의 컨텐츠 동기화 시스템 및 동기화 방법
JP4313650B2 (ja) * 2003-11-07 2009-08-12 株式会社日立製作所 ファイルサーバ、冗長度回復方法、プログラム及び記録媒体
JP2005216151A (ja) 2004-01-30 2005-08-11 Hitachi Ltd 資源運用管理システム及び資源運用管理方法
US7325019B2 (en) * 2004-03-12 2008-01-29 Network Appliance, Inc. Managing data replication policies
JP4286703B2 (ja) * 2004-03-31 2009-07-01 富士通株式会社 資源計画作成プログラム
US7383405B2 (en) * 2004-06-30 2008-06-03 Microsoft Corporation Systems and methods for voluntary migration of a virtual machine between hosts with common storage connectivity
US7747760B2 (en) * 2004-07-29 2010-06-29 International Business Machines Corporation Near real-time data center switching for client requests
US20060069761A1 (en) * 2004-09-14 2006-03-30 Dell Products L.P. System and method for load balancing virtual machines in a computer network
GB2419701A (en) * 2004-10-29 2006-05-03 Hewlett Packard Development Co Virtual overlay infrastructure with dynamic control of mapping
US7519851B2 (en) * 2005-02-08 2009-04-14 Hitachi, Ltd. Apparatus for replicating volumes between heterogenous storage systems
JP4684696B2 (ja) 2005-03-22 2011-05-18 株式会社日立製作所 記憶制御方法及びシステム
JP2006301820A (ja) * 2005-04-19 2006-11-02 Hitachi Ltd ストレージシステム及びストレージシステムのデータ移行方法
US7299337B2 (en) * 2005-05-12 2007-11-20 Traut Eric P Enhanced shadow page table algorithms
US7761573B2 (en) * 2005-12-07 2010-07-20 Avaya Inc. Seamless live migration of virtual machines across optical networks
US7430646B2 (en) * 2006-03-31 2008-09-30 Emc Corporation Planned switchover in connection with triangular asynchronous replication
US20070234105A1 (en) * 2006-03-31 2007-10-04 Quinn Brett A Failover to asynchronous backup site in connection with triangular asynchronous replication
JP4949791B2 (ja) * 2006-09-29 2012-06-13 株式会社日立製作所 ボリューム選択方法及び情報処理システム
JP4757165B2 (ja) * 2006-10-04 2011-08-24 株式会社日立製作所 計算機システム、データ移行監視方法及びデータ移行監視プログラム
JP5317010B2 (ja) * 2006-11-24 2013-10-16 日本電気株式会社 仮想マシン配置システム、仮想マシン配置方法、プログラム、仮想マシン管理装置およびサーバ装置
US7844839B2 (en) * 2006-12-07 2010-11-30 Juniper Networks, Inc. Distribution of network communications based on server power consumption
US20080189700A1 (en) * 2007-02-02 2008-08-07 Vmware, Inc. Admission Control for Virtual Machine Cluster
US7925850B1 (en) * 2007-02-16 2011-04-12 Vmware, Inc. Page signature disambiguation for increasing the efficiency of virtual machine migration in shared-page virtualized computer systems
JP4412509B2 (ja) * 2007-10-05 2010-02-10 日本電気株式会社 ストレージシステムの容量拡張制御方法

Also Published As

Publication number Publication date
US8099499B2 (en) 2012-01-17
EP2028592A1 (en) 2009-02-25
US20090055507A1 (en) 2009-02-26
US7970903B2 (en) 2011-06-28
JP2009048607A (ja) 2009-03-05
US20110208839A1 (en) 2011-08-25
US20120096169A1 (en) 2012-04-19
US8285849B2 (en) 2012-10-09

Similar Documents

Publication Publication Date Title
JP5026305B2 (ja) 視覚化および地理的分散データセンタ用記憶装置およびサーバプロビジョニング
US10191677B1 (en) Asynchronous splitting
US9135120B1 (en) Consistency group moving
US9965306B1 (en) Snapshot replication
US9575857B1 (en) Active/active replication
CN118733191A (zh) 容器化环境中的集群的实时迁移
US9619256B1 (en) Multi site and multi tenancy
US9575851B1 (en) Volume hot migration
US8429446B2 (en) Method and apparatus for managing virtual ports on storage systems
US7971089B2 (en) Switching connection of a boot disk to a substitute server and moving the failed server to a server domain pool
US9733989B1 (en) Non-disruptive load-balancing of virtual machines between data centers
US9098466B2 (en) Switching between mirrored volumes
EP2430544B1 (en) Altering access to a fibre channel fabric
US9639383B1 (en) Volume moving
US9659074B1 (en) VFA statistics
US11669360B2 (en) Seamless virtual standard switch to virtual distributed switch migration for hyper-converged infrastructure
US10241712B1 (en) Method and apparatus for automated orchestration of long distance protection of virtualized storage
US9619255B1 (en) Remote live motion
US9619264B1 (en) AntiAfinity
JP2002007304A (ja) ストレージエリアネットワークを用いた計算機システム及びそのデータ取り扱い方法
TW201027354A (en) Dynamic physical and virtual multipath I/O
JP2005216151A (ja) 資源運用管理システム及び資源運用管理方法
JP2004145855A (ja) 記憶装置システム及びデータ複製方法
JP2005275525A (ja) ストレージシステム
CN110912991A (zh) 一种基于超融合双节点高可用的实现方法

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20090219

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100906

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111027

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120522

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120620

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150629

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5026305

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees