JP2016184188A - Management device, management method and program for the same, and information processing system - Google Patents
Management device, management method and program for the same, and information processing system Download PDFInfo
- Publication number
- JP2016184188A JP2016184188A JP2015062671A JP2015062671A JP2016184188A JP 2016184188 A JP2016184188 A JP 2016184188A JP 2015062671 A JP2015062671 A JP 2015062671A JP 2015062671 A JP2015062671 A JP 2015062671A JP 2016184188 A JP2016184188 A JP 2016184188A
- Authority
- JP
- Japan
- Prior art keywords
- virtual machine
- cache
- server
- usage data
- disk
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Memory System Of A Hierarchy Structure (AREA)
Abstract
Description
本発明は、共有ディスク装置に接続された仮想マシンサーバにおける仮想マシンの起動又は移動に関する。 The present invention relates to activation or movement of a virtual machine in a virtual machine server connected to a shared disk device.
仮想マシン環境において、コンピュータを構成するCPU(Central Processing Unit)又はメモリの性能向上により、1台あたりの仮想マシンサーバに構成する仮想マシンの数は増加しつつある。CPU又はメモリの性能向上に対して、ディスク装置の性能向上は十分ではない。 In the virtual machine environment, the number of virtual machines configured in one virtual machine server is increasing due to the improvement in performance of CPU (Central Processing Unit) or memory constituting the computer. The performance improvement of the disk device is not sufficient for the performance improvement of the CPU or memory.
特許文献1には、ディスクキャッシュのヒット率を向上させるために、ディスクキャッシュデータが読み出したデータが再度入出力される可能性が高いと判断した場合に、当該データのディスクキャッシュメモリ内における常駐度を高めることが記載されている。
In
複数の仮想マシンサーバが共有ディスク装置を用いる場合、仮想マシンサーバで多数の仮想マシンが起動すると、仮想マシンサーバから共有ディスク装置へのアクセス要求が集中し、通信が輻輳することで仮想マシン又は仮想マシンサーバの性能が劣化する。 When multiple virtual machine servers use a shared disk device, when a large number of virtual machines are started up on the virtual machine server, access requests from the virtual machine server to the shared disk device are concentrated and communication congestion causes a virtual machine or virtual Machine server performance is degraded.
例えば、仮想マシンの起動時又は移動時に、共有ディスク装置へのディスクアクセスの遅延に起因する仮想マシンの動作不良等が発生する。このため仮想マシンの起動時又は移動時に共有ディスク装置へのアクセスを軽減する必要がある。 For example, when the virtual machine is activated or moved, a virtual machine malfunction due to a delay in disk access to the shared disk device occurs. For this reason, it is necessary to reduce access to the shared disk device when the virtual machine is started or moved.
また、特許文献1は、共有ディスク装置に接続された仮想マシンサーバの仮想マシンの起動と移動に関するものではない。
Further,
このように、仮想マシンの起動又は移動時における仮想マシンサーバから共有ディスク装置へのアクセスを軽減する技術が望まれている。 Thus, a technique for reducing access from a virtual machine server to a shared disk device when a virtual machine is activated or moved is desired.
本発明の一態様である仮想マシン管理装置は、仮想マシンサーバの仮想マシンへの操作の実行前に、前記仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から前記仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移す管理部を備える。 The virtual machine management device according to one aspect of the present invention includes a virtual machine from a shared disk device that stores usage data used for execution by the virtual machine before the virtual machine server performs an operation on the virtual machine. A management unit that moves the usage data to a disk cache unit of another virtual machine server that is the operation target of
本発明の一態様である制御方法は、仮想マシンサーバの仮想マシンへの操作の実行前に、前記仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から前記仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移し、前記利用データを移した後、前記他の仮想マシンサーバで前記仮想マシンの操作を実行させる。 The control method according to an aspect of the present invention includes a virtual machine operation from a shared disk device that stores usage data used for execution by the virtual machine before the virtual machine server performs an operation on the virtual machine. The usage data is transferred to a disk cache unit of another virtual machine server as a target destination, and after the usage data is transferred, the operation of the virtual machine is executed on the other virtual machine server.
本発明の一態様であるプログラムは、仮想マシンサーバの仮想マシンへの操作の実行前に、前記仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から前記仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移し、前記利用データを移した後、前記他の仮想マシンサーバで前記仮想マシンの操作を実行させる、ことをコンピュータに実行させる。 The program according to one aspect of the present invention is an operation target of the virtual machine from a shared disk device that stores usage data used by the virtual machine for execution by the operation before execution of the operation to the virtual machine of the virtual machine server. The computer is caused to move the usage data to the disk cache unit of the other virtual machine server that is the destination, and after the usage data is transferred, the virtual machine operation is executed on the other virtual machine server.
本発明の一態様である仮想マシン管理システムは、仮想マシンが起動又は移動する仮想マシンサーバと、前記仮想マシンが起動時又は移動時に利用する利用データを保存する共有ディスク装置と、前記仮想マシンサーバの前記仮想マシンを管理する管理装置と、を備え、前記管理装置は、仮想マシンサーバの仮想マシンへの操作の実行前に、前記仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から前記仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移す管理部を有する。 The virtual machine management system according to one aspect of the present invention includes a virtual machine server on which a virtual machine is activated or moved, a shared disk device that stores usage data used when the virtual machine is activated or moved, and the virtual machine server A management device that manages the virtual machine, wherein the management device stores usage data used by the virtual machine for execution by the operation before the virtual machine server performs the operation on the virtual machine. A management unit that transfers the usage data from the disk device to a disk cache unit of another virtual machine server that is the operation target of the virtual machine;
本発明は、仮想マシンの起動又は移動時における仮想マシンサーバから共有ディスク装置へのアクセスを軽減することができる。 The present invention can reduce access from a virtual machine server to a shared disk device when a virtual machine is activated or moved.
本発明の第1の実施形態である管理装置と、これを用いた情報処理システムについて、図面を用いて説明する。図1は、第1の実施形態における管理装置これを用いた情報処理システムの構成を示すブロック図である。図1に示すように、情報処理システム1は、仮想マシンサーバ2、3、共有ディスク装置4、管理装置5を備える。
A management apparatus according to a first embodiment of the present invention and an information processing system using the management apparatus will be described with reference to the drawings. FIG. 1 is a block diagram illustrating a configuration of an information processing system using the management apparatus according to the first embodiment. As shown in FIG. 1, the
仮想マシンサーバ2、3は、制御部7、ディスクキャッシュ部8を備える。なお、図1の仮想マシンサーバ10のディスクキャッシュ部は省略している。仮想マシンサーバ2、3の制御部7は、仮想マシン又は仮想マシンサーバ2、3の状態の取得、仮想マシン6の制御、および、ネットワークを介して仮想マシンを仮想マシンサーバ間で移動させる機能を有する。
The
また、仮想マシンサーバ2、3の制御部7は、共有ディスク装置30と接続され、各仮想マシンからのディスクアクセス要求に応じて共有ディスク装置30にアクセスする。
また制御部7は、管理装置5の管理部9の指示により、ディスクキャッシュ部8が保有する情報の追加、削除、および、ディスクキャッシュ部8の状態や、各仮想マシンのディスクアクセス要求の監視を行う機能を有する。
The
Further, the
共有ディスク装置4は、仮想マシンサーバ2、3と接続される。共有ディスク装置4は、仮想マシンサーバ2、3からのディスクアクセス要求に応答する機能を有する。
The shared
管理装置5は、管理部9を有する。管理部9は、仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置4から仮想マシンの操作対象先となる他の仮想マシンサーバ3のディスクキャッシュ部8に利用データを移す機能を有する。当該利用データの移動は、仮想マシンサーバ2の仮想マシンへの操作の実行前に行う。
The
また、管理部9は、仮想マシンサーバ2、3の仮想マシンの状態を監視し、各状態時における各仮想マシンのディスクアクセス状態を取得し、アクセス頻度等を分析し、仮想マシンキャッシュ定義を作成することができる。
また、管理部9が仮想マシンを操作する場合、該当操作実施時の仮想マシンキャッシュ定義を基に、操作対象となる仮想マシンサーバ2、3の制御部7を介して、ディスクキャッシュ部を変更することもできる。
The
Further, when the
次に、第1の実施形態である管理装置の動作について図面を用いて説明する。図2は、第1の実施形態である管理装置の動作を示すフローチャートである。図2に示すように、管理装置5の管理部9は、仮想マシンサーバの仮想マシンへの操作の実行前に、仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から仮想マシンの操作対象先となる他の仮想マシンサーバに移動する(S1)。さらに管理部9は、移動した後に仮想マシンの操作を実行する(S2)。
Next, the operation of the management apparatus according to the first embodiment will be described with reference to the drawings. FIG. 2 is a flowchart illustrating the operation of the management apparatus according to the first embodiment. As illustrated in FIG. 2, the
管理装置5の管理部9は、各仮想マシンの状態(起動、移動、リブート等の操作時、所定の時間帯など)を基準とし、それらの操作を実行した場合、あるいは、その状態にある場合の共有ディスクへのアクセス要求について、履歴情報又は統計情報を取得する。管理部9は、これらの情報を基に、それらの状態におけるアクセス頻度を分析し、一定のアクセス頻度があるデータ群を仮想マシンサーバで一時的に保持(キャッシュ)すべき情報として仮想マシンキャッシュ定義を作成する。これらの定義を基に、操作実行時(特に、複数の操作を同時実行する等、負荷の上昇が見込まれる場合)、事前に仮想マシンサーバのディスクキャッシュ部に、共有ディスク装置4上の情報を事前に読み込んでおき、共有ディスク装置へのアクセスを軽減する。
When the
(第1の実施形態の効果)
第1の実施形態によれば、仮想マシンの起動又は移動時における仮想マシンサーバから共有ディスク装置へのアクセスを軽減することができる。その理由は、管理装置の管理部が、仮想マシンへの操作の実行前に、仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に利用データを移すからある。
(Effects of the first embodiment)
According to the first embodiment, it is possible to reduce access from the virtual machine server to the shared disk device when starting or moving the virtual machine. The reason is that the management unit of the management device, before executing the operation to the virtual machine, from the shared disk device that stores the usage data that the virtual machine uses for the execution by the operation to other virtual machine operation target destinations. This is because the usage data is transferred to the disk cache unit of the virtual machine server.
(第2の実施形態)
次に、第2の実施形態である情報処理システムについて図面を用いて説明する。図3は、第2の実施形態における情報処理システムの構成を示すブロック図である。
(Second Embodiment)
Next, an information processing system according to the second embodiment will be described with reference to the drawings. FIG. 3 is a block diagram illustrating a configuration of the information processing system according to the second embodiment.
情報処理システムは、仮想マシンサーバ10、仮想マシンサーバ20、共有ディスク装置30、仮想システム管理装置50を備える。仮想マシンサーバ10、仮想マシンサーバ20、共有ディスク装置30、仮想システム管理装置50は、ネットワーク40を介してそれぞれ接続される。
The information processing system includes a
第1の実施形態の仮想マシンサーバ2の制御部7は、第2の実施形態の仮想マシンサーバ10の仮想マシン制御部14、ディスク制御部15、キャッシュ制御部18に相当する。また、第1の実施形態の管理装置5の管理部9は、第2の実施形態の仮想マシンサーバ制御部51、共有ディスク装置制御部52、仮想マシンサーバキャッシュ管理部53、仮想マシンサーバ監視部54に相当する。以下、それぞれの装置について詳細に説明する。
The
(仮想マシンサーバ)
図4は、仮想マシンサーバの構成を示すブロック図である。図4に示すように、仮想マシンサーバは、仮想マシン制御部14、ディスク制御部15、ディスクキャッシュ部16、通信制御部17、キャッシュ制御部18を備える。
(Virtual machine server)
FIG. 4 is a block diagram illustrating a configuration of the virtual machine server. As shown in FIG. 4, the virtual machine server includes a virtual
仮想マシン制御部14は、仮想マシン11、仮想マシン12および仮想マシン13の起動又は移動等を制御する機能を有する。具体的には、仮想マシン制御部14は、仮想マシン電源制御、仮想マシンの状態又は性能情報の取得、および、他の仮想マシンサーバとの間(例えば、仮想マシンサーバ10と20)で仮想マシンの移動を行う。仮想マシン制御部14は、外部装置からの指示により仮想マシンの操作を実施した場合は、指示をした外部装置に対して操作完了通知を送信してもよい。
The virtual
上述の仮想マシンの状態とは、仮想マシンの電源状態、実行状態等である。電源状態には、パワーON/OFF状態、スタンバイ状態がある。また、実行状態には、Tool実行又は各種処理の実行等がある。実行状態は、仮想マシンの起動又は移動操作時に仮想マシンが実行する処理も含まれる。性能情報には、仮想マシン内のメモリ又はCUPパフォーマンスデータが含まれる。 The above-described virtual machine state includes a power state, an execution state, and the like of the virtual machine. The power state includes a power ON / OFF state and a standby state. The execution state includes Tool execution and execution of various processes. The execution state includes processing executed by the virtual machine when the virtual machine is started or moved. The performance information includes memory in the virtual machine or CUP performance data.
なお、仮想マシンサーバは、仮想マシンが配置されない場合(仮想マシンが0台)があってもよい。また、仮想マシン制御部14は、通信制御部17に接続され、ネットワーク40を介して外部装置の制御又は監視をすることもできる。
Note that the virtual machine server may have no virtual machine (zero virtual machines). The virtual
ディスク制御部15は、各仮想マシンから共有ディスク装置30へのディスクアクセス要求を処理する。ディスク制御部15は、通信制御部17を介してネットワーク40に接続されており、ネットワーク40を介して共有ディスク装置30上の記憶領域(図示せず)にアクセスする。仮想マシンは、共有ディスク装置30上にある記憶領域に仮想マシンが利用する利用データを保存する。利用データには、各種サービスを実行するために仮想マシンに割当てられたソフトウエア又はサービス提供向けのデータを含む。また、利用データには、仮想マシンが起動、移動する際に利用する利用データも含まれる。また、ディスク制御部15は、各仮想マシンのディスクキャッシュ部16又は共有ディスク装置30へのアクセス要求の履歴情報又は統計情報を管理する。これらの情報は、ディスク制御部15によりネットワーク40を介して外部装置に提供される。
The
ディスクキャッシュ部16は、ソリッドステートドライブ又はメモリなどで構成される。ソリッドステートドライブ又はメモリは、ハードディスクに代表される記憶装置と比較して高速なデータの受け渡しが可能である。
The
キャッシュ制御部18は、共有ディスク装置30の記憶領域に存在する利用データを含む情報をディスクキャッシュ部16へ、一時的に保持・削除する機能を有する。キャッシュ制御部は、自身の判断、又は、ネットワーク40を介した外部装置からの制御指示により、ディスクキャッシュ部16への情報の一時保存を実行する。
The
なお、仮想マシンサーバ20については、仮想マシンサーバ10と同じ構成を有する。このため詳細な説明は省略する。
The
(共有ディスク装置)
図5は、共有ディスク装置の構成を示すブロック図である。図5に示すように、共有ディスク装置30は、1次キャッシュ領域31、2次キャッシュ領域32、記憶領域33、ディスク制御部34、通信制御部35を備える。
(Shared disk device)
FIG. 5 is a block diagram showing the configuration of the shared disk device. As shown in FIG. 5, the shared
記憶領域33は、仮想マシンサーバの仮想マシンが起動又は移動するために利用する利用データを含む各種情報を保存する。
The
共有ディスク装置30のディスク制御部34は、通信制御部35を介してネットワーク40に接続される。また、ディスク制御部34は、外部装置からの要求に応じて、記憶領域33への仮想マシンの利用データを含む各種情報を追加又は削除する機能を有する。
The
ディスク制御部34は、記憶領域33においてアクセス頻度の高い情報に対し、共有ディスク装置30の1次キャッシュ領域31、2次キャッシュ領域32に一時的に保持又は削除する機能を有する。1次キャッシュ領域31、2次キャッシュ領域32は、記憶領域33よりアクセス性能が優れている。なお、共有ディスク装置30は、1次キャッシュ領域31、2次キャッシュ領域32を有さない構成であってもよい。また、より多層のキャッシュ領域を有してもよい。
The
加えて、ディスク制御部34は、仮想マシンサーバ10、20からアクセス要求された情報又は要求された情報のアドレス等を含む情報の履歴情報又は統計情報を管理する機能を有する。これらの情報は、ネットワークを介して外部装置に提供することができる。
In addition, the
(仮想システム管理装置)
図3を用いて仮想システム管理装置の構成を説明する。仮想システム管理装置50は、仮想マシンサーバ10のマシン制御部14、ディスク制御部15及びキャッシュ制御部18と、共有ディスク装置30のディスク制御部34と、ネットワーク40を介して接続される。
(Virtual system management device)
The configuration of the virtual system management apparatus will be described with reference to FIG. The virtual
仮想システム管理装置50は、仮想マシンサーバ制御部51、共有ディスク装置制御部52、仮想マシンサーバキャッシュ管理部53、仮想マシンサーバ監視部54を備える。また、仮想システム管理装置50の記憶部(図示せず)に仮想マシンキャッシュ定義を保存する。
The virtual
仮想マシンサーバ制御部51は、図4に示す仮想マシンサーバ10、20の仮想マシン制御部14にネットワーク40を介して接続される。仮想マシンサーバ制御部51は、仮想マシンの電源制御、仮想マシンサーバ間での仮想マシンの移動を行う機能を有する。
The virtual machine
共有ディスク装置制御部52は、図5に示す共有ディスク装置30のディスク制御部34にネットワーク40を介して接続される。共有ディスク装置制御部52は、共有ディスク装置30のディスク制御部34が管理するアクセス要求された情報又は要求された情報のアドレス等を含む情報の履歴情報又は統計情報を取得する機能を有する。
The shared
仮想マシンサーバ監視部54は、仮想マシン制御部14から、仮想マシンの状態又は障害を検知する機能を有する。また、仮想マシンサーバ監視部54は、仮想マシンサーバ10、20にアクセスすることで、仮想マシンサーバ10、20の動作状態を確認することができる。
The virtual machine
仮想マシンサーバキャッシュ管理部53は、図4に示す仮想マシンサーバ10、20のディスク制御部15にネットワーク40を介して接続される。仮想マシンサーバキャッシュ管理部53は、仮想マシンから共有ディスク装置30へのディスクアクセス要求の履歴・統計情報を分析し、仮想マシンキャッシュ定義を作成する。
The virtual machine server
仮想マシンサーバキャッシュ管理部53は、作成された仮想マシンキャッシュ定義に基づき、共有ディスク装置30の記憶領域の各種情報を各仮想マシンサーバのディスクキャッシュ部に一時保存することを各仮想マシンサーバのキャッシュ制御部に指示することができる。
Based on the created virtual machine cache definition, the virtual machine server
仮想マシンサーバキャッシュ管理部53は、仮想マシンキャッシュ定義を参照して共有ディスク装置に保存された仮想マシンが起動又は移動に利用する利用データを仮想マシンサーバ10、20のディスクキャッシュ部16に移すことができる。
The virtual machine server
次に、仮想システム管理装置50による仮想マシンキャッシュ定義の作成について、図面を用いて説明する。図6、図7は、第2の実施形態における仮想マシンキャッシュ定義の作成に関するフローチャートである。
Next, creation of a virtual machine cache definition by the virtual
仮想システム管理装置50は、各仮想マシンの状態(起動、移動、リブート等の操作時、所定の時間帯など)を基準とし、それらの操作を実行した場合、あるいは、その状態にある場合の共有ディスクへのアクセス要求について、履歴情報又は統計情報を取得する。これらの情報を基に、それらの状態におけるアクセス頻度を分析し、一定のアクセス頻度があるデータ群を仮想マシンサーバで一時的に保持(キャッシュ)すべき情報として定義する。
The virtual
以下、仮想マシンサーバ10における仮想マシンの起動操作における、仮想システム管理装置50による仮想マシンキャッシュ定義の作成の例について説明する。
Hereinafter, an example of creating a virtual machine cache definition by the virtual
図6に示すように、仮想システム管理装置50が、仮想マシンサーバ10の仮想マシンの起動操作の指示を受付けると、仮想マシンサーバキャッシュ管理部53は、対象となる仮想マシンサーバ10のディスク制御部に監視開始を指示する(A1)。
As illustrated in FIG. 6, when the virtual
次に、仮想マシンサーバ制御部51が仮想マシンサーバの仮想マシン制御部14に仮想マシンの起動を指示する(A2)。仮想マシンサーバ10の仮想マシン制御部14は、仮想マシン11の起動を実施し(A3)、仮想マシン11の起動を完了する(A4)。
Next, the virtual machine
続いて、仮想マシンサーバ制御部51は、仮想マシン制御部14から仮想マシン11の起動完了通知を受領する(A5)。完了通知の受領後、仮想マシンサーバキャッシュ管理部53は、仮想マシンサーバ10のディスク制御部15に対し、監視終了を指示する(A6)。
Subsequently, the virtual machine
次に、図7に示すように、仮想マシンサーバキャッシュ管理部53は、仮想マシンサーバ10のディスク制御部15から監視開始から監視終了までのアクセス要求に関連する履歴情報又は統計情報を取得する(A7)。さらに、仮想マシンサーバキャッシュ管理部53は、共有ディスク装置30からアクセス要求のあった情報に対する記憶領域上の位置情報を取得する(A8)。
Next, as illustrated in FIG. 7, the virtual machine server
仮想マシンサーバキャッシュ管理部53は、取得したアクセス要求に関連する履歴情報又は統計情報とアクセス要求のあった情報に対する記憶領域上の位置情報から仮想マシンキャッシュ定義を作成する(A9)。例えば、仮想マシンサーバキャッシュ管理部53は、ディスクアクセスの統計情報や履歴情報から、アクセス頻度等を基にキャッシュ効率を算出し、利用頻度の高い情報の論理アドレス情報等を取得する。次に、利用頻度の高い情報の論理アドレス情報を基に、該当する情報の記憶領域33におけるアドレスを算出し、仮想マシンキャッシュ定義に論理アドレス情報等とあわせて記録する。なお、仮想マシンキャッシュ定義には、付加情報として定義作成時の仮想マシンの状況、状態を示す情報を添付してもよい。
The virtual machine server
仮想マシンサーバキャッシュ管理部53は、仮想マシンが同じ状状態(起動等)のときに作成した仮想マシンキャッシュ定義が記憶部(図示せず)に存在するか判定する(A10)。仮想マシンキャッシュ定義情報がある場合(A10のYes)、仮想マシンサーバキャッシュ管理部53は、仮想マシンキャッシュ定義を統合する。また、仮想マシンキャッシュ定義情報がない場合、仮想マシンサーバキャッシュ管理部53は、作成した仮想マシンキャッシュ定義を記憶部に保存する(A12)。
The virtual machine server
次に、仮想マシンサーバのディスクキャッシュ部へのキャッシュ適用について説明する。
以下は、仮想マシンサーバの仮想マシンの移動操作時におけるキャッシュ適用の例について説明する。図8は、第2の実施形態における仮想システム管理装置の動作を示すフローチャートである。
Next, cache application to the disk cache unit of the virtual machine server will be described.
The following describes an example of cache application during a virtual machine move operation of a virtual machine server. FIG. 8 is a flowchart illustrating the operation of the virtual system management apparatus according to the second embodiment.
図8に示すように、仮想マシンサーバ制御部51が仮想マシンサーバ10の仮想マシン制御部14に仮想マシン12の移動を指示する(B1)。次に、仮想マシンサーバキャッシュ管理部53は、仮想マシン12の仮想マシンキャッシュ定義が記憶部(図示せず)にあるか判定する(B2)。仮想マシンキャッシュ定義がない場合(B2のNo)、仮想マシンサーバキャッシュ管理部53は、仮想マシンキャッシュ定義を作成する(B3)。仮想マシンキャッシュ定義がある場合(B2のYes)、仮想マシンサーバキャッシュ管理部53は、対象となる各仮想マシンに対する仮想マシンキャッシュ定義を取得する(B04)。
As shown in FIG. 8, the virtual machine
仮想マシンサーバキャッシュ管理部53は、仮想マシンキャッシュ定義に従い、移動先の仮想マシンサーバ20のキャッシュ制御部18にキャッシュの配置を指示する(B5)。仮想マシンサーバ20のキャッシュ制御部18は、共有ディスク装置30から指定領域の情報を取得し、仮想マシンサーバ20のディスクキャッシュ部16に保存する。
The virtual machine server
仮想マシンサーバキャッシュ管理部53は、仮想マシンサーバ20のキャッシュ制御部18からキャッシュ操作完了の通知があるまで待機する。キャッシュ制御部18から完了通知を受けると、仮想マシンサーバ制御部51は、各仮想マシンの仮想マシン制御部14に対して移動操作を指示する(B6)。
The virtual machine server
なお、移動後に発生する、仮想マシンから共有ディスク装置30上の記憶領域33へのアクセス要求がある場合、仮想マシンキャッシュ定義に定義されている情報であれば、仮想マシンサーバ上のディスクキャッシュ部16に保持されていることになる。このため、移動後の仮想マシン22は、共有ディスク装置30へのアクセス要求に変えて、ディスクキャッシュ部16から該当する情報を取得することができる。このように、共有ディスク装置30へのアクセスの一部をディスクキャッシュ部16へのアクセスで代替することができる。
If there is an access request from the virtual machine to the
(第2の実施形態における変形例)
上記では、仮想マシンサーバキャッシュ管理部53が、ディスク制御部15からアクセス要求の論理アドレス情報を、また、共有ディスク装置制御部52が共有ディスク装置30のディスク制御部34から対応する記憶領域上のアドレス情報を取得するとした。このうち少なくとも1つの情報を利用して仮想マシンキャッシュ定義を作成してもよい。
(Modification in the second embodiment)
In the above, the virtual machine server
また、以前に作成した仮想マシンキャッシュ定義が存在する場合、これを統合せず、複数の仮想マシンキャッシュ定義を作成してもよい。仮想マシンキャッシュ定義を作成する際、共有ディスク装置30のディスク制御部34から取得した統計・履歴情報を考慮してもよい。
In addition, if there are virtual machine cache definitions created before, a plurality of virtual machine cache definitions may be created without integrating them. When creating a virtual machine cache definition, statistical / history information acquired from the
仮想マシンキャッシュ定義により、仮想マシンサーバのキャッシュ制御部18にキャッシュの指示を行う場合、仮想マシンキャッシュ定義に定義される全ての情報を利用しなくともよい。また、複数の仮想マシンキャッシュ定義を基に、適用するキャッシュ情報を選択してもよい。
When a cache instruction is issued to the
仮想マシンキャッシュ定義を利用する仮想マシンは、仮想マシンサーバ上にある仮想マシンの一部でもよい。この場合、仮想マシン間に優先度やキャッシュ適用対象を判断する付加情報を仮想システム管理装置50で保持し、これに基づき仮想マシンキャッシュ定義を適用する対象を決定する。
The virtual machine using the virtual machine cache definition may be a part of the virtual machine on the virtual machine server. In this case, the virtual
仮想マシンサーバ制御部51による起動操作の一部は、仮想マシンサーバ10、20のキャッシュ制御部18からキャッシュ操作完了の通知の前に実施してもよい(優先度の高い仮想マシンを優先的に起動する場合等)。
A part of the startup operation by the virtual machine
仮想マシンキャッシュ定義による、仮想マシンサーバ10、20のディスクキャッシュ部16へのキャッシュ操作は、ディスクキャッシュ部16の空き状態等を考慮し、投機的に実施してもよい。すなわち、停止中の仮想マシンに対し仮想マシンキャッシュ定義を事前に作成し、利用データを仮想マシンサーバに保持させてもよい。また、仮想マシンサーバ10の障害による停止に備え、事前に他の仮想マシンサーバ20に利用データを移すために仮想マシンキャッシュ定義を作成し、利用データを仮想マシンサーバ20に保持させてもよい。
The cache operation to the
(第2の実施形態の効果)
第2の実施形態によれば、仮想マシンサーバから共有ディスク装置へのアクセスを軽減することができる。その理由は、仮想マシンサーバの仮想マシンの操作を実施する場合に生ずる共有ディスク装置へのディスクアクセス要求について、事前に仮想マシンサーバのディスクキャッシュ部がディスクアクセス要求の対象となる情報を保持するからである。
(Effect of 2nd Embodiment)
According to the second embodiment, access from the virtual machine server to the shared disk device can be reduced. The reason is that the disk cache unit of the virtual machine server holds information that is the target of the disk access request in advance for the disk access request to the shared disk device that occurs when the virtual machine operation of the virtual machine server is performed. It is.
また、多数の仮想マシン操作時でも、共有ディスク装置へのディスクアクセス要求を軽減することができ、仮想マシンや仮想マシンサーバの遅延や障害を防止することができる。 Further, even when a large number of virtual machines are operated, it is possible to reduce disk access requests to the shared disk device, and it is possible to prevent delays and failures of virtual machines and virtual machine servers.
仮想マシンサーバのディスクキャッシュ部は、共有ディスク装置と比較して高速、かつ、応答性に優れるため、仮想マシンのパフォーマンスを向上することもできる。 Since the disk cache unit of the virtual machine server is faster and more responsive than the shared disk device, the performance of the virtual machine can also be improved.
また、共有ディスク装置重複する領域の排除の機能を有する場合、共有ディスク装置上の記憶装置のアドレスを参照することで、複数の仮想マシン間で共有している領域を検出することができる。このため、複数の仮想マシンが共有ディスク装置上の保持された同一領域の情報に対し、キャッシュ操作を1回にまとめることができる。 In addition, when the shared disk device has a function of eliminating an overlapping area, an area shared by a plurality of virtual machines can be detected by referring to the address of the storage device on the shared disk device. For this reason, a plurality of virtual machines can collect cache operations at once for information on the same area held on the shared disk device.
また、仮想マシンの起動の場合、事前に仮想マシンが必要とする情報を、仮想マシンサーバのディスクキャッシュ部に読み込むことで、仮想マシンを起動の遅延を軽減することができる。 In the case of starting a virtual machine, the information required by the virtual machine is read in advance into the disk cache unit of the virtual machine server, so that the delay in starting the virtual machine can be reduced.
さらに、仮想マシンを他の仮想マシンサーバに移動させる場合、移動後の仮想マシンの性能劣化を抑制することができる。その理由は、移動先の仮想マシンサーバのディスクキャッシュ部に、事前に仮想マシンの移動に必要な情報を保持することで共有ディスク装置への不要なアクセスの発生を抑制できるからである。 Furthermore, when moving a virtual machine to another virtual machine server, the performance degradation of the virtual machine after movement can be suppressed. The reason is that unnecessary access to the shared disk device can be suppressed by holding information necessary for moving the virtual machine in advance in the disk cache unit of the destination virtual machine server.
仮想マシンサーバが障害により停止した場合、共有ディスク装置へのアクセス負荷の増加を抑えつつ、他の仮想マシンサーバに仮想マシンを再起動することができる。その理由は、仮想マシンキャッシュ定義を事前に作成しておくことで、仮想マシンの起動後に必要となる情報を事前取得しておくことができ、負荷を軽減できるからである。 When a virtual machine server stops due to a failure, it is possible to restart the virtual machine on another virtual machine server while suppressing an increase in access load to the shared disk device. The reason is that by creating a virtual machine cache definition in advance, information necessary after the virtual machine is started can be acquired in advance, and the load can be reduced.
また、起動時等の状態に応じた仮想マシンキャッシュ定義を作成することで、定常時とは異なるディスクアクセス要求に対しても効率よくキャッシュを構成することができる。
(ハードウエア構成)
図9は、本発明の第1、2の実施形態における管理装置、仮想マシンサーバ、又は、共有ディスク装置をコンピュータ装置で実現したハードウエア構成を示す図である。
In addition, by creating a virtual machine cache definition corresponding to the state at the time of startup or the like, it is possible to efficiently configure a cache even for a disk access request that is different from the normal state.
(Hardware configuration)
FIG. 9 is a diagram showing a hardware configuration in which the management device, virtual machine server, or shared disk device in the first and second embodiments of the present invention is realized by a computer device.
図9に示すように、管理装置、仮想マシンサーバ、又は、共有ディスク装置は、CPU91、ネットワーク接続用の通信I/F(通信インターフェース)92、メモリ93、及び、プログラムを格納するハードディスク等の記憶装置94を含む。また、CPUは、システムバス97を介して入力装置95及び、出力装置96に接続されている。
As shown in FIG. 9, the management device, the virtual machine server, or the shared disk device includes a
CPU91は、オペレーティングシステムを動作させて本発明の第1〜2の実施形態に係る管理装置、仮想マシンサーバ、又は、共有ディスク装置を制御する。またCPU91は、例えば、ドライブ装置に装着された記録媒体からメモリ93にプログラムやデータを読み出す。
The
また、CPU91は、例えば、各実施形態における制御部、管理部から入力される情報信号を処理する機能を有し、プログラムに基づいて各種機能の処理を実行する。
Further, for example, the
記憶装置94は、例えば、光ディスク、フレキシブルディスク、磁気光ディスク、外付けハードディスク、又は半導体メモリ等である。記憶装置94の一部の記憶媒体は、不揮発性記憶装置であり、そこにプログラムを記憶する。また、プログラムは、通信網に接続されている。図示しない外部コンピュータからダウンロードされてもよい。
The
入力装置95は、例えば、マウス、キーボード、内臓のキーボタン、カード取込口、又は、タッチパネルなどで実現され、入力操作に用いられる。
The
出力装置96は、例えば、ディスプレイで実現され、CPU91により処理された情報等を出力して確認するために用いられる。
The
以上のように、本発明の各実施形態は、図9に示されるハードウエア構成によって実現される。但し、管理装置、仮想マシンサーバ、又は、共有ディスク装置が備える各部の実現手段は、特に限定されない。すなわち、管理装置、仮想マシンサーバ、又は、共有ディスク装置は、物理的に結合した一つの装置により実現されてもよいし、物理的に分離した二つ以上の装置を有線又は無線で接続し、これら複数の装置により実現してもよい。 As described above, each embodiment of the present invention is realized by the hardware configuration shown in FIG. However, the means for realizing each unit included in the management device, the virtual machine server, or the shared disk device is not particularly limited. That is, the management device, the virtual machine server, or the shared disk device may be realized by one physically coupled device, or two or more physically separated devices are connected by wire or wirelessly, You may implement | achieve by these several apparatuses.
以上、実施形態(及び実施例)を参照して本願発明を説明したが、本願発明は上記実施形態(及び実施例)に限定されものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。 While the present invention has been described with reference to the embodiments (and examples), the present invention is not limited to the above embodiments (and examples). Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
上記の実施形態の一部又は全部は、以下の付記のように記載されうるが、以下には限られない。 Part or all of the above-described embodiments can be described as in the following supplementary notes, but is not limited thereto.
(付記1) 仮想マシンサーバの仮想マシンの起動又は移動前に、前記仮想マシンが起動時又は移動時に利用する利用データを保存する共有ディスク装置から前記仮想マシンの起動先又は移動先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移す管理部を備える管理装置。 (Appendix 1) Before starting or moving a virtual machine of a virtual machine server, the virtual machine is started or moved from a shared disk device that stores usage data used when the virtual machine is started or moved. A management apparatus comprising a management unit that moves the usage data to a disk cache unit of a virtual machine server.
(付記2) 前記共有ディスク装置に保持される前記利用データのうち、前記ディスクキャッシュ部に移動する利用データは、前記仮想マシンから前記共有ディスク装置へのディスクアクセス要求の統計情報又は履歴情報を用いて決定する付記1記載の管理装置。
(Supplementary Note 2) Of the usage data held in the shared disk device, usage data to be moved to the disk cache unit uses statistical information or history information of a disk access request from the virtual machine to the shared disk device. The management device according to
(付記3) 前記ディスクキャッシュ部に移動する前記利用データの決定は、前記統計情報又は前記履歴情報に基づいて一定のアクセス頻度があるデータを選択する、
付記2に記載の管理装置。
(Supplementary Note 3) The determination of the usage data to be moved to the disk cache unit selects data having a certain access frequency based on the statistical information or the history information.
The management device according to attachment 2.
(付記4) 前記操作は、仮想マシンの起動又は移動である、付記1から3のいずれか1つに記載の管理装置。
(Supplementary note 4) The management apparatus according to any one of
(付記5) 前記管理部は、前記仮想マシンサーバの前記ディスクキャッシュ部に一時的に保持する前記利用データの情報として、仮想マシンキャッシュ定義を作成する、付記1から4のいずれか1つに記載の管理装置。
(Additional remark 5) The said management part produces a virtual machine cache definition as information of the said utilization data temporarily hold | maintained in the said disk cache part of the said virtual machine server, It is any one of
(付記6) 前記仮想マシンキャッシュ定義の付加情報として、前記定義の作成時における前記仮想マシンの状態を示す情報を付与する、付記5に記載の管理装置。
(Additional remark 6) The management apparatus of
(付記7) 前記仮想マシンサーバの障害による停止に備え、事前に前記他の仮想マシンサーバに前記利用データを移動させる、付記1記載の管理装置。
(Additional remark 7) The management apparatus of
(付記8) 仮想マシンサーバの仮想マシンへの操作の実行前に、前記仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から前記仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移し、
前記利用データを移した後、前記他の仮想マシンサーバで前記仮想マシンを起動又は移動させる管理方法。
(Supplementary Note 8) Before executing an operation on a virtual machine of a virtual machine server, another virtual as an operation target of the virtual machine from a shared disk device that stores usage data used by the virtual machine for execution by the operation Move the usage data to the machine server disk cache,
A management method for starting or moving the virtual machine on the other virtual machine server after transferring the usage data.
(付記9) 仮想マシンサーバの仮想マシンへの操作の実行前に、前記仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から前記仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移し、
前記利用データを移した後、前記他の仮想マシンサーバで前記仮想マシンを起動又は移動させることをコンピュータに実行させるプログラム。
(Additional remark 9) Before execution of operation to the virtual machine of a virtual machine server, the other virtual machine which becomes the operation target destination of the virtual machine from the shared disk device which stores the usage data which the virtual machine uses for execution by the operation Move the usage data to the machine server disk cache,
A program for causing a computer to start or move the virtual machine on the other virtual machine server after transferring the usage data.
(付記10) 仮想マシンが起動又は移動する仮想マシンサーバと、
前記仮想マシンが起動時又は移動時に利用する利用データを保存する共有ディスク装置と、
前記仮想マシンサーバの前記仮想マシンを管理する管理装置と、を備え、
前記管理装置は、
前記仮想マシンサーバの仮想マシンへの操作の実行前に、前記仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から前記仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移すように制御する、情報処理システム。
(Supplementary Note 10) A virtual machine server on which a virtual machine is activated or moved;
A shared disk device that stores usage data used when the virtual machine is started or moved;
A management device for managing the virtual machine of the virtual machine server,
The management device
Before executing an operation on the virtual machine of the virtual machine server, another virtual machine server that is the operation target of the virtual machine from a shared disk device that stores usage data used by the virtual machine for execution by the operation. An information processing system that controls to transfer the usage data to a disk cache unit.
(付記11) 仮想マシンが起動又は移動する仮想マシンサーバと、前記仮想マシンが起動時又は移動時に利用する利用データを保存する共有ディスク装置を備える情報処理システムの管理方法であって、
前記仮想マシンの起動又は移動前に、前記共有ディスク装置から、前記仮想マシンの起動先又は移動先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移した後、前記他の仮想マシンサーバで前記仮想マシンを起動又は移動させる情報処理システムの管理方法。
(Additional remark 11) It is the management method of an information processing system provided with the virtual machine server which a virtual machine starts or moves, and the shared disk apparatus which preserve | saves the utilization data used when the said virtual machine starts or moves,
Before starting or moving the virtual machine, after moving the usage data from the shared disk device to a disk cache unit of another virtual machine server that is the starting or moving destination of the virtual machine, the other virtual machine An information processing system management method for starting or moving the virtual machine on a server.
1 情報処理システム
2 仮想マシンサーバ
3 仮想マシンサーバ
4 共有ディスク装置
5 管理装置
6 仮想マシン
7 制御部
8 ディスクキャッシュ部
9 管理部
10 仮想マシンサーバ
11 仮想マシン
12 仮想マシン
13 仮想マシン
14 仮想マシン制御部
15 ディスク制御部
16 ディスクキャッシュ部
17 通信制御部
18 キャッシュ制御部
20 仮想マシンサーバ
30 共有ディスク装置
31 1次キャッシュ領域
32 2次キャッシュ領域
33 記憶領域
34 ディスク制御部
35 通信制御部
40 ネットワーク
50 仮想システム管理装置
51 仮想マシンサーバ制御部
52 共有ディスク装置制御部
53 仮想マシンサーバキャッシュ管理部
54 仮想マシンサーバ監視部
91 CPU
92 通信I/F(通信インターフェース)
93 メモリ
94 記憶装置
95 入力装置
96 出力装置
97 システムバス
DESCRIPTION OF
92 Communication I / F (communication interface)
93
Claims (10)
請求項1記載の管理装置。 Of the usage data held in the shared disk device, the usage data to be moved to the disk cache unit is determined using statistical information or history information of a disk access request from the virtual machine to the shared disk device. ,
The management apparatus according to claim 1.
請求項2に記載の管理装置。 The determination of the usage data to be moved to the disk cache unit selects data having a certain access frequency based on the statistical information or the history information.
The management device according to claim 2.
請求項1から3のいずれか1つに記載の管理装置。 The operation is activation or movement of the virtual machine.
The management apparatus as described in any one of Claim 1 to 3.
請求項1から4のいずれか1つに記載の管理装置。 The management unit creates a virtual machine cache definition as information of the usage data temporarily stored in the disk cache unit of the virtual machine server;
The management device according to any one of claims 1 to 4.
請求項5に記載の管理装置。 As the additional information of the virtual machine cache definition, give information indicating the state of the virtual machine at the time of creation of the definition,
The management device according to claim 5.
前記利用データを移した後、前記他の仮想マシンサーバで前記仮想マシンを起動又は移動させる管理方法。 Before executing an operation on a virtual machine of a virtual machine server, a disk of another virtual machine server that is the operation target of the virtual machine from a shared disk device that stores usage data that the virtual machine uses for execution by the operation Move the usage data to the cache,
A management method for starting or moving the virtual machine on the other virtual machine server after transferring the usage data.
前記利用データを移した後、前記他の仮想マシンサーバで前記仮想マシンを起動又は移動させることをコンピュータに実行させるプログラム。 Before executing an operation on a virtual machine of a virtual machine server, a disk of another virtual machine server that is the operation target of the virtual machine from a shared disk device that stores usage data that the virtual machine uses for execution by the operation Move the usage data to the cache,
A program for causing a computer to start or move the virtual machine on the other virtual machine server after transferring the usage data.
前記仮想マシンが起動時又は移動時に利用する利用データを保存する共有ディスク装置と、
前記仮想マシンサーバの前記仮想マシンを管理する管理装置と、を備え、
前記管理装置は、
前記仮想マシンサーバの前記仮想マシンへの操作の実行前に、前記仮想マシンが当該操作による実行に利用する利用データを保存する共有ディスク装置から前記仮想マシンの操作対象先となる他の仮想マシンサーバのディスクキャッシュ部に前記利用データを移すように制御する、
情報処理システム。 A virtual machine server on which the virtual machine starts or moves; and
A shared disk device that stores usage data used when the virtual machine is started or moved;
A management device for managing the virtual machine of the virtual machine server,
The management device
Before the virtual machine server performs an operation on the virtual machine, another virtual machine server that is the operation target of the virtual machine from a shared disk device that stores usage data used by the virtual machine for execution by the operation Control to move the usage data to the disk cache unit of
Information processing system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015062671A JP2016184188A (en) | 2015-03-25 | 2015-03-25 | Management device, management method and program for the same, and information processing system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015062671A JP2016184188A (en) | 2015-03-25 | 2015-03-25 | Management device, management method and program for the same, and information processing system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2016184188A true JP2016184188A (en) | 2016-10-20 |
Family
ID=57242953
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015062671A Pending JP2016184188A (en) | 2015-03-25 | 2015-03-25 | Management device, management method and program for the same, and information processing system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2016184188A (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014036307A1 (en) * | 2012-08-31 | 2014-03-06 | Fusion-Io, Inc. | Systems, methods, and interfaces for adaptive persistence |
JP2014052725A (en) * | 2012-09-05 | 2014-03-20 | Nec Corp | Migration processing apparatus, information processing system, migration processing method, and program |
WO2015015550A1 (en) * | 2013-07-29 | 2015-02-05 | 株式会社日立製作所 | Computer system and control method |
-
2015
- 2015-03-25 JP JP2015062671A patent/JP2016184188A/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014036307A1 (en) * | 2012-08-31 | 2014-03-06 | Fusion-Io, Inc. | Systems, methods, and interfaces for adaptive persistence |
JP2014052725A (en) * | 2012-09-05 | 2014-03-20 | Nec Corp | Migration processing apparatus, information processing system, migration processing method, and program |
WO2015015550A1 (en) * | 2013-07-29 | 2015-02-05 | 株式会社日立製作所 | Computer system and control method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6186787B2 (en) | Data transfer device, data transfer system, data transfer method and program | |
JP4786255B2 (en) | Storage system and storage control method | |
JP5093259B2 (en) | Communication path strengthening method between BIOS and BMC, apparatus and program thereof | |
US8893122B2 (en) | Virtual computer system and a method of controlling a virtual computer system on movement of a virtual computer | |
KR102043276B1 (en) | Apparatus and method for dynamic resource allocation based on interconnect fabric switching | |
WO2017179537A1 (en) | Software update control device, software update control system, software update control method, and recording medium having software update control program stored thereon | |
JP4814982B2 (en) | Storage control device and operation control method of storage device | |
JP7100941B2 (en) | A memory access broker system that supports application-controlled early write acknowledgments | |
US9049101B2 (en) | Cluster monitor, method for monitoring a cluster, and computer-readable recording medium | |
Deshpande et al. | Scatter-gather live migration of virtual machines | |
WO2012050224A1 (en) | Computer resource control system | |
JP4957765B2 (en) | Software program execution device, software program execution method, and program | |
JP2007080012A (en) | Rebooting method, system and program | |
JP5333735B2 (en) | Virtual computer system, virtual computer migration method, and program | |
US20100235549A1 (en) | Computer and input/output control method | |
JP2011159249A (en) | Computer system, method and program for managing virtual machine | |
US8904143B2 (en) | Obtaining additional data storage from another data storage system | |
JP4691153B2 (en) | Multi-core processor, control method, and information processing apparatus | |
JP2016184188A (en) | Management device, management method and program for the same, and information processing system | |
JP2015060264A (en) | System, control method, management server, and program | |
JP4877608B2 (en) | Virtual machine server, virtual machine server information storage method, and virtual machine server information storage program | |
JP6112205B2 (en) | Information processing system, apparatus, method, and program | |
JP5884595B2 (en) | Message communication method, message communication program, and computer | |
JP5477122B2 (en) | Computer system, computer system management method, gateway device, and program | |
JPWO2018173300A1 (en) | I / O control method and I / O control system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180215 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181114 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190108 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190304 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20190806 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191106 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20191106 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20191114 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20191119 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20200207 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20200212 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20200707 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20200915 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20201020 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20201020 |