JP2011192184A - Virtual computer system, management server, virtual machine construction method, and program thereof - Google Patents
Virtual computer system, management server, virtual machine construction method, and program thereof Download PDFInfo
- Publication number
- JP2011192184A JP2011192184A JP2010059661A JP2010059661A JP2011192184A JP 2011192184 A JP2011192184 A JP 2011192184A JP 2010059661 A JP2010059661 A JP 2010059661A JP 2010059661 A JP2010059661 A JP 2010059661A JP 2011192184 A JP2011192184 A JP 2011192184A
- Authority
- JP
- Japan
- Prior art keywords
- virtual machine
- information
- virtual
- machine
- physical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は仮想コンピュータシステム、管理サーバ、仮想マシンの構築方法およびそのプログラムに関し、特に仮想コンピュータシステムを利用して迅速にディザスタリカバリ(Disaster Recovery)が可能な仮想コンピュータシステム、管理サーバ、仮想マシンの構築方法およびそのプログラムに関する。 The present invention relates to a virtual computer system, a management server, a virtual machine construction method, and a program therefor, and more particularly, to a virtual computer system, a management server, and a virtual machine that can be quickly recovered using a virtual computer system. The present invention relates to a method and a program thereof.
コンピュータネットワークが既に重要な社会的インフラとなっている現代では、地震、火災、風水害などのような大規模災害によるデータの喪失や情報システムの稼働停止は、重大な社会的損失となる。そのため、そのような大規模災害が発生した場合に、情報システムを迅速に復旧させることが重要である。このような情報システムの大規模災害からの復旧を、ディザスタリカバリという。 In the present day when computer networks have already become an important social infrastructure, data loss and information system outages due to large-scale disasters such as earthquakes, fires, storms and floods are serious social losses. Therefore, it is important to quickly restore the information system when such a large-scale disaster occurs. Such recovery of information systems from a large-scale disaster is called disaster recovery.
ディザスタリカバリにおいて重要な役割を果たすと考えられているのが、コンピュータの仮想化技術である。仮想コンピュータを動作させるデータセンタから物理的に離れた場所に、そのデータセンタのデータをバックアップしたバックアップサイトを構築しておけば、このデータセンタが災害によってダウンした場合にこのバックアップサイトが同一の仮想コンピュータを構築して、その業務をスムースに引き継ぐことができる。これによって、復旧にかかる処理を容易に、迅速に、かつ低コストに実施することが可能なディザスタリカバリを実現できると考えられている。 Computer virtualization technology is considered to play an important role in disaster recovery. If a backup site that backs up data in the data center is built at a location physically separated from the data center where the virtual computer is operated, this backup site will have the same virtual site if the data center goes down due to a disaster. You can build a computer and take over the work smoothly. As a result, it is considered that disaster recovery can be realized in which processing for recovery can be performed easily, quickly, and at low cost.
これに関連する技術文献として、次の各文献がある。特許文献1には、仮想計算機への物理資源の再配分を可能とする仮想計算機システムについて記載されている。特許文献2には、ハードウェア障害に対する信頼性を向上させるため、複数の物理プロセッサを有する計算機で、互いに異なる物理プロセッサ上に互いに異なる論理計算機を割り当てるという仮想計算機システムについて記載されている。
There are the following documents as technical documents related to this.
特許文献3には、複数の実計算機の間で移動可能な論理計算機を構成するため、論理計算機ごとのプロセッサ割当量からこれを割り当て可能な物理プロセッサを見つけてそこにこの論理計算機を割り当てるという仮想計算機システムについて記載されている。非特許文献1には、コンピュータの仮想化技術を利用したディザスタリカバリの実証実験について記載されている。
In
ディザスタリカバリには、情報システムを一刻も早く復旧させることが求められている。前述のような、仮想コンピュータを動作させるデータセンタのディザスタリカバリについても、この業務を引き継ぐ仮想コンピュータを一刻も早く構築することがもちろん必要である。 Disaster recovery is required to restore the information system as soon as possible. For disaster recovery of a data center that operates a virtual computer as described above, it is of course necessary to construct a virtual computer that takes over this work as soon as possible.
仮想コンピュータを動作させる場合には、この仮想コンピュータの運用時に発生するピークの処理負荷を考慮して、該仮想コンピュータに最適なリソースを割り当てるようにするのが普通である。しかしながら、仮想コンピュータの構築にかかる負荷について考慮した関連技術はなく、このためディザスタリカバリに必要な仮想コンピュータの構築処理には時間がかかっていた。 When a virtual computer is operated, it is usual to allocate an optimum resource to the virtual computer in consideration of the peak processing load that occurs during the operation of the virtual computer. However, there is no related technology that takes into account the load involved in the construction of the virtual computer, and therefore the construction process of the virtual computer necessary for disaster recovery has taken a long time.
前述の特許文献1〜3は、いずれもこの仮想コンピュータの構築にかかる負荷を軽減することを目的としたものではなく、実際にその負荷を軽減しうる構成は記載されていない。非特許文献1には、仮想コンピュータによるディザスタリカバリが可能であることを実証したという旨が記載されてはいるが、やはり仮想コンピュータの構築にかかる負荷を軽減しうる構成は記載されていない。
None of the above-mentioned
本発明の目的は、大規模災害からの復旧(ディザスタリカバリ)に係る情報システムの再構築処理を迅速に実施することを可能とする仮想コンピュータシステム、管理サーバ、仮想マシンの構築方法およびそのプログラムを提供することにある。 SUMMARY OF THE INVENTION An object of the present invention is to provide a virtual computer system, a management server, a virtual machine construction method, and a program thereof capable of quickly implementing information system reconstruction processing related to recovery from a large-scale disaster (disaster recovery). It is to provide.
上記目的を達成するため、本発明に係る仮想コンピュータシステムは、ユーザ端末からアクセス可能な仮想コンピュータである仮想マシンを構築するデータセンタと、データセンタのデータをバックアップして仮想マシンと同一の機能を有する仮想マシンを構築可能なバックアップセンタとを有する仮想コンピュータシステムであって、データセンタが、ユーザ端末から業務定義情報を受信してこの業務定義情報に従って仮想マシンの構成を決定する管理サーバと、管理サーバの決定した構成に基づいて仮想マシンを動作させる物理的なコンピュータ装置である複数台の物理マシンとを有し、管理サーバが、物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶している記憶装置と、ユーザ端末から受信した業務定義情報を解析する業務定義解析手段と、物理マシン情報および業務定義情報から物理マシン上への仮想マシンの配置である複数通りの配置パターンを生成する配置パターン生成手段と、配置パターンごとに仮想マシンの構築に必要な処理時間を算出し、最も早く仮想マシンを構築できる配置パターンを選出する処理時間評価手段と、物理マシンが仮想マシンを起動する際に、選出された配置パターンに従って物理マシンに仮想マシンを構築させる仮想マシン制御手段とを有することを特徴とする。 In order to achieve the above object, a virtual computer system according to the present invention has a data center for constructing a virtual machine, which is a virtual computer accessible from a user terminal, and the same function as a virtual machine by backing up data in the data center. A virtual computer system having a backup center capable of constructing a virtual machine having a management server in which a data center receives business definition information from a user terminal and determines the configuration of the virtual machine according to the business definition information; And a plurality of physical machines that are physical computer devices that operate the virtual machine based on the determined configuration of the server, and the management server previously stores physical machine information that is information on the current processing capability of the physical machine. Stored storage device and business definition information received from user terminal A business definition analysis unit that analyzes the physical machine information, a layout pattern generation unit that generates multiple types of placement patterns that are virtual machine placements on the physical machine from the work definition information, and a virtual machine for each placement pattern The processing time evaluation means that calculates the processing time required for the virtual machine and selects the placement pattern that can build the virtual machine earliest, and when the physical machine starts the virtual machine, the virtual machine is assigned to the physical machine according to the selected placement pattern. Virtual machine control means to be constructed.
上記目的を達成するため、本発明に係る管理サーバは、ユーザ端末からアクセス可能な仮想コンピュータである仮想マシンを構築するデータセンタに装備され、ユーザ端末から業務定義情報を受信してこの業務定義情報に従って仮想マシンの構成を決定して、この構成に基づいてあらかじめ接続された物理的なコンピュータ装置である複数台の物理マシン上で、仮想マシンを動作させる管理サーバであって、物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶している記憶装置と、ユーザ端末から受信した業務定義情報を解析する業務定義解析手段と、物理マシン情報および業務定義情報から物理マシン上への仮想マシンの配置である複数通りの配置パターンを生成する配置パターン生成手段と、配置パターンごとに仮想マシンの構築に必要な処理時間を算出し、最も早く仮想マシンを構築できる配置パターンを選出する処理時間評価手段と、物理マシンが仮想マシンを起動する際に、選出された配置パターンに従って物理マシンに仮想マシンを構築させる仮想マシン制御手段とを有することを特徴とする。 In order to achieve the above object, a management server according to the present invention is equipped in a data center for constructing a virtual machine that is a virtual computer accessible from a user terminal, receives the business definition information from the user terminal, and receives the business definition information. A management server that operates a virtual machine on a plurality of physical machines, which are physical computer devices connected in advance based on the configuration, according to the current configuration of the physical machine. A storage device that pre-stores physical machine information, which is information related to processing capacity, business definition analysis means for analyzing the business definition information received from the user terminal, and virtual machine information and business definition information from the physical machine information to the physical machine A layout pattern generation means for generating a plurality of layout patterns that are machine layouts, and for each layout pattern Calculates the processing time required to construct a virtual machine, selects a placement pattern that can build the virtual machine earliest, and when the physical machine starts the virtual machine, the physical machine according to the chosen placement pattern And virtual machine control means for constructing a virtual machine.
上記目的を達成するため、本発明に係る仮想マシンの構築方法は、複数台の物理マシンをあらかじめ内部に備え、ユーザ端末から業務定義情報を受信してこの業務定義情報に従ってユーザ端末からアクセス可能な仮想コンピュータである仮想マシンを物理マシン上に構築するデータセンタと、データセンタのデータをバックアップして仮想マシンと同一の機能を有する仮想マシンを構築可能なバックアップセンタとを有する仮想コンピュータシステムにあって、データセンタが備える管理サーバに、物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶し、管理サーバが、ユーザ端末から業務定義情報を受信し、管理サーバが、受信した業務定義情報を解析し、管理サーバが、物理マシン情報および業務定義情報から物理マシン上への仮想マシンの配置である複数通りの配置パターンを生成し、管理サーバが、配置パターンごとに仮想マシンの構築に必要な処理時間を算出し、管理サーバが、算出された配置パターンごとの処理時間に基づいて最も早く仮想マシンを構築できる配置パターンを選出し、物理マシンが、仮想マシンを起動する際に選出された配置パターンに従って仮想マシンを構築することを特徴とする。 In order to achieve the above object, a virtual machine construction method according to the present invention includes a plurality of physical machines in advance, and receives business definition information from a user terminal and is accessible from the user terminal according to the business definition information. A virtual computer system having a data center that builds a virtual machine, which is a virtual computer, on a physical machine, and a backup center that can back up data in the data center and build a virtual machine having the same function as the virtual machine The physical server information, which is information related to the current processing capacity of the physical machine, is stored in advance in the management server provided in the data center, the management server receives the business definition information from the user terminal, and the management server receives the business definition Analyzing the information, the management server uses the physical machine information and business definition information Generate multiple types of placement patterns that are the placement of virtual machines on the machine, the management server calculates the processing time required to build a virtual machine for each placement pattern, and the management server creates each placement pattern Based on this processing time, an arrangement pattern capable of constructing a virtual machine earliest is selected, and a physical machine constructs a virtual machine according to the arrangement pattern selected when the virtual machine is activated.
上記目的を達成するため、本発明に係る仮想マシンの構築プログラムは、複数台の物理マシンをあらかじめ内部に備え、ユーザ端末から業務定義情報を受信してこの業務定義情報に従ってユーザ端末からアクセス可能な仮想コンピュータである仮想マシンを物理マシン上に構築するデータセンタと、データセンタのデータをバックアップして仮想マシンと同一の機能を有する仮想マシンを構築可能なバックアップセンタとを有する仮想コンピュータシステムにあって、データセンタの備える、物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶しているコンピュータに、ユーザ端末から業務定義情報を受信する手順と、受信した業務定義情報を解析する手順と、物理マシン情報および業務定義情報から物理マシン上への仮想マシンの配置である複数通りの配置パターンを生成する手順と、配置パターンごとに仮想マシンの構築に必要な処理時間を算出する手順と、算出された配置パターンごとの処理時間に基づいて最も早く仮想マシンを構築できる配置パターンを選出する手順と、物理マシンが仮想マシンを起動する際に、物理マシンに選出された配置パターンに従って仮想マシンを構築させる手順とを実行させることを特徴とする。 In order to achieve the above object, a virtual machine construction program according to the present invention includes a plurality of physical machines in advance, and receives business definition information from a user terminal and is accessible from the user terminal according to the business definition information. A virtual computer system having a data center that builds a virtual machine, which is a virtual computer, on a physical machine, and a backup center that can back up data in the data center and build a virtual machine having the same function as the virtual machine , A procedure for receiving business definition information from a user terminal in a computer that stores in advance physical machine information that is information related to the current processing capability of the physical machine, and a procedure for analyzing the received business definition information To the physical machine from the physical machine information and business definition information Based on the procedure for generating multiple types of virtual machine placement patterns, the procedure for calculating the processing time required to build a virtual machine for each placement pattern, and the processing time for each calculated placement pattern It is characterized in that a procedure for selecting an arrangement pattern capable of constructing a virtual machine and a procedure for constructing a virtual machine according to the arrangement pattern selected by the physical machine when the physical machine starts the virtual machine are executed.
上述したように本発明は、物理マシン上に仮想マシンを配置する複数通りの配置パターンを予め生成して、その中から最も早く構築できる配置パターンを選出するように構成したので、この選出された配置パターンに従って迅速に仮想マシンを構築することができ、これによって、大規模災害からの復旧(ディザスタリカバリ)に係る情報システムの再構築処理を迅速に実施することが可能であるという、優れた特徴を持つ仮想コンピュータシステム、管理サーバ、仮想マシンの構築方法およびそのプログラムを提供することができる。 As described above, the present invention is configured so that a plurality of arrangement patterns for arranging virtual machines on a physical machine are generated in advance, and an arrangement pattern that can be constructed earliest is selected from them. An excellent feature is that a virtual machine can be constructed quickly according to the arrangement pattern, and this enables the information system reconstruction process related to recovery from a large-scale disaster (disaster recovery) to be performed quickly. A virtual computer system, a management server, a virtual machine construction method, and a program therefor can be provided.
(第1の実施形態)
以下、本発明の第1の実施形態の構成について添付図1〜2に基づいて説明する。
最初に、本実施形態の基本的な内容について説明し、その後でより具体的な内容について説明する。
本実施形態に係る仮想コンピュータシステム1は、ユーザ端末31からアクセス可能な仮想コンピュータである仮想マシン32を構築するデータセンタ10と、データセンタのデータをバックアップして仮想マシン32と同一の機能を有する仮想マシン32aを構築可能なバックアップセンタ20とを有する仮想コンピュータシステムである。このデータセンタ10は、ユーザ端末から業務定義情報を受信してこの業務定義情報に従って仮想マシンの構成を決定する管理サーバ100と、管理サーバの決定した構成に基づいて仮想マシンを動作させる物理的なコンピュータ装置である複数台の物理マシン111〜11nとを有する。そしてこの管理サーバ100は、物理マシンの現在の処理能力に関する情報である物理マシン情報161を予め記憶している記憶装置102と、ユーザ端末から受信した業務定義情報170を解析する業務定義解析手段151と、物理マシン情報および業務定義情報から物理マシン上への仮想マシンの配置である複数通りの配置パターンを生成する配置パターン生成手段152と、配置パターンごとに仮想マシンの構築に必要な処理時間を算出し、最も早く仮想マシンを構築できる配置パターンを選出する処理時間評価手段153と、物理マシンが仮想マシンを起動する際に、選出された配置パターンに従って物理マシンに仮想マシンを構築させる仮想マシン制御手段154とを有する。
(First embodiment)
Hereinafter, the structure of the 1st Embodiment of this invention is demonstrated based on attached FIGS. 1-2.
First, the basic content of the present embodiment will be described, and then more specific content will be described.
The
ここで業務定義情報170は、各々の仮想マシンで起動すべきアプリケーションおよびそれらを起動する順序について定義する業務構成情報171と、各々の仮想マシンに要求される処理能力を表す性能値について定義する運用要求情報172と、各々の仮想マシンが行うべき処理量について定義する構築要求情報173とを含む。配置パターン生成手段は、物理マシン情報161に基づいて、運用要求情報172および構築要求情報173で指定された条件を満たす配置パターンを生成する。
Here, the task definition information 170 is a
そして処理時間評価手段153は、業務構成情報で各々のアプリケーションを起動する段階ごとに同一の物理マシン上で同時に構築処理を行う仮想マシンが存在するか否かを判断し、これが存在すれば該物理マシンの処理能力を減算して処理時間の算出を行う。また、この処理時間評価手段153は、業務構成情報で各々のアプリケーションを起動する段階ごとに並行して構築処理を行う仮想マシンが存在するか否かを判断し、これが存在すれば同一の段階での構築処理時間の最大値以外を合計する対象から除外して処理時間の算出を行う。
Then, the processing
以上の構成を備えることにより、仮想コンピュータシステム1は、ディザスタリカバリに係る再構築処理を迅速に実施することが可能となる。
以下、これをより詳細に説明する。
By providing the above configuration, the
Hereinafter, this will be described in more detail.
図2は、本発明の実施形態に係る仮想コンピュータシステム1全体の構成について示す説明図である。本実施形態では、ユーザが操作するユーザ端末31が、インターネット30を介してデータセンタ10に接続して、データセンタ10が構築した仮想マシン32を操作する。その際、ユーザ端末31はユーザの業務構成手順を示す業務定義情報170をデータセンタ10に対して送信し、仮想コンピュータである仮想マシン32はこの業務定義情報に従って動作する。
FIG. 2 is an explanatory diagram showing the overall configuration of the
そして、データセンタ10のデータをバックアップし、データセンタ10と同一の構成を有するバックアップセンタ20が、このデータセンタ10とは物理的に離れた場所に構築されている。大規模災害が発生してデータセンタ10が使用不可能になった場合に、バックアップセンタ20は仮想マシン32と同一の機能を有する仮想マシン32aを構築して、仮想マシン32の機能を復旧させることができる。
Then, the data in the
図1は、図2で示したデータセンタ10の内部構成を示す説明図である。データセンタ10は、データセンタ10全体を管理する管理サーバ100と、管理サーバ100の管理によって後述の仮想マシンが構築される物理的なコンピュータ装置であるm台の物理マシン111〜11mとが、内部ネットワーク130によって相互に接続されて構成されている。物理マシン111〜11m上に、n台の仮想マシン121〜12nが構築される。この仮想マシン121〜12nのうちのいずれか1台が、図2に示した仮想マシン32である。
FIG. 1 is an explanatory diagram showing an internal configuration of the
ここでmおよびnはいずれも整数であり、m=nであってもm≠nであってもよい。また、物理マシンごとに構築される仮想マシンの台数が異なっていてもよい。ユーザ端末31は、インターネット30を介して管理サーバ100に接続され、仮想マシン121〜12nのうちのいずれか1台である仮想マシン32を操作する。
Here, m and n are both integers, and m = n or m ≠ n. Further, the number of virtual machines constructed for each physical machine may be different. The
ユーザ端末31が送信する業務定義情報170は、仮想マシン121〜12nの構築順や構築時に行う処理などについての情報である業務構成情報171と、業務アプリケーションの処理ピーク時を勘案するなどした仮想マシン121〜12nを安定して稼動させるために必要な性能情報である運用要求情報172と、仮想マシン121〜12n上の業務アプリケーションの構築に必要な処理量についての情報である構築要求情報173とで構成されている。これら各々の情報の構成については後述する。
The business definition information 170 transmitted by the
管理サーバ100は、コンピュータプログラムを実行する演算装置であるプロセッサ101と、プログラムやデータを記憶する記憶装置102とで構成されるコンピュータ装置である。プロセッサ101では、後述する業務定義解析手段151、配置パターン生成手段152、処理時間評価手段153、仮想マシン制御手段154といった各手段が、各々コンピュータプログラムとして動作する。
The
また記憶装置102では、物理マシン情報161と、業務情報162といったデータが記憶されている。物理マシン情報161は、物理マシン111〜11mの各々の性能についての情報である。業務情報162は、この物理マシン111〜11m上にどのように仮想マシン121〜12nが配置されているかについての情報である。これらの情報の構成についても後述する。
The
業務定義解析手段151は、ユーザ端末31から業務定義情報170を受信し、この業務定義情報を解析して業務構成情報171、運用要求情報172、および構築要求情報173を出力する。配置パターン生成手段152は、業務定義解析手段151から業務構成情報171および運用要求情報172の出力を受けて、これらと物理マシン情報161とから仮想マシン配置パターン情報を生成する。
The business
処理時間評価手段153は、配置パターン生成手段152が生成した仮想マシン配置パターン情報から、各々の仮想マシン配置パターンで仮想マシン121〜12nを構築した場合の構築処理時間を計算して、その中から構築処理時間が最短となる仮想マシン配置パターンを選出する。仮想マシン制御手段154は、処理時間評価手段153が選出した業務開始時間が最短となる仮想マシン配置パターンの通りに、仮想マシン121〜12nを構築する。
The processing
図3は、図2で示したバックアップセンタ20のより詳しい構成を示す説明図である。バックアップセンタ20は、バックアップセンタ20全体を管理する管理サーバ200と、管理サーバ200の管理によって後述の仮想マシンが構築される物理的なコンピュータ装置であるm台の物理マシン211〜21mとが、内部ネットワーク230によって相互に接続されて構成されている。そして物理マシン211〜21m上に、n台の仮想マシン221〜22nが構築される。
FIG. 3 is an explanatory diagram showing a more detailed configuration of the
前述のように、バックアップセンタ20はデータセンタ10と原則同一の構成を有するので、各構成部の参照番号を各々+100して示す。また、バックアップデータの作成およびそこからのデータのリストアについては、公知の方法を適宜使用することができる。
As described above, the
バックアップセンタ20の管理サーバ200は、直接ユーザ端末31から業務定義情報170を受信することはないが、データセンタ10内部のデータをバックアップ処理で複製し、かつバックアップセンタ20の物理的な構成に基づいて、管理サーバ100と同様の処理を行って仮想マシン配置パターン情報を生成する。
The
従って、プロセッサ201では、業務定義解析手段251、配置パターン生成手段252、処理時間評価手段253の仮想マシン制御手段254がコンピュータプログラムとして、管理サーバ100と同一の動作を行う。
Accordingly, in the
図4は、図1で示したユーザ端末31から業務定義解析手段151に送信される業務定義情報170(業務構成情報171、運用要求情報172および構築要求情報173)の一例を示す説明図である。業務構成情報171には、各々の仮想マシンで起動すべきアプリケーションと、それらを起動する順序について記載されている。以後、これを業務の構築フローという。
FIG. 4 is an explanatory diagram showing an example of the task definition information 170 (
図4の業務構成情報171に示された例では、ウェブサービスに係る業務を起動する構築フローとして、まずデータベースサーバAを起動し(以後フェーズ1という)、その後にウェブアプリケーションサーバB1およびB2を起動し(以後フェーズ2という)、この両者が起動した後でロードバランサーCを起動する(以後フェーズ3という)という起動順序が示されている。これらの各サーバは別々に起動されて動作する必要がある。
In the example shown in the
同時に、この構築フローに従って起動されることが必須であるので、この起動の順序を変更することはできない。従って、データベースサーバAが起動された後でないとウェブアプリケーションサーバB1およびB2を起動することはできないし、ウェブアプリケーションサーバB1およびB2の両方が起動された後でないとロードバランサーCを起動することはできない。 At the same time, since it is essential to be activated according to this construction flow, the activation order cannot be changed. Accordingly, the web application servers B1 and B2 can only be activated after the database server A is activated, and the load balancer C cannot be activated unless both the web application servers B1 and B2 are activated.
運用要求情報172は、構築すべき各々の仮想マシン121〜12nの仮想マシン名172aと、その仮想マシンに要求される性能を表す性能値172bとを含む。構築要求情報173は、前述の仮想マシン名172aと、その仮想マシンが行う処理量173aとを含む。運用要求情報172と構築要求情報173とで、仮想マシン名172aは共通するデータとなる。
The
図4の運用要求情報172および構築要求情報173に示された例では、上述の業務構成情報171で構築すべきデータベースサーバA、ウェブアプリケーションサーバB1およびB2、およびロードバランサーCが仮想マシン名172aとして示され、運用要求情報172ではこれらの仮想マシン名172aに対して、例えばデータベースサーバAは、CPU処理能力が1000MHz、メモリ容量が1000MB、ディスクI/Oが30MB/secの処理能力が安定運用には少なくとも必要であることが、性能値172b、172c、172dとして示されている。
In the example shown in the
一方、構築要求情報173ではこれらの仮想マシン名172aに対して、データベースサーバAは100MB、ウェブアプリケーションサーバB1は10MB、同B2は30MB、ロードバランサーCは20MBのファイルを各仮想マシンで読み込んで、それぞれ作業する必要があるということが処理量173aとして示されている。
On the other hand, in the
ここで、同時に停止してはいけない仮想マシンを必ず別々の物理サーバに配置するようにするための情報を運用要求情報172に含めることもできる。これによって、構築時の処理速度だけでなく、高可用性を考慮したリソース配置パターンを作成することが可能となる。
Here, information for ensuring that virtual machines that should not be stopped at the same time are arranged on different physical servers can be included in the
図5は、図1で示した物理マシン情報161および業務情報162の記憶内容の一例を示す説明図である。物理マシン情報161は、内部ネットワーク130に接続された物理マシン111〜11mの各々の物理マシン名161aと、各々の物理マシンが持つ現在の性能を表すCPU能力161b、メモリ容量161c、ディスクI/O161d、および処理能力161eなどの情報を含む。業務情報162は、業務名162aと、その業務名に対応する仮想マシン121〜12nの配置パターン162bの情報を含む。
FIG. 5 is an explanatory diagram showing an example of the storage contents of the
図5で示された例では、物理マシン情報161には物理マシン名161aがvmm1,vmm2,vmm3なる3台の物理マシンが存在し、各々のCPU能力161b、メモリ容量161c、ディスクI/O161dから導出される各物理マシンの処理能力161eは110、100、120(いずれも単位はmsec/MB)である。業務情報162については後述する。
In the example shown in FIG. 5, the
図6は、図1で示した管理サーバ100が業務定義情報170から配置パターン162bを作成する動作を表すフローチャートである。まずユーザ端末31が、ユーザが入力してユーザ端末31上に記憶した業務定義情報170を、管理サーバ100に送信する(ステップS301)。業務定義解析手段151がこの業務定義情報170を受信して解析し(ステップS302)、この業務定義情報170に含まれる業務構成情報171、運用要求情報172および構築要求情報173を抽出して、配置パターン生成手段152に出力する(ステップS303)。
FIG. 6 is a flowchart showing an operation in which the
配置パターン生成手段152は、業務定義解析手段151から出力された業務構成情報171と運用要求情報172、そして物理マシン情報161の処理能力161eから、業務構成情報171および運用要求情報172で指定された条件を満たす全ての仮想マシン配置パターン候補180を作成して記憶装置102上に一時的に記憶する(ステップS304)。この配置パターン候補180の中から、後述の図7の処理を経て選択されたものが、配置パターン162bとして業務情報162に記憶される。
The arrangement
上記のステップS304では、運用要求情報172に示された性能値172bを持つ各々の仮想マシン名172aを、物理マシン情報161に示された各々の物理マシン上で構築できるという条件を満たす仮想マシン配置パターン候補180を、総当たりで割り出す。図5で示された例では、そのようにして割り出された仮想マシン配置パターン候補180のうちの2つを、リソースパターンP1およびP2として例示している。以後、説明を平易にするため、リソースパターンP1およびP2という2つの例についてのみ説明する。
In step S304, the virtual machine arrangement that satisfies the condition that each
図5で示された例では、上記の運用要求情報172で示されたデータベースサーバA、ウェブアプリケーションサーバB1およびB2、およびロードバランサーCという各々の仮想マシンについて、業務名162aは「ウェブサービス」、配置パターン候補180としてリソースパターンP1およびP2が示されている。vmm1〜vmm3は、物理マシン情報161に示された物理マシン名161aである。そして、そのうちのリソースパターンP2が配置パターン162bとして業務情報162に記憶されている。
In the example shown in FIG. 5, the
リソースパターンP1では、vmm1にデータベースサーバA、vmm2にウェブアプリケーションサーバB1およびB2、vmm3にロードバランサーCを割り当てている。これに対してリソースパターンP2では、vmm1にデータベースサーバA、vmm2にウェブアプリケーションサーバB2およびロードバランサーC、vmm3にウェブアプリケーションサーバB1を割り当てている。 In the resource pattern P1, the database server A is assigned to vmm1, the web application servers B1 and B2 are assigned to vmm2, and the load balancer C is assigned to vm3. On the other hand, in the resource pattern P2, the database server A is assigned to vmm1, the web application server B2 and the load balancer C are assigned to vmm2, and the web application server B1 is assigned to vmm3.
ちなみにvmm1には業務名「ウェブサービス」とは関係ない他業務に係る仮想マシンXが割り当てられて動作している。vmm3にも同様に、他業務に係る仮想マシンYが割り当てられて動作している。これらの仮想マシンXおよびYは、本実施形態の動作を説明する上では、詳しく説明しなくても特に問題はない。 Incidentally, a virtual machine X related to another business not related to the business name “web service” is assigned to vmm1 and is operating. Similarly, a virtual machine Y related to another business is assigned to vmm3 and is operating. These virtual machines X and Y have no particular problem even if they are not described in detail in describing the operation of the present embodiment.
図7は、図1で示した管理サーバ100が仮想マシン配置パターン候補180の中から採用する配置パターン162bを作成して保存する動作を表すフローチャートである。まず、処理時間評価手段153が記憶装置102に一時記憶された配置パターン候補180を読み込む(ステップS401)。次に処理時間評価手段153は、物理マシン情報161に記載された各々の物理マシンの性能値、ここでは処理能力161eから、各物理マシンの処理能力を算出する(ステップS402)。
FIG. 7 is a flowchart showing an operation in which the
続いて処理時間評価手段153は、構築要求情報173の処理量173aから、各業務アプリケーションを構築するために必要な処理量を算出する(ステップS403)。そして、ここで算出された処理量と各々の物理マシンの処理能力161eから、各仮想マシン上の業務アプリケーションの構築時間を評価値として算出する(ステップS404)。この評価値を配置パターン候補180の全てに対して適用して、配置パターンごとに業務全体の構築処理にかかる時間を算出して(ステップS405)、その時間が最短となる配置パターンを選出し、これを配置パターン162bとして業務情報162に記憶する(ステップS406)。
Subsequently, the processing
図8は、図7のステップS403として示した、処理時間評価手段153が各物理マシンの処理能力を算出する処理をより詳細に示すフローチャートである。処理時間評価手段153は、業務構成情報171に記載された各業務の処理フローチャートに基づいて、同一の物理マシン上で同時に構築処理を行う仮想マシンが存在するか否かを判断する(ステップS501)。
FIG. 8 is a flowchart showing in more detail the processing for calculating the processing capability of each physical machine by the processing time evaluation means 153 shown as step S403 in FIG. The processing
存在しなければ、構築要求情報173の処理量173aをそのままステップS404〜405の処理量の算出に用いる(ステップS502)。存在すれば、その同時処理によって処理能力が落ちる分を処理能力161eから減算して用いる(ステップS503)。より具体的には、同一の物理マシン上で同時に構築処理を行う仮想マシンの数を処理能力161eに掛け合わせ、その値を見かけ上の処理能力161eとして用いるなどの方法を用いることができる。
If not, the
図9は、図7のステップS405として示した、処理時間評価手段153が業務全体の構築処理にかかる時間を算出する処理をより詳細に示すフローチャートである。処理時間評価手段153は、業務構成情報171に記載された各業務の処理フローチャートに基づいて、構築処理にかかる同一の処理段階(フェーズ)で並行して構築処理を行う仮想マシンが存在するか否かを判断する(ステップS601)。
FIG. 9 is a flowchart showing in more detail the process for calculating the time required for the construction process for the entire business by the processing
存在しなければ、そのまま構築処理の各段階に係る時間を合計して業務全体の構築処理にかかる時間を算出する(ステップS602)。存在すれば、同一処理段階の構築処理時間の最大値以外を合計する対象から外して、残りを合計して業務全体の構築処理にかかる時間を算出する(ステップS603)。 If it does not exist, the time for each stage of the construction process is added as it is, and the time for the construction process for the entire business is calculated (step S602). If it exists, it is excluded from the objects to be summed other than the maximum value of the construction processing time in the same processing stage, and the rest is summed to calculate the time required for construction processing of the entire business (step S603).
図4〜5に示されたリソースパターンP1およびP2について上記の図6〜9のフローチャートで示した処理を行った例を示す。前述のように、業務構成情報171では、ウェブサービスに係る業務を起動する構築フローとして、まずデータベースサーバAを起動し(フェーズ1)、その後にウェブアプリケーションサーバB1およびB2を並行して起動し(フェーズ2)、この両者が起動した後でロードバランサーCを起動する(フェーズ3)という起動順序が示されている。
The example which performed the process shown by the flowchart of said 6-9 about the resource patterns P1 and P2 shown by FIGS. 4-5 is shown. As described above, in the
そして、リソースパターンP1では、いずれも物理マシンであるvmm1にデータベースサーバA、vmm2にウェブアプリケーションサーバB1およびB2、vmm3にロードバランサーCという各々の仮想マシンを割り当てている。これに対してリソースパターンP2では、vmm1にデータベースサーバA、vmm2にウェブアプリケーションサーバB2およびロードバランサーC、vmm3にウェブアプリケーションサーバB1を割り当てている。 In the resource pattern P1, virtual machines such as database server A are assigned to physical machine vmm1, web application servers B1 and B2 are assigned to vmm2, and load balancer C is assigned to vmm3. On the other hand, in the resource pattern P2, the database server A is assigned to vmm1, the web application server B2 and the load balancer C are assigned to vmm2, and the web application server B1 is assigned to vmm3.
まずリソースパターンP1およびP2を、処理時間評価手段153がステップS401で読み込む。続いて、各物理マシンの処理能力と各アプリケーションの構築に必要な処理量とを、処理時間評価手段153がステップS402〜403で読み込む。ここから処理時間評価手段153がステップS404〜405で、業務全体の構築処理にかかる時間を算出する。
First, the processing
前述のように、ここでは物理マシン名161aがvmm1,vmm2,vmm3なる3台の物理マシンが存在し、各々の処理能力161eは110、100、120(いずれも単位はmsec/MB)である。このため、たとえばリソースパターンP1では、110msec/MBの処理能力のある物理マシンvmm1にフェーズ1でデータベースサーバAを割り当てていて、構築要求情報173にあるようにデータベースサーバAは100MBのファイルを読み込んで作業する必要があるので、このデータベースサーバAの起動に必要な時間は100MB×110msec/MB=11000msecである。
As described above, there are three physical machines whose
同様に、物理マシンvmm2にフェーズ2でウェブアプリケーションサーバB1およびB2を割り当てている。これは図8のステップS501がYESとなるケースに該当する。これらウェブアプリケーションサーバB1およびB2は物理マシンvmm2上で同時に起動され、両方が起動されないとフェーズ3に進めない。このため、vmm2の処理能力を見かけ上その半分とみなし、処理能力161eの数値を倍の200msec/MBとする。従って、ウェブアプリケーションサーバB1およびB2の起動に必要な時間は(10+30)MB×200msec/MB=8000secである。
Similarly, web application servers B1 and B2 are allocated to the physical machine vmm2 in phase 2. This corresponds to the case where step S501 in FIG. 8 is YES. These web application servers B1 and B2 are started simultaneously on the physical machine vmm2, and cannot proceed to
これに続くフェーズ3では、物理マシンvmm3に120msec/MBの能力のあるロードバランサーCを割り当てていて、このロードバランサーCは20MBのファイルを読み込んで作業する必要があるので、このロードバランサーCの起動に必要な時間は20MB×120msec/MB=2400secである。以上、リソースパターンP1でこのウェブサービスを起動するのに必要な時間が、ステップS404でフェーズ1〜3の各々について求められ、ステップS405でこれらを合計して11000+8000+2400=21400msecと求められる。
In the
これに対してリソースパターンP2では、物理マシンvmm1にフェーズ1でデータベースサーバAを割り当てている点はリソースパターンP1と同一であるので、このデータベースサーバAの起動に必要な時間はリソースパターンP1と同じく、100MB×110msec/MB=11000msecである。
On the other hand, the resource pattern P2 is the same as the resource pattern P1 in that the database server A is assigned to the physical machine vmm1 in
これに続くフェーズ2では、物理マシンvmm2にウェブアプリケーションサーバB2を、物理マシンvmm3にウェブアプリケーションサーバB1を割り当てている。この両者は異なる物理マシンであるので、vmm2の処理能力100msec/MB、vmm3の処理能力120msec/MBが各々そのままウェブアプリケーションサーバB1およびB2の立ち上げに発揮される。 In the subsequent phase 2, the web application server B2 is assigned to the physical machine vmm2, and the web application server B1 is assigned to the physical machine vmm3. Since both are different physical machines, the processing capability of vmm2 is 100 msec / MB, and the processing capability of vmm3 is 120 msec / MB, as they are, for starting up the web application servers B1 and B2.
ウェブアプリケーションサーバB1の起動に必要な時間は10MB×120msec/MB=1200msec、同B2の起動に必要な時間は30MB×100msec/MB=3000msecとなる。これは図9のステップS601がYESとなるケースに該当する。従って、ウェブアプリケーションサーバB1およびB2の起動で、より時間のかかるウェブアプリケーションサーバB2の起動時間3000msecのみを、フェーズ2に必要な時間とする。 The time required for starting the web application server B1 is 10 MB × 120 msec / MB = 1200 msec, and the time required for starting the B2 is 30 MB × 100 msec / MB = 3000 msec. This corresponds to the case where step S601 in FIG. 9 is YES. Accordingly, only the startup time of 3000 msec of the web application server B2, which takes more time to start the web application servers B1 and B2, is set as the time required for the phase 2.
これに続くフェーズ3では、100msec/MBの能力のある物理マシンvmm2にロードバランサーCを割り当てていて、このロードバランサーCは20MBのファイルを読み込んで作業する必要があるので、このロードバランサーCの起動に必要な時間は20MB×100msec/MB=2000msecである。以上、リソースパターンP2でこのウェブサービスを起動するのに必要な時間が、ステップS404でフェーズ1〜3の各々について求められ、ステップS405でこれらを合計して11000+3000+2000=16000msecと求められる。
In the
以上で述べたように、リソースパターンP1でこのウェブサービスを起動するのに必要な時間は21400msec、リソースパターンP2では16000msecである。従って、ステップS406ではより時間の短いリソースパターンP2が採用され、配置パターン162bとして業務情報162に記憶される。
As described above, the time required to start this web service with the resource pattern P1 is 21400 msec, and with the resource pattern P2 is 16000 msec. Accordingly, in step S406, the resource pattern P2 having a shorter time is adopted and stored in the
以上で説明した例は、本発明の概念をわかりやすく表現するために、ごく簡単な例を述べたに過ぎない。実際には、リソースパターンP1およびP2の2つだけでなく、数多くの配置パターンが、仮想マシン配置パターン候補180として作成されて一時記憶される。その中から、最も早く当該業務に必要な各々の仮想マシンを起動することが可能なものだけが、配置パターン162bとして業務情報162に記憶されるのである。
The examples described above are merely simple examples in order to express the concept of the present invention in an easy-to-understand manner. Actually, not only two resource patterns P1 and P2, but also many arrangement patterns are created as virtual machine
図10は、図1で示した仮想マシン制御手段154(または254)が、記憶された配置パターン162bから仮想マシン121〜12nを生成する処理を表すフローチャートである。仮想マシン制御手段154は、記憶装置102の業務情報162から図8のステップS406で選出および記憶された配置パターン162bを読み出し(ステップS701)、これに基づいて物理マシン111〜11m上に仮想マシン121〜12nを生成する(ステップS702)。
FIG. 10 is a flowchart illustrating a process in which the virtual machine control unit 154 (or 254) illustrated in FIG. 1 generates the virtual machines 121 to 12n from the stored
業務定義情報170は、バックアップ処理によりバックアップセンタ20の管理サーバ200上において、業務定義解析手段251により図6のS303のステップまで実行されている。データセンタ10が大規模災害でダウンした場合、以後メインセンタと同様に、図7のS304によりバックアップセンタ20での仮想マシン配置パターン候補を作成し、図8〜図10と同一の処理を、バックアップセンタ20の管理サーバ200上の物理マシン情報261、業務情報262を用いて、配置パターン生成手段252、処理時間評価手段253、仮想マシン制御手段254が行い、仮想マシン221〜22nを生成する。これによって、バックアップセンタにて迅速にディザスタリカバリを行うことが可能となる。
The job definition information 170 is executed by the job
(第1の実施形態の全体的な動作)
次に、上記の実施形態の全体的な動作について説明する。本実施形態に係る仮想マシンの構築方法は、複数台の物理マシンをあらかじめ内部に備え、ユーザ端末31から業務定義情報を受信してこの業務定義情報に従ってユーザ端末からアクセス可能な仮想コンピュータである仮想マシン32を物理マシン上に構築するデータセンタ10と、データセンタのデータをバックアップして仮想マシンと同一の機能を有する仮想マシン32aを構築可能なバックアップセンタ20とを有する仮想コンピュータシステム1が仮想マシンを構築する方法である。まずデータセンタが備える管理サーバ100に、物理マシンの現在の処理能力に関する情報である物理マシン情報161を予め記憶し、管理サーバが、ユーザ端末から業務定義情報170を受信し、管理サーバが、受信した業務定義情報を解析し(図6:ステップS302)、管理サーバが、物理マシン情報および業務定義情報から物理マシン上への仮想マシンの配置である複数通りの配置パターンを生成し(図6:ステップS304)、管理サーバが、配置パターンごとに仮想マシンの構築に必要な処理時間を算出し(図7:ステップS402〜404)、管理サーバが、算出された配置パターンごとの処理時間に基づいて最も早く仮想マシンを構築できる配置パターンを選出し(図7:ステップS405)、物理マシンが、仮想マシンを起動する際に選出された配置パターンに従って仮想マシンを構築する(図10:ステップS702)。
(Overall operation of the first embodiment)
Next, the overall operation of the above embodiment will be described. The virtual machine construction method according to the present embodiment is a virtual computer that includes a plurality of physical machines in advance, receives business definition information from the
ここで、上記各動作ステップについては、これをコンピュータで実行可能にプログラム化し、これらを前記各ステップを直接実行するコンピュータである管理サーバ100に実行させるようにしてもよい。
この構成および動作により、本実施形態は以下のような効果を奏する。
Here, each of the above-described operation steps may be programmed to be executable by a computer, and may be executed by the
With this configuration and operation, the present embodiment has the following effects.
本実施形態は、物理マシン上に仮想マシンを配置する複数通りの配置パターンを生成して、その中から最も早く構築できる配置パターンを選出するので、この配置パターンに従って迅速に仮想マシンを構築することができる。従って、ディザスタリカバリで要求される迅速な再構築処理をユーザに提供することができる。 In this embodiment, a plurality of arrangement patterns for arranging virtual machines on a physical machine are generated, and an arrangement pattern that can be constructed earliest is selected from them. Therefore, a virtual machine can be constructed quickly according to the arrangement pattern. Can do. Accordingly, it is possible to provide the user with a quick reconstruction process required for disaster recovery.
これまで本発明について図面に示した特定の実施形態をもって説明してきたが、本発明は図面に示した実施形態に限定されるものではなく、本発明の効果を奏する限り、これまで知られたいかなる構成であっても採用することができる。 The present invention has been described with reference to the specific embodiments shown in the drawings. However, the present invention is not limited to the embodiments shown in the drawings, and any known hitherto provided that the effects of the present invention are achieved. Even if it is a structure, it is employable.
上述した各々の実施形態について、その新規な技術内容の要点をまとめると、以下のようになる。なお、上記実施形態の一部または全部は、新規な技術として以下のようにまとめられるが、本発明は必ずしもこれに限定されるものではない。 About each embodiment mentioned above, it is as follows when the summary of the novel technical content is put together. In addition, although part or all of the said embodiment is summarized as follows as a novel technique, this invention is not necessarily limited to this.
(付記1) ユーザ端末からアクセス可能な仮想コンピュータである仮想マシンを構築するデータセンタと、前記データセンタのデータをバックアップして前記仮想マシンと同一の機能を有する仮想マシンを構築可能なバックアップセンタとを有する仮想コンピュータシステムであって、
前記データセンタが、前記ユーザ端末から業務定義情報を受信してこの業務定義情報に従って前記仮想マシンの構成を決定する管理サーバと、前記管理サーバの決定した構成に基づいて前記仮想マシンを動作させる物理的なコンピュータ装置である複数台の物理マシンとを有し、
前記管理サーバが、
前記物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶している記憶装置と、
前記ユーザ端末から受信した前記業務定義情報を解析する業務定義解析手段と、
前記物理マシン情報および前記業務定義情報から前記物理マシン上への前記仮想マシンの配置である複数通りの配置パターンを生成する配置パターン生成手段と、
前記配置パターンごとに前記仮想マシンの構築に必要な処理時間を算出し、最も早く前記仮想マシンを構築できる前記配置パターンを選出する処理時間評価手段と、
前記物理マシンが前記仮想マシンを起動する際に、前記選出された配置パターンに従って前記物理マシンに前記仮想マシンを構築させる仮想マシン制御手段と
を有することを特徴とする仮想コンピュータシステム。
(Additional remark 1) The data center which constructs | assembles the virtual machine which is a virtual computer accessible from a user terminal, The backup center which backs up the data of the said data center, and can construct | assemble the virtual machine which has the same function as the said virtual machine A virtual computer system comprising:
The data center receives business definition information from the user terminal and determines a configuration of the virtual machine according to the business definition information, and a physical that operates the virtual machine based on the determined configuration of the management server A plurality of physical machines which are typical computer devices,
The management server is
A storage device that stores in advance physical machine information that is information on the current processing capacity of the physical machine;
Job definition analysis means for analyzing the job definition information received from the user terminal;
An arrangement pattern generating means for generating a plurality of arrangement patterns that are arrangements of the virtual machines on the physical machine from the physical machine information and the job definition information;
Processing time evaluation means for calculating the processing time required to construct the virtual machine for each of the arrangement patterns, and selecting the arrangement pattern capable of constructing the virtual machine earliest;
A virtual computer system comprising virtual machine control means for causing the physical machine to construct the virtual machine according to the selected arrangement pattern when the physical machine activates the virtual machine.
(付記2) 前記業務定義情報が、各々の前記仮想マシンで起動すべきアプリケーションおよびそれらを起動する順序について定義する業務構成情報と、各々の前記仮想マシンに要求される処理能力を表す性能値について定義する運用要求情報と、各々の前記仮想マシンが行うべき処理量について定義する構築要求情報とを含み、
前記配置パターン生成手段は、前記物理マシン情報に基づいて、前記運用要求情報および前記構築要求情報で指定された条件を満たす前記配置パターンを生成することを特徴とする、付記1に記載の仮想コンピュータシステム。
(Additional remark 2) About the performance value showing the processing capability requested | required for each said virtual machine, and the business configuration information which the said business definition information defines about the application which should be started in each said virtual machine, and the order which starts them Including operation request information to be defined and construction request information to define the amount of processing to be performed by each of the virtual machines,
The virtual computer according to
(付記3) 前記処理時間評価手段が、前記業務構成情報で各々の前記アプリケーションを起動する段階ごとに同一の前記物理マシン上で同時に構築処理を行う仮想マシンが存在するか否かを判断し、これが存在すれば該物理マシンの前記処理能力を減算して前記処理時間の算出を行うことを特徴とする、付記2に記載の仮想コンピュータシステム。 (Additional remark 3) The said processing time evaluation means judges whether the virtual machine which performs a construction process simultaneously on the same said physical machine for every step which starts each said application with the said business structure information, The virtual computer system according to appendix 2, wherein if it exists, the processing time of the physical machine is subtracted to calculate the processing time.
(付記4) 前記処理時間評価手段が、前記業務構成情報で各々の前記アプリケーションを起動する段階ごとに並行して構築処理を行う仮想マシンが存在するか否かを判断し、これが存在すれば同一の前記段階での構築処理時間の最大値以外を合計する対象から除外して前記処理時間の算出を行うことを特徴とする、付記2に記載の仮想コンピュータシステム。 (Additional remark 4) The said processing time evaluation means judges whether the virtual machine which performs a construction process in parallel for every step which starts each said application with the said business structure information exists, and if this exists, it will be the same 3. The virtual computer system according to appendix 2, wherein the processing time is calculated by excluding a construction processing time other than the maximum value in the above stage from a target to be summed.
(付記5) ユーザ端末からアクセス可能な仮想コンピュータである仮想マシンを構築するデータセンタに装備され、前記ユーザ端末から業務定義情報を受信してこの業務定義情報に従って前記仮想マシンの構成を決定して、この構成に基づいてあらかじめ接続された物理的なコンピュータ装置である複数台の物理マシン上で、前記仮想マシンを動作させる管理サーバであって、
前記物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶している記憶装置と、
前記ユーザ端末から受信した前記業務定義情報を解析する業務定義解析手段と、
前記物理マシン情報および前記業務定義情報から前記物理マシン上への前記仮想マシンの配置である複数通りの配置パターンを生成する配置パターン生成手段と、
前記配置パターンごとに前記仮想マシンの構築に必要な処理時間を算出し、最も早く前記仮想マシンを構築できる前記配置パターンを選出する処理時間評価手段と、
前記物理マシンが前記仮想マシンを起動する際に、前記選出された配置パターンに従って前記物理マシンに前記仮想マシンを構築させる仮想マシン制御手段と
を有することを特徴とする管理サーバ。
(Additional remark 5) It equips in the data center which builds the virtual machine which is a virtual computer accessible from a user terminal, receives the business definition information from the said user terminal, determines the structure of the said virtual machine according to this business definition information, A management server for operating the virtual machine on a plurality of physical machines, which are physical computer devices connected in advance based on this configuration,
A storage device that stores in advance physical machine information that is information on the current processing capacity of the physical machine;
Job definition analysis means for analyzing the job definition information received from the user terminal;
An arrangement pattern generating means for generating a plurality of arrangement patterns that are arrangements of the virtual machines on the physical machine from the physical machine information and the job definition information;
Processing time evaluation means for calculating the processing time required to construct the virtual machine for each of the arrangement patterns, and selecting the arrangement pattern capable of constructing the virtual machine earliest;
A management server comprising virtual machine control means for causing the physical machine to construct the virtual machine according to the selected arrangement pattern when the physical machine starts the virtual machine.
(付記6) 複数台の物理マシンをあらかじめ内部に備え、ユーザ端末から業務定義情報を受信してこの業務定義情報に従って前記ユーザ端末からアクセス可能な仮想コンピュータである仮想マシンを前記物理マシン上に構築するデータセンタと、前記データセンタのデータをバックアップして前記仮想マシンと同一の機能を有する仮想マシンを構築可能なバックアップセンタとを有する仮想コンピュータシステムにあって、
前記データセンタが備える管理サーバに、前記物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶し、
前記管理サーバが、前記ユーザ端末から前記業務定義情報を受信し、
前記管理サーバが、受信した前記業務定義情報を解析し、
前記管理サーバが、前記物理マシン情報および前記業務定義情報から前記物理マシン上への前記仮想マシンの配置である複数通りの配置パターンを生成し、
前記管理サーバが、前記配置パターンごとに前記仮想マシンの構築に必要な処理時間を算出し、
前記管理サーバが、算出された前記配置パターンごとの処理時間に基づいて最も早く前記仮想マシンを構築できる前記配置パターンを選出し、
前記物理マシンが、前記仮想マシンを起動する際に前記選出された配置パターンに従って前記仮想マシンを構築する
ことを特徴とする仮想マシンの構築方法。
(Supplementary Note 6) A plurality of physical machines are provided in advance, and a virtual machine that is a virtual computer that can be accessed from the user terminal according to the business definition information is received on the physical machine according to the business definition information received from the user terminal And a backup center capable of building a virtual machine having the same function as the virtual machine by backing up data in the data center,
In the management server provided in the data center, physical machine information that is information related to the current processing capability of the physical machine is stored in advance,
The management server receives the business definition information from the user terminal;
The management server analyzes the received business definition information,
The management server generates a plurality of arrangement patterns that are arrangements of the virtual machines on the physical machine from the physical machine information and the business definition information,
The management server calculates a processing time required to construct the virtual machine for each arrangement pattern,
The management server selects the placement pattern that can build the virtual machine earliest based on the calculated processing time for each placement pattern,
A construction method of a virtual machine, wherein the physical machine constructs the virtual machine according to the selected arrangement pattern when starting the virtual machine.
(付記7) 複数台の物理マシンをあらかじめ内部に備え、ユーザ端末から業務定義情報を受信してこの業務定義情報に従って前記ユーザ端末からアクセス可能な仮想コンピュータである仮想マシンを前記物理マシン上に構築するデータセンタと、前記データセンタのデータをバックアップして前記仮想マシンと同一の機能を有する仮想マシンを構築可能なバックアップセンタとを有する仮想コンピュータシステムにあって、
前記データセンタの備える、前記物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶しているコンピュータに、
前記ユーザ端末から前記業務定義情報を受信する手順と、
受信した前記業務定義情報を解析する手順と、
前記物理マシン情報および前記業務定義情報から前記物理マシン上への前記仮想マシンの配置である複数通りの配置パターンを生成する手順と、
前記配置パターンごとに前記仮想マシンの構築に必要な処理時間を算出する手順と、
算出された前記配置パターンごとの処理時間に基づいて最も早く前記仮想マシンを構築できる前記配置パターンを選出する手順と、
前記物理マシンが前記仮想マシンを起動する際に、前記物理マシンに前記選出された配置パターンに従って前記仮想マシンを構築させる手順と
を実行させることを特徴とする仮想マシンの構築プログラム。
(Supplementary note 7) A virtual machine, which is a virtual computer that is internally provided with a plurality of physical machines, receives business definition information from a user terminal, and can be accessed from the user terminal according to the business definition information, is built on the physical machine And a backup center capable of building a virtual machine having the same function as the virtual machine by backing up data in the data center,
In the computer that stores in advance physical machine information that is information related to the current processing capability of the physical machine, provided in the data center,
Receiving the job definition information from the user terminal;
A procedure for analyzing the received business definition information;
A procedure for generating a plurality of arrangement patterns that are arrangements of the virtual machines on the physical machine from the physical machine information and the job definition information;
A procedure for calculating a processing time required for constructing the virtual machine for each of the arrangement patterns;
A procedure for selecting the arrangement pattern that can construct the virtual machine earliest based on the calculated processing time for each arrangement pattern;
When the physical machine activates the virtual machine, a procedure for causing the physical machine to construct the virtual machine according to the selected arrangement pattern is executed.
本発明は、データセンタの運用に対して適用可能で、中でもこのデータセンタに災害が発生した時のディザスタリカバリに対して顕著な効果を奏する。 The present invention can be applied to the operation of a data center, and in particular, has a remarkable effect on disaster recovery when a disaster occurs in the data center.
1 仮想コンピュータシステム
10 データセンタ
20 バックアップセンタ
30 インターネット
31 ユーザ端末
32、32a、121、12n、221、22n 仮想マシン
100、200 管理サーバ
101、201 プロセッサ
102、202 記憶装置
111、11m、211、21m 物理マシン
130、230 内部ネットワーク
151、251 業務定義解析手段
152、252 配置パターン生成手段
153、253 処理時間評価手段
154、254 仮想マシン制御手段
161、261 物理マシン情報
162、262 業務情報
170 業務定義情報
171 業務構成情報
172 運用要求情報
173 構築要求情報
180 配置パターン候補
DESCRIPTION OF
Claims (7)
前記データセンタが、前記ユーザ端末から業務定義情報を受信してこの業務定義情報に従って前記仮想マシンの構成を決定する管理サーバと、前記管理サーバの決定した構成に基づいて前記仮想マシンを動作させる物理的なコンピュータ装置である複数台の物理マシンとを有し、
前記管理サーバが、
前記物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶している記憶装置と、
前記ユーザ端末から受信した前記業務定義情報を解析する業務定義解析手段と、
前記物理マシン情報および前記業務定義情報から前記物理マシン上への前記仮想マシンの配置である複数通りの配置パターンを生成する配置パターン生成手段と、
前記配置パターンごとに前記仮想マシンの構築に必要な処理時間を算出し、最も早く前記仮想マシンを構築できる前記配置パターンを選出する処理時間評価手段と、
前記物理マシンが前記仮想マシンを起動する際に、前記選出された配置パターンに従って前記物理マシンに前記仮想マシンを構築させる仮想マシン制御手段と
を有することを特徴とする仮想コンピュータシステム。 A virtual computer having a data center that builds a virtual machine that is a virtual computer that can be accessed from a user terminal, and a backup center that can back up data in the data center and build a virtual machine having the same function as the virtual machine A system,
The data center receives business definition information from the user terminal and determines a configuration of the virtual machine according to the business definition information, and a physical that operates the virtual machine based on the determined configuration of the management server A plurality of physical machines which are typical computer devices,
The management server is
A storage device that stores in advance physical machine information that is information on the current processing capacity of the physical machine;
Job definition analysis means for analyzing the job definition information received from the user terminal;
An arrangement pattern generating means for generating a plurality of arrangement patterns that are arrangements of the virtual machines on the physical machine from the physical machine information and the job definition information;
Processing time evaluation means for calculating the processing time required to construct the virtual machine for each of the arrangement patterns, and selecting the arrangement pattern capable of constructing the virtual machine earliest;
A virtual computer system comprising virtual machine control means for causing the physical machine to construct the virtual machine according to the selected arrangement pattern when the physical machine activates the virtual machine.
前記配置パターン生成手段は、前記物理マシン情報に基づいて、前記運用要求情報および前記構築要求情報で指定された条件を満たす前記配置パターンを生成することを特徴とする、請求項1に記載の仮想コンピュータシステム。 The business definition information defines the business configuration information that defines the applications to be started in each virtual machine and the order in which the virtual machines are started, and the operation request that defines the performance value that represents the processing capability required for each virtual machine. Information and construction request information that defines the amount of processing to be performed by each of the virtual machines,
2. The virtual according to claim 1, wherein the arrangement pattern generation unit generates the arrangement pattern that satisfies a condition specified by the operation request information and the construction request information based on the physical machine information. Computer system.
前記物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶している記憶装置と、
前記ユーザ端末から受信した前記業務定義情報を解析する業務定義解析手段と、
前記物理マシン情報および前記業務定義情報から前記物理マシン上への前記仮想マシンの配置である複数通りの配置パターンを生成する配置パターン生成手段と、
前記配置パターンごとに前記仮想マシンの構築に必要な処理時間を算出し、最も早く前記仮想マシンを構築できる前記配置パターンを選出する処理時間評価手段と、
前記物理マシンが前記仮想マシンを起動する際に、前記選出された配置パターンに従って前記物理マシンに前記仮想マシンを構築させる仮想マシン制御手段と
を有することを特徴とする管理サーバ。 Equipped in a data center that builds a virtual machine that is a virtual computer that can be accessed from a user terminal, receives business definition information from the user terminal, determines the configuration of the virtual machine according to the business definition information, A management server that operates the virtual machine on a plurality of physical machines that are physical computer devices connected in advance on the basis of:
A storage device that stores in advance physical machine information that is information on the current processing capacity of the physical machine;
Job definition analysis means for analyzing the job definition information received from the user terminal;
An arrangement pattern generating means for generating a plurality of arrangement patterns that are arrangements of the virtual machines on the physical machine from the physical machine information and the job definition information;
Processing time evaluation means for calculating the processing time required to construct the virtual machine for each of the arrangement patterns, and selecting the arrangement pattern capable of constructing the virtual machine earliest;
A management server comprising virtual machine control means for causing the physical machine to construct the virtual machine according to the selected arrangement pattern when the physical machine starts the virtual machine.
前記データセンタが備える管理サーバに、前記物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶し、
前記管理サーバが、前記ユーザ端末から前記業務定義情報を受信し、
前記管理サーバが、受信した前記業務定義情報を解析し、
前記管理サーバが、前記物理マシン情報および前記業務定義情報から前記物理マシン上への前記仮想マシンの配置である複数通りの配置パターンを生成し、
前記管理サーバが、前記配置パターンごとに前記仮想マシンの構築に必要な処理時間を算出し、
前記管理サーバが、算出された前記配置パターンごとの処理時間に基づいて最も早く前記仮想マシンを構築できる前記配置パターンを選出し、
前記物理マシンが、前記仮想マシンを起動する際に前記選出された配置パターンに従って前記仮想マシンを構築する
ことを特徴とする仮想マシンの構築方法。 A data center that includes a plurality of physical machines in advance, receives business definition information from a user terminal, and builds a virtual machine on the physical machine, which is a virtual computer accessible from the user terminal according to the business definition information; A virtual computer system having a backup center capable of constructing a virtual machine having the same function as the virtual machine by backing up the data in the data center,
In the management server provided in the data center, physical machine information that is information related to the current processing capability of the physical machine is stored in advance,
The management server receives the business definition information from the user terminal;
The management server analyzes the received business definition information,
The management server generates a plurality of arrangement patterns that are arrangements of the virtual machines on the physical machine from the physical machine information and the business definition information,
The management server calculates a processing time required to construct the virtual machine for each arrangement pattern,
The management server selects the placement pattern that can build the virtual machine earliest based on the calculated processing time for each placement pattern,
A construction method of a virtual machine, wherein the physical machine constructs the virtual machine according to the selected arrangement pattern when starting the virtual machine.
前記データセンタの備える、前記物理マシンの現在の処理能力に関する情報である物理マシン情報を予め記憶しているコンピュータに、
前記ユーザ端末から前記業務定義情報を受信する手順と、
受信した前記業務定義情報を解析する手順と、
前記物理マシン情報および前記業務定義情報から前記物理マシン上への前記仮想マシンの配置である複数通りの配置パターンを生成する手順と、
前記配置パターンごとに前記仮想マシンの構築に必要な処理時間を算出する手順と、
算出された前記配置パターンごとの処理時間に基づいて最も早く前記仮想マシンを構築できる前記配置パターンを選出する手順と、
前記物理マシンが前記仮想マシンを起動する際に、前記物理マシンに前記選出された配置パターンに従って前記仮想マシンを構築させる手順と
を実行させることを特徴とする仮想マシンの構築プログラム。 A data center that includes a plurality of physical machines in advance, receives business definition information from a user terminal, and builds a virtual machine on the physical machine, which is a virtual computer accessible from the user terminal according to the business definition information; A virtual computer system having a backup center capable of constructing a virtual machine having the same function as the virtual machine by backing up the data in the data center,
In the computer that stores in advance physical machine information that is information related to the current processing capability of the physical machine, provided in the data center,
Receiving the job definition information from the user terminal;
A procedure for analyzing the received business definition information;
A procedure for generating a plurality of arrangement patterns that are arrangements of the virtual machines on the physical machine from the physical machine information and the job definition information;
A procedure for calculating a processing time required for constructing the virtual machine for each of the arrangement patterns;
A procedure for selecting the arrangement pattern that can construct the virtual machine earliest based on the calculated processing time for each arrangement pattern;
When the physical machine activates the virtual machine, a procedure for causing the physical machine to construct the virtual machine according to the selected arrangement pattern is executed.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010059661A JP5544951B2 (en) | 2010-03-16 | 2010-03-16 | Virtual computer system, management server, virtual machine construction method and program thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010059661A JP5544951B2 (en) | 2010-03-16 | 2010-03-16 | Virtual computer system, management server, virtual machine construction method and program thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011192184A true JP2011192184A (en) | 2011-09-29 |
JP5544951B2 JP5544951B2 (en) | 2014-07-09 |
Family
ID=44796995
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010059661A Expired - Fee Related JP5544951B2 (en) | 2010-03-16 | 2010-03-16 | Virtual computer system, management server, virtual machine construction method and program thereof |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5544951B2 (en) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014073046A1 (en) * | 2012-11-07 | 2014-05-15 | 富士通株式会社 | Information processing device, program and virtual machine migration method |
WO2014181495A1 (en) * | 2013-05-09 | 2014-11-13 | 日本電気株式会社 | Virtual machine positioning determination device, virtual machine positioning determination method, and virtual machine positioning determination program |
WO2014199476A1 (en) * | 2013-06-12 | 2014-12-18 | 富士通株式会社 | Relay device, relay program, and relay method |
JP2015504562A (en) * | 2011-11-25 | 2015-02-12 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | Shared resource systems, methods for allocating resources, and computer program products (systems, methods, and program products for cost-aware template selection for provisioning shared resources) |
JP2016519381A (en) * | 2013-10-23 | 2016-06-30 | 華為技術有限公司Huawei Technologies Co.,Ltd. | Method, system and apparatus for cloud application redundancy |
JP2017526049A (en) * | 2014-06-30 | 2017-09-07 | マイクロソフト テクノロジー ライセンシング,エルエルシー | Opportunistic connection to external services for private compute resources |
JP2018077880A (en) * | 2017-12-21 | 2018-05-17 | 華為技術有限公司Huawei Technologies Co.,Ltd. | Method, system, and device for redundancy of cloud application |
JP2019083039A (en) * | 2019-01-09 | 2019-05-30 | 華為技術有限公司Huawei Technologies Co.,Ltd. | Method, system, and device for making cloud application redundant |
JP7000797B2 (en) | 2017-10-25 | 2022-01-19 | 日本電気株式会社 | Startup management device, startup management system, startup management method, and startup management program |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006293592A (en) * | 2005-04-08 | 2006-10-26 | Hitachi Ltd | Method for reproducing configuration of computer system |
WO2008146677A1 (en) * | 2007-05-24 | 2008-12-04 | Nec Corporation | Virtual machine managing device, virtual machine managing method, and virtual machine managing program |
JP2009252204A (en) * | 2008-04-11 | 2009-10-29 | Hitachi Ltd | Operation management system and operation management method of computer |
-
2010
- 2010-03-16 JP JP2010059661A patent/JP5544951B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006293592A (en) * | 2005-04-08 | 2006-10-26 | Hitachi Ltd | Method for reproducing configuration of computer system |
WO2008146677A1 (en) * | 2007-05-24 | 2008-12-04 | Nec Corporation | Virtual machine managing device, virtual machine managing method, and virtual machine managing program |
JP2009252204A (en) * | 2008-04-11 | 2009-10-29 | Hitachi Ltd | Operation management system and operation management method of computer |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015504562A (en) * | 2011-11-25 | 2015-02-12 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | Shared resource systems, methods for allocating resources, and computer program products (systems, methods, and program products for cost-aware template selection for provisioning shared resources) |
US9652332B2 (en) | 2012-11-07 | 2017-05-16 | Fujitsu Limited | Information processing apparatus and virtual machine migration method |
WO2014073046A1 (en) * | 2012-11-07 | 2014-05-15 | 富士通株式会社 | Information processing device, program and virtual machine migration method |
JP5967215B2 (en) * | 2012-11-07 | 2016-08-10 | 富士通株式会社 | Information processing apparatus, program, and virtual machine migration method |
JPWO2014073046A1 (en) * | 2012-11-07 | 2016-09-08 | 富士通株式会社 | Information processing apparatus, program, and virtual machine migration method |
WO2014181495A1 (en) * | 2013-05-09 | 2014-11-13 | 日本電気株式会社 | Virtual machine positioning determination device, virtual machine positioning determination method, and virtual machine positioning determination program |
JPWO2014181495A1 (en) * | 2013-05-09 | 2017-02-23 | 日本電気株式会社 | Virtual machine placement determination apparatus, virtual machine placement determination method, and virtual machine placement determination program |
WO2014199476A1 (en) * | 2013-06-12 | 2014-12-18 | 富士通株式会社 | Relay device, relay program, and relay method |
JP6052407B2 (en) * | 2013-06-12 | 2016-12-27 | 富士通株式会社 | Relay device, relay program, and relay method |
JPWO2014199476A1 (en) * | 2013-06-12 | 2017-02-23 | 富士通株式会社 | Relay device, relay program, and relay method |
JP2016519381A (en) * | 2013-10-23 | 2016-06-30 | 華為技術有限公司Huawei Technologies Co.,Ltd. | Method, system and apparatus for cloud application redundancy |
US9703654B2 (en) | 2013-10-23 | 2017-07-11 | Huawei Technologies Co., Ltd. | Method, system, and apparatus for cloud application redundancy |
JP2017526049A (en) * | 2014-06-30 | 2017-09-07 | マイクロソフト テクノロジー ライセンシング,エルエルシー | Opportunistic connection to external services for private compute resources |
JP7000797B2 (en) | 2017-10-25 | 2022-01-19 | 日本電気株式会社 | Startup management device, startup management system, startup management method, and startup management program |
JP2018077880A (en) * | 2017-12-21 | 2018-05-17 | 華為技術有限公司Huawei Technologies Co.,Ltd. | Method, system, and device for redundancy of cloud application |
JP2019083039A (en) * | 2019-01-09 | 2019-05-30 | 華為技術有限公司Huawei Technologies Co.,Ltd. | Method, system, and device for making cloud application redundant |
Also Published As
Publication number | Publication date |
---|---|
JP5544951B2 (en) | 2014-07-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5544951B2 (en) | Virtual computer system, management server, virtual machine construction method and program thereof | |
Ostermann et al. | A performance analysis of EC2 cloud computing services for scientific computing | |
Zheng et al. | A distributed replication strategy evaluation and selection framework for fault tolerant web services | |
Machida et al. | Candy: Component-based availability modeling framework for cloud service management using sysml | |
Sun et al. | Analyzing, modeling and evaluating dynamic adaptive fault tolerance strategies in cloud computing environments | |
JP5976946B2 (en) | Virtual machine test system, virtual machine test method | |
US20150066844A1 (en) | System and method for providing a virtualized replication and high availability environment | |
Ganga et al. | A fault tolerent approach in scientific workflow systems based on cloud computing | |
WO2014080492A1 (en) | Computer system, cluster management method, and management computer | |
EP3304304B1 (en) | Cloud computing infrastructure | |
Steinbauer et al. | DynamoGraph: extending the Pregel paradigm for large-scale temporal graph processing | |
Sato et al. | Experiment and availability analytical model of cloud computing system based on backup resource sharing and probabilistic protection guarantee | |
Li et al. | Fault-Tolerant Scheduling for Scientific Workflow with Task Replication Method in Cloud. | |
US20140380089A1 (en) | Method and apparatus for recovering failed disk in virtual machine | |
EP3885905A1 (en) | Network configuration diagram generate method and network configuration diagram generate program | |
Ruan et al. | Hymr: a hybrid mapreduce workflow system | |
Thanakornworakij et al. | High availability on cloud with HA-OSCAR | |
Costa et al. | On the design of resilient multicloud mapreduce | |
Çiço et al. | High Reliability Approaches in Cloud Applications for Business-Reliability as a Service (RAAS) Model | |
Spataru | Decentralized and fault tolerant cloud service orchestration | |
JP4595892B2 (en) | Database management system construction method, apparatus, program, and recording medium | |
Kovács et al. | Application and middleware transparent checkpointing with TCKPT on ClusterGrids | |
González‐López de Murillas et al. | Parallel computation of the reachability graph of petri net models with semantic information | |
Kumar et al. | Resource management through fuzzy assignment problem in cloud computing environment | |
Bouizem et al. | Integrating request replication into FaaS platforms: an experimental evaluation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130214 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140120 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140212 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140331 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140415 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140428 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5544951 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |