JP4359609B2 - 計算機システム、システムソフトウェア更新方法及び第１サーバ装置 - Google Patents

計算機システム、システムソフトウェア更新方法及び第１サーバ装置 Download PDF

Info

Publication number
JP4359609B2
JP4359609B2 JP2006308895A JP2006308895A JP4359609B2 JP 4359609 B2 JP4359609 B2 JP 4359609B2 JP 2006308895 A JP2006308895 A JP 2006308895A JP 2006308895 A JP2006308895 A JP 2006308895A JP 4359609 B2 JP4359609 B2 JP 4359609B2
Authority
JP
Japan
Prior art keywords
server device
virtual server
management
system software
business
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006308895A
Other languages
English (en)
Other versions
JP2008123412A (ja
Inventor
隆裕 中野
匡邦 揚妻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2006308895A priority Critical patent/JP4359609B2/ja
Priority to US11/622,253 priority patent/US8015559B2/en
Publication of JP2008123412A publication Critical patent/JP2008123412A/ja
Application granted granted Critical
Publication of JP4359609B2 publication Critical patent/JP4359609B2/ja
Priority to US13/195,942 priority patent/US8255898B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/202—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where processing functionality is redundant
    • G06F11/2023—Failover techniques
    • G06F11/203—Failover techniques using migration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/202—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where processing functionality is redundant
    • G06F11/2035—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where processing functionality is redundant without idle spare hardware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/202—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where processing functionality is redundant
    • G06F11/2046—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where processing functionality is redundant where the redundant components share persistent storage
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/60—Software deployment
    • G06F8/65—Updates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1415—Saving, restoring, recovering or retrying at system level
    • G06F11/1433—Saving, restoring, recovering or retrying at system level during software upgrading

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Stored Programmes (AREA)
  • Hardware Redundancy (AREA)
  • Multi Processors (AREA)

Description

本発明は、仮想サーバ装置が稼動する複数のノードによってクラスタが構成されている計算機システムに関し、特に、システムソフトウェアをバージョンアップする技術に関する。
ノードのシステムソフトウェアをバージョンアップする技術が特許文献１に開示されている。この技術によると、クライアント計算機（クライアントＰＣ）へのサービス停止時間を最小限に抑えることができる。具体的には、クライアントＰＣへ提供されるサービスが待機中のノードへフェイルオーバされる。その後、ノードのシステムソフトウェアがバージョンアップされる。これによって、ノードのシステムソフトウェアがバージョンアップされている最中であっても、クライアントＰＣが、サービスを利用できる。
また、ノード上で複数の仮想サーバ装置が稼動する計算機システムが特許文献２に開示されている。当該計算機システムでは、それぞれの仮想サーバ装置が、サービスを提供する。このような計算機システムの中には、アプリケーションプログラム群ごとに仮想サーバ装置が稼動する計算機システムがある。当該計算機システムは、環境の切り替えに応じて、仮想サーバ装置のルートファイルシステムを切り替える。これによって、異なる設定を個々の仮想サーバ装置ごとに実現できる。なお、ルートファイルシステムは、システムソフトウェア及び当該システムソフトウェアの稼動に必要な設定情報などを含む。
更に、ノード上で複数の仮想サーバ装置が稼動する計算機システムを高信頼化する技術が特許文献３に開示されている。当該計算機システムでは、仮想サーバ装置ごとのファイルシステムが、クラスタを構成する複数のノードで共有される。そして、仮想サーバ装置は、クラスタを構成する複数のノードのうちの一つで稼動する。フェイルオーバの際には、フェイルオーバ元で稼動している仮想サーバ装置が停止される。そして、停止された仮想サーバ装置は、フェイルオーバ先のノードで起動される。これによって、クラスタを構成する複数のノードは、クライアントＰＣにサービスを継続して提供できる。
特開２００５−１４８９２２号公報 特開２００４−２２７１２７号公報 特開２００５−２６７３２７号公報
特許文献３に開示されている計算機システムのシステムソフトウェアには、ノード用システムソフトウェア及びＶＮＡＳ用システムソフトウェアが存在する。ノード用システムソフトウェアは、クラスタを構成するノードによって実行される。また、ＶＮＡＳ用システムソフトウェアは、ノードで稼動する仮想サーバ装置によって実行される。
ノード用システムソフトウェアは、特許文献１に開示されている技術によって、バージョンアップできる。
一方、仮想サーバ装置は、ノード用システムソフトウェアを実行しているノード上で、ＶＮＡＳ用システムソフトウェアを実行する。そのため、ノード用システムソフトウェアのバージョンとＶＮＡＳ用システムソフトウェアのバージョンとが異なると、二つのシステムソフトウェアの互換性が維持できない場合がある。この場合、仮想サーバ装置の稼動でエラーが発生したり、誤った結果を返してしまったりという不具合を生じてしまう可能性がある。
このため、フェイルオーバ先のノードのノード用システムソフトウェアがバージョンアップされると、当該フェイルオーバ先のノードに仮想サーバ装置をフェイルオーバできない。なぜなら、フェイルオーバ元のノードで稼動している仮想サーバ装置のＶＮＡＳ用システムソフトウェアは、古いバージョンだからである。
そこで、仮想サーバ装置のＶＮＡＳ用システムソフトウェアをバージョンアップするためには、仮想サーバ装置のサービスを停止する必要がある。仮想サーバ装置のサービスを停止後に、仮想サーバ装置のＶＮＡＳ用システムソフトウェアをバージョンアップする。そして、仮想サーバ装置を、フェイルオーバ先のノードにフェイルオーバする。
このように、仮想サーバ装置のＶＮＡＳ用システムソフトウェアのバージョンアップでは、クライアントＰＣに提供されるサービスを長時間にわたって停止しなければならない。
また、仮想サーバ装置の管理者が仮想サーバ装置ごとに異なる場合、仮想サーバ装置のシステムソフトウェアをバージョンアップする作業者は、それぞれの管理者に仮想サーバ装置のサービス停止及び再開を依頼しなければない。そのため、仮想サーバ装置のシステムソフトウェアをバージョンアップする作業者の負担が大きい。
本発明は、前述した問題に鑑みてなされたものであって、仮想サーバ装置が提供するサービスの停止時間を短縮する計算機システムを提供することを目的とする。
本発明の代表的な形態の計算機システムは、第１プロセッサ、第１メモリ及び他の計算機と接続するための第１インタフェースを備える第１サーバ装置と、第２プロセッサ、第２メモリ及び他の計算機と接続するための第２インタフェースを備える第２サーバ装置と、第３プロセッサ、第３メモリ及び他の計算機と接続するための第３インタフェースを備える管理計算機と、データが格納される記憶部及び前記記憶部に対するデータの入出力を制御する入出力制御部を備え、前記第１サーバ装置に接続されるストレージ装置と、を備える計算機システムであって、前記管理計算機、前記第１サーバ装置、及び前記第２サーバ装置は、互いに接続され、前記ストレージ装置は、前記第１サーバ装置と前記第２サーバ装置とに接続され、前記第１プロセッサ、前記第１メモリ及び前記第１インタフェースのそれぞれは、論理的に分割され、前記第２プロセッサ、前記第２メモリ及び前記第２インタフェースのそれぞれは、論理的に分割され、前記分割された第１プロセッサ、第１メモリ及び第１インタフェースは、独立した仮想サーバ装置として、前記第１サーバ装置上で稼動し、前記分割された第２プロセッサ、第２メモリ及び第２インタフェースは、独立した仮想サーバ装置として、前記第２サーバ装置上で稼動し、前記仮想サーバ装置は、サービスを提供する一つ以上の業務仮想サーバ装置及び前記業務仮想サーバ装置を管理する管理仮想サーバ装置を含み、前記第１サーバ装置及び前記第２サーバ装置は、一方のサーバ装置上で稼働する前記業務仮想サーバに対応する業務仮想サーバ装置を、他方のサーバ装置上で稼動させることができ、前記ストレージ装置は、前記業務仮想サーバ装置がアクセス可能な記憶領域と、前記管理仮想サーバがアクセス可能な記憶領域とを含み、前記入出力制御部は、前記業務仮想サーバ装置又は前記管理仮想サーバ装置から、前記業務仮想サーバ装置がアクセス可能な記憶領域及び前記管理仮想サーバ装置がアクセス可能な記憶領域へのアクセスを制御し、前記第１サーバ装置で稼動する前記管理仮想サーバ装置は、前記管理計算機から、前記第１サーバ装置のシステムソフトウェアの更新要求を受けると、前記第１サーバ装置のシステムソフトウェアの更新要求を受信した後に、前記第３インタフェースを介して前記管理計算機から、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新するためのデータである第１更新データ、並びに、前記第１サーバ装置で稼動している業務仮想サーバ装置のシステムソフトウェアを更新するためのデータである第２更新データを取得し、前記第１サーバ装置で稼動しているすべての前記業務仮想サーバ装置を停止させ、前記第２サーバ装置で稼動している前記管理仮想サーバ装置に、前記第１サーバ装置で稼動していた前記業務仮想サーバ装置に対応する業務仮想サーバ装置を前記第２サーバ装置上で起動するように要求し、前記第１サーバ装置で稼動していた業務仮想サーバ装置に対応する業務仮想サーバ装置の起動要求後、前記取得された第１更新データを前記管理仮想サーバ装置がアクセス可能な記憶領域に上書きすることによって、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新し、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアの更新後、前記第１サーバ装置が実行する全ての処理を停止させた後に前記第１サーバ装置を再起動し、前記第１サーバ装置の再起動後、前記管理計算機から前記第２サーバ装置のシステムソフトウェアの更新要求を受信した前記第２サーバ装置で稼動している管理仮想サーバ装置から、前記第２サーバ装置で稼動する業務仮想サーバ装置に対応する業務仮想サーバ装置の起動要求を受けた場合、前記第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアと、前記第１サーバ装置のシステムソフトウェアと、が整合するか否かを判定し、前記二つのシステムソフトウェアが整合しない場合には、前記取得された第２更新データを用いて、前記第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアを更新した後に、当該第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置を起動することを特徴とする。
本発明の代表的な形態によると、仮想サーバ装置が提供するサービスの停止時間を短縮できる。更に、仮想サーバ装置のシステムソフトウェアをバージョンアップする作業者の負担を削減できる。
以下、本発明の実施の形態を、図面を参照して説明する。
図１は、本発明の実施の形態の計算機システムの構成のブロック図である。
計算機システムは、管理用計算機（管理用ＰＣ）１１０、クライアント計算機（クライアントＰＣ）１２０、管理ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）１３０、データＬＡＮ１３１、ストレージネットワーク１４０、ノード１００及びストレージ装置１７０を備える。
管理ＬＡＮ１３０は、管理用ＰＣ１１０とノード１００とを接続する。データＬＡＮ１３１は、クライアントＰＣ１２０とノード１００とを接続する。ストレージネットワーク１４０は、ノード１００とストレージ装置１７０とを接続する。ストレージネットワーク１４０には、例えば、ＳＣＳＩ又はＦｉｂｒｅＣｈａｎｎｅｌが適用される。
管理用ＰＣ１１０は、ＣＰＵ、メモリ、インタフェース及び記憶媒体読取装置１１１を備える。そして、管理用ＰＣ１１０は、管理ＬＡＮ１３０を介して、ノード１００を管理する。なお、管理用ＰＣ１１０については、図８で詳細を説明する。
記憶媒体読取装置１１１は、インストール用記憶媒体からデータを読み取る。例えば、記憶媒体読取装置１１１は、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ又はフラッシュメモリの読取ドライブである。このため、管理用ＰＣ１１０は、インストール用記憶媒体にアクセスできる。なお、インストール用記憶媒体については、図４で詳細を説明する。また、管理用ＰＣ１１０は、記憶媒体読取装置１１１を備えずに、記憶媒体読取装置１１１が接続されていてもよい。
クライアントＰＣ１２０は、ＣＰＵ、メモリ及びインタフェースを備える。そして、クライアントＰＣ１２０は、ノード１００からサービスの提供を受ける。本説明図では、クライアントＰＣ１２０は、六台が図示されているが、計算機システムに何台備わっていてもよい。
ノード１００は、クラスタを構成し、クライアントＰＣ１２０にサービスを提供する。また、ノード１００は、ＣＰＵ１０１、メモリ１０２、ストレージインタフェース１０３、管理用ネットワークインタフェース１０４、データ用ネットワークインタフェース１０５、クラスタ通信用ネットワークインタフェース１０８及びバス１０９を備える。
バス１０９は、ＣＰＵ１０１、メモリ１０２、ストレージインタフェース１０３、管理用ネットワークインタフェース１０４、データ用ネットワークインタフェース１０５及びクラスタ通信用ネットワークインタフェース１０８を相互に接続する。
ＣＰＵ１０１は、メモリ１０２に記憶されるプログラムを実行することによって、各種処理を行う。例えば、ＣＰＵ１０１は、ストレージ装置１７０に対してデータを入出力する。
メモリ１０２は、ＣＰＵ１０１によって実行されるプログラム及びＣＰＵ１０１によって必要とされる情報等を記憶する。
ストレージインタフェース１０３は、ストレージネットワーク１４０を介して、ストレージ装置１７０に接続されるインタフェースである。例えば、ストレージインタフェース１０３は、ＳＣＳＩインタフェース又はＦｉｂｒｅＣｈａｎｎｅｌインタフェース等である。管理用ネットワークインタフェース１０４は、管理ＬＡＮ１３０を介して管理用ＰＣ１１０に接続されるインタフェースである。
データ用ネットワークインタフェース１０５は、データＬＡＮ１３１を介して、クライアントＰＣ１２０に接続されるインタフェースである。なお、本説明図では、それぞれのノード１００が、三つのデータ用ネットワークインタフェース１０５を備えているが、いくつ備えていてもよい。
本説明図では、ノード１００は、三つのデータ用ネットワークインタフェース１０５Ａ〜１０５Ｃを備える。データ用ネットワークインタフェース１０５Ａは、データＬＡＮ１３１Ａを介して、クライアントＰＣ１２０Ａ及び１２０Ｂに接続される。また、データ用ネットワークインタフェース１０５Ｂは、データＬＡＮ１３１Ｂを介して、クライアントＰＣ１２０Ｃ及び１２０Ｄに接続される。また、データ用ネットワークインタフェース１０５Ｃは、データＬＡＮ１３１Ｃを介して、クライアントＰＣ１２０Ｅ及び１２０Ｆに接続される。
異なるデータＬＡＮ１３１Ａ〜１３１Ｃ同士では、通信が干渉しない。
本実施の形態では、データＬＡＮ１３１Ａ〜１３１Ｃは、物理的に異なる三つのネットワークである。しかし、データＬＡＮ１３１Ａ〜１３１Ｃは、一つの物理的なネットワークがファイアウォール（Ｆｉｒｅｗａｌｌ）によって論理的に分割されたものであってもよい。
例えば、クライアントＰＣ１２０側のＬＡＮとノード１００側のＬＡＮとがファイアウォールを介して接続されることによって、データＬＡＮ１３１〜１３１Ｃが論理的に構築される。また、クライアントＰＣ１２０側のＬＡＮ及びノード１００側のＬＡＮがそれぞれ異なるファイアウォールを介してインターネットに接続されることによって、データＬＡＮ１３１〜１３１Ｃが論理的に構築される。他にも、クライアントＰＣ１２０側のＬＡＮ及びノード１００側のＬＡＮが複数ポートを持つ共通のファイアウォールを介してインターネットに接続されることによって、データＬＡＮ１３１〜１３１Ｃが論理的に構築される。
クラスタ通信用ネットワークインタフェース１０８は、ノード１００同士の間を接続するインタフェースである。
例えば、管理用ネットワークインタフェース１０４、データ用ネットワークインタフェース１０５又はクラスタ通信用ネットワークインタフェース１０８には、ＩＥＥＥ８０２シリーズ規格又はＡＴＭ（Ａｓｙｎｃｈｒｏｎｏｕｓ Ｔｒａｎｓｆｅｒ Ｍｏｄｅ）などが適用される。
また、管理用ネットワークインタフェース１０４、データ用ネットワークインタフェース１０５又はクラスタ通信用ネットワークインタフェース１０８には、ＩＥＥＥ８０２．３ａｄ規格が適用されてもよい。この場合、複数の物理的なネットワークインタフェースが一つの接続とみなされるので、耐障害性が高まり、且つ、負荷が分散される。
更に、ノード１００は、カーネル（図示省略）に備わる論理分割機能を使用することによって、当該ノード１００上に、仮想的なサーバ装置（ＶＮＡＳ）を構築する。これによって、ノード１００は、独立した複数のＶＮＡＳをクライアントＰＣ１２０等に提供する。
ストレージ装置１７０は、ディスクコントローラ（ＤＫＣ）１７１及びディスクドライブを備える。ＤＫＣ１７１は、ディスクドライブに対するデータの入出力を制御する。また、ＤＫＣ１７１は、ディスクディスクの記憶領域を、一つ以上の論理ボリューム（ＬＵ）１５０、１５１、１６０として、ノード１００に提供する。なお、ＤＫＣ１７１は、ＬＵでなく、ディスクドライブをノード１００に提供してもよい。
ノード１００Ａ用システムＬＵ１５０は、ノード１００Ａのシステムソフトウェア等を記憶し、ノード１００Ａからアクセスされる。更に、ノード１００Ａ用システムＬＵ１５０は、ノード１００Ａのシステムソフトウェアのバージョンを記憶する。
一方、ノード１００Ｂ用システムＬＵ１５１は、ノード１００Ｂのシステムソフトウェア等を記憶し、ノード１００Ｂからアクセスされる。ＬＵ１６０は、各種情報を記憶し、ノード１００ＡのＶＮＡＳ及びノード１００ＢのＶＮＡＳの双方からアクセスされる。更に、ノード１００Ｂ用システムＬＵ１５１は、ノード１００Ｂのシステムソフトウェアのバージョンを記憶する。
図２は、本発明の実施の形態のノード１００Ａ用システムＬＵ１５０及びノード１００Ｂ用システムＬＵ１５１に記憶されるＶＮＡＳ構成表２００の構成図である。
ＶＮＡＳ構成表２００は、ＶＮＡＳ名２０１、ネットワークデバイス２０２、ブロックデバイス２０３、ルートファイルシステム２０４及びシステムソフトウェアバージョン２０５を含む。
ＶＮＡＳ名２０１は、ノード１００上で稼動するＶＮＡＳの一意な識別子である。本実施の形態では、ＶＮＡＳ１、ＶＮＡＳ２及びＶＮＡＳ３が、ノード１００上で稼動する。
ネットワークデバイス２０２は、当該列のＶＮＡＳ名２０１によって識別されるＶＮＡＳに割り当てられるデータ用ネットワークインタフェース１０５の一意な識別子である。なお、ＶＮＡＳは、割り当てられているデータ用ネットワークインタフェース１０５を独占的に使用する。
本実施の形態では、ＶＮＡＳ１に、データ用ネットワークインタフェース１０５Ａが割り当てられる。また、ＶＮＡＳ２に、データ用ネットワークインタフェース１０５Ｂが割り当てられる。また、ＶＮＡＳ３に、データ用ネットワークインタフェース１０５Ｃが割り当てられる。
ブロックデバイス２０３は、当該列のＶＮＡＳ名２０１によって識別されるＶＮＡＳに割り当てられるＬＵ１６０の一意な識別子である。なお、ＶＮＡＳは、割り当てられているＬＵ１６０を独占的に使用する。
本実施の形態では、ＶＮＡＳ１に、ＬＵ１（１６０）及びＬＵ２（１６０）が割り当てられる。また、ＶＮＡＳ２に、ＬＵ３（１６０）及びＬＵ４（１６０）が割り当てられる。また、ＶＮＡＳ３に、ＬＵ５（１６０）及びＬＵ６（１６０）が割り当てられる。
ルートファイルシステム２０４は、当該列のブロックデバイス２０３によって識別されるＬＵ１６０のうち、ルートファイルシステムを含むＬＵ１６０の一意な識別子である。本実施の形態では、ＬＵ１（１６０）、ＬＵ３（１６０）及びＬＵ５（１６０）がルートファイルシステムを含む。
システムソフトウェアバージョン２０５は、当該列のルートファイルシステム２０４によって識別されるＬＵ１６０に含まれるルートファイルシステムのシステムソフトウェアのバージョンを示す。本実施の形態では、ＬＵ１（１６０）、ＬＵ３（１６０）及びＬＵ５（１６０）に含まれるルートファイルシステムのシステムソフトウェアは、バージョン１．０である。
図６は、本発明の実施の形態の管理用ＰＣ１１０のハードウェア構成のブロック図である。
管理用ＰＣ１１０は、ＣＰＵ８０１、メモリ８０２、ネットワークインタフェース８０４、入力装置８０５、表示装置８０６及び記憶媒体読取装置１１１を備える。
メモリ８０２は、ＣＰＵ８０１によって実行されるプログラム及びＣＰＵ８０１によって必要とされる情報などを記憶する。例えば、メモリ８０２は、バージョンアップ指示プログラム３３０及びオペレーティングシステム８０７を記憶する。オペーレーティングシステム８０７は、管理用ＰＣ１１０の処理の全体を制御する。
ＣＰＵ８０１は、メモリ８０２に記憶されるプログラムを実行することによって、各種処理を行う。例えば、ＣＰＵ８０１は、バージョンアップ指示プログラム３３０及びオペレーティングシステム８０７をメモリ８０２から呼び出して実行する。更に、ＣＰＵ８０１は、ネットワークインタフェース８０４、入力装置８０５、表示装置８０６及び記憶媒体読取装置１１１を制御する。
ネットワークインタフェース８０４は、管理ＬＡＮ１３０を介して、ノード１００Ａ及び１００Ｂに接続されるインタフェースである。
入力装置８０５には、バージョンアップ作業者などから情報が入力される。例えば、入力装置８０５は、バージョンアップ指示プログラム３３０の実行の指示、又はバージョンアップ指示プログラム３３０の進行の指示を受け付ける。
表示装置８０６は、各種情報を表示する。例えば、表示装置８０６は、バージョンアップ指示プログラム３３０の進行状況を表示する。
記憶媒体読取装置１１１は、インストール用記憶媒体７００からデータを読み取る。そして、記憶媒体読取装置１１１は、読み取ったデータを、メモリ８０２又はネットワークインタフェース８０４に転送する。
図３は、本発明の実施の形態の計算機システムの機能構成のブロック図である。
管理用ＰＣ１１０のメモリ（図示省略）には、バージョンアップ指示プログラム３３０が記憶されている。バージョンアップ指示プログラム３３０は、ノード１００のバージョンアップ処理プログラム３１０と連携して、システムソフトウェアのバージョンアップを行う。
クライアントＰＣ１２０のメモリ（図示省略）には、クライアントプログラムが記憶されている。クライアントプログラムは、ＶＮＡＳのアプリケーションプログラム３２０と通信して、ユーザデータ３６０の作成、参照又は更新等を行う。
ノード１００のＣＰＵ１０１は、オペレーティングシステム３００を実行する。オペレーティングシステム３００は、ノード１００の処理の全体を制御する。
また、ノード１００では、管理ＶＮＡＳ３０１が稼動している。管理ＶＮＡＳ３０１は、ノード１００のリソースを管理する。具体的には、管理ＶＮＡＳ３０１は、ノード１００のリソースを、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）又はＶＮＡＳ３（３０７）に割り当てる。これによって、管理ＶＮＡＳ３０１は、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）の環境を構築する。
また、管理ＶＮＡＳ３０１は、バージョンアップ処理プログラム３１０、ＶＮＡＳ管理プログラム３１１及びクラスタ管理プログラム３１２を実行する。
つまり、管理ＶＮＡＳ３０１に割り当てられているメモリ１０２には、バージョンアップ処理プログラム３１０、ＶＮＡＳ管理プログラム３１１及びクラスタ管理プログラム３１２が格納される。
管理ＶＮＡＳ３０１に割り当てられているＣＰＵ１０１は、メモリ１０２から、バージョンアップ処理プログラム３１０、ＶＮＡＳ管理プログラム３１１及びクラスタ管理プログラム３１２を呼び出して実行する。
バージョンアップ処理プログラム３１０は、バージョンアップ指示プログラム３３０と連携して、システムソフトウェアのバージョンアップを行う。
ＶＮＡＳ管理プログラム３１１は、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）又はＶＮＡＳ３（３０７）を起動又は停止する。
クラスタ管理プログラム３１２は、当該クラスタ管理プログラム３１２を実行するノード１００に接続されているノード１００（外部ノード１００）の状態を監視する。クラスタ管理プログラム３１２は、外部ノード１００の異常を検知すると、当該外部ノード１００で稼動中のＶＮＡＳをフェイルオーバする。また、クラスタ管理プログラム３１２は、フェイルオーバ指示を受けると、当該フェイルオーバ指示で指定されたＶＮＡＳをファイルオーバする。
本説明図において、ノード１００Ａでは、ＶＮＡＳ１（３０２）及びＶＮＡＳ２（３０３）が稼動している。また、ノード１００Ｂでは、ＶＮＡＳ３（３０７）が稼動している。この場合、ノード１００Ａは、ＶＮＡＳ３フェイルオーバ先３０４を備える。また、ノード１００Ｂは、ＶＮＡＳ１フェイルオーバ先３０５及びＶＮＡＳ２フェイルオーバ先３０６を備える。
ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）のそれぞれは、管理ＶＮＡＳ３０１によって割り当てられたノード１００のリソースを使用して、サービスをクライアントＰＣ１２０に提供する。また、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）は、アプリケーションプログラム３２０及び管理プログラム３２１を実行する。
つまり、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）のいずれかに割り当てられているメモリ１０２には、アプリケーションプログラム３２０及び管理プログラム３２１が格納される。
ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）のいずれかに割り当てられているＣＰＵ１０１は、メモリ１０２から、アプリケーションプログラム３２０及び管理プログラム３２１を呼び出して実行する。
アプリケーションプログラム３２０は、クライアントＰＣ１２０にサービスを提供する。例えば、アプリケーションプログラム３２０は、Ｗｅｂサーバ、ファイルサーバ、ＤＢサーバ又は認証サーバ等である。
管理プログラム３２１は、ＶＮＡＳの起動又は停止の際に、アプリケーションプログラム３２０の実行環境を用意する。
ＶＮＡＳ１フェイルオーバ先３０５は、ＶＮＡＳ１（３０２）の稼動に必要なリソースを確保していることを示す。このため、ＶＮＡＳ１（３０２）は、ノード１００Ａ及び１００Ｂのいずれで稼動しても、同一の構成となる。また、ＶＮＡＳ１（３０２）は、ノード１００Ａとノード１００Ｂとの間を円滑に移動できる。
また、ノード１００Ａ及び１００Ｂのいずれもが、ルートファイルシステムを含むＬＵ１６０にアクセス可能である。よって、ＶＮＡＳ１（３０２）は、ノード１００Ａ又は１００Ｂのいずれで稼動しても、同一のアプリケーションプログラム３２０を実行できる。
同様に、ＶＮＡＳ２フェイルオーバ先３０６は、ＶＮＡＳ２（３０３）の稼動に必要なリソースを確保していることを示す。また、ＶＮＡＳ３フェイルオーバ先３０４は、ＶＮＡＳ３（３０７）の稼動に必要なリソースを確保していることを示す。
ストレージ装置１７０は、ノード１００Ａ用システムＬＵ１５０、ノード１００Ｂ用システムＬＵ１５１及びＬＵ１〜６（１６０）を提供する。
ノード１００Ａ用システムＬＵ１５０は、ノード１００Ａ上で稼動している管理ＶＮＡＳ３０１からアクセスされる。また、ノード１００Ｂ用システムＬＵ１５１は、ノード１００Ｂ上で稼動している管理ＶＮＡＳ３０１からアクセスされる。
ノード１００Ａ用システムＬＵ１５０及びノード１００Ｂ用システムＬＵ１５１のそれぞれには、オペレーティングシステムファイル３４０、バージョンアップ処理プログラムファイル３４１、ＶＮＡＳ管理プログラムファイル３４２、クラスタ管理プログラムファイル３４３、ＶＮＡＳ用システムソフトウェアパッケージ７１３及びＶＮＡＳ構成表２００が格納されている。
オペレーティングシステムファイル３４０は、ノード１００に備わるＣＰＵ１０１によって実行されるオペレーティングシステム３００を含む。バージョンアップ処理プログラムファイル３４１は、ノード１００に備わる管理ＶＮＡＳ３０１によって実行されるバージョンアップ処理プログラム３１０を含む。
ＶＮＡＳ管理プログラムファイル３４２は、ノード１００に備わる管理ＶＮＡＳ３０１によって実行されるＶＮＡＳ管理プログラム３１１を含む。クラスタ管理プログラムファイル３４３は、ノード１００に備わる管理ＶＮＡＳ３０１によって実行されるクラスタ管理プログラム３１２を含む。
ＶＮＡＳ用システムソフトウェアパッケージ７１３は、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）のルートファイルシステムに適用されるソフトウェアパッケージである。具体的には、ＶＮＡＳ用システムソフトウェアパッケージ７１３は、アプリケーションプログラムファイル３５０の更新イメージ及び管理プログラムファイル３５１の更新イメージ等を含む。
ＶＮＡＳ構成表２００（図２）は、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）の構成を示す。
ＬＵ１（１６０）及びＬＵ２（１６０）は、ノード１００Ａ又はノード１００Ｂ上で稼動しているＶＮＡＳ１（３０２）からアクセスされる。また、ＬＵ３（１６０）及びＬＵ４（１６０）は、ノード１００Ａ又はノード１００Ｂ上で稼動しているＶＮＡＳ２（３０３）からアクセスされる。また、ＬＵ５（１６０）及びＬＵ６（１６０）は、ノード１００Ａ又はノード１００Ｂ上で稼動しているＶＮＡＳ３（３０７）からアクセスされる。
ＬＵ１（１６０）、ＬＵ３（１６０）及びＬＵ５（１６０）は、ルートファイルシステムを含む。ルートファイルシステムは、アプリケーションプログラムファイル３５０及び管理プログラムファイル３５１を含む。
アプリケーションプログラムファイル３５０は、ノード１００に備わるＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）又はＶＮＡＳ３（３０７）によって実行されるアプリケーションプログラム３２０を含む。管理プログラムファイル３５１は、ノード１００に備わるＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）又はＶＮＡＳ３（３０７）によって実行される管理プログラム３２１を含む。
ＬＵ２（１６０）、ＬＵ４（１６０）及びＬＵ６（１６０）は、ユーザデータ３６０を含む。具体的には、ＶＮＡＳ１（３０２）は、ＬＵ２（１６０）にユーザデータ３６０を格納する。また、ＶＮＡＳ２（３０３）は、ＬＵ４（１６０）にユーザデータ３６０を格納する。また、ＶＮＡＳ３（３０７）は、ＬＵ６（１６０）にユーザデータ３６０を格納する。
このように、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）は、それぞれ異なるクライアントＰＣ１２０にサービスを提供する。また、二つのノード１００Ａ及び１００Ｂは、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）を分散して稼動する。よって、当該計算機システムは、負荷を分散しているので、性能を高めることができる。更に、ノード１００Ａ又は１００Ｂのいずれかに障害が発生しても、障害が発生していないノード１００Ａ又は１００Ｂが、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）を稼動する。そのため、ノード１００Ａ又は１００Ｂのいずれか一方に障害が発生しても、当該計算機システムは、サービスを継続できる。
なお、高性能及び高信頼の計算機システムであっても、ソフトウェアのミスが発見されたり、機能を変更をしたり、新機能を追加する場合がある。この場合、システムソフトウェアを入れ替える（バージョンアップする）必要が生じる。以下、当該計算システムにおけるソフトウェアのバージョンアップについて説明する。
図４は、本発明の実施の形態のインストール用記憶媒体７００の説明図である。
インストール用記憶媒体７００には、バージョン情報７１１、ノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３が格納されている。
バージョン情報７１１は、ノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３のバージョンを示す。
ノード用システムソフトウェアパッケージ７１２は、ノード１００Ａ用システムＬＵ１５０及びノード１００Ｂ用システムＬＵ１５１に適用されるパッケージである。例えば、ノード用システムソフトウェアパッケージ７１２は、オペレーティングシステムファイル３４０、バージョンアップ処理プログラムファイル３４１、ＶＮＡＳ管理プログラムファイル３４２及びクラスタ管理プログラムファイル３４３のうち少なくとも一つの更新イメージを含む。
ＶＮＡＳ用システムソフトウェアパッケージ７１３は、ルートファイルシステムを含むＬＵ１（１６０）、ＬＵ３（１６０）及びＬＵ５（１６０）に適用されるパッケージである。例えば、ＶＮＡＳ用システムソフトウェアパッケージ７１３は、アプリケーションプログラムファイル３５０及び管理プログラムファイル３５１のうち少なくとも一方の更新イメージを含む。
図５Ａ〜Ｅは、本発明の実施の形態の計算システムのシステムソフトウェアバージョンアップ処理のシーケンス図である。
管理用ＰＣ１１０に備わる記憶媒体読取装置１１１には、新しいバージョンのシステムソフトウェアパッケージを含むインストール用記憶媒体７００が予めセットされている。
まず、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、ノード１００Ａのバージョンアップ処理プログラム３１０にバージョンアップを指示する（４００）。
ノード１００Ａのバージョンアップ処理プログラム３１０は、バージョンアップの指示を受ける。すると、ノード１００Ａのバージョンアップ処理プログラム３１０は、ノード１００Ａで稼動しているすべてのＶＮＡＳをノード１００Ｂにフェイルオーバすることを、ノード１００Ａのクラスタ管理プログラム３１２に指示する（４１０）。
なお、ノード１００Ａのバージョンアップ処理プログラム３１０が、ノード１００Ａのクラスタ管理プログラム３１２からフェイルオーバの完了を通知されるまでには、時間がかかる。そこで、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、インストール用記憶媒体７００から、ノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３を読み出す。次に、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、読み出したノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３を、ノード１００Ａのバージョンアップ処理プログラム３１０に送信する（４０１）。
すると、ノード１００Ａのバージョンアップ処理プログラム３１０は、ノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３を受信する。次に、ノード１００Ａのバージョンアップ処理プログラム３１０は、受信したノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３を、ノード１００Ａ用システムＬＵ１５０に格納する（４１１）。
一方、ノード１００Ａのクラスタ管理プログラム３１２は、ノード１００Ａのバージョンアップ処理プログラム３１０からフェイルオーバの指示を受ける。すると、ノード１００Ａのクラスタ管理プログラム３１２は、ノード１００Ａで稼動しているすべてのＶＮＡＳに対して、繰返処理（ステップ４２０〜４２３）を実行する。本実施の形態では、ノード１００Ａのクラスタ管理プログラム３１２は、ＶＮＡＳ１（３０２）及びＶＮＡＳ２（３０３）に対して、繰返処理を実行する。
まず、ノード１００Ａのクラスタ管理プログラム３１２は、ノード１００Ａで稼動しているＶＮＡＳを、順番に選択する（４２０）。次に、ノード１００Ａのクラスタ管理プログラム３１２は、選択したＶＮＡＳの停止を、ノード１００ＡのＶＮＡＳ管理プログラム３１１に要求する（４２１）。
ノード１００ＡのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳの停止要求を受けると、停止を要求されたＶＮＡＳの稼動を停止する（４３０）。そして、ノード１００ＡのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳの停止完了を、ノード１００Ａのクラスタ管理プログラム３１２に通知する。
ノード１００Ａのクラスタ管理プログラム３１２は、ＶＮＡＳの停止完了の通知を、ノード１００ＡのＶＮＡＳ管理プログラム３１１から受ける。すると、ノード１００Ａのクラスタ管理プログラム３１２は、ステップ４２０で選択したＶＮＡＳの識別子とＶＮＡＳ名２０１とが一致する列を、ノード１００Ａ用システムＬＵ１５０に格納されているＶＮＡＳ構成表２００から選択する。
次に、ノード１００Ａのクラスタ管理プログラム３１２は、選択した列から、システムソフトウェアバージョン２０５を抽出する。次に、ノード１００Ａのクラスタ管理プログラム３１２は、ステップ４２０で選択したＶＮＡＳの起動要求を、ノード１００Ｂのクラスタ管理プログラム３１２に送信する（４２２）。なお、ＶＮＡＳの起動要求には、抽出されたシステムソフトウェアバージョン２０５が含まれる。
ノード１００Ａのクラスタ管理プログラム３１２は、ノード１００Ａで稼動しているすべてのＶＮＡＳをステップ４２０で選択するまで、繰返処理を実行する。そして、ノード１００Ａのクラスタ管理プログラム３１２は、ノード１００Ａで稼動しているすべてのＶＮＡＳをステップ４２０で選択すると、繰返処理を終了する（４２３）。本実施の形態では、繰返処理によって、ＶＮＡＳ１（３０２）及びＶＮＡＳ２（３０３）の稼動が停止される。
その後、ノード１００Ａのクラスタ管理プログラム３１２は、ノード１００Ａのバージョンアップ処理プログラム３１０に、フェイルオーバの完了を通知する（４２４）。
一方、ノード１００Ｂのクラスタ管理プログラム３１２は、ＶＮＡＳの起動要求を、ノード１００Ａのクラスタ管理プログラム３１２から受信する。すると、ノード１００Ｂのクラスタ管理プログラム３１２は、ＶＮＡＳの起動要求で指定されたＶＮＡＳの起動を、ノード１００ＢのＶＮＡＳ管理プログラム３１１に要求する（４５０）。このとき、ノード１００Ｂのクラスタ管理プログラム３１２は、受信したＶＮＡＳの起動要求に含まれるシステムソフトウェアバージョンを、ノード１００ＢのＶＮＡＳ管理プログラム３１１に通知する。
ノード１００ＢのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳの起動要求を受けると、ノード１００Ｂ用システムＬＵ１５１から、当該ノード１００Ｂのシステムソフトウェアのバージョンを取得する。次に、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、通知されたシステムソフトウェアバージョンと取得したノード１００Ｂのシステムソフトウェアのバージョンとが、一致するか否かを判定する（４６０）。ここでは、通知されたシステムソフトウェアバージョンと当該ノード１００Ｂのシステムソフトウェアのバージョンとが一致する。
二つのバージョンが一致する場合、起動を要求されたＶＮＡＳのシステムソフトウェアのバージョンアップは不要である。そこで、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、起動を要求されたＶＮＡＳを起動する（４６１）。更に、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、起動したＶＮＡＳの識別子とＶＮＡＳ名２０１とが一致する列を、ノード１００Ｂ用システムＬＵ１５１に格納されているＶＮＡＳ構成表２００から選択する。次に、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、通知されたシステムソフトウェアバージョンを、選択した列のシステムソフトウェアバージョン２０５に格納する。
本実施の形態では、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳ１（３０２）及びＶＮＡＳ２（３０３）を起動する。
一方、ノード１００Ａのバージョンアップ処理プログラム３１０は、受信したノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３をノード１００Ａ用システムＬＵ１５０に格納し、且つ、フェイルオーバの完了通知を受けると、ステップＳ４１２に進む。
ノード１００Ａのバージョンアップ処理プログラム３１０は、ノード１００Ａ用システムＬＵ１５０に、ノード用システムソフトウェアパッケージ７１２を適用する。これによって、ノード１００Ａのバージョンアップ処理プログラム３１０は、ノード１００Ａのシステムソフトウェアをバージョンアップする（４１２）。
ノード１００Ａのバージョンアップ処理プログラム３１０は、バージョンアップを完了すると、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０にバージョンアップの完了を通知する。
そして、ノード１００Ａのバージョンアップ処理プログラム３１０は、バージョンアップしたシステムソフトウェアを実行するため、ノード１００Ａをリブートする（４１３）。つまり、ノード１００Ａのすべてのプログラムは、一旦終了してから（４４０）、再度開始する（４４１）。
すると、ノード１００Ａのバージョンアップ処理プログラム３１０は、リブートの完了を、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０に通知する（４１４）。
これによって、ノード１００Ａのシステムソフトウェアは、新しいバージョンに更新されている。更に、ノード１００Ａでは、ＶＮＡＳが一つも稼動していない。一方、ノード１００Ｂのシステムソフトウェアは、古いバージョンのままである。更に、ノード１００Ｂでは、すべてのＶＮＡＳが稼動している。
管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、ノード１００Ａのバージョンアップ処理プログラム３１０からリブートの完了通知を受ける。すると、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、ノード１００Ｂのバージョンアップ処理プログラム３１０にバージョンアップを指示する（５００）。
ノード１００Ｂのバージョンアップ処理プログラム３１０は、バージョンアップの指示を受ける。すると、ノード１００Ｂのバージョンアップ処理プログラム３１０は、ノード１００Ｂで稼動しているすべてのＶＮＡＳをノード１００Ａにフェイルオーバすることを、ノード１００Ｂのクラスタ管理プログラム３１２に指示する（５１０）。
なお、ノード１００Ｂのバージョンアップ処理プログラム３１０が、ノード１００Ｂのクラスタ管理プログラム３１２からフェイルオーバの完了を通知されるまでには、時間がかかる。そこで、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、インストール用記憶媒体７００から、ノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３を読み出す。次に、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、読み出したノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３を、ノード１００Ｂのバージョンアップ処理プログラム３１０に送信する（５０１）。
すると、ノード１００Ｂのバージョンアップ処理プログラム３１０は、ノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３を受信する。次に、ノード１００Ｂのバージョンアップ処理プログラム３１０は、受信したノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３を、ノード１００Ｂ用システムＬＵ１５１に格納する（５１１）。
一方、ノード１００Ｂのクラスタ管理プログラム３１２は、ノード１００Ｂのバージョンアップ処理プログラム３１０からフェイルオーバの指示を受ける。すると、ノード１００Ｂのクラスタ管理プログラム３１２は、ノード１００Ｂで稼動しているすべてのＶＮＡＳに対して、繰返処理（ステップ５２０〜５２３）を実行する。本実施の形態では、ノード１００Ｂのクラスタ管理プログラム３１２は、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）に対して、繰返処理を実行する。
まず、ノード１００Ｂのクラスタ管理プログラム３１２は、ノード１００Ｂで稼動しているＶＮＡＳを、順番に選択する（５２０）。次に、ノード１００Ｂのクラスタ管理プログラム３１２は、選択したＶＮＡＳの停止を、ノード１００ＢのＶＮＡＳ管理プログラム３１１に要求する（５２１）。
ノード１００ＢのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳの停止要求を受けると、停止を要求されたＶＮＡＳの稼動を停止する（５３０）。そして、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳの停止完了を、ノード１００Ｂのクラスタ管理プログラム３１２に通知する。
ノード１００Ｂのクラスタ管理プログラム３１２は、ＶＮＡＳの停止完了の通知を、ノード１００ＢのＶＮＡＳ管理プログラム３１１から受ける。すると、ノード１００Ｂのクラスタ管理プログラム３１２は、ステップ５２０で選択したＶＮＡＳの識別子とＶＮＡＳ名２０１とが一致する列を、ノード１００Ｂ用システムＬＵ１５１に格納されているＶＮＡＳ構成表２００から選択する。
次に、ノード１００Ｂのクラスタ管理プログラム３１２は、選択した列から、システムソフトウェアバージョン２０５を抽出する。次に、ノード１００Ｂのクラスタ管理プログラム３１２は、ステップ５２０で選択したＶＮＡＳの起動要求を、ノード１００Ａのクラスタ管理プログラム３１２に送信する（５２２）。なお、ＶＮＡＳの起動要求には、抽出されたシステムソフトウェアバージョン２０５が含まれる。
ノード１００Ｂのクラスタ管理プログラム３１２は、ノード１００Ｂで稼動しているすべてのＶＮＡＳをステップ５２０で選択するまで、繰返処理を繰り返す。そして、ノード１００Ｂのクラスタ管理プログラム３１２は、ノード１００Ｂで稼動しているすべてのＶＮＡＳをステップ５２０で選択すると、繰返処理を終了する（５２３）。本実施の形態では、繰返処理によって、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）の稼動が停止される。
その後、ノード１００Ｂのクラスタ管理プログラム３１２は、ノード１００Ｂのバージョンアップ処理プログラム３１０に、フェイルオーバの完了を通知する（５２４）。
一方、ノード１００Ａのクラスタ管理プログラム３１２は、ＶＮＡＳの起動要求を、ノード１００Ｂのクラスタ管理プログラム３１２から受信する。すると、ノード１００Ａのクラスタ管理プログラム３１２は、ＶＮＡＳの起動要求で指定されたＶＮＡＳの起動を、ノード１００ＡのＶＮＡＳ管理プログラム３１１に要求する（５５０）。このとき、ノード１００Ａのクラスタ管理プログラム３１２は、受信したＶＮＡＳの起動要求に含まれるシステムソフトウェアバージョンを、ノード１００ＡのＶＮＡＳ管理プログラム３１１に通知する。
ノード１００ＡのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳの起動要求を受けると、ノード１００Ａ用システムＬＵ１５０から、当該ノード１００Ａのシステムソフトウェアのバージョンを取得する。次に、ノード１００ＡのＶＮＡＳ管理プログラム３１１は、通知されたシステムソフトウェアバージョンと取得したノード１００Ａのシステムソフトウェアのバージョンとが、一致するか否かを判定する（５６０）。ここでは、通知されたシステムソフトウェアバージョンと当該ノード１００Ａのシステムソフトウェアのバージョンとが異なる。
二つのバージョンが異なる場合、起動を要求されたＶＮＡＳのシステムソフトウェアのバージョンアップが必要となる。そこで、ノード１００ＡのＶＮＡＳ管理プログラム３１１は、起動を要求されたＶＮＡＳのシステムソフトウェアのバージョンアップを、ノード１００Ａのバージョンアップ処理プログラム３１０に要求する（５６１）。
ノード１００Ａのバージョンアップ処理プログラム３１０は、バージョンアップの要求を受けると、バージョンアップの対象となるＶＮＡＳのルートファイルシステムを含むＬＵ１６０を、当該ノード１００Ａにマウントする（５７０）。
次に、ノード１００Ａのバージョンアップ処理プログラム３１０は、ノード１００Ａ用システムＬＵ１５０に格納されているＶＮＡＳ用システムソフトウェアパッケージ７１３を、マウントしたＬＵ１６０に適用する（５７１）。これによって、ノード１００Ａのバージョンアップ処理プログラム３１０は、ＶＮＡＳのシステムソフトウェアをバージョンアップする。
次に、ノード１００Ａのバージョンアップ処理プログラム３１０は、ＶＮＡＳ用システムソフトウェアパッケージ７１３が適用されたＬＵ１６０をアンマウントする。
そして、ノード１００Ａのバージョンアップ処理プログラム３１０は、バージョンアップの完了をノード１００ＡのＶＮＡＳ管理プログラム３１１に通知する（５７２）。
ノード１００ＡのＶＮＡＳ管理プログラム３１１は、バージョンアップの完了通知をノード１００Ａのバージョンアップ処理プログラム３１０から受ける。すると、ノード１００ＡのＶＮＡＳ管理プログラム３１１は、起動を要求されたＶＮＡＳを起動する（５６２）。更に、ノード１００ＡのＶＮＡＳ管理プログラム３１１は、起動したＶＮＡＳの識別子とＶＮＡＳ名２０１とが一致する列を、ノード１００Ａ用システムＬＵ１５０に格納されているＶＮＡＳ構成表２００から選択する。次に、ノード１００ＡのＶＮＡＳ管理プログラム３１１は、通知されたシステムソフトウェアバージョンを、選択した列のシステムソフトウェアバージョン２０５に格納する。
本実施の形態では、ノード１００Ａのバージョンアップ処理プログラム３１０は、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）のシステムソフトウェアをバージョンアップする。更に、ノード１００ＡのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）を起動する。
一方、ノード１００Ｂのバージョンアップ処理プログラム３１０は、受信したノード用システムソフトウェアパッケージ７１２及びＶＮＡＳ用システムソフトウェアパッケージ７１３をノード１００Ｂ用システムＬＵ１５１に格納し、且つ、フェイルオーバの完了通知を受けると、ステップＳ５１２に進む。
ノード１００Ｂのバージョンアップ処理プログラム３１０は、ノード１００Ｂ用システムＬＵ１５１に、ノード用システムソフトウェアパッケージ７１２を適用する。これによって、ノード１００Ｂのバージョンアップ処理プログラム３１０は、ノード１００Ｂのシステムソフトウェアをバージョンアップする（５１２）。
ノード１００Ｂのバージョンアップ処理プログラム３１０は、バージョンアップを完了すると、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０にバージョンアップの完了を通知する。
そして、ノード１００Ｂのバージョンアップ処理プログラム３１０は、バージョンアップしたシステムソフトウェアを実行するため、ノード１００Ｂをリブートする（５１３）。つまり、ノード１００Ｂのすべてのプログラムは、一旦終了してから（５４０）、再度開始する（５４１）。
すると、ノード１００Ｂのバージョンアップ処理プログラム３１０は、リブートの完了を、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０に通知する（５１４）。
一方、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、ノード１００Ｂのバージョンアップ処理プログラム３１０からバージョンアップの完了通知を受ける。すると、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０は、原状復帰をノード１００Ａのバージョンアップ処理プログラム３１０に指示する（６００）。
ノード１００Ａのバージョンアップ処理プログラム３１０は、原状復帰の指示を受ける。すると、ノード１００Ａのバージョンアップ処理プログラム３１０は、当初（ステップ４００以前）にノード１００Ｂで稼動していたＶＮＡＳをノード１００Ｂにフェイルオーバすることを、ノード１００Ａのクラスタ管理プログラム３１２に指示する。
本実施の形態では、ノード１００Ａのバージョンアップ処理プログラム３１０は、ＶＮＡＳ３（３０７）のフェイルオーバを、ノード１００Ａのクラスタ管理プログラム３１２に指示する（６１０）。
ノード１００Ａのクラスタ管理プログラム３１２は、ノード１００Ａのバージョンアップ処理プログラム３１０からフェイルオーバの指示を受ける。すると、ノード１００Ａのクラスタ管理プログラム３１２は、ＶＮＡＳ３（３０７）の停止を、ノード１００ＡのＶＮＡＳ管理プログラム３１１に要求する（６２１）。
ノード１００ＡのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳ３（３０７）の停止要求を受けると、ＶＮＡＳ３（３０７）の稼動を停止する（６３０）。そして、ノード１００ＡのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳ３（３０７）の停止完了を、ノード１００Ａのクラスタ管理プログラム３１２に通知する。
ノード１００Ａのクラスタ管理プログラム３１２は、ＶＮＡＳ３（３０７）の停止完了の通知を、ノード１００ＡのＶＮＡＳ管理プログラム３１１から受ける。すると、ノード１００Ａのクラスタ管理プログラム３１２は、ＶＮＡＳ３（３０７）の識別子とＶＮＡＳ名２０１とが一致する列を、ノード１００Ａ用システムＬＵ１５０に格納されているＶＮＡＳ構成表２００から選択する。
次に、ノード１００Ａのクラスタ管理プログラム３１２は、選択した列から、システムソフトウェアバージョン２０５を抽出する。次に、ノード１００Ａのクラスタ管理プログラム３１２は、ＶＮＡＳ３（３０７）の起動要求を、ノード１００Ｂのクラスタ管理プログラム３１２に送信する（６２２）。なお、ＶＮＡＳ３（３０７）の起動要求には、抽出されたシステムソフトウェアバージョン２０５が含まれる。
次に、ノード１００Ａのクラスタ管理プログラム３１２は、ノード１００Ａのバージョンアップ処理プログラム３１０に、フェイルオーバの完了を通知する（６２４）。
一方、ノード１００Ｂのクラスタ管理プログラム３１２は、ＶＮＡＳ３（３０７）の起動要求を、ノード１００Ａのクラスタ管理プログラム３１２から受信する。すると、ノード１００Ｂのクラスタ管理プログラム３１２は、ＶＮＡＳ３（３０７）の起動を、ノード１００ＢのＶＮＡＳ管理プログラム３１１に要求する（６５０）。このとき、ノード１００Ｂのクラスタ管理プログラム３１２は、受信したＶＮＡＳ３（３０７）の起動要求に含まれるシステムソフトウェアバージョンを、ノード１００ＢのＶＮＡＳ管理プログラム３１１に通知する。
ノード１００ＢのＶＮＡＳ管理プログラム３１１は、ノード１００Ｂ用システムＬＵ１５１から、当該ノード１００Ｂのシステムソフトウェアのバージョンを取得する。次に、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳ３（３０７）の起動要求を受けると、通知されたシステムソフトウェアバージョンと取得したノード１００Ｂのシステムソフトウェアのバージョンとが、一致するか否かを判定する（６６０）。ここでは、通知されたシステムソフトウェアバージョンと当該ノード１００Ｂのシステムソフトウェアのバージョンとが一致する。
二つのバージョンが一致する場合、ＶＮＡＳ３（３０７）のシステムソフトウェアのバージョンアップは不要である。そこで、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳ３（３０７）を起動する（６６１）。更に、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、ＶＮＡＳ３（３０７）の識別子とＶＮＡＳ名２０１とが一致する列を、ノード１００Ｂ用システムＬＵ１５１に格納されているＶＮＡＳ構成表２００から選択する。次に、ノード１００ＢのＶＮＡＳ管理プログラム３１１は、通知されたシステムソフトウェアバージョンを、選択した列のシステムソフトウェアバージョン２０５に格納する。
一方、ノード１００Ａのバージョンアップ処理プログラム３１０は、ノード１００Ａのクラスタ管理プログラム３１２からフェイルオーバの完了通知を受ける。すると、ノード１００Ａのバージョンアップ処理プログラム３１０は、管理用ＰＣ１１０のバージョンアップ指示プログラム３３０に原状復帰の完了を通知する（６１１）。
管理用ＰＣ１１０のバージョンアップ指示プログラム３３０が、原状復帰の完了の通知を受けると、当該システムソフトウェアバージョンアップ処理は終了する（６０１）。
なお、バージョンアップ処理プログラム３１０、ＶＮＡＳ管理プログラム３１１及びクラスタ管理プログラム３１２は、ノード１００Ａ又はノード１００Ｂに備わるＣＰＵ１０１によって実行される。また、バージョンアップ指示プログラム３３０は、管理用ＰＣ１１０に備わるＣＰＵ８０１によって実行される。
以上のように、新バージョンのシステムソフトウェアが適用されているノード１００は、旧バージョンのシステムソフトウェアが適用されているＶＮＡＳを起動する際に、当該ＶＮＡＳに適用されているシステムソフトウェアを自動的にバージョンアップする。これによって、新バージョンのシステムソフトウェアと旧バージョンのシステムソフトウェアとが混在するという問題を解決できる。更に、ＶＮＡＳによって提供されるサービスの停止時間は、フェイルオーバのための時間及びＬＵ１６０にＶＮＡＳ用システムソフトウェアパッケージ７１３を適用するための時間だけである。よって、ＶＮＡＳによって提供されるサービスの停止時間が、従来よりも短縮される。
従来では、ＶＮＡＳのシステムソフトウェアがバージョンアップされる度に、ＶＮＡＳ用システムソフトウェアパッケージ７１３は、管理用ＰＣ１１０からノード１００に転送されていた。一方、本実施の形態では、ノード１００がバージョンアップされる際に、ＶＮＡＳ用システムソフトウェアパッケージ７１３は、ノード１００Ａ用システムＬＵ１５０又はノード１００Ｂ用システムＬＵ１５１に格納される。そのため、ＶＮＡＳのシステムソフトウェアがバージョンアップされる際には、ＶＮＡＳ用システムソフトウェアパッケージ７１３は、管理用ＰＣ１１０からノード１００に転送される必要がない。よって、本実施の形態では、ＶＮＡＳによって提供されるサービスの停止時間が、従来よりも短縮される。
また、本実施の形態では、管理ＶＮＡＳ３０１が、ＶＮＡＳのシステムソフトウェアを更新する。そのため、ＶＮＡＳがバージョンアップ機能を備える必要がない。
更に、ＶＮＡＳのシステムソフトウェアをバージョンアップするために、管理用ＰＣ１１０が、ＶＮＡＳにアクセス可能なデータＬＡＮ１３１に接続される必要がない。そのため、バージョンアップ作業者が、ＶＡＮＳによって提供されるサービスの顧客データを覗き見たり、改変したりする脅威を排除できる。
なお、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）は、同一のアプリケーションプログラム３２０を実行してもよいし、それぞれ異なるアプリケーションプログラム３２０を実行してもよい。同様に、ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）は、同一の管理プログラム３２１を実行してもよいし、それぞれ異なる管理プログラム３２１を実行してもよい。
ＶＮＡＳ１（３０２）、ＶＮＡＳ２（３０３）及びＶＮＡＳ３（３０７）が、それぞれ異なるアプリケーションプログラム３２０又はそれぞれ異なる管理プログラム３２１を実行する場合を説明する。この場合、インストール用記憶媒体７００は、ＶＮＡＳ用システムソフトウェアパッケージ７１３を、ＶＮＡＳごとに記憶する。そして、ノード１００Ａは、ステップ５７１において、適切なＶＮＡＳ用システムソフトウェアパッケージ７１３を、マウントしたＬＵ１６０に適用する。
本発明の実施の形態の計算機システムの構成のブロック図である。 本発明の実施の形態のノード１００Ａ用システムＬＵ及びノード１００Ｂ用システムＬＵに記憶されるＶＮＡＳ構成表の構成図である。 本発明の実施の形態の計算機システムの機能構成のブロック図である。 本発明の実施の形態のインストール用記憶媒体の説明図である。 本発明の実施の形態の計算システムのシステムソフトウェアバージョンアップ処理のシーケンス図である。 本発明の実施の形態の計算システムのシステムソフトウェアバージョンアップ処理のシーケンス図である。 本発明の実施の形態の計算システムのシステムソフトウェアバージョンアップ処理のシーケンス図である。 本発明の実施の形態の計算システムのシステムソフトウェアバージョンアップ処理のシーケンス図である。 本発明の実施の形態の計算システムのシステムソフトウェアバージョンアップ処理のシーケンス図である。 本発明の実施の形態の管理用ＰＣ１１０のハードウェア構成のブロック図である。
符号の説明
１００ ノード
１０１ ＣＰＵ
１０２ メモリ
１０３ ストレージインタフェース
１０４ 管理用ネットワークインタフェース
１０５ データ用ネットワークインタフェース
１０８ クラスタ通信用ネットワークインタフェース
１１０ 管理用ＰＣ
１１１ 記憶媒体読取装置
１２０ クライアントＰＣ
１３０ 管理ＬＡＮ
１３１ データＬＡＮ
１５０ ノード１００Ａ用システムＬＵ
１５１ ノード１００Ｂ用システムＬＵ
１６０ ＬＵ
１７０ ストレージ装置
１７１ ＤＫＣ
３０１ 管理ＶＮＡＳ
３０２ ＶＮＡＳ１
３０３ ＶＮＡＳ２
３０４ ＶＮＡＳ３フェイルオーバ先
３０５ ＶＮＡＳ１フェイルオーバ先
３０６ ＶＮＡＳ２フェイルオーバ先
３０７ ＶＮＡＳ３
３１０ バージョンアップ処理プログラム
３１１ ＶＮＡＳ管理プログラム
３１２ クラスタ管理プログラム
３２０ アプリケーションプログラム
３２１ 管理プログラム

Claims (12)

  1. 第１プロセッサ、第１メモリ及び他の計算機と接続するための第１インタフェースを備える第１サーバ装置と、第２プロセッサ、第２メモリ及び他の計算機と接続するための第２インタフェースを備える第２サーバ装置と、第３プロセッサ、第３メモリ及び他の計算機と接続するための第３インタフェースを備える管理計算機と、データが格納される記憶部及び前記記憶部に対するデータの入出力を制御する入出力制御部を備え、前記第１サーバ装置に接続されるストレージ装置と、を備える計算機システムであって、
    前記管理計算機、前記第１サーバ装置、及び前記第２サーバ装置は、互いに接続され、
    前記ストレージ装置は、前記第１サーバ装置と前記第２サーバ装置とに接続され、
    前記第１プロセッサ、前記第１メモリ及び前記第１インタフェースのそれぞれは、論理的に分割され、
    前記第２プロセッサ、前記第２メモリ及び前記第２インタフェースのそれぞれは、論理的に分割され、
    前記分割された第１プロセッサ、第１メモリ及び第１インタフェースは、独立した仮想サーバ装置として、前記第１サーバ装置上で稼動し、
    前記分割された第２プロセッサ、第２メモリ及び第２インタフェースは、独立した仮想サーバ装置として、前記第２サーバ装置上で稼動し、
    前記仮想サーバ装置は、サービスを提供する一つ以上の業務仮想サーバ装置及び前記業務仮想サーバ装置を管理する管理仮想サーバ装置を含み、
    前記第１サーバ装置及び前記第２サーバ装置は、一方のサーバ装置上で稼働する前記業務仮想サーバに対応する業務仮想サーバ装置を、他方のサーバ装置上で稼動させることができ、
    前記ストレージ装置は、前記業務仮想サーバ装置がアクセス可能な記憶領域と、前記管理仮想サーバがアクセス可能な記憶領域とを含み、
    前記入出力制御部は、前記業務仮想サーバ装置又は前記管理仮想サーバ装置から、前記業務仮想サーバ装置がアクセス可能な記憶領域及び前記管理仮想サーバ装置がアクセス可能な記憶領域へのアクセスを制御し、
    前記第１サーバ装置で稼動する前記管理仮想サーバ装置は、
    前記管理計算機から、前記第１サーバ装置のシステムソフトウェアの更新要求を受けると、
    前記第１サーバ装置のシステムソフトウェアの更新要求を受信した後に、前記第３インタフェースを介して前記管理計算機から、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新するためのデータである第１更新データ、並びに、前記第１サーバ装置で稼動している業務仮想サーバ装置のシステムソフトウェアを更新するためのデータである第２更新データを取得し、
    前記第１サーバ装置で稼動しているすべての前記業務仮想サーバ装置を停止させ、
    前記第２サーバ装置で稼動している前記管理仮想サーバ装置に、前記第１サーバ装置で稼動していた前記業務仮想サーバ装置に対応する業務仮想サーバ装置を前記第２サーバ装置上で起動するように要求し、
    前記第１サーバ装置で稼動していた業務仮想サーバ装置に対応する業務仮想サーバ装置の起動要求後、前記取得された第１更新データを前記管理仮想サーバ装置がアクセス可能な記憶領域に上書きすることによって、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新し、
    前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアの更新後、前記第１サーバ装置が実行する全ての処理を停止させた後に前記第１サーバ装置を再起動し、
    前記第１サーバ装置の再起動後、前記管理計算機から前記第２サーバ装置のシステムソフトウェアの更新要求を受信した前記第２サーバ装置で稼動している管理仮想サーバ装置から、前記第２サーバ装置で稼動する業務仮想サーバ装置に対応する業務仮想サーバ装置の起動要求を受けた場合、前記第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアと、前記第１サーバ装置のシステムソフトウェアと、が整合するか否かを判定し、
    前記二つのシステムソフトウェアが整合しない場合には、前記取得された第２更新データを用いて、前記第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアを更新した後に、当該第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置を起動することを特徴とする計算機システム。
  2. 前記第１サーバ装置で稼動している管理仮想サーバ装置は、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアが更新される時に、前記第２更新データを、前記ストレージ装置に格納することを特徴とする請求項１に記載の計算機システム。
  3. 前記第１サーバ装置で稼動している管理仮想サーバ装置は、前記二つのシステムソフトウェアが整合しない場合には、前記第２更新データを、前記ストレージ装置内の前記第１サーバ装置で稼動している業務仮想サーバ装置がアクセス可能な記憶領域に上書きすることによって、前記第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアを更新することを特徴とする請求項１に記載の計算機システム。
  4. 前記第１サーバ装置のシステムソフトウェアが更新された前記第１サーバ装置で稼動している管理仮想サーバ装置から、前記第１サーバ装置が再起動した旨を知らせるための再起動通知を受信した前記管理計算機は、前記第２サーバ装置で稼動している管理仮想サーバ装置に前記第２サーバ装置のシステムソフトウェアの更新要求を送信し、
    前記第２サーバ装置で稼動する管理仮想サーバ装置は、
    前記管理計算機から、前記第２サーバ装置のシステムソフトウェアの更新要求を受けると、
    前記第２サーバ装置のシステムソフトウェアの更新要求を受信した後に、前記管理計算機から、前記第２サーバ装置及び前記第２サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新するためのデータである第３更新データ、並びに、前記第２サーバ装置で稼動している業務仮想サーバ装置のシステムソフトウェアを更新するためのデータである第４更新データを取得し、
    取得された前記第３更新データ及び前記第４更新データを前記第２サーバ装置で稼動する管理仮想サーバ装置がアクセス可能な記憶領域に格納するとともに、前記第２サーバ装置で稼動しているすべての業務仮想サーバ装置を停止させ、
    前記第１サーバ装置で稼動している管理仮想サーバ装置に、前記停止された業務仮想サーバ装置に対応する業務仮想サーバ装置を前記第１サーバ装置上で起動するように要求し、
    前記第２サーバ装置で稼動していた業務仮想サーバ装置に対応する業務仮想サーバ装置の起動要求後、前記第２サーバ装置で稼動する管理仮想サーバ装置がアクセス可能な記憶領域に格納される第３更新データを当該記憶領域に上書きすることによって、前記第２サーバ装置及び前記第２サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新し、
    前記第２サーバ装置及び前記第２サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアの更新後、前記第２サーバ装置が実行する全ての処理を停止させた後に前記第２サーバ装置を再起動し、
    前記第２サーバ装置の再起動後、前記第１サーバ装置で稼動している管理仮想サーバ装置から前記第１サーバ装置で稼動している業務仮想サーバ装置に対応する業務仮想サーバ装置の起動の要求を受ける前に前記第２サーバ装置で稼動していた業務仮想サーバ装置の起動要求を、前記第１サーバ装置で起動している管理仮想サーバ装置から受けた場合、前記第１サーバ装置で起動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアと、前記第２サーバ装置のシステムソフトウェアと、が整合するか否かを判定し、
    前記二つのシステムソフトウェアが整合した場合には、前記起動を要求された業務仮想サーバ装置を起動し、
    前記二つのシステムソフトウェアが整合しない場合には、第４更新データを、前記第２サーバ装置で稼動している業務仮想サーバ装置がアクセス可能な記憶領域に上書きすることによって、前記第１サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアを更新した後に、当該第１サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置を起動することを特徴とする請求項１に記載の計算機システム。
  5. 前記第１サーバ装置は、前記第２サーバ装置で稼動している業務仮想サーバ装置に対応する業務仮想サーバ装置を稼動させるため必要な、論理的に分割された前記第１プロセッサ、前記第１メモリ及び前記第１インタフェースを備え、
    前記第２サーバ装置は、前記第１サーバ装置で稼動している業務仮想サーバ装置に対応する業務仮想サーバ装置を稼動させるため必要な、論理的に分割された前記第２プロセッサ、前記第２メモリ及び前記第２インタフェースを備えることを特徴とする請求項１に記載の計算機システム。
  6. 前記ストレージ装置は、前記第１サーバ装置及び前記第２サーバ装置のそれぞれで、起動している業務仮想サーバ装置と、前記業務仮想サーバ装置がアクセス可能な記憶領域と、前記業務仮想サーバ装置のシステムソフトウェアに関する情報とを対応づけた管理表を備えることを特徴とする請求項１に記載の計算機システム。
  7. 第１プロセッサ、第１メモリ及び他の計算機と接続するための第１インタフェースを備える第１サーバ装置と、第２プロセッサ、第２メモリ及び他の計算機と接続するための第２インタフェースを備える第２サーバ装置と、第３プロセッサ、第３メモリ及び他の計算機と接続するための第３インタフェースを備える管理計算機と、データが格納される記憶部及び前記記憶部に対するデータの入出力を制御する入出力制御部を備え、前記第１サーバ装置に接続されるストレージ装置と、を備える計算機システムにおけるシステムソフトウェア更新方法であって、
    前記管理計算機、前記第１サーバ装置、及び前記第２サーバ装置は、互いに接続され、
    前記ストレージ装置は、前記第１サーバ装置と前記第２サーバ装置とに接続され、
    前記第１プロセッサ、前記第１メモリ及び前記第１インタフェースのそれぞれは、論理的に分割され、
    前記第２プロセッサ、前記第２メモリ及び前記第２インタフェースのそれぞれは、論理的に分割され、
    前記分割された第１プロセッサ、第１メモリ及び第１インタフェースは、独立した仮想サーバ装置として、前記第１サーバ装置上で稼動し、
    前記分割された第２プロセッサ、第２メモリ及び第２インタフェースは、独立した仮想サーバ装置として、前記第２サーバ装置上で稼動し、
    前記仮想サーバ装置は、サービスを提供する一つ以上の業務仮想サーバ装置及び前記業務仮想サーバ装置を管理する管理仮想サーバ装置を含み、
    前記第１サーバ装置及び前記第２サーバ装置は、一方のサーバ装置上で稼働する前記業務仮想サーバに対応する業務仮想サーバ装置を、他方のサーバ装置上で稼動させることができ、
    前記ストレージ装置は、前記業務仮想サーバ装置がアクセス可能な記憶領域と、前記管理仮想サーバがアクセス可能な記憶領域とを含み、
    前記入出力制御部は、前記業務仮想サーバ装置又は前記管理仮想サーバ装置から、前記業務仮想サーバ装置がアクセス可能な記憶領域及び前記管理仮想サーバ装置がアクセス可能な記憶領域へのアクセスを制御し、
    前記第１サーバ装置で稼動する前記管理仮想サーバ装置は、
    前記管理計算機から、前記第１サーバ装置のシステムソフトウェアの更新要求を受けると、
    前記第１サーバ装置のシステムソフトウェアの更新要求を受信した後に、前記第３インタフェースを介して前記管理計算機から、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新するためのデータである第１更新データ、並びに、前記第１サーバ装置で稼動している業務仮想サーバ装置のシステムソフトウェアを更新するためのデータである第２更新データを取得し、
    前記第１サーバ装置で稼動しているすべての前記業務仮想サーバ装置を停止させ、
    前記第２サーバ装置で稼動している前記管理仮想サーバ装置に、前記第１サーバ装置で稼動していた前記業務仮想サーバ装置に対応する業務仮想サーバ装置を前記第２サーバ装置上で起動するように要求し、
    前記第１サーバ装置で稼動していた業務仮想サーバ装置に対応する業務仮想サーバ装置の起動要求後、前記取得された第１更新データを前記管理仮想サーバ装置がアクセス可能な記憶領域に上書きすることによって、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新し、
    前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアの更新後、前記第１サーバ装置が実行する全ての処理を停止させた後に前記第１サーバ装置を再起動し、
    前記第１サーバ装置の再起動後、前記管理計算機から前記第２サーバ装置のシステムソフトウェアの更新要求を受信した前記第２サーバ装置で稼動している管理仮想サーバ装置から、前記第２サーバ装置で稼動する業務仮想サーバ装置に対応する業務仮想サーバ装置の起動要求を受けた場合、前記第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアと、前記第１サーバ装置のシステムソフトウェアと、が整合するか否かを判定し、
    前記二つのシステムソフトウェアが整合しない場合には、前記取得された第２更新データを用いて、前記第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアを更新した後に、当該第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置を起動することを特徴とするシステムソフトウェア更新方法。
  8. 前記第１サーバ装置で稼動している管理仮想サーバ装置は、前記第１サーバ装置及び前記第１サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアが更新される時に、前記第２更新データを、前記ストレージ装置に格納することを特徴とする請求項７に記載のシステムソフトウェア更新方法。
  9. 前記第１サーバ装置で稼動している管理仮想サーバ装置は、前記二つのシステムソフトウェアが整合しない場合には、前記第２更新データを、前記ストレージ装置内の前記第１サーバ装置で稼動している業務仮想サーバ装置がアクセス可能な記憶領域に上書きすることによって、前記第２サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアを更新することを特徴とする請求項７に記載のシステムソフトウェア更新方法。
  10. 前記第１サーバ装置のシステムソフトウェアが更新された前記第１サーバ装置で稼動している管理仮想サーバ装置から、前記第１サーバ装置が再起動した旨を知らせるための再起動通知を受信した前記管理計算機は、前記第２サーバ装置で稼動している管理仮想サーバ装置に前記第２サーバ装置のシステムソフトウェアの更新要求を送信し、
    前記第２サーバ装置で稼動する管理仮想サーバ装置は、
    前記管理計算機から、前記第２サーバ装置のシステムソフトウェアの更新要求を受けると、
    前記第２サーバ装置のシステムソフトウェアの更新要求を受信した後に、前記管理計算機から、前記第２サーバ装置及び前記第２サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新するためのデータである第３更新データ、並びに、前記第２サーバ装置で稼動している業務仮想サーバ装置のシステムソフトウェアを更新するためのデータである第４更新データを取得し、
    取得された前記第３更新データ及び前記第４更新データを前記第２サーバ装置で稼動する管理仮想サーバ装置がアクセス可能な記憶領域に格納するとともに、前記第２サーバ装置で稼動しているすべての業務仮想サーバ装置を停止させ、
    前記第１サーバ装置で稼動している管理仮想サーバ装置に、前記停止された業務仮想サーバ装置に対応する業務仮想サーバ装置を前記第１サーバ装置上で起動するように要求し、
    前記第２サーバ装置で稼動していた業務仮想サーバ装置に対応する業務仮想サーバ装置の起動要求後、前記第２サーバ装置で稼動する管理仮想サーバ装置がアクセス可能な記憶領域に格納される第３更新データを当該記憶領域に上書きすることによって、前記第２サーバ装置及び前記第２サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアを更新し、
    前記第２サーバ装置及び前記第２サーバ装置で稼動している管理仮想サーバ装置のシステムソフトウェアの更新後、前記第２サーバ装置が実行する全ての処理を停止させた後に前記第２サーバ装置を再起動し、
    前記第２サーバ装置の再起動後、前記第１サーバ装置で稼動している管理仮想サーバ装置から前記第１サーバ装置で稼動している業務仮想サーバ装置に対応する業務仮想サーバ装置の起動の要求を受ける前に前記第２サーバ装置で稼動していた業務仮想サーバ装置の起動要求を、前記第１サーバ装置で起動している管理仮想サーバ装置から受けた場合、前記第１サーバ装置で起動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアと、前記第２サーバ装置のシステムソフトウェアと、が整合するか否かを判定し、
    前記二つのシステムソフトウェアが整合した場合には、前記起動を要求された業務仮想サーバ装置を起動し、
    前記二つのシステムソフトウェアが整合しない場合には、第４更新データを、前記第２サーバ装置で稼動している業務仮想サーバ装置がアクセス可能な記憶領域に上書きすることによって、前記第１サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置のシステムソフトウェアを更新した後に、前記第１サーバ装置で稼動している管理仮想サーバ装置から起動を要求された業務仮想サーバ装置を起動することを特徴とする請求項７に記載のシステムソフトウェア更新方法。
  11. 前記第１サーバ装置は、前記第２サーバ装置で稼動している業務仮想サーバ装置に対応する業務仮想サーバ装置を稼動させるため必要な、論理的に分割された前記第１プロセッサ、前記第１メモリ及び前記第１インタフェースを備え、
    前記第２サーバ装置は、前記第１サーバ装置で稼動している業務仮想サーバ装置に対応する業務仮想サーバ装置を稼動させるため必要な、論理的に分割された前記第２プロセッサ、前記第２メモリ及び前記第２インタフェースを備えることを特徴とする請求項７に記載のシステムソフトウェア更新方法。
  12. 前記ストレージ装置は、前記第１サーバ装置及び前記第２サーバ装置のそれぞれで、起動している業務仮想サーバ装置と、前記業務仮想サーバ装置がアクセス可能な記憶領域と、前記業務仮想サーバ装置のシステムソフトウェアに関する情報とを対応づけた管理表を備えることを特徴とする請求項７に記載のシステムソフトウェア更新方法。
JP2006308895A 2006-11-15 2006-11-15 計算機システム、システムソフトウェア更新方法及び第１サーバ装置 Expired - Fee Related JP4359609B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2006308895A JP4359609B2 (ja) 2006-11-15 2006-11-15 計算機システム、システムソフトウェア更新方法及び第１サーバ装置
US11/622,253 US8015559B2 (en) 2006-11-15 2007-01-11 System software update method
US13/195,942 US8255898B2 (en) 2006-11-15 2011-08-02 System software update method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006308895A JP4359609B2 (ja) 2006-11-15 2006-11-15 計算機システム、システムソフトウェア更新方法及び第１サーバ装置

Publications (2)

Publication Number Publication Date
JP2008123412A JP2008123412A (ja) 2008-05-29
JP4359609B2 true JP4359609B2 (ja) 2009-11-04

Family

ID=39370678

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006308895A Expired - Fee Related JP4359609B2 (ja) 2006-11-15 2006-11-15 計算機システム、システムソフトウェア更新方法及び第１サーバ装置

Country Status (2)

Country Link
US (2) US8015559B2 (ja)
JP (1) JP4359609B2 (ja)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8898653B2 (en) 2007-06-27 2014-11-25 International Business Machines Corporation Non-disruptive code update of a single processor in a multi-processor computing system
JP5222573B2 (ja) * 2008-01-29 2013-06-26 株式会社日立製作所 サーバ計算機及びネットワーク処理方法
WO2010122709A1 (ja) * 2009-04-23 2010-10-28 日本電気株式会社 若化処理装置、若化処理システム、コンピュータプログラムおよびデータ処理方法
US8484653B2 (en) * 2010-07-28 2013-07-09 Red Hat Israel, Ltd. Mechanism for delayed hardware upgrades in virtualization systems
JP5843595B2 (ja) 2011-12-13 2016-01-13 キヤノン株式会社 生産装置
DE102012200155A1 (de) * 2012-01-05 2013-07-11 Continental Automotive Gmbh Rechnersystem und Verfahren zum Betreiben eines Rechnersystems
JP6089427B2 (ja) * 2012-03-30 2017-03-08 日本電気株式会社 フォールトトレラントサーバ、デフラグ方法、およびプログラム
RU2523113C1 (ru) * 2012-12-25 2014-07-20 Закрытое акционерное общество "Лаборатория Касперского" Система и способ целевой установки сконфигурированного программного обеспечения
RU2541935C2 (ru) 2012-12-25 2015-02-20 Закрытое акционерное общество "Лаборатория Касперского" Система и способ развертывания предварительно сконфигурированного программного обеспечения
JP6221317B2 (ja) * 2013-04-15 2017-11-01 セイコーエプソン株式会社 電子機器、及び、通信システム
US9383986B2 (en) 2013-06-18 2016-07-05 Disney Enterprises, Inc. Safe low cost web services software deployments
GB2520343A (en) 2013-11-19 2015-05-20 Ibm A system having a cluster of communication controllers and a method for modification of the latter
CN104468235A (zh) * 2014-12-25 2015-03-25 浙江中控研究院有限公司 一种基于iap的可配置全网络远程节点固件升级系统及装置
CN106059791B (zh) * 2016-05-13 2020-04-14 华为技术有限公司 一种存储系统中业务的链路切换方法和存储设备
DE102017107277B4 (de) * 2017-04-05 2024-06-13 Hanon Systems Verfahren zur Aktualisierung einer Steuersoftware in einem Hochvolt-Steuergerät
CN109189457B (zh) * 2018-11-05 2021-06-22 北京原子机器人科技有限公司 智能惯导传感系统的固件升级系统及方法
CN109582372B (zh) * 2018-11-12 2022-01-28 海信视像科技股份有限公司 一种系统的启动方法及装置

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5701492A (en) * 1996-03-29 1997-12-23 Canon Kabushiki Kaisha Fail-safe flashing of EPROM
US6317844B1 (en) * 1998-03-10 2001-11-13 Network Appliance, Inc. File server storage arrangement
US6324692B1 (en) * 1999-07-28 2001-11-27 Data General Corporation Upgrade of a program
US7080134B2 (en) * 2001-06-29 2006-07-18 Intel Corporation Systems and methods for software distribution and management
US20030032425A1 (en) * 2001-08-11 2003-02-13 Hong-Sik Kim Schema change method of dual system
US7356677B1 (en) * 2001-10-19 2008-04-08 Flash Vos, Inc. Computer system capable of fast switching between multiple operating systems and applications
JP2003131839A (ja) * 2001-10-29 2003-05-09 Canon Inc ネットワークシステム、情報処理装置、情報処理方法、及び、制御プログラム
DE10206001A1 (de) * 2002-02-14 2003-08-28 Alcatel Sa Verfahren zur Steuerung der Installation von Programmcode auf Netzelementen
US7380113B2 (en) * 2002-05-17 2008-05-27 Xiotech Corporation Method for updating memory resident firmware as a background operation
US8549114B2 (en) * 2002-06-12 2013-10-01 Bladelogic, Inc. Method and system for model-based heterogeneous server configuration management
JP4152755B2 (ja) * 2003-01-10 2008-09-17 富士通株式会社 新旧プログラムモジュールの切り替え機能を有するサーバ装置
JP4567293B2 (ja) * 2003-01-21 2010-10-20 株式会社日立製作所 ファイルサーバ
US7810088B2 (en) * 2003-06-20 2010-10-05 Samsung Electronics Co., Ltd. Apparatus and method for performing a fail-safe over-the-air software update in a mobile station
US7266677B1 (en) * 2003-09-25 2007-09-04 Rockwell Automation Technologies, Inc. Application modifier based on operating environment parameters
JP4420275B2 (ja) * 2003-11-12 2010-02-24 株式会社日立製作所 フェイルオーバクラスタシステム及びフェイルオーバクラスタシステムを用いたプログラムのインストール方法
JP4448719B2 (ja) * 2004-03-19 2010-04-14 株式会社日立製作所 ストレージシステム
US8583770B2 (en) * 2005-02-16 2013-11-12 Red Hat, Inc. System and method for creating and managing virtual services
US7685461B2 (en) * 2006-12-20 2010-03-23 International Business Machines Corporation Method, apparatus and program storage device for performing fault tolerant code upgrade on a fault tolerant system by determining when functional code reaches a desired state before resuming an upgrade
JP4961411B2 (ja) * 2008-10-16 2012-06-27 株式会社日立製作所 計算機システム及びその構成管理方法
US20110061046A1 (en) * 2008-12-18 2011-03-10 Virtual Computer, Inc. Installing Software Applications in a Layered Virtual Workspace
US8650559B2 (en) * 2009-08-27 2014-02-11 Red Hat Israel, Ltd. Automatic remote installation of a virtualization host

Also Published As

Publication number Publication date
US20080115126A1 (en) 2008-05-15
JP2008123412A (ja) 2008-05-29
US8255898B2 (en) 2012-08-28
US20110289494A1 (en) 2011-11-24
US8015559B2 (en) 2011-09-06

Similar Documents

Publication Publication Date Title
JP4359609B2 (ja) 計算機システム、システムソフトウェア更新方法及び第１サーバ装置
CN106991035B (zh) 一种基于微服务架构的主机监控系统
US7930371B2 (en) Deployment method and system
US7721138B1 (en) System and method for on-the-fly migration of server from backup
US7849221B2 (en) Online instance deletion in a multi-instance computer system
US7240188B2 (en) Storage system
US8230264B2 (en) System evaluation apparatus
US7941510B1 (en) Management of virtual and physical servers using central console
US7574627B2 (en) Memory dump method, memory dump program and computer system
US7937455B2 (en) Methods and systems for modifying nodes in a cluster environment
JP4426736B2 (ja) プログラム修正方法およびプログラム
US7451443B2 (en) Online computer maintenance utilizing a virtual machine monitor
US7401332B2 (en) System and apparatus for eliminating user interaction during hardware configuration at system boot
JP2003114801A (ja) コンピュータサービスおよびプログラマブルデバイスの管理を自動化するシステムおよび方法
US20120089972A1 (en) Image Based Servicing Of A Virtual Machine
US9753718B1 (en) Non-disruptive upgrade including rollback capabilities for a distributed file system operating within a cluster of nodes
US20060036832A1 (en) Virtual computer system and firmware updating method in virtual computer system
JP5048498B2 (ja) ブート・ディスク管理のユティリティ
CN1834912B (zh) 用于可扩展互联网引擎的iSCSI引导驱动系统及方法
US20080263183A1 (en) Management of Kernel configurations for nodes in a clustered system
US11086615B2 (en) Virtual appliance upgrades in high-availability (HA) computing clusters
US20060080399A1 (en) Remote configuration management for data processing units
JPH06231026A (ja) システムファイルの更新方法
Austin et al. Oracle Database Oracle Clusterware and Oracle Real Application Clusters Administration and Deployment Guide, 10g Release 2 (10.2) B14197-10
Allison et al. Oracle Real Application Clusters Installation Guide, 11g Release 1 (11.1) for Microsoft Windows B28251-05

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080815

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090224

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090422

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090526

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090626

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090804

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090810

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120814

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120814

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130814

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees