JP2005018384A - Information processing system - Google Patents

Information processing system Download PDF

Info

Publication number
JP2005018384A
JP2005018384A JP2003181928A JP2003181928A JP2005018384A JP 2005018384 A JP2005018384 A JP 2005018384A JP 2003181928 A JP2003181928 A JP 2003181928A JP 2003181928 A JP2003181928 A JP 2003181928A JP 2005018384 A JP2005018384 A JP 2005018384A
Authority
JP
Japan
Prior art keywords
power supply
servers
network interface
interface unit
uninterruptible power
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003181928A
Other languages
Japanese (ja)
Other versions
JP4408028B2 (en
Inventor
Takahiro Konno
恭弘 近野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Mitsubishi Electric Industrial Systems Corp
Original Assignee
Toshiba Mitsubishi Electric Industrial Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Mitsubishi Electric Industrial Systems Corp filed Critical Toshiba Mitsubishi Electric Industrial Systems Corp
Priority to JP2003181928A priority Critical patent/JP4408028B2/en
Publication of JP2005018384A publication Critical patent/JP2005018384A/en
Application granted granted Critical
Publication of JP4408028B2 publication Critical patent/JP4408028B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Power Sources (AREA)
  • Stand-By Power Supply Arrangements (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an information processing system in which an uninterruptible power supply unit and a plurality of servers directly communicate with each other, and all the servers are automatically shut down in power failure, and the shut down is confirmed to safely stop power supply. <P>SOLUTION: This information processing system is provided with a plurality of servers connected through a network, to which a power is supplied from an uninterruptible power supply unit equipped with a network interface, and each of the plurality of servers is provided with a monitoring process for monitoring the uninterruptible power supply unit, and when the power failure of a commercial power source connected to the uninterruptible power supply unit is detected by each monitor process after the lapse of a predetermined time, each of those servers is shut down after batch processing. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
この発明は、無停電電源装置から電源を供給されるとともに、ネットワークで接続された複数のサーバの情報処理システムに関するものであり、特に停電に対して保護された情報処理システムに係るものである。
【0002】
【従来の技術】
情報処理システムは、諸プログラムを実行し、ユーザに様々な機能を提供する。しかしながら停電などが発生すると、プログラムの破壊やハードウェアの故障発生の可能性があり、このような停電事故に対応して無停電電源装置を設置して保護を行っている。
この保護システムとして小規模なものでは1台の無停電電源装置(UPS)が1台のサーバをバックアップし、それらの間はRS232Cレベルの信号で接続して運転状態の情報の授受を行っている。サーバに設けられた無停電電源装置の監視プロセスは、無停電電源装置の運転状態を常時監視し、商用電源の停電が一定期間継続すると、サーバをシャットダウンする技術が示されている(例えば特許文献1参照)。
また、1台の無停電電源装置がクライアントサーバシステムなどの数台の情報処理装置をバックアップする中規模なシステムでは、サーバと無停電電源装置とは専用の通信線を用いて1対1で接続され、RS232Cレベルの信号で通信されている。
【0003】
【特許文献1】
特開2002−297270号公報[0008]欄、図1
【0004】
【発明が解決しようとする課題】
特許文献1に示された従来の小規模システムや、前記中規模システムでは、システム毎に小型無停電電源装置を分散して設置されているが、近年のサーバシステムは大容量化、大規模化し、サーバシステムが専用のサーバ室に集中設置される傾向が多くなってきた。それに伴い1台の大型無停電電源装置でもって多くの台数のサーバを集中してバックアップするシステムが増加している。このような大規模なシステムでは、サーバ室と無停電電源室とが遠く離れている場合が多く、RS232Cレベルの信号を用いる前記従来技術に開示されているものでは対応できないという問題点がある。また、サーバが何らかの原因で停止していると、これにつながるクライアント・コンピュータをシャットダウンできないという問題や、サーバシャットダウン後の給電停止処理において、無停電電源装置は直接通信しているサーバのシャットダウン状態は監視できるが、クライアント・コンピュータの状態は監視できないため、安全な状態での給電停止処理が行えないという課題もあった。
【0005】
この発明は上記のような課題を解決するためになされたものであり、無停電電源装置と複数のサーバとが互いに直接通信できるとともに、停電時にはすべてのサーバを自動的にシャットダウンとその確認を行い、安全に給電停止可能な情報処理システムを提供することを目的とする。
【0006】
【課題を解決するための手段】
この発明に係る情報処理システムは、ネットワーク・インタフェース部が設けられた無停電電源装置から電源を供給されるとともに、ネットワークで接続された複数のサーバを備え、複数のサーバには、無停電電源装置を監視する監視プロセスが設けられており、監視プロセスのそれぞれが無停電電源装置につながる商用電源の停電を所定の時間経過して検出したとき、複数のサーバのそれぞれがバッチ処理後にシャットダウンするものである。
【0007】
また、ネットワーク・インタフェース部には給電停止の有効/無効の設定手段が設けられており、複数のサーバには、無停電電源装置を監視する監視プロセスが設けられており、監視プロセスのそれぞれが無停電電源装置につながる商用電源の停電を所定の時間経過して検出したとき、複数のサーバはバッチ処理後にそれぞれがシャットダウンするとともに、ネットワーク・インタフェース部は、給電停止の有効/無効の設定手段が給電停止を有効としたとき、複数のサーバのすべてがシャットダウンしていることを確認後、無停電電源装置に設けられたバッテリからの給電を停止するよう指令するものである。
【0008】
またさらに、ネットワーク・インタフェース部は、複数のサーバの台数を管理し、監視プロセス内のソフトウェアモジュール数が契約数を越える場合に、監視プロセスの起動を行わないものである。
【0009】
【発明の実施の形態】
実施の形態1.
以下、この発明の実施の形態1を図に基づいて説明する。
図1はこの実施の形態1による情報処理システムを示す構成図である。図において、無停電電源装置(UPS)1は、n台のサーバ2a〜2n(SV1〜SVn)に電源線5を介して電源を供給する。この無停電電源装置1には、ネットワーク・インタフェース部11が設けられておりTCP/IPを実装したLANカードを備え、前記サーバ2a〜2nとネットワーク6を介して接続されている。前記それぞれのサーバ2a〜2nには無停電電源装置1を監視する監視プロセス21が設けられている。また各サーバ2a〜2nには図示省略したクライアント・コンピュータ等が接続されている。なお、無停電電源装置1は商用電源4から給電されている。
【0010】
次に図2に示すフローチャートに従って動作を説明する。S10において、それぞれのサーバ2a〜2nに設けられた、無停電電源装置(以下、UPSと略す)1の監視プロセス21は、所定の周期で前記UPS1にポーリングコマンドを送信する。S20でUPS1のネットワーク・インタフェース部(LANカード)11はコマンドを受信し、S22でUPS1の運転状態情報を送信し、S11でその情報を各監視プロセス21は受信する。ここで前記ポーリング間隔は常時5秒とする。
商用電源4に停電が発生した場合、UPS1はバッテリ運転に切り替えられて各サーバ2a〜2nに給電する。S30でUPS1が商用電源4の停電を検知し、その情報を各監視プロセス21に送信し、前記S11で停電情報を受信する。S12、S13で復電待ち時間(T1)以上経過すると、UPS1に設けられたバッテリからの給電で動作のサーバ2a〜2nはS14のバッチ処理に移行する。復電待ち時間(T1)はすべてのサーバ2a〜2nにおいて同じ値を設定する。これは復電するタイミングによって、シャットダウンするサーバと、しないサーバの混在を避けるためである。
【0011】
S14のバッチ処理は商用電源4が復電しても継続される。このS14のバッチ処理としては、データベースなどのアプリケーション終了処理や、クライアントコンピュータのシャットダウン処理を組み込む。次にS16でOSシャットダウンが実行され、各サーバ2a〜2nは停止状態となる。
以上のようにこの実施の形態1では、各サーバ2a〜2nにUPS1の監視プロセス21を設け、UPS1と直接通信してその運転状態を確認するようにしたので、各サーバは他のサーバの動作状況に影響を受けることなく独自にシャットダウンをすることができる。なお、図1に示したネットワーク6としては、既存のネットワーク環境を利用可能であり、新たな通信ケーブルを敷設する必要はない。
【0012】
実施の形態2.
実施の形態2を図に基づいて説明する。この実施の形態2は前述した実施の形態1の図1に示すシステム構成図のUPS1に設けられたネットワーク・インタフェース部11内にエントリテーブル111を設けたものである。このエントリテーブル111はすべてのサーバ2a〜2nのIPアドレスを登録したものである。
そしてまた、前述した図2のフローチャートに、新たにサーバエントリを登録/削除するステップ21と、エントリテーブル111に登録されているすべてのサーバに停電発生情報を自動送信するステップ31を追加して設けた。この実施の形態2のフローチャートを図3に示す。
図4は図3に示したサーバエントリの登録/削除するステップ21の詳細を示す。図5は各サーバ2a〜2nからUPS1に送信されるコマンドのTCP/IPパケットとエントリテーブル111の概略構造を示す。
【0013】
次に動作を図4、図5に基づいて説明する。なお、説明省略したステップは前述の実施の形態1と同じである。図4のS20にてインタフェース・ネットワーク部11は、各サーバ2a〜2nから送信されるポーリングコマンドを受信すると、図5に示すIPヘッダ部の送信元IPアドレスと同じIPアドレスが、S212にてエントリテーブル111に登録されていない場合には、S213にて送信元IPアドレスをエントリテーブル111に登録する。なおここではポーリング間隔は1分とする。
次に、S215のタイマー管理ジョブは、エントリ毎に積算カウンタを設けてポーリングコマンドの受信状態を監視し、所定時間(この場合、1分間)ポーリングコマンドを受信しない場合には、S216にてタイムオーバ処理として該当するサーバのIPアドレスをエントリテーブル111から削除する。なお、通常時サーバからポーリングコマンドを受信すると(S20)、ステップ214でタイマをリセットし、前記積算カウンタをゼロにする。
【0014】
次に図3において、ネットワーク・インタフェース部11がS30で停電を検知すると、S31でエントリテーブル111に登録されているすべてのサーバに停電発生情報を自動送信する。
各サーバ2a〜2nの監視プロセス21がS11にて前記停電発生情報を受信して、S21で停電を検出すると、その期間のみポーリングコマンドを送信(S10)する周期を所定のものより短縮する。ここでは所定のポーリング間隔1分を5秒に短縮する。復電待ち時間T1以内に復電した場合には、ポーリング間隔を所定の1分に戻す。図3に示す他のステップは前記実施の形態1と同様であるので説明を省略する。
【0015】
このように、実施の形態2では、図3のフローチャートに示したS21に、サーバエントリの登録/削除ステップを設け、エントリテーブルを自動的に更新するようにしたので、停電発生情報をサーバに自動送信できるようになり、ポーリング間隔が実施の形態1では5秒であったものを1分間と延ばすことができるので、ネットワーク情報量の軽減を図ることができる。
また、サーバ起動時は、図4に示したS213により自動的にエントリが登録され、サーバ停止時にはS215とS216により自動的にエントリが削除されるので、この実施の形態2のシステムの導入時およびシステム運用中のサーバの増設または移設時のインストール作業が省力化できる。
【0016】
実施の形態3.
実施の形態3を図6〜図8に基づいて説明する。この実施の形態3は前述した実施の形態2のフローチャート図3に図6に示すS50を追加したものである。S50はすべてのサーバのシャットダウン後にUPS1からの給電を停止する処理である。そしてまた、図7は前記図6に示すサーバエントリの登録/削除するステップ21の詳細を示すものであり、前記実施の形態2のフローにコマンドの種類を判断するステップ211を設けたものである。図8は停電から給電停止までの商用電源4、各サーバ2a〜2nの動作例を示すタイムチャートである。
【0017】
次に、図6、図7に基づいて動作を説明する。なお、フローチャート図に記載の各ステップの説明を省略したものは、前述の実施の形態1、2と同じである。図6に示すS14ですべてのサーバ2a〜2nがバッチ処理を完了すると、S15でUPS1にエントリ削除要求コマンドを送信する。ネットワーク・インタフェース部11は送信コマンドが図7のS211に示すようにエントリ削除要求コマンドと判断すると、S216にてエントリテーブル111から送信元のサーバのIPアドレスを削除する。そして図6のS50内に示すS32のサーバシャットダウン後の給電停止設定が有効の場合、すべてのサーバ2a〜2nからエントリ削除要求コマンドを受信して、S33にてエントリテーブル111が空になったことを確認すると、S34の給電停止待ち時間(T2)を経過後、S35で給電停止指令をUPS1本体に送信し、UPS1はS41にてバッテリによる給電を停止する。なお前記給電停止待ち時間(T2)は次の条件を満たす時間とする。すなわち、給電停止待ち時間(T2)>最も長いサーバのOSシャットダウン時間。
【0018】
次に図8によって動作を説明する。前述の図6のS13、S14に示すように、商用電源4の停電が復電待ち時間(T1)以上継続すると、各サーバ2a〜2nは一斉にバッチ処理を開始する。ここではサーバ2nのバッチ処理(S14)が終了するとエントリテーブルが空になり給電待ち時間(T2)後に給電停止する(S41)。T2はサーバ2nのOSシャットダウン時間以上の値が設定される。
このようにこの実施の形態3では、図6のS15に示したようにエントリ削除要求コマンドを送信するステップを設け、OSがシャットダウンを開始する直前にエントリテーブルからエントリを削除するようにしたので、UPS1内のネットワーク・インタフェース部11はエントリテーブルの状態を監視するだけで、各サーバ2a〜2nのシャットダウン状態を確認でき、安全な状態での給電停止をすることができる。
さらに何らかの原因でバッチ処理中にプログラムがハングアップした場合、該当するサーバのエントリは削除されないため、給電は継続されてフェイルセーフ側に動作し、より安全性の高い情報処理システムを得ることができる。
【0019】
実施の形態4.
実施の形態4を図に基づいて説明する。この実施の形態4は前述した実施の形態3において、商用電源4が停電中にサーバがシャットダウンし、UPS1が給電停止状態で商用電源4が復電した時のUPS1の自動給電を行うステップを追加したものであり、そのフローを図9に示す。この実施の形態4におけるUPS1には、自動給電の有効/無効の設定手段と、バッテリ充電状態の確認の有効/無効の設定手段とが設けられている。図9に示すS60で自動給電の設定が無効の場合は、給電をせず処理を終了する。次に前記S60で自動給電の設定が有効のとき、S61でバッテリ充電状態確認の設定を確認し、無効の場合にはS63で直ちに給電を開始し、一方S61で有効の場合には、S62、S63に示すように、バッテリの充電状態が満充電になるまで待って給電を開始する。
【0020】
このようにこの実施の形態4では、図9に示したようにS60の自動給電設定のステップを設けているので、システムの運用方法に応じた順応性ある無停電電源装置を備えた情報処理システムを得ることができる。その例として、無人で自動運用されるシステムでは、自動給電の有効/無効の設定手段の設定を有効とし、システム管理者が駐在しマニュアルによる運用方案が決められたシステムでは、設定を無効とすることで、様々なシステムに対応できる。さらに、バッテリ充電状態の確認処理(S62)を設けているので、バッテリが満充電になった状態で給電を開始することができるため、充電途中に再度停電が発生してサーバのシャットダウンが完了する前にバッテリ容量が空になる不具合をなくすことができ、信頼性を高めたシステムを得ることができる。
【0021】
実施の形態5.
実施の形態5を図に基づいて説明する。図10は前述した実施の形態1のUPS1の監視プロセス21の起動スクリプトの動作を示すものである。監視プロセス21のモジュールと前記起動スクリプトは同一のソフトウェア・パッケージに保存され、専用のインストールソフトでサーバ2a〜2nに展開される。 さらに、UPS1のネットワーク・インタフェース部11には、ソフトウェア契約数に相当するIDコードが設けられている。前記IDコードはネットワーク・インタフェース部11のLANカードのMACアドレス別に暗号化された独自のコードである。
【0022】
次に動作について説明する。サーバ2a〜2nのUPS管理プロセス起動スクリプトは、サーバ2a〜2nの再起動時に実行される。前記UPS管理プロセス起動スクリプトが実行されると、S70でUPS1のネットワーク・インタフェース部11に起動許可の要求を送信する。UPS1のネットワーク・インタフェース部11は、S80〜S84に示すようにソフトウェア契約数と現在のサーバエントリ数とを比較して、サーバエントリ数の方が少ない場合には起動許可を、サーバエントリ数が多い場合には起動拒否を送信する。S71〜S74に示すようにサーバ2a〜2nの前記UPS管理プロセス起動スクリプトがネットワーク・インタフェース部11から応答を受信し、結果が許可の場合は監視プロセス21を起動し、拒否の場合には警告メッセージを表示して処理を終了する。
【0023】
このようにこの実施の形態5では、図10のS81に示すようにソフトウェア契約数と、現在のサーバエントリ数とを比較するので、ネットワーク・インタフェース部が一括してサーバ2a〜2nのソフトウェアライセンスの使用状況を確認することができるので、契約外のソフトウェアの使用を防止可能となる。またシステム運用中にソフトウェア契約の新規追加の必要が生じた場合でも、新しいIDコードをネットワーク・インタフェース部11に設定するだけで簡単に対応できる。
【0024】
【発明の効果】
この発明は以上述べたような構成の情報処理システムであるので、以下のような効果がある。
ネットワーク・インタフェース部が設けられた無停電電源装置から電源を供給されるとともに、ネットワークで接続された複数のサーバを備え、複数のサーバには、無停電電源装置を監視する監視プロセスが設けられており、監視プロセスのそれぞれが無停電電源装置につながる商用電源の停電を所定の時間経過して検出したとき、複数のサーバのそれぞれがバッチ処理後にシャットダウンするものであるので、無停電電源装置と監視プロセスが直接通信してその運転状態を確認するので、各サーバは他のサーバの動作状況に影響されることなく、シャットダウンを行えるという優れた効果を奏する。
【0025】
また、ネットワーク・インタフェース部には給電停止の有効/無効の設定手段が設けられており、複数のサーバの監視プロセスのそれぞれが無停電電源装置につながる商用電源の停電を所定の時間経過して検出したとき、複数のサーバはバッチ処理後にそれぞれがシャットダウンするとともに、ネットワーク・インタフェース部は、給電停止の有効/無効の設定手段が給電停止を有効としたとき、複数のサーバのすべてがシャットダウンしていることを確認後、無停電電源装置に設けられたバッテリからの給電を停止するよう指令するものであり、停電発生情報をサーバに自動送信できるので、ポーリング間隔を延ばすこともでき、ネットワーク情報量の軽減が図れる。また、システム導入時、運用中のサーバの増設または移設時のインストール作業が省力化できる。
【0026】
またさらに、ネットワーク・インタフェース部は、複数のサーバの台数を管理し、監視プロセス内のソフトウェアモジュール数が契約数を越える場合に、監視プロセスの起動を行わないものであるので、契約外のソフトウェアの使用を防止でき、システム運用中のソフトウェアの新規追加が生じても簡単に対応できるという優れた効果を奏する。
【図面の簡単な説明】
【図1】この発明の実施の形態1〜5の情報処理システムを示す構成図である。
【図2】この発明の実施の形態1の動作を示すフローチャート図である。
【図3】この発明の実施の形態2の動作を示すフローチャート図である。
【図4】この発明の実施の形態2のサーバエントリ登録/削除の動作詳細を示すフローチャート図である。
【図5】この発明の実施の形態2の構成の概略を示す図である。
【図6】この発明の実施の形態3の動作を示すフローチャート図である。
【図7】この発明の実施の形態3のサーバエントリ登録/削除の動作詳細を示すフローチャート図である。
【図8】この発明の実施の形態3のタイミングを示すチャート図である。
【図9】この発明の実施の形態4の自動給電を示すフローチャート図である。
【図10】この発明の実施の形態5の動作を示すフローチャート図である。
【符号の説明】
1 無停電電源装置、2a〜2n サーバ、4 商用電源、
6 ネットワーク、11 ネットワーク・インタフェース部、
21 監視プロセス、111 エントリテーブル。
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an information processing system of a plurality of servers which are supplied with power from an uninterruptible power supply and connected via a network, and particularly relates to an information processing system protected against a power failure.
[0002]
[Prior art]
The information processing system executes various programs and provides various functions to the user. However, when a power failure occurs, there is a possibility of program destruction or hardware failure, and an uninterruptible power supply is installed to protect against such a power failure.
In this small protection system, one uninterruptible power supply (UPS) backs up one server, and connects between them using RS232C level signals to exchange operating status information. . The uninterruptible power supply monitoring process provided in the server constantly monitors the operating state of the uninterruptible power supply, and shows a technique for shutting down the server when a commercial power failure continues for a certain period (for example, Patent Documents). 1).
In a medium-sized system where one uninterruptible power supply backs up several information processing devices such as a client server system, the server and the uninterruptible power supply are connected one-to-one using a dedicated communication line. Then, communication is performed using an RS232C level signal.
[0003]
[Patent Document 1]
JP-A-2002-297270 [0008] column, FIG.
[0004]
[Problems to be solved by the invention]
In the conventional small-scale system disclosed in Patent Document 1 and the medium-scale system, small uninterruptible power supply units are distributed and installed in each system. However, recent server systems have increased in capacity and scale. The server system has been increasingly installed in a dedicated server room. Along with this, there is an increasing number of systems for centrally backing up a large number of servers with one large uninterruptible power supply. In such a large-scale system, the server room and the uninterruptible power supply room are often far away from each other, and there is a problem that the conventional technique using the RS232C level signal cannot cope with the problem. Also, if the server is stopped for some reason, the client computer connected to it cannot be shut down, and in the power supply stop processing after server shutdown, the uninterruptible power supply directly shuts down the server that is communicating Although it can be monitored, the state of the client computer cannot be monitored, so there is a problem that the power supply stop process cannot be performed in a safe state.
[0005]
The present invention has been made to solve the above-described problems, and the uninterruptible power supply and a plurality of servers can directly communicate with each other, and all servers are automatically shut down and confirmed in the event of a power failure. An object of the present invention is to provide an information processing system capable of safely stopping power supply.
[0006]
[Means for Solving the Problems]
An information processing system according to the present invention is provided with power from an uninterruptible power supply device provided with a network interface unit, and includes a plurality of servers connected via a network. Each of the servers is shut down after batch processing when a power failure of the commercial power source connected to the uninterruptible power supply is detected after a predetermined time. is there.
[0007]
The network interface unit is provided with setting means for enabling / disabling power supply, and a plurality of servers are provided with a monitoring process for monitoring the uninterruptible power supply. When a commercial power failure connected to the power failure power supply is detected after a lapse of a predetermined time, each of the multiple servers shuts down after batch processing, and the network interface unit is powered by the power supply stop valid / invalid setting means. When the stop is validated, it is instructed to stop the power supply from the battery provided in the uninterruptible power supply after confirming that all of the plurality of servers are shut down.
[0008]
Furthermore, the network interface unit manages the number of servers, and does not start the monitoring process when the number of software modules in the monitoring process exceeds the number of contracts.
[0009]
DETAILED DESCRIPTION OF THE INVENTION
Embodiment 1 FIG.
Embodiment 1 of the present invention will be described below with reference to the drawings.
FIG. 1 is a block diagram showing an information processing system according to the first embodiment. In the figure, an uninterruptible power supply (UPS) 1 supplies power to n servers 2a to 2n (SV1 to SVn) via a power line 5. The uninterruptible power supply 1 is provided with a network interface unit 11 and is provided with a LAN card mounted with TCP / IP, and is connected to the servers 2 a to 2 n via the network 6. Each of the servers 2a to 2n is provided with a monitoring process 21 for monitoring the uninterruptible power supply 1. In addition, a client computer (not shown) is connected to each of the servers 2a to 2n. The uninterruptible power supply 1 is supplied with power from the commercial power supply 4.
[0010]
Next, the operation will be described with reference to the flowchart shown in FIG. In S10, the monitoring process 21 of the uninterruptible power supply (hereinafter abbreviated as UPS) 1 provided in each of the servers 2a to 2n transmits a polling command to the UPS 1 at a predetermined cycle. The network interface unit (LAN card) 11 of the UPS 1 receives the command in S20, transmits the operating state information of the UPS 1 in S22, and each monitoring process 21 receives the information in S11. Here, the polling interval is always 5 seconds.
When a power failure occurs in the commercial power supply 4, the UPS 1 is switched to battery operation and supplies power to the servers 2a to 2n. In S30, the UPS 1 detects a power failure of the commercial power supply 4, transmits the information to each monitoring process 21, and receives the power failure information in S11. When the power recovery waiting time (T1) or more elapses in S12 and S13, the servers 2a to 2n that are operated by power supply from the battery provided in the UPS 1 shift to the batch processing of S14. The power recovery waiting time (T1) is set to the same value in all the servers 2a to 2n. This is to avoid a mixture of servers that are shut down and servers that are not shut down depending on the power recovery timing.
[0011]
The batch processing in S14 is continued even if the commercial power source 4 is restored. As the batch processing of S14, application termination processing such as a database and shutdown processing of the client computer are incorporated. Next, OS shutdown is executed in S16, and the servers 2a to 2n are stopped.
As described above, in the first embodiment, each server 2a to 2n is provided with the monitoring process 21 of the UPS 1, and directly communicates with the UPS 1 so as to check its operation state. You can shut down independently without being affected by the situation. As the network 6 shown in FIG. 1, an existing network environment can be used, and there is no need to install a new communication cable.
[0012]
Embodiment 2. FIG.
The second embodiment will be described with reference to the drawings. In the second embodiment, an entry table 111 is provided in the network interface unit 11 provided in the UPS 1 of the system configuration diagram shown in FIG. This entry table 111 is a table in which the IP addresses of all the servers 2a to 2n are registered.
In addition, a step 21 for newly registering / deleting a server entry and a step 31 for automatically transmitting power failure occurrence information to all the servers registered in the entry table 111 are provided in the flowchart of FIG. It was. A flowchart of the second embodiment is shown in FIG.
FIG. 4 shows details of the step 21 for registering / deleting the server entry shown in FIG. FIG. 5 shows a schematic structure of a TCP / IP packet of a command transmitted from each of the servers 2 a to 2 n to the UPS 1 and the entry table 111.
[0013]
Next, the operation will be described with reference to FIGS. Note that the omitted steps are the same as those in the first embodiment. When the interface network unit 11 receives the polling command transmitted from each of the servers 2a to 2n in S20 of FIG. 4, the same IP address as the transmission source IP address of the IP header unit shown in FIG. 5 is entered in S212. If it is not registered in the table 111, the source IP address is registered in the entry table 111 in S213. Here, the polling interval is 1 minute.
Next, the timer management job in S215 provides an accumulation counter for each entry to monitor the reception status of the polling command. If the polling command is not received for a predetermined time (in this case, 1 minute), the time is over in S216. As a process, the IP address of the corresponding server is deleted from the entry table 111. When a polling command is received from the normal server (S20), the timer is reset at step 214, and the integration counter is set to zero.
[0014]
Next, in FIG. 3, when the network interface unit 11 detects a power failure in S30, the power failure occurrence information is automatically transmitted to all the servers registered in the entry table 111 in S31.
When the monitoring process 21 of each of the servers 2a to 2n receives the power failure occurrence information at S11 and detects a power failure at S21, the period for transmitting the polling command (S10) only during that period is shortened from a predetermined one. Here, the predetermined polling interval of 1 minute is shortened to 5 seconds. When power is restored within the power recovery waiting time T1, the polling interval is returned to a predetermined one minute. The other steps shown in FIG. 3 are the same as those in the first embodiment, and a description thereof will be omitted.
[0015]
As described above, in the second embodiment, the server entry registration / deletion step is provided in S21 shown in the flowchart of FIG. 3 so that the entry table is automatically updated. Since transmission can be performed and the polling interval of 5 seconds in the first embodiment can be extended to 1 minute, the amount of network information can be reduced.
Further, when the server is started, an entry is automatically registered by S213 shown in FIG. 4, and when the server is stopped, the entry is automatically deleted by S215 and S216. Therefore, when the system of the second embodiment is introduced and Labor savings can be achieved when installing or relocating servers during system operation.
[0016]
Embodiment 3 FIG.
A third embodiment will be described with reference to FIGS. The third embodiment is obtained by adding S50 shown in FIG. 6 to the flowchart of the second embodiment described above. S50 is a process of stopping power supply from the UPS 1 after all servers are shut down. FIG. 7 shows details of the step 21 for registering / deleting the server entry shown in FIG. 6, and the step 211 for judging the type of command is provided in the flow of the second embodiment. . FIG. 8 is a time chart showing an operation example of the commercial power supply 4 and each of the servers 2a to 2n from a power failure to power supply stop.
[0017]
Next, the operation will be described with reference to FIGS. In addition, what abbreviate | omitted description of each step as described in a flowchart figure is the same as Embodiment 1 and 2 mentioned above. When all the servers 2a to 2n complete batch processing in S14 shown in FIG. 6, an entry deletion request command is transmitted to UPS 1 in S15. When the network interface unit 11 determines that the transmission command is an entry deletion request command as shown in S211 of FIG. 7, the network interface unit 11 deletes the IP address of the transmission source server from the entry table 111 in S216. If the power supply stop setting after the server shutdown in S32 shown in S50 of FIG. 6 is valid, the entry deletion request command is received from all the servers 2a to 2n, and the entry table 111 is emptied in S33. After the elapse of the power supply stop waiting time (T2) in S34, a power supply stop command is transmitted to the UPS1 main body in S35, and the UPS1 stops power supply by the battery in S41. The power supply stop waiting time (T2) is a time that satisfies the following condition. That is, the power supply stop waiting time (T2)> the OS shutdown time of the longest server.
[0018]
Next, the operation will be described with reference to FIG. As shown in S13 and S14 of FIG. 6 described above, when the power failure of the commercial power source 4 continues for the power recovery waiting time (T1) or longer, the servers 2a to 2n start batch processing all at once. Here, when the batch process (S14) of the server 2n ends, the entry table becomes empty, and the power supply is stopped after the power supply waiting time (T2) (S41). T2 is set to a value longer than the OS shutdown time of the server 2n.
As described above, in the third embodiment, as shown in S15 of FIG. 6, the step of transmitting the entry deletion request command is provided, and the entry is deleted from the entry table immediately before the OS starts shutdown. The network interface unit 11 in the UPS 1 can confirm the shutdown state of each of the servers 2a to 2n only by monitoring the state of the entry table, and can stop the power supply in a safe state.
Furthermore, if the program hangs up during batch processing for some reason, the entry of the corresponding server is not deleted, so power supply continues and operates on the fail-safe side, so that a safer information processing system can be obtained. .
[0019]
Embodiment 4 FIG.
The fourth embodiment will be described with reference to the drawings. The fourth embodiment is the same as the third embodiment described above, except that the server is shut down while the commercial power supply 4 is out of power, and the UPS 1 is automatically powered when the commercial power supply 4 is restored with the power supply stopped in the UPS1 power supply stop state. FIG. 9 shows the flow. In the UPS 1 according to the fourth embodiment, automatic power supply valid / invalid setting means and battery charge state confirmation valid / invalid setting means are provided. If the automatic power supply setting is invalid in S60 shown in FIG. 9, the process ends without supplying power. Next, when the automatic power supply setting is valid in S60, the battery charge state confirmation setting is confirmed in S61. If invalid, power supply is immediately started in S63, while if valid in S61, S62, As shown in S63, power supply is started after the battery is fully charged.
[0020]
As described above, in the fourth embodiment, as shown in FIG. 9, since the automatic power supply setting step of S60 is provided, the information processing system provided with an uninterruptible power supply apparatus that adapts to the system operation method. Can be obtained. For example, in a system that is automatically operated by unattended, the setting of the automatic power supply valid / invalid setting means is valid, and in a system in which a system administrator is stationed and a manual operation plan is decided, the setting is invalidated. Therefore, it can correspond to various systems. Furthermore, since the battery charge state confirmation process (S62) is provided, power supply can be started in a state where the battery is fully charged, so that a power failure occurs again during the charge and the shutdown of the server is completed. The problem that the battery capacity is emptied before can be eliminated, and a system with improved reliability can be obtained.
[0021]
Embodiment 5 FIG.
The fifth embodiment will be described with reference to the drawings. FIG. 10 shows the operation of the startup script of the monitoring process 21 of the UPS 1 according to the first embodiment. The module of the monitoring process 21 and the startup script are stored in the same software package, and are deployed on the servers 2a to 2n with dedicated installation software. Further, the network interface unit 11 of the UPS 1 is provided with an ID code corresponding to the number of software contracts. The ID code is a unique code encrypted for each MAC address of the LAN card of the network interface unit 11.
[0022]
Next, the operation will be described. The UPS management process startup scripts of the servers 2a to 2n are executed when the servers 2a to 2n are restarted. When the UPS management process activation script is executed, an activation permission request is transmitted to the network interface unit 11 of the UPS 1 in S70. The network interface unit 11 of the UPS 1 compares the number of software contracts with the current number of server entries as shown in S80 to S84. If the number of server entries is smaller, the network interface unit 11 gives a start permission and the number of server entries is larger. In the case of sending activation rejection. As shown in S71 to S74, the UPS management process activation script of the servers 2a to 2n receives a response from the network interface unit 11, and activates the monitoring process 21 if the result is permitted, and a warning message if denied. Is displayed and the process ends.
[0023]
As described above, in the fifth embodiment, since the number of software contracts is compared with the current number of server entries as shown in S81 of FIG. 10, the network interface unit collectively collects the software licenses of the servers 2a to 2n. Since the usage status can be confirmed, it is possible to prevent the use of software outside the contract. Even when a new software contract needs to be added during system operation, it can be easily handled by simply setting a new ID code in the network interface unit 11.
[0024]
【The invention's effect】
Since the present invention is an information processing system configured as described above, the following effects can be obtained.
A power supply is supplied from an uninterruptible power supply with a network interface unit, and a plurality of servers connected by a network are provided. The plurality of servers are provided with a monitoring process for monitoring the uninterruptible power supply. When each of the monitoring processes detects a power failure of the commercial power supply connected to the uninterruptible power supply after a predetermined time has elapsed, each of the multiple servers shuts down after batch processing. Since the process directly communicates and confirms the operation state, each server has an excellent effect that it can be shut down without being affected by the operation status of other servers.
[0025]
In addition, the network interface section is equipped with a power supply stop valid / invalid setting means, and each of the monitoring processes of multiple servers detects a power failure of the commercial power supply connected to the uninterruptible power supply after a predetermined time. Multiple servers shut down after batch processing, and the network interface unit shuts down all of the multiple servers when the power supply stop valid / invalid setting means enables power supply stop. After confirming that, the power supply from the battery installed in the uninterruptible power supply is instructed to stop, and the power failure occurrence information can be automatically sent to the server, so the polling interval can be extended and the amount of network information Reduction can be achieved. In addition, it is possible to save labor when installing a system or installing or moving a server in operation.
[0026]
Furthermore, the network interface unit manages the number of servers, and does not start the monitoring process when the number of software modules in the monitoring process exceeds the number of contracts. It is possible to prevent the use, and it has an excellent effect that it can easily cope with new addition of software during system operation.
[Brief description of the drawings]
FIG. 1 is a configuration diagram showing an information processing system according to first to fifth embodiments of the present invention.
FIG. 2 is a flowchart showing the operation of the first embodiment of the present invention.
FIG. 3 is a flowchart showing the operation of the second embodiment of the present invention.
FIG. 4 is a flowchart showing details of the server entry registration / deletion operation according to the second embodiment of the present invention.
FIG. 5 is a diagram schematically showing the configuration of a second embodiment of the present invention.
FIG. 6 is a flowchart showing the operation of the third embodiment of the present invention.
FIG. 7 is a flowchart showing details of operation of server entry registration / deletion according to Embodiment 3 of the present invention;
FIG. 8 is a chart showing timing in the third embodiment of the present invention.
FIG. 9 is a flowchart showing automatic power feeding according to the fourth embodiment of the present invention.
FIG. 10 is a flowchart showing the operation of the fifth embodiment of the present invention.
[Explanation of symbols]
1 uninterruptible power supply, 2a-2n server, 4 commercial power supply,
6 network, 11 network interface part,
21 Monitoring process, 111 entry table.

Claims (5)

ネットワーク・インタフェース部が設けられた無停電電源装置から電源を供給されるとともに、ネットワークで接続された複数のサーバを備えた情報処理システムであって、前記複数のサーバには、前記無停電電源装置を監視する監視プロセスが設けられており、前記監視プロセスのそれぞれが前記無停電電源装置につながる商用電源の停電を所定の時間経過して検出したとき、前記複数のサーバのそれぞれがバッチ処理後にシャットダウンすることを特徴とする情報処理システム。An information processing system that is supplied with power from an uninterruptible power supply device provided with a network interface unit and includes a plurality of servers connected via a network, the plurality of servers including the uninterruptible power supply device When each of the plurality of monitoring processes detects a power failure of a commercial power source connected to the uninterruptible power supply after a predetermined time, each of the plurality of servers is shut down after batch processing. An information processing system characterized by ネットワーク・インタフェース部が設けられた無停電電源装置から電源を供給されるとともに、ネットワークで接続された複数のサーバを備えた情報処理システムであって、前記ネットワーク・インタフェース部には、前記複数のサーバのIPアドレスを登録/削除するエントリテーブルが設けられており、前記複数のサーバには前記無停電電源装置を監視する監視プロセスが設けられており、前記ネットワーク・インタフェース部が前記無停電電源装置につながる商用電源の停電を検知すると、前記エントリテーブルに登録されているすべての前記複数のサーバに停電発生情報を通知するとともに、前記監視プロセスは停電を検出すると、所定の間隔より短縮した周期のポーリングコマンドを送信し、復電待ち時間内に復電を検出すると所定の間隔の周期のポーリングコマンドに戻して送信することを特徴とする情報処理システム。An information processing system including a plurality of servers that are supplied with power from an uninterruptible power supply device provided with a network interface unit and connected via a network, wherein the network interface unit includes the plurality of servers An entry table for registering / deleting the IP address of the uninterruptible power supply is provided, a monitoring process for monitoring the uninterruptible power supply is provided in the plurality of servers, and the network interface unit is connected to the uninterruptible power supply. When a power failure of a connected commercial power source is detected, power failure occurrence information is notified to all of the plurality of servers registered in the entry table, and when a power failure is detected, the monitoring process polls at a period shorter than a predetermined interval. Send a command and detect power recovery within the power recovery wait time. Information processing system and transmitting back of the polling command cycle intervals. ネットワーク・インタフェース部が設けられた無停電電源装置から電源を供給されるとともに、ネットワークで接続された複数のサーバを備えた情報処理システムであって、前記ネットワーク・インタフェース部には給電停止の有効/無効の設定手段が設けられており、前記複数のサーバには、前記無停電電源装置を監視する監視プロセスが設けられており、前記監視プロセスのそれぞれが前記無停電電源装置につながる商用電源の停電を所定の時間経過して検出したとき、前記複数のサーバはバッチ処理後にそれぞれがシャットダウンするとともに、前記ネットワーク・インタフェース部は、前記給電停止の有効/無効の設定手段が給電停止を有効としたとき、前記複数のサーバのすべてがシャットダウンしていることを確認後、前記無停電電源装置に設けられたバッテリからの給電を停止するよう指令することを特徴とする情報処理システム。An information processing system that is supplied with power from an uninterruptible power supply device provided with a network interface unit and includes a plurality of servers connected by a network, wherein the network interface unit includes An invalid setting means is provided, and the plurality of servers are provided with a monitoring process for monitoring the uninterruptible power supply, and each of the monitoring processes is connected to the uninterruptible power supply. Are detected after a lapse of a predetermined time, and the plurality of servers are each shut down after batch processing, and the network interface unit is configured such that the power supply stop valid / invalid setting means enables power supply stop. After confirming that all of the plurality of servers are shut down, The information processing system characterized in that to command to stop power supply from the battery provided in the power supply. 前記無停電電源装置のネットワーク・インタフェース部には、自動給電の有効/無効設定手段および、バッテリ充電状態の有効/無効設定手段が設けられており、前記無停電電源装置に設けられたバッテリの給電停止中に商用電源が復電した場合、前記ネットワーク・インタフェース部の自動給電の有効/無効設定手段が自動給電を有効としたとき、前記バッテリ充電状態の有効/無効設定手段は、バッテリの満充電状態を確認した後、自動給電を行うことを特徴とする請求項3に記載の情報処理システム。The network interface unit of the uninterruptible power supply device is provided with automatic power supply valid / invalid setting means and battery charge state valid / invalid setting means. The power supply of the battery provided in the uninterruptible power supply apparatus When the commercial power supply is restored during the stop, when the automatic power supply valid / invalid setting means of the network interface unit validates the automatic power supply, the battery charge state valid / invalid setting means The information processing system according to claim 3, wherein automatic power feeding is performed after the state is confirmed. ネットワーク・インタフェース部が設けられた無停電電源装置から電源を供給されるとともに、ネットワークで接続された複数のサーバを備えた情報管理システムであって、前記複数のサーバには、前記無停電電源装置を監視する監視プロセスが設けられているとともに、前記ネットワーク・インタフェース部は、前記複数のサーバの台数を管理し、前記監視プロセス内のソフトウェアモジュール数が契約数を越える場合に、前記監視プロセスの起動を行わないことを特徴とする情報処理システム。An information management system comprising a plurality of servers that are supplied with power from an uninterruptible power supply device provided with a network interface unit and connected via a network, wherein the uninterruptible power supply device includes the plurality of servers The network interface unit manages the number of the plurality of servers, and activates the monitoring process when the number of software modules in the monitoring process exceeds the number of contracts. Information processing system characterized by not performing
JP2003181928A 2003-06-26 2003-06-26 Information processing system Expired - Lifetime JP4408028B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003181928A JP4408028B2 (en) 2003-06-26 2003-06-26 Information processing system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003181928A JP4408028B2 (en) 2003-06-26 2003-06-26 Information processing system

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2009114394A Division JP2009176327A (en) 2009-05-11 2009-05-11 Information processing system

Publications (2)

Publication Number Publication Date
JP2005018384A true JP2005018384A (en) 2005-01-20
JP4408028B2 JP4408028B2 (en) 2010-02-03

Family

ID=34182453

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003181928A Expired - Lifetime JP4408028B2 (en) 2003-06-26 2003-06-26 Information processing system

Country Status (1)

Country Link
JP (1) JP4408028B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007089301A (en) * 2005-09-21 2007-04-05 Nec Fielding Ltd Uninterruptible power supply system and output control method thereof
US8625123B2 (en) 2011-05-09 2014-01-07 Fuji Xerox Co., Ltd. Image forming system, management apparatus, and non-transitory computer readable medium
WO2017034545A1 (en) * 2015-08-24 2017-03-02 Hewlett Packard Enterprise Development Lp Power delivery monitor and control with an uninterruptible power supply
JP2021097511A (en) * 2019-12-17 2021-06-24 Kyb株式会社 State monitoring system
JP2022118084A (en) * 2022-01-20 2022-08-12 オムロン株式会社 Information processing system, information processing device, management program, and management method

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9760452B2 (en) 2015-08-06 2017-09-12 International Business Machines Corporation In-line backup power source incorporating communication capability

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007089301A (en) * 2005-09-21 2007-04-05 Nec Fielding Ltd Uninterruptible power supply system and output control method thereof
US8625123B2 (en) 2011-05-09 2014-01-07 Fuji Xerox Co., Ltd. Image forming system, management apparatus, and non-transitory computer readable medium
WO2017034545A1 (en) * 2015-08-24 2017-03-02 Hewlett Packard Enterprise Development Lp Power delivery monitor and control with an uninterruptible power supply
US20180241244A1 (en) * 2015-08-24 2018-08-23 Hewlett Packard Enterprise Development Lp Power delivery monitor and control with an uninterruptible power supply
US11063467B2 (en) * 2015-08-24 2021-07-13 Hewlett Packard Enterprise Development Lp Power delivery monitor and control with an uninterruptible power supply
JP2021097511A (en) * 2019-12-17 2021-06-24 Kyb株式会社 State monitoring system
JP7368221B2 (en) 2019-12-17 2023-10-24 Kyb株式会社 Condition monitoring system
JP2022118084A (en) * 2022-01-20 2022-08-12 オムロン株式会社 Information processing system, information processing device, management program, and management method
JP7276566B2 (en) 2022-01-20 2023-05-18 オムロン株式会社 Information processing system, information processing device, management program, and management method

Also Published As

Publication number Publication date
JP4408028B2 (en) 2010-02-03

Similar Documents

Publication Publication Date Title
US7080285B2 (en) Computer, system management support apparatus and management method
US8665084B2 (en) Security system and method
EP1832955A1 (en) Uninterruptible power supply, uninterruptible power supply system and storage medium
US8578182B2 (en) Power lock-up setting method performed by baseboard management controller and electronic apparatus using the same
CN101542444A (en) Security features in interconnect centric architectures
JP4956847B2 (en) Network projector and projector system
JP4408028B2 (en) Information processing system
US20040070279A1 (en) System and method for automatically providing continuous power supply via standby uninterrupted power supplies
JP2009176327A (en) Information processing system
JP2005117371A (en) Apparatus and system for remote monitoring
WO2012155503A1 (en) Communication apparatus and method for managing abnormal power cut
JP2004287778A (en) Peripheral equipment driver proxy installation program, device and method
JP2008003735A (en) Automatic stop system of information processing system connected to uninterruptible power supply
CN1160246A (en) Data processing system with error detecting processing function
JP2008077324A (en) Server-client system
JP2003203189A (en) Computer system and rental method
JP2008158639A (en) Server apparatus for managing processor license
JP2007272756A (en) Uninterruptible power source device and power source management method
CN104065626A (en) Method for updating logging-on state of network camera and device thereof
JP2001211232A (en) Device management control method and system for remote access
CN104456964B (en) Control method, device and system
JP2008059531A (en) Computer system failure notification method
KR100595089B1 (en) Financial terminal remote management apparatus and method
JP2011034156A (en) Method for rewriting program for monitoring device
JPH0522313A (en) Terminal monitoring system for local area network system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060605

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060605

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090511

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091104

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091105

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4408028

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121120

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121120

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131120

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term