JP3163237B2 - 並列計算機システムの管理装置 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、並列計算機システ
ムの管理装置に関し、特に、並列計算機システムを構成
する複数のノードのメインプロセッサが動作していない
場合であっても前記複数のノードの保守及び管理を行う
並列計算機システムの管理装置に適用して有効な技術に
関するものである。

【０００２】

【従来の技術】従来、複数の計算機で構成される計算機
システムの運用管理方法及びその実施装置について、い
くつかのものが提案されている。

【０００３】複数のＵＮＩＸマシンのコンソールを１台
にまとめたときに発生する運用と監視の負荷増大を防止
する複数のＵＮＩＸマシンの集中運用および監視コンソ
ールディスプレイについては、特開平６−２１４７６３
号公報に記載されている。

【０００４】その概要は、複数のＵＮＩＸマシンを集中
運用及び管理するサーバーであるセンター・コンソール
に、運用目的別にコマンドの宛先を格納した宛先テーブ
ルを作成しておき、前記宛先テーブルに従ってコマンド
を実行するものである。

【０００５】複数の計算機から構成される複合計算機シ
ステムにおいて、単一のシステムコンソールにより接続
する計算機を切り換えて保守及び操作を行った場合の誤
操作を防止する複合計算機システムにおけるコンソール
切替制御方式については、特開平５−１２０２４７号公
報に記載されている。

【０００６】その概要は、複数の計算機内のサービスプ
ロセッサ同士を切替装置に接続し、前記切替装置にシス
テムコンソールを接続し、前記システムコンソールから
は、計算機を識別する識別子を用いて、メッセージ出力
対象の計算機を順次切り替えていくことにより、複数の
計算機で１台のシステムコンソールを共有する方式であ
り、システムコンソールにより保守及び操作を行う際
に、操作を行おうとしている計算機の識別子と、システ
ムコンソールに接続されている計算機の識別子を比較
し、識別子が一致する場合に操作を実行するものであ
る。

【０００７】分散処理システムを構成する各計算機から
のメッセージを集中管理するメッセージ集中管理方式に
ついては、特開平５−２０２８１号公報に記載されてい
る。

【０００８】その概要は、ネットワークにて接続された
複数の計算機内で集中管理ノードを決定し、その集中管
理ノードが監視対象ノードの発行する稼働状況メッセー
ジを集中管理する方式である。

【０００９】

【発明が解決しようとする課題】本発明者は、前記従来
技術を検討した結果、以下の問題点を見い出した。

【００１０】すなわち、前記従来の複数の計算機から成
る計算機システムの管理装置では、管理対象の計算機上
で動作しているネットワークソフトウェアの機能を使用
してた為、管理対象の計算機が動作していない場合やオ
ペレーティングシステムが動作していない場合及びネッ
トワークソフトウェアが動作していない場合には、運用
管理を行えないという問題があった。

【００１１】前記従来の複数のＵＮＩＸマシンの集中運
用および監視コンソールディスプレイを使用する方法で
は、管理対象となる計算機は、オペレーティングシステ
ムのＵＮＩＸが動作していることが前提となる為、オペ
レーティングシステムが動作していない場合には、コン
ソールディスプレイから集中運用および監視ができない
という問題があった。

【００１２】前記従来の複合計算機システムにおけるコ
ンソール切替制御方式では、システムコンソールと各々
のサービスプロセッサとの間に切替装置が存在している
為、切替装置なる特別なハードウェアが必要となるとい
う問題があった。

【００１３】前記従来のメッセージ集中管理方式では、
複数の計算機から集中管理ノードにメッセージが送られ
てくる為、前記集中管理ノードがシステムダウンとなっ
たときには、メッセージの集中管理が行えないという問
題と、前記メッセージは、ノードが接続されるネットワ
ーク経由で送信されてくる為、各ノードのオペレーティ
ングシステム及びネットワークが起動されていない場
合、集中管理ノードから各ノードの状態を管理すること
が出来ないという問題があった。

【００１４】本発明の目的は、並列処理を実行するメイ
ンプロセッサの動作並びに前記メインプロセッサのオペ
レーティングシステム及びネットワークソフトウェアの
動作とは無関係に、並列計算機システムを構成する複数
のノードの運用管理を管理端末装置で一括して行うこと
が可能な技術を提供することにある。

【００１５】本発明の他の目的は、並列計算機システム
を構成する複数のノードの電源の投入または切断を管理
端末装置で一括または個別に行うことが可能な技術を提
供することにある。

【００１６】本発明の他の目的は、並列計算機システム
に電力を供給する電源設備の突入電流を低く抑えること
が可能な技術を提供することにある。

【００１７】本発明の他の目的は、並列計算機システム
を構成する複数のノードが正常に動作中であるかを管理
端末装置で監視することが可能な技術を提供することに
ある。

【００１８】本発明の他の目的は、並列計算機システム
を構成する複数のノードのメインプロセッサがノードメ
ッセージを出力した後にその動作を停止した場合であっ
ても、前記ノードメッセージを管理端末装置で一括して
管理することが可能な技術を提供することにある。

【００１９】本発明の他の目的は、並列計算機システム
を構成する複数のノードの障害発生時のメインメモリ及
びレジスタの内容を管理端末装置で一括して管理するこ
とが可能な技術を提供することにある。

【００２０】本発明の他の目的は、並列計算機システム
を構成する複数のノードのメインプロセッサのリセット
を管理端末装置から一括して行うことが可能な技術を提
供することにある。

【００２１】本発明の他の目的は、並列計算機システム
を構成する複数のノードの特定のブートストラップデバ
イスに障害が発生した場合に、管理端末装置からの指示
により、ブートストラップデバイスを変更して前記複数
のノードのメインプロセッサのシステム立ち上げ処理を
行うことが可能な技術を提供することにある。

【００２２】本発明の他の目的は、並列計算機システム
を複数の管理端末装置で管理した場合に、前記複数の管
理端末装置の動作の競合を防止することが可能な技術を
提供することにある。

【００２３】本発明の他の目的は、並列計算機システム
の運用管理を遠隔地から行うことが可能な技術を提供す
ることにある。

【００２４】本発明の前記並びにその他の目的と新規な
特徴は、本明細書の記述及び添付図面によって明らかに
なるであろう。

【００２５】

【課題を解決するための手段】本願において開示される
発明のうち、代表的なものの概要を簡単に説明すれば、
下記のとおりである。

【００２６】（１）複数の計算機であるノードを接続し
た並列計算機システムを管理する管理端末装置を備えた
並列計算機システムの管理装置において、前記複数のノ
ードは、各ノードの主電源により動作し並列処理を実行
するメインプロセッサと、各ノードの補助電源により動
作し前記メインプロセッサを管理するシステム制御コマ
ンドを実行するサブプロセッサと、前記補助電源により
動作し前記管理端末装置との通信を行うシステム制御機
構とを備え、前記管理端末装置は、前記複数のノードの
複数のシステム制御機構と通信を行うシステム制御機構
を備え、前記複数のノードの複数のシステム制御機構と
前記管理端末装置のシステム制御機構とを接続して成
り、前記複数のノードの複数のメインプロセッサを管理
するシステム制御コマンドを前記管理端末装置から前記
複数のノードの複数のサブプロセッサに送信するシステ
ム制御インタフェースを備えるものである。

【００２７】前記（１）の並列計算機システムの管理装
置では、管理端末装置から発行されたシステム制御コマ
ンドは、システム制御インタフェースを構成する前記管
理端末装置及び前記複数のノードのシステム制御機構を
介し、前記複数のノードのサブプロセッサに送られ、前
記サブプロセッサに送られたシステム制御コマンドを、
前記サブプロセッサで実行することにより、前記メイン
プロセッサの運用管理を行う。

【００２８】従来の並列計算機システムの管理装置で
は、前記並列計算機システムの通常業務である並列処理
を実行するメインプロセッサで動作している汎用のオペ
レーティングシステムや、そのオペレーティングシステ
ムの管理下で動作するネットワークソフトウェアを使用
して、並列計算機システムを構成する複数のノードの運
用管理を行っている。

【００２９】この為、前記従来の並列計算機システムの
管理装置を使用する場合には、管理対象である並列計算
機システムを構成する複数のノードのメインプロセッサ
が正常に動作し、前記の汎用のオペレーティングシステ
ムやネットワークソフトウェアが実行中であることが前
提条件となり、前記管理対象の複数のノードのメインプ
ロセッサが動作していない場合や前記の汎用のオペレー
ティングシステムやネットワークソフトウェアが動作し
ていない場合、例えば、並列計算機システムの電源が投
入されていない運用開始前の状態、または、オペレーテ
ィングシステムやネットワークの構成を変更し、正常に
動作するかどうか確かめようとしている状態、或いは、
障害の発生により動作しなくなった特定のノードの状況
を調査する場合などでは、前記従来の並列計算機システ
ムの管理装置を使用することができなかった。

【００３０】そこで、前記（１）の並列計算機システム
の管理装置では、メインプロセッサの動作状況とは無関
係に動作可能なサブプロセッサとシステム制御機構を、
前記（１）の並列計算機システムを構成する全てのノー
ドに備え、各々のノードのシステム制御機構をネットワ
ーク集線装置等の装置を介し、管理端末装置のシステム
制御機構に接続している。

【００３１】前記複数のノードの各ノードに備えられた
サブプロセッサ及びシステム制御機構は、メインプロセ
ッサが使用する主電源とは別の補助電源により動作し、
また、前記システム制御機構は、メインプロセッサで動
作するネットワークソフトウェア及びそのネットワーク
ソフトウェアが使用する通信ケーブルとは別のネットワ
ークソフトウェア及び通信ケーブルを使用して管理端末
装置と通信を行う。

【００３２】従って、メインプロセッサが動作していな
くても、補助電源によりサブプロセッサ及びシステム制
御機構が動作していれば、メインプロセッサの制御を前
記管理端末装置から行うことが可能である。

【００３３】以上の様に、前記並列計算機システムの管
理装置によれば、各ノードの補助電源で動作し、前記メ
インプロセッサが使用するネットワークソフトウェア及
び通信ケーブルとは別のネットワークソフトウェア及び
通信ケーブルを使用して管理端末装置と通信を行うシス
テム制御機構に、前記管理端末装置からシステム制御コ
マンドを送信し、前記システム制御コマンドを前記補助
電源で動作するサブプロセッサで実行することより複数
のノードのメインプロセッサの制御を行うので、並列処
理を実行するメインプロセッサの動作並びに前記メイン
プロセッサのオペレーティングシステム及びネットワー
クソフトウェアの動作とは無関係に、並列計算機システ
ムを構成する複数のノードの運用管理を管理端末装置で
一括して行うことが可能である。

【００３４】（２）前記（１）の並列計算機システムの
管理装置において、前記複数のノードのサブプロセッサ
は、当該ノードの主電源を投入または切断する機能を備
え、前記管理端末装置は、前記複数のノードのサブプロ
セッサに、一括または個別に主電源を投入または切断す
るシステム制御コマンドを送信する手段を備えるもので
ある。

【００３５】前記（２）の並列計算機システムの管理装
置では、前記メインプロセッサは主電源により動作する
ので、前記サブプロセッサにより前記主電源の投入また
は切断を行うことにより、前記メインプロセッサへの電
源の投入を制御することができる。

【００３６】また、前記管理端末装置は、前記主電源を
投入または切断するシステム制御コマンドを、送信先を
全てのノードまたは特定のノードに指定したパケットと
して、前記システム制御インタフェースを介して、前記
複数のノードに一括または個別に送信する。

【００３７】前記（２）の並列計算機システムの管理装
置では、前記複数のノードのサブプロセッサ及びシステ
ム制御機構は、補助電源により動作しているので、メイ
ンプロセッサに主電源が投入されていない場合でも、動
作可能である。

【００３８】以上の様に、前記並列計算機システムの管
理装置によれば、管理端末装置からの指示により複数の
ノードの主電源の投入または切断を行うので、並列計算
機システムを構成する複数のノードの電源の投入または
切断を管理端末装置で一括または個別に行うことが可能
である。

【００３９】（３）前記（２）の並列計算機システムの
管理装置において、前記管理端末装置は、前記複数のノ
ードの主電源を個別に投入するシステム制御コマンド
を、予め設定された時間間隔で、前記複数のノードのサ
ブプロセッサに個別に送信する手段を備えるものであ
る。

【００４０】前記並列計算機システムを構成する複数の
ノードの主電源を一斉に投入すると、前記主電源に電力
を供給する電源設備に過大な突入電流が流れ、前記電源
設備に負担をかけるので、前記（３）の並列計算機シス
テムの管理装置では、前記複数のノードの主電源の投入
時刻を、各ノードごとにずらし、前記電源設備の突入電
源を低く抑える様にする。

【００４１】これは、前記管理端末装置から予め設定さ
れた時間間隔で、前記主電源を投入するシステム制御コ
マンドを、送信先を特定のノードに指定したパケットと
して前記システム制御インタフェースを介して送ること
により行われる。

【００４２】以上の様に、前記並列計算機システムの管
理装置によれば、前記複数のノードへの主電源の投入指
示を、予め設定された特定の時間間隔で行うので、並列
計算機システムに電力を供給する電源設備の突入電流を
低く抑えることが可能である。

【００４３】（４）前記（１）の並列計算機システムの
管理装置において、前記管理端末装置は、前記複数のノ
ードの特定のノードのサブプロセッサに特定のシステム
制御コマンドを送信し、予め設定された時間内に前記特
定のシステム制御コマンドに対する正常な応答が受信さ
れない場合に、前記特定のノードに異常が発生している
とみなす手段を備えるものである。

【００４４】前記（４）の並列計算機システムの管理装
置では、前記特定のシステム制御コマンドを、前記管理
端末装置から前記システム制御インタフェースを介して
前記サブプロセッサに送信し、前記の送信された特定の
システム制御コマンドを前記サブプロセッサで実行した
場合に、前記メインプロセッサの異常により前記特定の
システム制御コマンドの実行結果が得られない場合があ
る。

【００４５】前記の様な場合に、前記（４）の並列計算
機システムの管理装置の管理端末装置は、予め設定され
た時間の間、前記特定のシステム制御コマンドに対する
応答を待ち、前記の予め設定された時間内に前記特定の
システム制御コマンドが正常に実行されたことを示す応
答が受信されない場合に、前記特定のノードに異常が発
生しているとみなす。

【００４６】以上の様に、前記並列計算機システムの管
理装置によれば、管理端末装置からの特定のシステム制
御コマンドに対する正常なレスポンスが一定時間中に受
信されるかどうかを調べるので、並列計算機システムを
構成する複数のノードが正常に動作中であるかを管理端
末装置で監視することが可能である。

【００４７】（５）前記（１）の並列計算機システムの
管理装置において、前記複数のノードのシステム制御機
構は、当該ノードのメインプロセッサまたはサブプロセ
ッサが動作時に出力するメッセージであるノードメッセ
ージを蓄積する手段を備え、前記管理端末装置は、当該
ノードのシステム制御機構に蓄積されたノードメッセー
ジを読み取る手段を備えるものである。

【００４８】前記並列計算機システムを構成する複数の
ノードのメインプロセッサは、各処理の段階で種々のノ
ードメッセージを出力する。

【００４９】例えば、前記並列計算機システムを構成す
る複数のノードのメインプロセッサは、システム立ち上
げ処理中にファイルシステム上に矛盾を発見すると、特
定のノードメッセージを出力し、そのファイルシステム
の修復を開始する。前記メインプロセッサがファイルシ
ステムの修復に失敗すると、前記ファイルシステムの修
復に失敗したことを示すノードメッセージを出力し、前
記システム立ち上げ処理は異常終了する。

【００５０】また、前記並列計算機システムを構成する
複数のノードのメインプロセッサは、システム立ち上げ
処理が正常終了した後、動作中に回復不能な障害を検出
すると、パニックメッセージと呼ばれる障害内容や障害
発生箇所等の内容を含んだノードメッセージを出力し、
前記回復不能な障害を検出したメインプロセッサは、通
常、前記パニックメッセージを特定のディスプレイ装置
に出力した直後に、システムダウンを起こして動作を停
止する。

【００５１】前記の様な場合には、前記ノードメッセー
ジの内容を検討し、システム立ち上げ処理の異常終了や
システムダウンの原因を取り除く必要があるが、当該メ
インプロセッサは既に動作を停止しているので、従来の
並列計算機システムの管理装置では、前記ノードメッセ
ージを管理端末装置に送信して表示することはできなか
った。

【００５２】そこで、前記（５）の並列計算機システム
の管理装置では、当該ノードのメインプロセッサまたは
サブプロセッサが動作時に出力するノードメッセージを
前記複数のノードのシステム制御機構に蓄積し、前記管
理端末装置が、当該ノードのシステム制御機構に蓄積さ
れたノードメッセージを読み取ることによって、前記ノ
ードメッセージを前記管理端末装置に表示し、前記ノー
ドメッセージの内容を前記管理端末装置にて検討するこ
とを可能にしている。

【００５３】以上の様に、前記並列計算機システムの管
理装置によれば、特定のノードのメインプロセッサまた
はサブプロセッサが動作時に出力するノードメッセージ
を蓄積し、前記管理端末装置が前記の蓄積されたノード
メッセージを読み取るので、並列計算機システムを構成
する複数のノードのメインプロセッサがノードメッセー
ジを出力した後にその動作を停止した場合であっても、
前記ノードメッセージを管理端末装置で一括して管理す
ることが可能である。

【００５４】（６）前記（１）の並列計算機システムの
管理装置において、前記複数のノードのサブプロセッサ
は、当該ノードのメインメモリまたはレジスタの内容を
参照及び更新する手段を備え、前記管理端末装置は、前
記複数のノードのサブプロセッサに、当該ノードのメイ
ンメモリまたはレジスタの内容を参照または更新するシ
ステム制御コマンドを送信する手段を備えるものであ
る。

【００５５】前記並列計算機システムを構成する複数の
ノードのメインプロセッサに障害が発生したときに、当
該メインプロセッサに接続されたメインメモリやレジス
タの内容を参照して障害の原因を調べ、また、可能な場
合には、前記メインメモリやレジスタの内容を変更して
前記障害により中断している処理を続行したい場合があ
る。

【００５６】前記の様な場合、発生した障害によっては
メインプロセッサは正常に動作できないことがあるの
で、前記管理端末装置からのシステム制御コマンドによ
り、前記障害が発生したメインプロセッサを備えるノー
ドのサブプロセッサが、前記メインメモリまたはレジス
タの内容を参照または更新する。

【００５７】以上の様に、前記並列計算機システムの管
理装置によれば、管理端末装置からの指示によりノード
のメインメモリまたはレジスタの内容を参照または更新
するので、並列計算機システムを構成する複数のノード
の障害発生時のメインメモリ及びレジスタの内容を管理
端末装置で一括して管理することが可能である。

【００５８】（７）前記（１）の並列計算機システムの
管理装置において、前記複数のノードのサブプロセッサ
は、当該ノードのメインプロセッサをリセットする手段
を備え、前記管理端末装置は、当該ノードのサブプロセ
ッサに、当該ノードのメインプロセッサをリセットする
システム制御コマンドを送信する手段を備えるものであ
る。

【００５９】前記並列計算機システムを構成する複数の
ノードにおいて、オペレーティングシステムや他のソフ
トウェアをバージョンアップしたり、また、障害の原因
を取り除く作業を行った後等、メインプロセッサをリセ
ットする必要が生じる場合がある。

【００６０】前記の様な場合に、前記（７）の並列計算
機システムの管理装置では、前記管理端末装置からのシ
ステム制御コマンドにより、前記複数のノードのサブプ
ロセッサは、当該ノードのメインプロセッサをリセット
する。

【００６１】以上の様に、前記並列計算機システムの管
理装置によれば、管理端末装置からの指示により前記複
数のノードのメインプロセッサのリセットを行うので、
並列計算機システムを構成する複数のノードのメインプ
ロセッサのリセットを管理端末装置から一括して行うこ
とが可能である。

【００６２】（８）前記（１）の並列計算機システムの
管理装置において、前記複数のノードのサブプロセッサ
は、当該ノードのメインメモリの内容を参照及び更新す
る手段と、当該ノードのメインプロセッサをリセットす
る手段とを備え、前記管理端末装置は、当該ノードのメ
インプロセッサが格納しているメインメモリ中のブート
ストラップデバイス名を参照及び更新するシステム制御
コマンドと、当該ノードのメインプロセッサをリセット
するシステム制御コマンドとを送信する手段を備えるも
のである。

【００６３】前記並列計算機システムを構成する複数の
ノードにおいて、あるメインプロセッサのシステム立ち
上げ処理を行うときに、前記システム立ち上げ処理中に
メインメモリにロードするオペレーティングシステムや
他のソフトウェアを変更する場合や、或いは、オペレー
ティングシステムや他のソフトウェアを格納しているブ
ートストラップデバイスに障害が発生した場合等、前記
システム立ち上げ処理で使用するブートストラップデバ
イスの変更が必要になることがある。

【００６４】この様な場合に、前記（８）の並列計算機
システムの管理装置では、前記管理端末装置により、当
該ノードのメインプロセッサが格納しているメインメモ
リ中のブートストラップデバイス名を参照するシステム
制御コマンドを前記サブプロセッサに送り、前記メイン
メモリ中のブートストラップデバイス名を確認した後、
前記管理端末装置は、当該ノードのメインプロセッサが
格納しているメインメモリ中のブートストラップデバイ
ス名を他のブートストラップデバイス名に更新するシス
テム制御コマンドを前記サブプロセッサに送る。

【００６５】前記管理端末装置からメインメモリ中のブ
ートストラップデバイス名を他のブートストラップデバ
イス名に更新するシステム制御コマンドを受け取った前
記サブプロセッサは、当該ノードのメインメモリ中のブ
ートストラップデバイス名を更新する。

【００６６】次に、前記管理端末装置は、当該ノードの
メインプロセッサをリセットするシステム制御コマンド
を前記サブプロセッサに送り、当該ノードのメインプロ
セッサをリセットして、更新した他のブートストラップ
デバイスにより前記メインプロセッサのシステム立ち上
げ処理を行う。

【００６７】以上の様に、前記並列計算機システムの管
理装置によれば、管理端末装置からの指示により前記複
数のノードのメインメモリ中のブートストラップパス情
報を変更し、メインプロセッサのリセットを行うので、
並列計算機システムを構成する複数のノードの特定のブ
ートストラップデバイスに障害が発生した場合に、管理
端末装置からの指示により、ブートストラップデバイス
を変更して前記複数のノードのメインプロセッサのシス
テム立ち上げ処理を行うことが可能である。

【００６８】（９）前記（１）の並列計算機システムの
管理装置において、前記管理端末装置を複数備え、前記
複数の管理端末装置のうちの一部の管理端末装置の機能
を制限する手段を備えるものである。

【００６９】前記（９）の並列計算機システムの管理装
置では、複数の管理端末装置を備えることにより、特定
の管理端末装置が故障した場合に、他の管理端末装置に
より、前記並列計算機システムの運用管理を行う。

【００７０】前記の様に、前記並列計算機システムに複
数の管理端末装置を接続した場合には、前記複数の管理
端末装置の動作の内容が、互いに他の管理端末装置の動
作の内容と競合する場合がある。

【００７１】この為、前記（９）の並列計算機システム
の管理装置では、前記複数の管理端末装置が動作する場
合に、特定の管理端末装置をメイン管理端末装置に、他
の管理端末装置をサブ管理端末装置に設定し、サブ管理
端末装置が行う動作の内容を制限することにより、前記
競合の発生を防止する。

【００７２】以上の様に、前記並列計算機システムの管
理装置によれば、複数の管理端末装置を備えているの
で、１つの管理端末装置に障害が発生した場合でも並列
計算機システムの運用管理を続行し、並列計算機システ
ムの信頼性を向上させることが可能である。

【００７３】また、前記並列計算機システムの管理装置
によれば、複数の管理端末装置にメイン管理端末装置と
サブ管理端末装置とを設定するので、並列計算機システ
ムを複数の管理端末装置で管理した場合に、前記複数の
管理端末装置の動作の競合を防止することが可能であ
る。

【００７４】（１０）前記（１）の並列計算機システム
の管理装置において、前記管理端末装置は、補助電源で
動作し、特定の信号を入力すると前記管理端末装置の主
電源を投入する電源投入論理と、前記電源投入論理によ
り主電源が投入されたときに、前記複数のノードのサブ
プロセッサに、一括または個別に主電源を投入するシス
テム制御コマンドを送信する手段を備えるものである。

【００７５】前記（１０）の並列計算機システムの管理
装置では、前記管理端末装置に、補助電源で動作し、特
定の信号を入力すると前記管理端末装置の主電源を投入
する電源投入論理を接続し、前記電源投入論理をネット
ワークや他の通信回線に接続しておく。

【００７６】また、前記管理端末装置の主電源が投入さ
れたときに実行されるシステム立ち上げ処理の最後に、
前記複数のノードのサブプロセッサに一括または個別に
主電源を投入するシステム制御コマンドを送信するプロ
グラムを追加しておく。

【００７７】次に、前記ネットワークや他の通信回線を
介して、他の端末装置から前記電源投入論理に特定の信
号を送り、前記管理端末装置の主電源を投入する。

【００７８】前記管理端末装置の主電源が投入される
と、前記管理端末装置のシステム立ち上げ処理を行った
後、前記複数のノードのサブプロセッサに一括または個
別に主電源を投入するシステム制御コマンドを送信する
プログラムが実行され、前記並列計算機システムの運用
開始を、オペレータが直接前記管理端末装置を操作する
こと無く行うことができる。

【００７９】以上の様に、前記並列計算機システムの管
理装置によれば、遠隔地からのアクセスにより管理端末
装置の主電源を投入するので、並列計算機システムの運
用管理を遠隔地から行うことが可能である。

【００８０】

【発明の実施の形態】以下、本発明について、実施形態
とともに図面を参照して詳細に説明する。

【００８１】なお、実施形態を説明するための全図にお
いて、同一機能を有するものは同一符号を付け、その繰
り返しの説明は省略する。

【００８２】（実施形態１）以下に、本発明の並列計算
機システムの管理装置を実施する実施形態１の概略構成
について説明する。

【００８３】図１は、本発明の並列計算機システムの管
理装置を実施する実施形態１の概略構成を示す図であ
る。図１において、１００ａ〜１００ｃはノード、１０
１は通信処理装置、１０２ａ〜１０２ｃは通信インタフ
ェース機構、１０３ａ〜１０３ｃは通信ケーブル、１０
４は管理端末装置、１０５ａ〜１０５ｄはシステム制御
機構、１０６ａ〜１０６ｄは通信ケーブル、１０７はネ
ットワーク集線装置、１０８ａ〜１０８ｄはＬＡＮ（Ｌ
ｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）制御機構、１０
９ａ〜１０９ｄは通信ケーブル、１１０はネットワーク
集線装置である。

【００８４】図１に示す様に、本実施形態の並列計算機
システムの管理装置は、並列計算機システムを構成する
ノード１００ａ〜１００ｃと、並列処理中のノード１０
０ａ〜１００ｃでの通信を制御する通信処理装置１０１
と、ノード１００ａ〜１００ｃのシステム管理を行う管
理端末装置１０４と、管理端末装置１０４とノード１０
０ａ〜１００ｃとを接続するネットワーク集線装置１０
７と、ネットワーク集線装置１１０とを備えており、管
理端末装置１０４は、システム制御機構１０５ａと、Ｌ
ＡＮ制御機構１０８ａとを有し、ノード１００ａは、通
信インタフェース機構１０２ａと、システム制御機構１
０５ｂと、ＬＡＮ制御機構１０８ｂとを有し、ノード１
００ｂは、通信インタフェース機構１０２ｂと、システ
ム制御機構１０５ｃと、ＬＡＮ制御機構１０８ｃとを有
し、ノード１００ｃは、通信インタフェース機構１０２
ｃと、システム制御機構１０５ｄと、ＬＡＮ制御機構１
０８ｄとを有している。

【００８５】また、図１に示す様に、本実施形態の並列
計算機システムの管理装置では、ノード１００ａ〜１０
０ｃの通信インタフェース機構１０２ａ〜１０２ｃを通
信ケーブル１０３ａ〜１０３ｃ及び通信処理装置１０１
を介して接続し、ノード１００ａ〜１００ｃのシステム
制御機構１０５ｂ〜１０５ｄを通信ケーブル１０６ａ〜
１０６ｄ及びネットワーク集線装置１０７を介して管理
端末装置１０４のシステム制御機構１０５ａに接続し、
ノード１００ａ〜１００ｃのＬＡＮ制御機構１０８ｂ〜
１０８ｄを通信ケーブル１０９ａ〜１０９ｄ及びネット
ワーク集線装置１１０を介して管理端末装置１０４のＬ
ＡＮ制御機構１０８ａに接続している。

【００８６】本実施形態の並列計算機システムの管理装
置のシステム制御インタフェースは、前記の様に、管理
端末装置１０４側のシステム制御機構１０５ａとノード
１００ａ〜１００ｃ側のシステム制御機構１０５ｂ〜１
０５ｄとをイーサネット等の通信ケーブル１０６及びマ
ルチポートリピータ等のネットワーク集線装置１０７を
用いて相互接続することにより実現されるインタフェー
スである。

【００８７】また、本実施形態の並列計算機システムの
管理装置のシステム運用支援インタフェースは、管理端
末装置１０４側のＬＡＮ制御機構１０８ａとノード１０
０ａ〜１００ｃ側のＬＡＮ制御機構１０８ｂ〜１０８ｄ
とをイーサネット等の通信ケーブル１０９及びマルチポ
ートリピータ等のネットワーク集線装置１１０を用いて
相互接続することにより実現されるインタフェースであ
る。

【００８８】前記システム運用支援インタフェースは、
従来の並列計算機システムの運用管理を行うインタフェ
ースであり、ノード１００ａ〜１００ｃのメインプロセ
ッサが動作している場合に使用し、ノード１００ａ〜１
００ｃのメインプロセッサで実行しているアプリケーシ
ョンソフトウェアが出力するメッセージを管理端末装置
１０４に表示する等のシステム管理を行うものである。

【００８９】以下に、本実施形態の並列計算機システム
の管理装置において並列計算機システムを構成するノー
ド１００ａ〜１００ｃについて説明する。

【００９０】図２は、本実施形態の並列計算機システム
の管理装置において並列計算機システムを構成するノー
ド１００ａ〜１００ｃの概略構成を示す図である。

【００９１】図２において、２００は主電源、２０１は
補助電源、２０２はメインプロセッサ、２０３はソフト
ウェア、２０４はメインメモリ、２０５はプロセッサメ
モリ制御機構、２０６はシステムバス、２０７はシステ
ムディスク、２０８はＩ／Ｏ制御機構、２０９はＲＳ−
２３２Ｃ制御機構、２１０はブートストラップＲＯＭ
（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、２１１はシス
テムサポート機構、２１２はサブプロセッサ、２１３は
ＲＯＭ、２１４はＳＲＡＭ（Ｓｔａｔｉｃ Ｒａｎｄｏ
ｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ；不揮発メモリ）、２
１５はローカルバス、２１６は電源投入／切断信号、２
１７はプロセッサリセット信号、２１８はＬＡＮ制御
部、２１９はＲＳ−２３２Ｃ制御部、２２０はプロセッ
サ、２２１はＲＯＭ、２２２はＲＡＭ（Ｒａｎｄｏｍ
Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、２２３はデータインタ
フェース、２２４は制御インタフェースである。

【００９２】図２に示す様に、本実施形態の並列計算機
システムの管理装置のノード１００ａ〜１００ｃは、通
信インタフェース機構１０２ａ〜１０２ｃと、システム
制御機構１０５ｂ〜１０５ｄと、ＬＡＮ制御機構１０８
ｂ〜１０８ｄとを有し、ノード１００ａ〜１００ｃで並
列処理を行うアプリケーションソフトウェアを実行する
メインプロセッサ２０２と、サブプロセッサ２１２を有
するシステムサポート機構２１１と、主電源２００と、
補助電源２０１とを備えている。

【００９３】また、本実施形態の並列計算機システムの
管理装置のノード１００ａ〜１００ｃは、メインプロセ
ッサ２０２により実行されるオペレーティングシステム
及びネットワークソフトウェアであるソフトウェア２０
３と、ソフトウェア２０３を格納するメインメモリ２０
４と、メインプロセッサ２０２とメインメモリ２０４と
のインタフェース制御を行うプロセッサメモリ制御機構
２０５と、システムバス２０６と、システムディスク２
０７と、システムディスク２０７を制御するＩ／Ｏ制御
機構２０８と、ノードメッセージの出力やシステム制御
機構１０５ｂ〜１０５ｄ経由のオペレータとのインタラ
クティブなやりとりを行うＲＳ−２３２Ｃ制御機構２０
９と、メインプロセッサ２０２のシステム立ち上げ処理
を行うブートストラッププログラムを格納しているブー
トストラップＲＯＭ２１０とを備えている。

【００９４】本実施形態の並列計算機システムの管理装
置において、サブプロセッサ２１２を有し、メインプロ
セッサ２０２のステータス管理等のシステム制御を行う
システムサポート機構２１１は、サブプロセッサ２１２
上で動作する制御プログラムを格納しているＲＯＭ２１
３と、ハードウェアに依存した情報を格納しているＳＲ
ＡＭ２１４を備えている。

【００９５】本実施形態の並列計算機システムの管理装
置のノード１００ａ〜１００ｃのシステム制御機構１０
５ｂ〜１０５ｄは、管理端末装置１０４との間でイーサ
ネットパケットの送受信を制御するＬＡＮ制御部２１８
と、ＲＳ−２３２Ｃ制御機構２０９及びサブプロセッサ
２１２との間でのＲＳ−２３２Ｃパケットの送受信を制
御するＲＳ−２３２Ｃ制御部２１９と、イーサネットパ
ケットとＲＳ−２３２Ｃパケットとのプロトコル変換を
行うプロセッサ２２０と、プロセッサ２２０上で動作す
る制御プログラムを格納するＲＯＭ２２１と、サブプロ
セッサ２１２及びＲＳ−２３２Ｃ制御機構２０９から送
られて来るノードメッセージを格納するＲＡＭ２２２と
を備えている。

【００９６】図２に示す様に、本実施形態の並列計算機
システムの管理装置のノード１００ａ〜１００ｃでは、
システム制御機構１０５ｂ〜１０５ｄを、ＲＳ−２３２
Ｃ制御部２１９と、データインタフェース２２３と、Ｒ
Ｓ−２３２Ｃ制御機構２０９と、システムバス２０６
と、プロセッサメモリ制御機構２０５とを介してメイン
プロセッサ２０２に接続し、また、システム制御機構１
０５ｂ〜１０５ｄをＲＳ−２３２Ｃ制御部２１９及び制
御インタフェース２２４を介してシステムサポート機構
２１１のサブプロセッサ２１２に接続し、システムサポ
ート機構２１１のサブプロセッサ２１２を、ローカルバ
ス２１５とプロセッサメモリ制御機構２０５とを介して
メインプロセッサ２０２に接続している。また、サブプ
ロセッサ２１２は、プロセッサリセット信号２１７によ
りメインプロセッサ２０２をリセットし、電源投入／切
断信号２１６により主電源２００を制御する。

【００９７】尚、図２に示す様に、本実施形態の並列計
算機システムの管理装置のノード１００ａ〜１００ｃに
おいて、システム制御機構１０５ｂ〜１０５ｄを、ＲＳ
−２３２Ｃ制御部２１９と、データインタフェース２２
３と、ＲＳ−２３２Ｃ制御機構２０９とを介してメイン
プロセッサ２０２に接続しているのは、システム制御機
構１０５ｂ〜１０５ｄとメインプロセッサ２０２との間
をＲＳ−２３２Ｃ等のシリアルインタフェースで接続す
ることによりその通信ソフトウェアをコンパクトなもの
とし、メインプロセッサ２０２に障害が発生した場合で
あっても、システム制御機構１０５ｂ〜１０５ｄとメイ
ンプロセッサ２０２との間の通信が、できるだけ損なわ
れることの無い様にする為である。

【００９８】本実施形態の並列計算機システムの管理装
置のノード１００ａ〜１００ｃは、主電源２００で動作
する部位と補助電源２０１で動作する部位より構成され
ている。

【００９９】主電源２００で動作する部位としては、ノ
ード１００ａ〜１００ｃのメインプロセッサ２０２、ソ
フトウェア２０３を格納するメインメモリ２０４、メイ
ンプロセッサ２０２とメインメモリ２０４とのインタフ
ェース制御を行うプロセッサメモリ制御機構２０５、ノ
ード１００ａ〜１００ｃのメインプロセッサ２０２のシ
ステム立ち上げ処理を行うブートストラッププログラム
を格納しているブートストラップＲＯＭ２１０等があ
り、これらに、システムバス２０６を介して、通信イン
タフェース機構１０２ａ〜１０２ｃ、ＬＡＮ制御機構１
０８ｂ〜１０８ｄ等が接続され、また、システムディス
ク２０７はＩ／Ｏ制御機構２０８経由にて接続される。

【０１００】補助電源２０１で動作する部位としては、
ノード１００ａ〜１００ｃの主電源２００の制御やメイ
ンプロセッサ２０２のステータス管理等のシステム制御
を行う部位であるシステムサポート機構２１１と、ノー
ド１００ａ〜１００ｃと管理端末装置１０４との通信を
制御するシステム制御機構１０５ｂ〜１０５ｄがある。

【０１０１】サブプロセッサ２１２は、管理端末装置１
０４からの指示により電源投入／切断信号２１６を出力
することで、主電源２００の制御を行い、プロセッサリ
セット信号２１７を出力することで、メインプロセッサ
２０２をリセットする機能を持つ。

【０１０２】ノード１００ａ〜１００ｃのノードメッセ
ージは、メインプロセッサ２０２が動作し、メインプロ
セッサ２０２を制御するオペレーティングシステム及び
ネットワークソフトウェアであるソフトウェア２０３が
起動されている状態では、データインタフェース２２３
を介してＲＳ−２３２Ｃ制御機構２０９からＲＡＭ２２
２に蓄積され、ソフトウェア２０３が起動されていない
状態では、サブプロセッサ２１２より、制御インタフェ
ース２２４を介してブートストラップメッセージ等がＲ
ＡＭ２２２に蓄積される。

【０１０３】本実施形態の並列計算機システムの管理装
置のシステム制御機構１０５ｂ〜１０５ｄのプロセッサ
２２０は、前記のパケットのプロトコル変換の他に、以
下の処理も行う。

【０１０４】すなわち、管理端末装置１０４からのイー
サネットパケットを解釈し、パケットの内容に応じた処
理を行い、管理端末装置１０４からの指示によりＲＡＭ
２２２に格納しているノードメッセージを管理端末装置
１０４に送信する処理を行い、サブプロセッサ２１２
は、制御インタフェース２２４を介して送られてきたパ
ケットを解釈し、その内容に応じた制御を行う。

【０１０５】以下に、本実施形態の並列計算機システム
の管理装置の管理端末装置１０４の概略構成について説
明する。

【０１０６】図３は、本実施形態の並列計算機システム
の管理装置の管理端末装置１０４の概略構成を示す図で
ある。図３において、３００はプロセッサ、３０１はソ
フトウェア、３０２はメインメモリ、３０３はブートス
トラップＲＯＭ、３０４はプロセッサメモリ制御機構、
３０５はシステムバス、３０６はＩ／Ｏ制御機構、３０
７はシステムディスク、３０８、３０９はＲＳ−２３２
Ｃ制御機構、３１０はグラフィックス制御機構、３１１
はＬＡＮ制御部、３１２はＲＳ−２３２Ｃ制御部、３１
３はプロセッサ、３１４はＲＯＭ、３１５はＲＡＭ、３
１６は制御インタフェース、３１７はデータインタフェ
ースである。

【０１０７】図３に示す様に、本実施形態の並列計算機
システムの管理装置の管理端末装置１０４は、管理端末
装置１０４内の全ての処理を制御／統括するプロセッサ
３００と、管理端末装置１０４のオペレーティングシス
テム及びネットワークソフトウェアであるソフトウェア
３０１が格納されているメインメモリ３０２と、管理端
末装置１０４のシステム立ち上げ処理を行うブートスト
ラッププログラムを格納しているブートストラップＲＯ
Ｍ３０３と、プロセッサ３００、メインメモリ３０２及
びブートストラップＲＯＭ３０３のインタフェース制御
を行うプロセッサメモリ制御機構３０４とを備えてい
る。

【０１０８】また、本実施形態の並列計算機システムの
管理装置の管理端末装置１０４は、システムバス３０５
と、システムディスク３０７を制御するＩ／Ｏ制御機構
３０６と、システムディスク３０７と、ソフトウェア３
０１がノード１００ａ〜１００ｃに対し電源制御等のシ
ステム制御コマンドを発行する際に使用するＲＳ−２３
２Ｃ制御機構３０８と、ノードメッセージの出力やシス
テム制御機構１０５ａ経由にてオペレータとのインタラ
クティブなやりとりを行うＲＳ−２３２Ｃ制御機構３０
９と、ディスプレイターミナルやキーボード及びマウス
といったマンマシンインタフェースを制御するグラフィ
ックス制御機構３１０と、システム制御機構１０５ａと
を備えている。

【０１０９】本実施形態の並列計算機システムの管理装
置の管理端末装置１０４のシステム制御機構１０５ａ
は、ノード１００ａ〜１００ｃとの間でイーサネットパ
ケットの送受信を制御するＬＡＮ制御部３１１と、ＲＳ
−２３２Ｃ制御機構３０８及び３０９との間でのＲＳ−
２３２Ｃパケットの送受信を制御するＲＳ−２３２Ｃ制
御部３１２と、イーサネットパケットとＲＳ−２３２Ｃ
パケットとのプロトコル変換を行うプロセッサ３１３
と、プロセッサ３１３で動作する制御プログラムを格納
するＲＯＭ３１４と、ノード１００ａ〜１００ｃより送
られてくるノードメッセージを格納するＲＡＭ３１５と
を備えている。

【０１１０】また、図３に示す様に、本実施形態の並列
計算機システムの管理装置の管理端末装置１０４では、
プロセッサ３００をプロセッサメモリ制御機構３０４を
介してメインメモリ３０２、ブートストラップＲＯＭ３
０３及びシステムバス３０５に接続し、システムディス
ク３０７をＩ／Ｏ制御機構３０６を介してシステムバス
３０５に接続し、ＬＡＮ制御機構１０８ａと、ＲＳ−２
３２Ｃ制御機構３０８及び３０９と、グラフィックス制
御機構３１０とをシステムバス３０５に接続している。

【０１１１】更に、図３に示す様に、本実施形態の並列
計算機システムの管理装置の管理端末装置１０４では、
システム制御機構１０５ａのＲＳ−２３２Ｃ制御部３１
２を、制御インタフェース３１６及びデータインタフェ
ース３１７を介してＲＳ−２３２Ｃ制御機構３０８及び
３０９に接続している。

【０１１２】本実施形態の並列計算機システムの管理装
置において、システム制御インタフェースは、ノード１
００ａ〜１００ｃのシステム制御機構１０５ｂ〜１０５
ｄと管理端末装置１０４のシステム制御機構１０５ａと
をイーサネットケーブル等を用いて、相互接続すること
により形成されている。

【０１１３】前記システム制御インタフェースは、管理
端末装置１０４側のシステム制御機構１０５ａが動作可
能な状態であり、ノード１００ａ〜１００ｃの補助電源
２０１が投入されており、サブプロセッサ２１２及びシ
ステム制御機構１０５ｂ〜１０５ｄが動作可能な状態で
あれば、ノード１００ａ〜１００ｃの主電源２００が投
入されておらず、すなわちメインプロセッサ２０２が動
作しておらず、メインプロセッサ２０２全体を制御する
オペレーティングシステム及びネットワークソフトウェ
アであるソフトウェア２０３が起動されていなくとも使
用可能である。

【０１１４】これに対し、システム運用支援インタフェ
ースは、管理端末装置１０４のＬＡＮ制御機構１０８ａ
とノード１００ａ〜１００ｃのＬＡＮ制御機構１０８ｂ
〜１０８ｄとをイーサネットケーブル等を用いて、相互
接続することにより形成されており、前記システム運用
支援インタフェースは、ＴＣＰ／ＩＰ（Ｔｒａｎｓｍｉ
ｓｓｉｏｎ Ｃｏｎｔｒｏｌ Ｐｒｏｔｏｃｏｌ／Ｉｎ
ｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）にて使用するため、
管理端末装置１０４及びノード１００ａ〜１００ｃのオ
ペレーティングシステム及びそのネットワークソフトウ
ェアであるソフトウェア２０３及びソフトウェア３０１
が起動され、ＴＣＰ／ＩＰをサポートするネットワーク
ソフトウェアを実行している状態でのみ使用可能とな
る。

【０１１５】以下に、本実施形態の並列計算機システム
の管理装置の管理端末装置１０４とノード１００ａ〜１
００ｃとの通信シーケンスについて説明する。

【０１１６】図４は、本実施形態の並列計算機システム
の管理装置の管理端末装置１０４とノード１００ａ〜１
００ｃとの通信シーケンスの一例を示す図である。図４
において、４０１はアダプタ制御コマンド及びそのレス
ポンス、４０２はシステム制御コマンド及びそのレスポ
ンス、４０３はノードメッセージである。

【０１１７】図４に示す様に、本実施形態の並列計算機
システムの管理装置では、アダプタ制御コマンド及びそ
のレスポンス４０１、または、システム制御コマンド及
びそのレスポンス４０２であるパケットの送受信、或い
は、ノードメッセージ４０３の送受信により通信を行
う。

【０１１８】アダプタ制御コマンド及びそのレスポンス
４０１は、管理端末装置１０４のソフトウェア３０１が
管理端末装置１０４のシステム制御機構１０５ａと通信
を行う際、およびサブプロセッサ２１２がシステム制御
機構１０５ｂ〜１０５ｄと通信を行う際に使用し、制御
インタフェース３１６または制御インタフェース２２４
を介して送受信される。

【０１１９】システム制御コマンド及びそのレスポンス
４０２は、管理端末装置１０４のソフトウェア３０１が
ノード１００ａ〜１００ｃのサブプロセッサ２１２と通
信を行う際に使用し、制御インタフェース３１６及び制
御インタフェース２２４を介して送受信される。

【０１２０】ノードメッセージ４０３は、ソフトウェア
２０３が起動していないときは、サブプロセッサ２１２
からシステム制御機構１０５ｂ〜１０５ｄのＲＡＭ２２
２へ送信されて蓄積され、また、ソフトウェア２０３が
起動されているときは、メインプロセッサ２０２からＲ
Ｓ−２３２Ｃ制御機構２０９よりシステム制御機構１０
５ｂ〜１０５ｄのＲＡＭ２２２へ送信されて蓄積され
る。

【０１２１】システム制御機構１０５ｂ〜１０５ｄのＲ
ＡＭ２２２に蓄積されたノードメッセージ４０３は、管
理端末装置１０４からの要求により、ノード１００ａ〜
１００ｃのシステム制御機構１０５ｂ〜１０５ｄのＲＡ
Ｍ２２２から、管理端末装置１０４のシステム制御機構
１０５ａを介し、管理端末装置１０４のＲＳ−２３２Ｃ
制御機構３０９へ送信され、管理端末装置１０４のグラ
フィックス制御機構３１０に接続されるグラフィックス
ディスプレイ等に表示される。

【０１２２】以下に、本実施形態の並列計算機システム
の管理装置におけるアダプタ制御コマンド及びそのレス
ポンス４０１のパケットフォーマットについて説明す
る。

【０１２３】図５は、本実施形態の並列計算機システム
の管理装置におけるアダプタ制御コマンド及びそのレス
ポンス４０１のパケットフォーマットを示す図である。
図５において、５０１は種別フィールド、５０２は送信
元アドレスフィールド、５０３は受信先アドレスフィー
ルド、５０４は情報部フィールド、５０５は識別子であ
る。

【０１２４】図５に示す様に、本実施形態の並列計算機
システムの管理装置におけるアダプタ制御コマンド及び
そのレスポンス４０１のパケットは、種別フィールド５
０１と、送信元アドレスフィールド５０２と、受信先ア
ドレスフィールド５０３と、情報部フィールド５０４
と、識別子５０５とを備えている。

【０１２５】本実施形態の並列計算機システムの管理装
置において、種別フィールド５０１にはアダプタ制御コ
マンドまたはそのレスポンスであることを示すパケット
識別子、例えば「Ａ」が格納され、送信元アドレスフィ
ールド５０２にはパケットの送信元アドレス、受信先ア
ドレスフィールド５０３にはパケットの受信先アドレス
が格納される。

【０１２６】また、情報部フィールド５０４には、パケ
ットの種類により、異なったパラメータが格納され、さ
らにパケットの末尾には、パケットの終わりを示す識別
子５０５、例えば「ＬＦ」（ラインフィード）が付加さ
れる。

【０１２７】以下に、本実施形態の並列計算機システム
の管理装置におけるシステム制御コマンド及びそのレス
ポンス４０２のパケットフォーマットについて説明す
る。

【０１２８】図６は、本実施形態の並列計算機システム
の管理装置におけるシステム制御コマンド及びそのレス
ポンス４０２のパケットフォーマットを示す図である。
図６において、６０１は種別フィールド、６０２は送信
元アドレスフィールド、６０３は受信先アドレスフィー
ルド、６０４は情報部フィールド、６０５は識別子であ
る。

【０１２９】図６に示す様に、本実施形態の並列計算機
システムの管理装置におけるシステム制御コマンド及び
そのレスポンス４０２のパケットは、種別フィールド６
０１と、送信元アドレスフィールド６０２と、受信先ア
ドレスフィールド６０３と、情報部フィールド６０４
と、識別子６０５とを備えている。

【０１３０】本実施形態の並列計算機システムの管理装
置において、種別フィールド６０１には、システム制御
コマンドまたはそのレスポンスであることを示すパケッ
ト識別子、例えば「ｄ」が格納され、送信元アドレスフ
ィールド６０２にはパケットの送信元アドレス、受信先
アドレスフィールド６０３にはパケットの受信先アドレ
スが格納される。

【０１３１】また、情報部フィールド６０４には、パケ
ットの種別により異なったパラメータが格納され、さら
にパケットの末尾には、パケットの終わりを示す識別子
６０５、例えば「ＬＦ」が付加される。

【０１３２】また、本実施形態の並列計算機システムの
管理装置において、管理端末装置１０４からの送信パケ
ットの受信先アドレスフィールド６０３に１６進数の
「０ｘｆｆｆｆｆｆｆｆ」が格納されると、そのパケッ
トはブロードキャストパケットとなり、全てのノード１
００ａ〜１００ｃで受信される。

【０１３３】尚、本実施形態の並列計算機システムの管
理装置において、「０ｘ」が付加された数字は１６進数
を示すものとする。

【０１３４】以下に、本実施形態の並列計算機システム
の管理装置におけるシステム制御機構１０５ａ〜１０５
ｄの、パケットモードと非パケットモードのモード遷移
について説明する。

【０１３５】図７は、本実施形態の並列計算機システム
の管理装置におけるシステム制御機構のモード遷移を示
す図である。図７において、７０１はパケットモード、
７０２は非パケットモード、７０３は「ＳＥＴ−ＭＯＤ
Ｅ」コマンドである。

【０１３６】図７に示す様に、本実施形態の並列計算機
システムの管理装置におけるシステム制御機構は、固定
長のパケットの送受信を行うパケットモード７０１と、
不定長のノードメッセージ４０３の送受信を行う非パケ
ットモード７０２とを備え、パケットモード７０１と非
パケットモード７０２のモード遷移は、サブプロセッサ
２１２からのアダプタ制御コマンドである「ＳＥＴ−Ｍ
ＯＤＥ」コマンド７０３を実行することにより行う。

【０１３７】前記の様に、本実施形態の並列計算機シス
テムの管理装置のシステム制御機構１０５ａ〜１０５ｄ
の動作モードは、パケットモード７０１及び非パケット
モード７０２の２種類があり、パケットモード７０１
は、管理端末装置１０４と複数のノード１００ａ〜１０
０ｃが通信を行う際に設定されるモードであり、非パケ
ットモード７０２は、特定のノードとコネクション型通
信を行い、前記特定のノードからのノードメッセージ４
０３を管理端末装置１０４に表示する際に設定されるモ
ードである。

【０１３８】尚、本実施形態の並列計算機システムの管
理装置において、管理端末装置１０４及びノード１００
ａ〜１００ｃのシステム制御機構１０５ａ〜１０５ｄ
は、補助電源２０１投入時にはパケットモード７０１に
て動作するものとする。

【０１３９】以下に、本実施形態の並列計算機システム
の管理装置におけるシステム制御機構１０５ａ〜１０５
ｄの非パケットモード７０２でのコネクション状態の遷
移について説明する。

【０１４０】図８は、本実施形態の並列計算機システム
の管理装置におけるシステム制御機構の非パケットモー
ド７０２でのコネクション状態の遷移を示す図である。
図８において、８００はディスコネクト状態、８０１は
ウェイトコネクト状態、８０２はコネクト状態、８０３
は「ＳＥＴ−ＣＯＮＮＥＣＴ」コマンド、８０４は管理
端末装置１０４上のシステム制御機構１０５ａとノード
１００ａ〜１００ｃ上のシステム制御機構１０５ｂ〜１
０５ｃとの間で行われる呼制御である。

【０１４１】図８に示す様に、本実施形態の並列計算機
システムの管理装置におけるシステム制御機構の非パケ
ットモード７０２でのコネクション状態には、相手のシ
ステム制御機構が接続されておらずＲＡＭ２２２にノー
ドメッセージ４０３を蓄積していない状態であるディス
コネクト状態８００と、相手のシステム制御機構が接続
されていないがノードメッセージ４０３をＲＡＭ２２２
に蓄積中である状態のウェイトコネクト状態８０１と、
相手のシステム制御機構が接続されているコネクト状態
８０２とがあり、前記コネクション状態の遷移は、「Ｓ
ＥＴ−ＣＯＮＮＥＣＴ」コマンド８０３またはシステム
制御機構からの呼制御８０４により行う。

【０１４２】図８に示す様に、本実施形態の並列計算機
システムの管理装置において、非パケットモード７０２
設定時には、ディスコネクト状態８００、ウェイトコネ
クト状態８０１及びコネクト状態８０２の３つのコネク
ト状態を保持し、ディスコネクト状態８００では、シス
テム制御機構同士の通信は不可となり、ウェイトコネク
ト状態８０１では、相手のシステム制御機構との通信は
不可であるが、ノードメッセージ４０３は、ＲＡＭ２２
２内に順次蓄積される。

【０１４３】通信を行うシステム制御機構同士がコネク
ト状態８０２にあるとき、非パケットモード７０２での
コネクション型通信が可能となる。

【０１４４】これらの状態は、「ＳＥＴ−ＣＯＮＮＥＣ
Ｔ」コマンド８０３を発行することにより遷移する。ま
た、相手のシステム制御機構からの呼制御８０４による
コネクト要求があった場合、ウェイトコネクト状態８０
１からコネクト状態８０２に遷移する。

【０１４５】本実施形態の並列計算機システムの管理装
置にて使用するアダプタ制御コマンド及びそのレスポン
ス４０１の一覧を表１に示す。表１において、情報部は
情報部フィールド５０４に格納される情報を示してお
り、情報部のバイト０の数字は、パケット種別を示す番
号である。

【０１４６】

【表１】

【０１４７】本実施形態の並列計算機システムの管理装
置にて使用するシステム制御コマンド及びそのレスポン
ス４０２の一覧を表２に示す。表２において、情報部は
情報部フィールド６０４に格納される情報を示してお
り、情報部のバイト０の数字は、パケット種別を示す番
号である。

【０１４８】

【表２】

【０１４９】以下に、本実施形態の並列計算機システム
の管理装置におけるノード１００ａ〜１００ｃのシステ
ム制御機構１０５ｂ〜１０５ｄのプロセッサ２２０の処
理手順について説明する。

【０１５０】図９は、本実施形態の並列計算機システム
の管理装置におけるノード１００ａ〜１００ｃのシステ
ム制御機構１０５ｂ〜１０５ｄのプロセッサ２２０の処
理手順の一部を示すフローチャートである。

【０１５１】図９に示す様に、本実施形態の並列計算機
システムの管理装置におけるノード１００ａ〜１００ｃ
のシステム制御機構１０５ｂ〜１０５ｄのプロセッサ２
２０では、ステップ９００の処理にて、「ＳＥＴ−ＣＯ
ＮＮＥＣＴ」コマンドや呼制御により管理端末装置１０
４からコネクト要求があるかどうかを調べる。

【０１５２】ステップ９００の処理で、「ＳＥＴ−ＣＯ
ＮＮＥＣＴ」コマンドや呼制御により管理端末装置１０
４からのコネクト要求がある場合には、ステップ９０１
の処理に進み、ノード１００ａ〜１００ｃのシステム制
御機構１０５ｂ〜１０５ｄが非パケットモード７０２で
あるかどうかをチェックする。

【０１５３】ステップ９０１の処理で、ノード１００ａ
〜１００ｃのシステム制御機構１０５ｂ〜１０５ｄが非
パケットモード７０２であれば、ステップ９０２の処理
へ進み、ステップ９０１の処理で、ノード１００ａ〜１
００ｃのシステム制御機構１０５ｂ〜１０５ｄが非パケ
ットモード７０２でなければ、ステップ９０３の処理に
て、サブプロセッサ２１２からのシステム制御コマンド
「ＳＥＴ−ＭＯＤＥ」により、ノード１００ａ〜１００
ｃのシステム制御機構１０５ｂ〜１０５ｄを非パケット
モード７０２に設定し、ステップ９０２の処理へ進む。

【０１５４】ステップ９０２の処理では、ノード１００
ａ〜１００ｃのシステム制御機構１０５ｂ〜１０５ｄの
ＲＡＭ２２２に蓄積されたノードメッセージ４０３をシ
ステム制御インタフェース経由で管理端末装置１０４へ
送信し、ステップ９００の処理に戻る。

【０１５５】ステップ９００の処理にて「ＳＥＴ−ＣＯ
ＮＮＥＣＴ」コマンドや呼制御により管理端末装置１０
４からコネクト要求が無い場合には、ステップ９０４の
処理に進み、ステップ９０４の処理にて、システム制御
コマンドにより、管理端末装置１０４からのシステム制
御があるかどうかを調べる。

【０１５６】ステップ９０４の処理にて、前記システム
制御コマンドにより、管理端末装置１０４からのシステ
ム制御がある場合には、ステップ９０５の処理に進み、
ノード１００ａ〜１００ｃのシステム制御機構１０５ｂ
〜１０５ｄがパケットモード７０１かどうかをチェック
する。

【０１５７】ステップ９０４の処理にて、システム制御
コマンドによる管理端末装置１０４からのシステム制御
がない場合には、ステップ９０９の処理に進む。

【０１５８】ステップ９０５の処理で、ノード１００ａ
〜１００ｃのシステム制御機構１０５ｂ〜１０５ｄがパ
ケットモード７０１であれば、ステップ９０６の処理へ
進み、ノード１００ａ〜１００ｃのシステム制御機構１
０５ｂ〜１０５ｄがパケットモード７０１でなければ、
ステップ９０７の処理にて、サブプロセッサ２１２から
のシステム制御コマンド「ＳＥＴ−ＭＯＤＥ」により、
システム制御機構１０５ｂ〜１０５ｄをパケットモード
７０１に設定し、ステップ９０６の処理へ進む。

【０１５９】ステップ９０６の処理にて、前記システム
制御コマンドの受信先アドレスフィールド６０３をチェ
ックし、前記システム制御コマンドの受信先アドレスフ
ィールド６０３が、自論理アドレスまたは「０ｘｆｆｆ
ｆｆｆｆｆ」である場合は、ステップ９０８の処理に進
み、前記システム制御コマンドの内容をサブプロセッサ
２１２に通知し、ステップ９００の処理に戻る。

【０１６０】ステップ９０６の処理にて、前記システム
制御コマンドの受信先アドレスフィールド６０３が、自
論理アドレス及び「０ｘｆｆｆｆｆｆｆｆ」でない場合
は、ステップ９００の処理に戻る。

【０１６１】ステップ９０９の処理にて、ノード１００
ａ〜１００ｃのサブプロセッサ２１２からの処理の結果
が返ってきたかどうかを調べ、サブプロセッサ２１２か
らの処理の結果が返ってきた場合には、ステップ９１０
の処理に進み、管理端末装置１０４に対し、前記システ
ム制御コマンドのレスポンスパケットを送信し、ステッ
プ９００の処理に戻る。

【０１６２】以下に、本実施形態の並列計算機システム
の管理装置におけるノード１００ａ〜１００ｃのシステ
ムサポート機構２１１のサブプロセッサ２１２の処理手
順について説明する。

【０１６３】図１０は、本実施形態の並列計算機システ
ムの管理装置におけるノード１００ａ〜１００ｃのシス
テムサポート機構２１１のサブプロセッサ２１２の処理
手順の一部を示すフローチャートである。

【０１６４】図１０に示す様に、本実施形態の並列計算
機システムの管理装置におけるノード１００ａ〜１００
ｃのシステムサポート機構２１１のサブプロセッサ２１
２では、補助電源２０１が投入されると、ステップ１０
００の処理にて、ノード１００ａ〜１００ｃの論理アド
レスを設定し、ノード１００ａ〜１００ｃに備えられた
パネルに表示するステータスコードを格納するＳＲＡＭ
２１４内のパネルステータス管理領域に「００００」を
設定する。

【０１６５】次に、ステップ１００１の処理にて、ノー
ド１００ａ〜１００ｃのシステム制御機構１０５ｂ〜１
０５ｄを非パケットモード７０２に設定し、ステップ１
００２の処理にて、ノード１００ａ〜１００ｃのシステ
ム制御機構１０５ｂ〜１０５ｄの非パケットモード７０
２のコネクション状態をウェイトコネクト状態８０１に
設定する。

【０１６６】ノード１００ａ〜１００ｃのシステム制御
機構１０５ｂ〜１０５ｄのモードを非パケットモード７
０２に設定し、システム制御機構１０５ｂ〜１０５ｄの
非パケットモード７０２のコネクション状態をウェイト
コネクト状態８０１に設定するのは、ノード１００ａ〜
１００ｃのノードメッセージをシステム制御機構１０５
ｂ〜１０５ｄのＲＡＭ２２２に蓄積すると共に、管理端
末装置１０４のシステム制御機構１０５ａからの呼制御
８０４によるコネクト要求があったときに、ノード１０
０ａ〜１００ｃのシステム制御機構１０５ｂ〜１０５ｄ
のＲＡＭ２２２に蓄積したノードメッセージを管理端末
装置１０４に送る為である。

【０１６７】また、こうすることでノード１００ａ〜１
００ｃ上のソフトウェア２０３が起動されていない場合
でも管理端末装置１０４からＲＡＭ２２２に蓄積したノ
ードメッセージを読み出すことが可能となる。

【０１６８】次に、管理端末装置１０４のシステム制御
機構１０５ａから、ノード１００ａ〜１００ｃのシステ
ム制御機構１０５ｂ〜１０５ｄにシステム制御コマンド
が送られた場合には、前記システム制御コマンドをノー
ド１００ａ〜１００ｃのサブプロセッサ２１２に送り、
サブプロセッサ２１２にて前記システム制御コマンドを
実行する。

【０１６９】ステップ１００３の処理にて、管理端末装
置１０４のシステム制御機構１０５ａからノード１００
ａ〜１００ｃのシステム制御機構１０５ｂ〜１０５ｄを
介して、ノード１００ａ〜１００ｃの主電源２００を投
入または切断する電源制御指示のシステム制御コマンド
が送られてきているかどうかを調べる。

【０１７０】ステップ１００３の処理で管理端末装置１
０４からの電源制御指示があるかどうかを調べた結果、
管理端末装置１０４からの電源制御指示がある場合に
は、ステップ１００４の処理にて、ノード１００ａ〜１
００ｃの主電源２００を投入または切断する電源制御処
理を実行し、ステップ１００５の処理にて、前記電源制
御処理の実行結果をノード１００ａ〜１００ｃのシステ
ム制御機構１０５ｂ〜１０５ｄへ報告した後、ステップ
１００３の処理に戻る。

【０１７１】ステップ１００３の処理で管理端末装置１
０４からの電源制御指示があるかどうかを調べた結果、
管理端末装置１０４からの電源制御指示がない場合に
は、ステップ１００６の処理に進み、管理端末装置１０
４のシステム制御機構１０５ａからノード１００ａ〜１
００ｃのシステム制御機構１０５ｂ〜１０５ｄを介し
て、ノード１００ａ〜１００ｃに備えられたパネルを制
御するパネル制御指示のシステム制御コマンドが送られ
てきているかどうかを調べる。

【０１７２】ステップ１００６の処理にて、管理端末装
置１０４からのパネル制御指示があるかどうかを調べた
結果、管理端末装置１０４からのパネル制御指示がある
場合には、ステップ１００７の処理に進み、パネル制御
処理を実行し、ステップ１００８の処理にて、前記パネ
ル制御処理の実行結果をノード１００ａ〜１００ｃのシ
ステム制御機構１０５ｂ〜１０５ｄへ報告した後、ステ
ップ１００３の処理に戻る。

【０１７３】ステップ１００６の処理にて、管理端末装
置１０４からのパネル制御指示があるかどうかを調べた
結果、管理端末装置１０４からのパネル制御指示がない
場合には、ステップ１００９の処理に進み、管理端末装
置１０４のシステム制御機構１０５ａからノード１００
ａ〜１００ｃのシステム制御機構１０５ｂ〜１０５ｄを
介して、ノード１００ａ〜１００ｃのメインプロセッサ
２０２をリセットするリセット指示のシステム制御コマ
ンドが送られてきているかどうかを調べる。

【０１７４】ステップ１００９の処理にて、管理端末装
置１０４からのリセット指示があるかどうかを調べた結
果、管理端末装置１０４からのリセット指示がある場合
には、ステップ１０１０の処理に進み、ノード１００ａ
〜１００ｃのメインプロセッサ２０２のリセット処理を
実行し、ステップ１０１１の処理にて、前記リセット処
理の実行結果をノード１００ａ〜１００ｃのシステム制
御機構１０５ｂ〜１０５ｄへ報告した後、ステップ１０
０３の処理に戻る。

【０１７５】ステップ１０１２の処理にてシステム制御
機構１０５ｂ〜１０５ｄからモード切り替えの要求があ
るかどうかを調べた結果、モード切り替え要求がある場
合には、ステップ１０１３の処理に進み、アダプタ制御
コマンド「ＳＥＴ−ＭＯＤＥ」を実行し、システム制御
機構１０５ｂ〜１０５ｄの動作モードを切り替え、ステ
ップ１００３の処理に戻る。

【０１７６】以上説明した様に、本実施形態の並列計算
機システムの管理装置によれば、ノード１００ａ〜１０
０ｃの補助電源２０１で動作し、メインプロセッサ２０
２が使用するネットワークソフトウェア及び通信ケーブ
ル１０９ｂ〜１０９ｄとは別のネットワークソフトウェ
ア及び通信ケーブル１０６ｂ〜１０６ｄを使用して管理
端末装置１０４と通信を行うシステム制御機構１０５ｂ
〜１０５ｄに、管理端末装置１０４からシステム制御コ
マンドを送信し、前記システム制御コマンドを補助電源
２０１で動作するサブプロセッサ２１２で実行すること
より、複数のノード１００ａ〜１００ｃのメインプロセ
ッサ２０２の制御を行うので、並列処理を実行するメイ
ンプロセッサ２０２の動作並びにメインプロセッサ２０
２のオペレーティングシステム及びネットワークソフト
ウェアであるソフトウェア２０３の動作とは無関係に、
並列計算機システムを構成する複数のノード１００ａ〜
１００ｃの運用管理を管理端末装置１０４で一括して行
うことが可能である。

【０１７７】（実施形態２）以下に、本発明の並列計算
機システムの管理装置において、管理端末装置１０４か
ら複数のノード１００ａ〜１００ｄに主電源２００の投
入を指示し、ノード１００ａ〜１００ｄのステータスコ
ードを監視し、ノード１００ａ〜１００ｄのメインプロ
セッサ２０２が動作を開始したかどうかを管理する実施
形態２について説明する。

【０１７８】図１１は、本実施形態の並列計算機システ
ムの管理装置における管理端末装置１０４からノード１
００ａ〜１００ｄへ主電源２００の投入を指示する電源
投入シーケンスの一例を示す図である。図１１におい
て、１００ｄはノード、１１０１〜１１１２は電源投入
の各段階を示すシーケンスである。

【０１７９】図１１に示す様に、本実施形態の並列計算
機システムの管理装置における管理端末装置１０４から
ノード１００ａ〜１００ｄへ主電源２００の投入を指示
する電源投入シーケンスでは、シーケンス１１０１に
て、ノード１００ａ〜１００ｄの補助電源２０１が投入
されている。

【０１８０】ノード１００ａ〜１００ｄの補助電源２０
１が投入されると、ノード１００ａ〜１００ｄのサブプ
ロセッサ２１２は、シーケンス１１０２にて、システム
サポート機構２１１内の初期化を行い、アダプタ制御コ
マンド「ＳＥＴ−ＡＤＤＲＥＳＳ」によって、システム
制御機構１０５ｂ〜１０５ｄの初期化、及び、管理端末
装置１０４がノード１００ａ〜１００ｄを管理するため
に必要なアドレスである論理アドレスの設定を行う。

【０１８１】ここで、例えば、論理アドレス「０ｘ００
０００００１」を設定する「ＳＥＴ−ＡＤＤＲＥＳＳ」
コマンド及びそのレスポンスのフォーマットの一例は、
下記の通りとなる。

【０１８２】＜コマンド＞： Ａ0x00000001：（受信先アドレスフィールド５０３は省
略）：0x01 LF ＜レスポンス＞： Ａ0x00000001：0x00000001：0x01（ステータス情報）LF シーケンス１１０３にて、管理端末装置１０４の電源が
投入されると、管理端末装置１０４のブートストラップ
ＲＯＭ３０３に格納されているブートストラッププログ
ラムが、管理端末装置１０４のシステム立ち上げ処理を
行う。

【０１８３】シーケンス１１０４にて、管理端末装置１
０４のシステム立ち上げ処理が終わると、シーケンス１
１０５にて、管理端末装置１０４のソフトウェア３０１
は、管理端末装置１０４の論理アドレスを「ＳＥＴ−Ａ
ＤＤＲＥＳＳ」にて設定する。

【０１８４】管理端末装置１０４及びノード１００ａ〜
１００ｄの論理アドレスが設定されると、シーケンス１
１０６にて、管理端末装置１０４のソフトウェア３０１
は、システム制御コマンドのブロードキャストパケット
を用いて、ノード１００ａ〜１００ｄの状態を示すステ
ータスコードを読み出す。

【０１８５】ステータスコードは、ノード１００ａ〜１
００ｄのＳＲＡＭ２１４内のパネルステータス管理領域
にて管理されており、例えば、ノード１００ａ〜１００
ｄの補助電源２０１が正常に投入されると、ある一定の
ステータスコードが前記パネルステータス管理領域に書
き込まれ、また、そのステータスコードは、サブプロセ
ッサ２１２により読み出すことができる（本実施形態の
並列計算機システムの管理装置ではコード「００００」
が読み出せるものとする。）。

【０１８６】ここでは、管理端末装置１０４は「ＳＴＡ
ＴＵＳ−ＲＥＡＤ」コマンドを使用して、ノード１００
ａ〜１００ｄに対し、ブロードキャストを行う。

【０１８７】論理アドレスが「０ｘａ０００００００」
である管理端末装置１０４が、「ＳＴＡＴＵＳ−ＲＥＡ
Ｄ」コマンドをブロードキャストした場合と、そのコマ
ンドに対する、論理アドレスが「０ｘ０００００００
５」であるノードからのレスポンスのフォーマットの一
例は、下記の通りとなる。

【０１８８】＜コマンド＞： ｄ0xa0000000：0xffffffff：0x4 LF ＜レスポンス＞ ｄ0x00000005：0xa0000000：0x04 0000 LF シーケンス１１０７にて、ノード１００ａ〜１００ｄで
前記「ＳＴＡＴＵＳ−ＲＥＡＤ」コマンドが受信され、
サブプロセッサ２１２によりステータスコード「０００
０」が読み出された後、シーケンス１１０８にて、ノー
ド１００ａ〜１００ｄから管理端末装置１０４に対し、
前記の様にレスポンスが返ってくる。

【０１８９】ここで、管理端末装置１０４のソフトウェ
ア３０１は、正常なレスポンスが返ってきたノードの論
理アドレスと、予め管理端末装置１０４のソフトウェア
３０１内または特定のファイルに保持しておいた、並列
計算機システムを構成するノード１００ａ〜１００ｄの
構成情報とを照らし合わせ、正常なレスポンスが返って
こないノードに対しては、予め設定された一定の時間間
隔で再び「ＳＴＡＴＵＳ−ＲＥＡＤ」コマンドを送るリ
トライ処理を行う。

【０１９０】シーケンス１１０９にて、管理端末装置１
０４のソフトウェア３０１は、シーケンス１１０８で正
常なレスポンスパケットが返ってきたノードの主電源２
００を「Ｐ−ＯＮ」コマンドにて投入する。

【０１９１】例えば、論理アドレスが「０ｘａ００００
０００」である管理端末装置１０４から、論理アドレス
が「０ｘ０００００００５」であるノードに対する「Ｐ
−ＯＮ」コマンド及びそのレスポンスのフォーマットの
一例は、下記の通りとなる。

【０１９２】＜コマンド＞： ｄ0xa0000000：0x00000005：0x01LF ＜レスポンス＞： ｄ0x00000005：0xa0000000：0x01（完了コード）LF このとき、管理端末装置１０４のソフトウェア３０１の
制御により、予め設定された一定の時間間隔で「Ｐ−Ｏ
Ｎ」コマンドをずらしながらノード１００ａ〜１００ｄ
に送信することで、並列計算機システム全体に電源を供
給している電源設備への突入電流を低く抑えることが出
来る。

【０１９３】シーケンス１１１０にて、「Ｐ−ＯＮ」コ
マンドを受け取ったノード１００ａ〜１００ｄのサブプ
ロセッサ２１２は、電源投入信号２１６を出力し、主電
源２００をオンにした後、「Ｐ−ＯＮ」コマンドに対す
るレスポンスを、管理端末装置１０４に返送する。

【０１９４】ノード１００ａ〜１００ｄの主電源２００
がオンになると、メインプロセッサ２０２によりブート
ストラップＲＯＭ２１０に格納されているブートストラ
ッププログラムが実行され、システム立ち上げ処理が開
始される。

【０１９５】尚、システム立ち上げ処理中にブートスト
ラッププログラムがインクリメントするステータスコー
ドには、例えば以下のようなものがある。ここで、本実
施形態の並列計算機システムの管理装置では、ステータ
スコードは１６進数で示されている。

【０１９６】

【表３】

【０１９７】ノード１００ａ〜１００ｄのメインプロセ
ッサ２０２のブートストラッププログラムは、ノード１
００ａ〜１００ｄのＳＲＡＭ２１４内のパネルステータ
ス管理領域にステータスコードを書き込み、システム立
ち上げ処理が進むと、定期的に前記ステータスコードを
更新する。

【０１９８】また、前記パネルステータス管理領域は、
ノード１００ａ〜１００ｄのサブプロセッサ２１２から
も参照可能であり、例えば、ノード１００ａ〜１００ｄ
に備えられたパネル等の表示装置に表示することによ
り、オペレータに対し、前記ステータスコードを開示す
ることも可能である。

【０１９９】管理端末装置１０４のソフトウェア３０１
は、これらのノード１００ａ〜１００ｄのステータスコ
ードを「ＳＴＡＴＵＳ−ＲＥＡＤ」コマンドを使用して
定期的に読み出すことにより、ノード１００ａ〜１００
ｄの状態を監視する。

【０２００】シーケンス１１１０にて、管理端末装置１
０４のソフトウェア３０１は、システム制御コマンドの
送信からそのレスポンスの受信までを一定の時間で監視
しており、図１１に示す様に、何らかの障害が発生して
おり、一定時間内に正常なレスポンスが返ってこないノ
ード１００ｄに対しては、シーケンス１１１１にて、予
め設定された一定の時間間隔で再度システム制御コマン
ドを送信するリトライ処理を行う。

【０２０１】図１１に示す様に、本実施形態の並列計算
機システムの管理装置において、一定回数（本実施形態
では３回）のリトライ処理の結果、ノード１００ｄから
正常なレスポンスが返って来なかった場合、シーケンス
１１１２にて、管理端末装置１０４のソフトウェア３０
１は、ノード１００ｄに障害が発生していることを認識
する。

【０２０２】管理端末装置１０４のソフトウェア３０１
は、前記の様に、特定のシステム制御コマンドに対する
正常なレスポンスが一定時間内の間に受信されない場合
に、予め設定された一定の時間間隔で前記特定のシステ
ム制御コマンドを再度送信する制御を行うことで、ノー
ド１００ａ〜１００ｄのソフトウェア２０３が起動され
ていなくとも、ノード１００ａ〜１００ｄのメインプロ
セッサ２０２のシステム立ち上げ処理が正常に終了して
いるかどうかの管理を行うことが可能である。

【０２０３】以上説明した様に、本実施形態の並列計算
機システムの管理装置によれば、管理端末装置１０４か
らの指示により複数のノード１００ａ〜１００ｄの主電
源２００の投入または切断を行うので、並列計算機シス
テムを構成する複数のノード１００ａ〜１００ｄの主電
源２００の投入または切断を管理端末装置１０４で一括
または個別に行うことが可能である。

【０２０４】また、本実施形態の並列計算機システムの
管理装置によれば、ノード１００ａ〜１００ｄへの主電
源２００の投入指示を、予め設定された特定の時間間隔
で行うので、並列計算機システムに電力を供給する電源
設備の突入電流を低く抑えることが可能である。

【０２０５】また、本実施形態の並列計算機システムの
管理装置によれば、管理端末装置１０４からの指示によ
りノード１００ａ〜１００ｄのステータスコードを読み
出すので、複数のノード１００ａ〜１００ｄの状態を管
理端末装置１０４で一括して管理することが可能であ
る。

【０２０６】また、本実施形態の並列計算機システムの
管理装置によれば、管理端末装置１０４からの特定のシ
ステム制御コマンドに対する正常なレスポンスが一定時
間中に受信されるかどうかを調べるので、並列計算機シ
ステムを構成する複数のノードが正常に動作中であるか
を管理端末装置１０４で監視することが可能である。

【０２０７】（実施形態３）以下に、本発明の並列計算
機システムの管理装置において、管理端末装置１０４に
ノード１００ａからのノードメッセージ４０３を表示
し、必要に応じて保守を行う実施形態３について説明す
る。

【０２０８】図１２は、本実施形態の並列計算機システ
ムの管理装置における管理端末装置１０４にノード１０
０ａからのノードメッセージ４０３を表示するシーケン
スの一例を示す図である。図１２において、１２０１〜
１２１７はノードメッセージ４０３を表示する各段階の
シーケンスを示している。

【０２０９】図１２に示す様に、本実施形態の並列計算
機システムの管理装置における管理端末装置１０４にノ
ード１００ａからのノードメッセージ４０３を表示する
シーケンスにおいて、シーケンス１２０１では、ノード
１００ａには、予め補助電源２０１が投入されており、
システム制御機構１０５ｂ（動作モードはパケットモー
ド７０１）、サブプロセッサ２１２及びプロセッサ２２
０は動作可能な状態にある。

【０２１０】補助電源２０１が投入されているノード１
００ａのサブプロセッサ２１２は、シーケンス１２０２
で「ＳＥＴ−ＡＤＤＲＥＳＳ」コマンドにて、ノード１
００ａの論理アドレスを設定する。

【０２１１】次に、ノード１００ａのサブプロセッサ２
１２は、シーケンス１２０３で、「ＳＥＴ−ＭＯＤＥ」
コマンドにてシステム制御機構１０５ｂの動作モードを
非パケットモード７０２（ディスコネクト状態８００）
に設定する。

【０２１２】ノード１００ａのサブプロセッサ２１２
は、シーケンス１２０４で、さらに「ＳＥＴ−ＣＯＮＮ
ＥＣＴ」コマンドにて、コネクション状態を非パケット
モード７０２のウェイトコネクト状態８０１に設定す
る。

【０２１３】一方、管理端末装置１０４は、シーケンス
１２０５で、管理端末装置１０４の電源が投入される
と、管理端末装置１０４のシステム立ち上げ処理を開始
する。

【０２１４】管理端末装置１０４のシステム立ち上げ処
理が終了すると、シーケンス１２０６で、管理端末装置
１０４のソフトウェア３０１は、ノード１００ａと同様
にして、「ＳＥＴ−ＡＤＤＲＥＳＳ」コマンドを用いて
管理端末装置１０４の論理アドレスの設定を行い、シー
ケンス１２０７で、「ＳＥＴ−ＭＯＤＥ」を用いて、動
作モードを非パケットモード７０２のディスコネクト状
態８００に設定する。

【０２１５】シーケンス１２０８にて、管理端末装置１
０４のソフトウェア３０１は、「ＳＴＡＴＵＳ−ＲＥＡ
Ｄ」コマンドによってノード１００ａのステータスコー
ドを読み出し、ステータスコード「００００」が読み出
せると、シーケンス１２０９にて、「Ｐ−ＯＮ」コマン
ドをノード１００ａに送信し、ノード１００ａの主電源
２００の投入を指示する。

【０２１６】管理端末装置１０４からの「Ｐ−ＯＮ」コ
マンドを受信し、主電源２００を投入したノード１００
ａは、ブートストラップＲＯＭ２１０に格納されている
ブートストラッププログラムをメインプロセッサ２０２
により実行し、ノード１００ａのシステム立ち上げ処理
を行う。

【０２１７】このとき、ノード１００ａのブートストラ
ッププログラムから出力されるノードメッセージ４０３
は、サブプロセッサ２１２を経由し、ノード１００ａの
システム制御機構１０５ｂのＲＡＭ２２２に蓄積され
る。

【０２１８】管理端末装置１０４のソフトウェア３０１
は、シーケンス１２１０で、「ＳＥＴ−ＣＯＮＮＥＣ
Ｔ」コマンドにより、管理端末装置１０４のシステム制
御機構１０５ａのコネクション状態をコネクト状態８０
２にすることで、ノード１００ａのシステム制御機構１
０５ｂのＲＡＭ２２２に蓄積されているノード１００ａ
のメインプロセッサ２０２のシステム立ち上げ処理中の
ノードメッセージ４０３の監視を開始する。

【０２１９】「ＳＥＴ−ＣＯＮＮＥＣＴ」を受けた管理
端末装置１０４のシステム制御機構１０５ａは、シーケ
ンス１２１１で、ノード１００ａのシステム制御機構１
０５ｂと呼制御８０４を行い、これを受けたノード１０
０ａのシステム制御機構１０５ｂのコネクション状態
は、ウェイトコネクト状態８０１からコネクト状態８０
２に遷移する。

【０２２０】同時にノード１００ａのシステム制御機構
１０５ｂは、シーケンス１２１２で、「ＲＥＰＯＲＴ−
ＣＯＮＮＥＣＴ」コマンドを、ノード１００ａのサブプ
ロセッサ２１２に発行し、管理端末装置１０４からのコ
ネクト要求があったことを伝える。

【０２２１】このときの「ＲＥＰＯＲＴ−ＣＯＮＮＥＣ
Ｔ」コマンド及びそのレスポンスのフォーマットの一例
は、下記の通りとなる。尚、以下の「ＲＥＰＯＲＴ−Ｃ
ＯＮＮＥＣＴ」コマンド及びそのレスポンスでは、送受
信アドレスは省略されている。

【０２２２】＜コマンド＞： Ａ：：0xA（コネクト状態変化状況）LF ＜レスポンス＞： Ａ：：0xA LF シーケンス１２１３にて、ノード１００ａのノードメッ
セージ４０３は、ノード１００ａのシステム制御機構１
０５ｂが呼制御８０４によるコネクト要求を受け取った
時点で、ノード１００ａのシステム制御機構１０５ｂの
ＲＡＭ２２２からＬＡＮ制御部２１８を経由して管理端
末装置１０４へ送信される。

【０２２３】ここで、図１２には特に示していないが、
もし、ノード１００ａのメインプロセッサ２０２のシス
テム立ち上げ処理中に、ノード１００ａのメインプロセ
ッサ２０２が使用するファイルシステムに矛盾が発見さ
れ、前記システム立ち上げ処理が中断した場合には、シ
ーケンス１２１４にて、オペレータは、管理端末装置１
０４の表示装置に出力されるノード１００ａのメインプ
ロセッサ２０２のシステム立ち上げ処理中のノードメッ
セージ４０３により、ノード１００ａに障害が発生して
いることを認識し、ＵＮＩＸのｆｓｃｋ等のファイルシ
ステムを検査する保守コマンドを投入することで、ノー
ド１００ａの保守を行うことも可能である。

【０２２４】また、ノード１００ａのメインプロセッサ
２０２のシステム立ち上げ処理は正常終了したが、その
後の通常の業務でノード１００ａのメインプロセッサ２
０２を使用中に、パニックメッセージを出力してノード
１００ａのメインプロセッサ２０２がシステムダウンを
起こした場合には、オペレータは、ノード１００ａのシ
ステム制御機構１０５ｂのＲＡＭ２２２に蓄積されたノ
ードメッセージ４０３を管理端末装置１０４に表示さ
せ、ノードメッセージ４０３の内容によりシステムダウ
ンの要因を検討することも可能である。

【０２２５】ノード１００ａとのコネクションを切断す
る場合には、シーケンス１２１０〜１２１２までの処理
と同様、管理端末装置１０４のソフトウェア３０１が、
シーケンス１２１５にて、「ＳＥＴ−ＣＯＮＮＥＣＴ」
コマンドを発行する。

【０２２６】管理端末装置１０４のソフトウェア３０１
が「ＳＥＴ−ＣＯＮＮＥＣＴ」コマンドを発行すること
により、管理端末装置１０４のシステム制御機構１０５
ａはディスコネクト状態８００になり、シーケンス１２
１６にて、管理端末装置１０４のシステム制御機構１０
５ａは、ノード１００ａのシステム制御機構１０５ｂに
対し呼制御８０４を行う。

【０２２７】シーケンス１２１７にて、ノード１００ａ
のシステム制御機構１０５ｂは、前記の管理端末装置１
０４のシステム制御機構１０５ａからの呼制御８０４に
より、相手からコネクション断の要求があったことを認
識し、同時にノード１００ａのサブプロセッサ２１２に
対し、このことを「ＲＥＰＯＲＴ−ＣＯＮＮＥＣＴ」コ
マンドにて報告する。

【０２２８】以上の様に、管理端末装置１０４からノー
ド１００ａ〜１００ｃに対し、システム制御コマンドを
送信することで、管理端末装置１０４からノード１００
ａ〜１００ｃの主電源２００の電源制御及びノード１０
０ａ〜１００ｃの状態監視が可能となる。

【０２２９】以上説明した様に、本実施形態の並列計算
機システムの管理装置によれば、パケットモード７０１
及び非パケットモード７０２のモード切り替えをサブプ
ロセッサ２１２により行うので、パケットを用い、シス
テム制御コマンド及びそのレスポンスを複数のノード１
００ａ〜１００ｃと送受信する通信と、特定のノードと
のコネクションを設定し、特定のノードのノードメッセ
ージ４０３を連続して受信する通信とを、切替装置の様
な特別のハードウェアを用いることなく同一の管理端末
装置１０４で行うことが可能である。

【０２３０】また、本実施形態の並列計算機システムの
管理装置によれば、特定のノードのメインプロセッサ２
０２またはサブプロセッサ２１２が動作時に出力するノ
ードメッセージ４０３を蓄積し、管理端末装置１０４が
前記の蓄積されたノードメッセージ４０３を読み取るの
で、並列計算機システムを構成する複数のノード１００
ａ〜１００ｃのメインプロセッサ２０２がノードメッセ
ージ４０３を出力した後にその動作を停止した場合であ
っても、ノードメッセージ４０３を管理端末装置１０４
で一括して管理することが可能である。

【０２３１】（実施形態４）以下に、本発明の並列計算
機システムの管理装置において、ノード１００ａ〜１０
０ｃのメインプロセッサ２０２のシステム立ち上げ処理
を実行し、必要に応じてそのブートストラップデバイス
を変更してシステム立ち上げ処理を行う実施形態４につ
いて説明する。

【０２３２】本実施形態の並列計算機システムの管理装
置では、ブートストラップデバイスからのロード処理が
異常終了した場合に、ノード１００ａ〜１００ｃのメイ
ンメモリ２０４の内容を読み書きすることによってその
内容を変更し、ノード１００ａ〜１００ｃのメインプロ
セッサ２０２をリセットすることによって、他のブート
ストラップデバイスからのロード処理を行うことが可能
である。

【０２３３】本実施形態の並列計算機システムの管理装
置において、ノード１００ａ〜１００ｃのメインメモリ
２０４の内容を読み書きする場合には、「ＭＳ−ＲＥＡ
Ｄ」コマンド及び「ＭＳ−ＷＲＩＴＥ」コマンドを使用
する。これらのシステム制御コマンドは、ノード１００
ａ〜１００ｃのメインプロセッサ２０２にて通常の業務
として並列処理を実行中に障害が発生したときに、ノー
ド１００ａ〜１００ｃのメインメモリ２０４の内容を調
査する場合にも使用することが可能である。

【０２３４】また、本実施形態の並列計算機システムの
管理装置では、ノード１００ａ〜１００ｃのメインプロ
セッサ２０２、サブプロセッサ２１２及びプロセッサメ
モリ制御機構２０５等のハードウェアモジュール内のレ
ジスタの内容を読み書きすることも可能であり、その場
合には、「ＲＥＧ−ＲＥＡＤ」コマンド及び「ＲＥＧ−
ＷＲＩＴＥ」コマンドを使用する。

【０２３５】例えば、ノード１００ａ〜１００ｃのメイ
ンプロセッサ２０２にて、通常の業務である並列処理を
実行中に障害が発生した場合は、ノード１００ａ〜１０
０ｃ内の各ハードウェアリソースが採取する障害ログを
レジスタに退避しておき、前記の「ＲＥＧ−ＲＥＡＤ」
コマンドにより管理端末装置１０４から前記障害ログを
読み出すことにより、管理端末装置１０４からの障害要
因の特定が可能となる。

【０２３６】また、本実施形態の並列計算機システムの
管理装置では、「ＳＴＡＴＵＳ−ＲＥＡＤ」コマンドに
より、ノード１００ａ〜１００ｃのステータスコードを
読み出し、システムダウンを起こしているノードがあれ
ば、「ＰＲＯＣ−ＲＥＳＥＴ」コマンドを送信すること
で、前記のシステムダウンを起こしているノードのメイ
ンプロセッサ２０２をリセットし、再起動させるオペレ
ーションも可能となる。

【０２３７】以下に、本実施形態の並列計算機システム
の管理装置におけるノード１００ａ〜１００ｃのメイン
プロセッサ２０２のシステム立ち上げ処理について説明
する。

【０２３８】図１３は、本実施形態の並列計算機システ
ムの管理装置におけるノード１００ａ〜１００ｃのメイ
ンプロセッサ２０２のシステム立ち上げ処理手順を示す
フローチャートである。

【０２３９】図１４は、本実施形態の並列計算機システ
ムの管理装置におけるノード１００ａ〜１００ｃのＳＲ
ＡＭ２１４のメモリマップを示す図である。図１４にお
いて、１４００はプライマリブートストラップパス情
報、１４０１はオルタネートブートストラップパス情報
である。

【０２４０】図１４に示す様に、本実施形態の並列計算
機システムの管理装置におけるノード１００ａ〜１００
ｃのＳＲＡＭ２１４のメモリマップは、オペレーティン
グシステム等のソフトウェア２０３を格納している第１
のブートストラップデバイスを示すプライマリブートス
トラップパス情報１４００と、第１のブートストラップ
デバイスが使用できない場合に使用するブートストラッ
プデバイスを示すオルタネートブートストラップパス情
報１４０１とを備えている。

【０２４１】図１３に示す様に、本実施形態の並列計算
機システムの管理装置におけるノード１００ａ〜１００
ｃのメインプロセッサ２０２のシステム立ち上げ処理手
順では、管理端末装置１０４からの電源投入指示により
主電源２００が投入されると、メインプロセッサ２０２
によりブートストラップＲＯＭ２１０に格納されている
ブートストラッププログラムが実行され、ステップ１３
００の処理にて、ＳＲＡＭ２１４内のパネルステータス
管理領域のステータスコードを「１０００」とし、ステ
ップ１３０１の処理にて、ノード１００ａ〜１００ｃ内
の各ハードウェアモジュールの初期診断及び初期化を行
う。

【０２４２】ステップ１３０２の処理では、ステップ１
３０１の処理のハードウェアの初期診断及び初期化が正
常終了したかどうかをチェックし、ステップ１３０１の
処理でハードウェアの初期診断及び初期化が正常終了し
ている場合には、ステップ１３０３の処理に進む。

【０２４３】ステップ１３０１の処理でハードウェアの
初期診断及び初期化が異常終了している場合には、ステ
ップ１３１３の処理にて、当該ノードに備えられたパネ
ルにステータスコード「１ＦＦＦ」を表示し、当該ノー
ドのメインプロセッサ２０２のシステム立ち上げ処理は
異常終了となる。

【０２４４】ステップ１３０３の処理では、ステータス
コードを「２０００」とし、ステップ１３０４の処理に
て、ＳＲＡＭ２１４に格納されているハードウェア依存
情報のうち、図１４に示すブートストラップパス情報を
参照し、プライマリブートストラップパス情報１４００
にて指定されるブートストラップデバイス（例えば、シ
ステムディスク２０７等）から、オペレーティングシス
テム等のソフトウェア２０３をメインメモリ２０４にロ
ードする。

【０２４５】ＳＲＡＭ２１４内のブートストラップパス
情報は、ブートストラップＲＯＭ２１０に格納されてい
るブートストラッププログラムの実行時にメインメモリ
２０４内の特定領域にコピーされ、システムが立ち上が
るとソフトウェア２０３にて参照可能となる。

【０２４６】また、本実施形態の並列計算機システムの
管理装置では、ブートストラップデバイスには、自ノー
ド内のローカルファイルの他にイーサネット経由（シス
テム制御インタフェース）にてｂｏｏｔｐプロトコル
（Ｒｅｑｕｅｓｔ Ｆｏｒ Ｃｏｎｎｅｃｔブートのベ
ースとなるプロトコル）を使用し、イーサネットに接続
される他のノードから取得可能となるブートストラップ
ファイルも適用可能である。

【０２４７】ステップ１３０５の処理では、プライマリ
ブートストラップパス情報１４００にて指定されるブー
トストラップデバイスからオペレーティングシステム等
のソフトウェア２０３をメインメモリ２０４にロードす
るロード処理が正常終了したかどうかをチェックしてお
り、前記のロード処理に成功すると、ステップ１３０６
の処理に進み、失敗するとステップ１３１４の処理に進
む。

【０２４８】ステップ１３０６の処理にて、ステータス
コードを「３０００」とし、メインメモリ２０４にロー
ドされたソフトウェア２０３が起動され、ステップ１３
０７の処理でステータスコードを「Ａ０００」とし、ス
テップ１３０８の処理にて各種システムパラメータを設
定し、ステップ１３０９の処理にて、ファイルシステム
の初期化を行い、ステップ１３１０の処理にて、ＴＣＰ
／ＩＰなどのネットワークの初期化を行う。

【０２４９】本実施形態の並列計算機システムの管理装
置では、ノード１００ａ〜１００ｃのメインプロセッサ
２０２で動作するオペレーティングシステム及びネット
ワークソフトウェア等のソフトウェア２０３の機能を使
用するシステム運用支援インタフェースは、この時点で
使用可能となる。

【０２５０】ステップ１３１１の処理にて、アプリケー
ションソフトウェアの起動を行い、ステップ１３１２の
処理にてステータスコードを「Ｆ０００」とし、メイン
プロセッサ２０２のシステム立ち上げ処理を終了する。

【０２５１】一方、ステップ１３１４の処理では、ＳＲ
ＡＭ２１４内のオルタネートブートストラップパス情報
１４０１を参照し、オルタネートブートストラップパス
情報１４０１にて指定されるブートストラップデバイス
（本実施形態の並列計算機システムの管理装置では特に
開示していないが、ＤＡＴ（Ｄｉｇｉｔａｌ Ａｕｄｉ
ｏ Ｔａｐｅ）等の入出力装置）からのオペレーティン
グシステム等のソフトウェア２０３をメインメモリ２０
４にロードする。

【０２５２】ステップ１３１５の処理にて、オルタネー
トブートストラップパス情報１４０１にて指定されるブ
ートストラップデバイスからのロードに成功したかどう
かをチェックし、成功するとステップ１３０６の処理に
進む。

【０２５３】ステップ１３１５の処理にて、オルタネー
トブートストラップパス情報１４０１にて指定されるブ
ートストラップデバイスからのロードが成功しない場
合、ステップ１３１６の処理にて、オペレータによるブ
ートストラップデバイス指定によりロード処理を行う。

【０２５４】ステップ１３１７の処理にて、ステップ１
３１６の処理でのオペレータのブートストラップデバイ
ス指定によるロード処理が正常終了したかどうかをチェ
ックし、正常終了している場合にはステップ１３０６の
処理に進み、正常終了していない場合には、ステップ１
３１８の処理にて、ステータスコードを「２ＦＦＦ」と
し、メインプロセッサ２０２のシステム立ち上げ処理が
異常終了する。

【０２５５】前記の様にして行ったノード１００ａ〜１
００ｃのメインプロセッサ２０２のシステム立ち上げ処
理が異常終了した場合には、さらに、以下の様に、ブー
トストラップデバイスを変更したシステム立ち上げ処理
を行う。

【０２５６】管理端末装置１０４のソフトウェア３０１
は、「ＭＳ−ＲＥＡＤ」コマンドを使用して、システム
制御インタフェース経由にて、ノード１００ａ〜１００
ｃのメインメモリ２０４のブートストラップパス情報が
格納されている前記特定領域を参照し、メインプロセッ
サ２０２のシステム立ち上げ処理に失敗したブートスト
ラップデバイスを確認する。

【０２５７】次に、管理端末装置１０４のソフトウェア
３０１は、「ＭＳ−ＷＲＩＴＥ」コマンドを使用し、シ
ステム制御インタフェース経由にて、ノード１００ａ〜
１００ｃのメインメモリ２０４のブートストラップパス
情報が格納されている前記特定領域に、メインプロセッ
サ２０２のシステム立ち上げ処理に失敗したブートスト
ラップデバイス以外のブートストラップデバイス名を書
き込む。

【０２５８】管理端末装置１０４のソフトウェア３０１
は、前記の様に、ノード１００ａ〜１００ｃのメインメ
モリ２０４の前記特定領域のブートストラップパス情報
を書き替えた後、「ＰＲＯＣ−ＲＥＳＥＴ」コマンドを
使用し、ノード１００ａ〜１００ｃのメインプロセッサ
２０２をリセットしてメインプロセッサ２０２のシステ
ム立ち上げ処理を再度行うことで、ブートストラップ先
を変更したシステム立ち上げ処理を行うことが出来る。

【０２５９】また、ブートストラップパス情報の書き換
えについては、ノード１００ａ〜１００ｃのメインプロ
セッサ２０２のシステム立ち上げ処理が正常終了してい
る場合には、以下の方法でも可能である。

【０２６０】すなわち、ノード１００ａ〜１００ｃのＳ
ＲＡＭ２１４のブートストラップパス情報は、ノード１
００ａ〜１００ｃのソフトウェア２０３からも書き換え
可能であるので、管理端末装置１０４のソフトウェア３
０１は、システム運用支援インタフェース経由にて、ノ
ード１００ａ〜１００ｃのソフトウェア２０３に対し、
ブートストラップパス情報の書き換えを指示し、指示さ
れたソフトウェア２０３が当該ノードのブートストラッ
プパス情報を書き替える。

【０２６１】ノード１００ａ〜１００ｃのソフトウェア
２０３は、更新されたブートストラップパス情報をシス
テム制御インタフェース経由にて管理端末装置１０４の
ソフトウェア３０１に通知し、管理端末装置１０４のソ
フトウェア３０１が、システム制御インタフェース経由
にて、前記「ＰＲＯＣ−ＲＥＳＥＴ」コマンドを使用し
てノード１００ａ〜１００ｃのメインプロセッサ２０２
をリセットすれば、直ちに更新されたブートストラップ
パスからのロード処理が行われる。

【０２６２】以上説明した様に、本実施形態の並列計算
機システムの管理装置によれば、管理端末装置１０４か
らの指示によりノード１００ａ〜１００ｃのメインメモ
リ２０４またはレジスタの内容を参照または更新するの
で、並列計算機システムを構成する複数のノード１００
ａ〜１００ｃの障害発生時のメインメモリ２０４の内容
を管理端末装置１０４で一括して管理することが可能で
ある。

【０２６３】また、本実施形態の並列計算機システムの
管理装置によれば、管理端末装置１０４からの指示によ
りノード１００ａ〜１００ｃのメインプロセッサ２０２
のリセットを行うので、並列計算機システムを構成する
複数のノード１００ａ〜１００ｃのメインプロセッサ２
０２のリセットを管理端末装置１０４から一括して行う
ことが可能である。

【０２６４】また、本実施形態の並列計算機システムの
管理装置によれば、管理端末装置１０４は、ノード１０
０ａ〜１００ｃとの間のインタフェースを使い分けるこ
とが可能であり、管理端末装置１０４からの指示により
ノード１００ａ〜１００ｃのメインメモリ２０４のブー
トストラップパス情報を変更し、メインプロセッサ２０
２のリセットを行うので、並列計算機システムを構成す
る複数のノード１００ａ〜１００ｃの特定のブートスト
ラップデバイスに障害が発生した場合に、管理端末装置
１０４からの指示により、ブートストラップデバイスを
変更してノード１００ａ〜１００ｃのメインプロセッサ
２０２のシステム立ち上げ処理を行うことが可能であ
る。

【０２６５】（実施形態５）以下に、本発明の並列計算
機システムの管理装置において、複数の管理端末装置を
用いて信頼性を向上させた実施形態５の概略構成につい
て説明する。

【０２６６】図１５は、本発明の並列計算機システムの
管理装置において、管理端末装置を二重化した実施形態
５の概略構成を示す図である。図１５において、１０５
ｅはシステム制御機構、１０６ｅは通信ケーブル、１０
８ｅはＬＡＮ制御機構、１０９ｅは通信ケーブル、１１
１は管理端末装置である。

【０２６７】図１５に示す様に、本実施形態の並列計算
機システムの管理装置は、管理端末装置１１１と、通信
ケーブル１０６ｅと、通信ケーブル１０９ｅとを備え、
管理端末装置１１１は、システム制御機構１０５ｅと、
ＬＡＮ制御機構１０８ｅとを有しており、管理端末装置
１１１のシステム制御機構１０５ｅを通信ケーブル１０
６ｅを介してネットワーク集線装置１０７に接続し、管
理端末装置１１１のＬＡＮ制御機構１０８ｅを通信ケー
ブル１０９ｅを介してネットワーク集線装置１１０に接
続している。

【０２６８】前記の様に、本実施形態の並列計算機シス
テムの管理装置では、複数の管理端末装置１０４及び１
１１を備えているので、１つの管理端末装置が故障して
も、他の管理端末装置により、並列計算機システムの運
用管理を続行することが可能であるが、複数の管理端末
装置を同時に使用して並列計算機システムの運用管理を
行うと、複数の管理端末装置が送信するシステム制御コ
マンドやアダプタ制御コマンドの内容が互いに競合する
ことがあるので、複数の管理端末装置を用いているとき
に管理端末装置の動作の競合を防止する処理が必要にな
る。

【０２６９】以下に、本実施形態の並列計算機システム
の管理装置において複数の管理端末装置を用いていると
きに管理端末装置の動作の競合を防止する処理手順につ
いて説明する。

【０２７０】図１６は、本実施形態の並列計算機システ
ムの管理装置において複数の管理端末装置の動作の競合
を防止する処理手順を示すフローチャートである。

【０２７１】本実施形態の並列計算機システムの管理装
置において、管理端末装置を二重化している場合には、
管理端末装置の二重化情報を、例えば、管理端末装置１
０４及び管理端末装置１１１の両方のソフトウェア３０
１から参照可能な記憶領域に予め設定しておくことで、
二重化した管理端末装置の競合を防止することが可能と
なる。

【０２７２】図１６に示す様に、本実施形態の並列計算
機システムの管理装置において管理端末装置を二重化し
ているときの処理手順では、ステップ１６００の処理
で、管理端末装置１０４及び管理端末装置１１１の両方
のソフトウェア３０１は、管理端末装置が二重化されて
いることを示す二重化ビットを参照し、ビットが立って
いる場合には、管理端末装置が二重化されていることを
認識する。

【０２７３】ステップ１６０１の処理では、ネットワー
ク（例えば、システム運用支援インタフェース）経由に
て、相手の管理端末装置のＩＰアドレスを取得する。

【０２７４】ステップ１６０２の処理では、メイン管理
端末装置と、前記メイン管理端末装置をバックアップす
るサブ管理端末装置とを決定するため、例えば、ＩＰア
ドレスの若い方をメイン管理端末装置、そうでない方を
サブ管理端末装置とする。

【０２７５】このとき、メイン管理端末装置のみを動作
させておき、前記メイン管理端末装置に障害が発生した
ときに、直ちにサブ管理端末装置に切り替える運用方法
と、メイン管理端末装置とサブ管理端末装置とを同時に
動作させる運用方法とを行うことが可能であるが、後者
の場合は、双方からのノード１００ａ〜１００ｃを制御
するシステム制御コマンドや、アダプタ制御コマンドの
内容が競合することがあるため、サブ管理端末装置から
送信可能なシステム制御コマンド及びアダプタ制御コマ
ンドを一部制限する。

【０２７６】例えば、ステップ１６０３の処理にて、自
管理端末装置がメイン管理端末装置であるかどうかを判
定し、メイン管理端末装置でなかった場合には、ステッ
プ１６０４の処理にて、システム制御コマンド（「Ｐ−
ＯＮ」「Ｐ−ＯＦＦ」等）や、また、アダプタ制御コマ
ンド（「ＳＥＴ−ＣＯＮＮＥＣＴ」等）を発行禁止にす
ることで、ノード１００ａ〜１００ｃを制御するシステ
ム制御コマンドや、アダプタ制御コマンドの内容が競合
しても、並列計算機システムとしての整合性を保つこと
が可能である。

【０２７７】以上説明した様に、本実施形態の並列計算
機システムの管理装置によれば、複数の管理端末装置を
備えているので、１つの管理端末装置に障害が発生した
場合でも並列計算機システムの運用管理を続行し、並列
計算機システムの信頼性を向上させることが可能であ
る。

【０２７８】また、本実施形態の並列計算機システムの
管理装置によれば、複数の管理端末装置にメイン管理端
末装置とサブ管理端末装置とを設定するので、並列計算
機システムを複数の管理端末装置で管理した場合に、前
記複数の管理端末装置の動作の競合を防止することが可
能である。

【０２７９】（実施形態６）以下に、本発明の並列計算
機システムの管理装置において、管理端末装置１０４に
補助電源で動作する電源投入論理を付加し、管理端末装
置１０４の主電源を遠隔地から投入することにより並列
計算機システムの主電源の投入を行う実施形態６につい
て説明する。

【０２８０】図１７は、本実施形態の並列計算機システ
ムの管理装置における管理端末装置１０４に補助電源で
動作する電源投入論理を付加した場合の管理端末装置内
のハードウェアの概略構成を示す図である。図１７にお
いて、１７００は補助電源、１７０１は電源投入論理、
１７０２は電源制御信号、１７０３は主電源、１７０４
は端末装置、１７０５はネットワークである。

【０２８１】図１７に示す様に、本実施形態の並列計算
機システムの管理装置における管理端末装置１０４は、
補助電源１７００と、電源投入論理１７０１と、主電源
１７０３とを備え、補助電源１７００から電力の供給を
受けている電源投入論理１７０１を電源制御信号１７０
２を介して主電源１７０３に接続すると共にネットワー
ク１７０５を介して別の端末装置１７０４に接続してい
る。

【０２８２】図１７に示す様に、本実施形態の並列計算
機システムの管理装置における管理端末装置１０４は、
補助電源１７００で動作する電源投入論理１７０１を設
けており、電源投入論理１７０１は、ここでは特に図示
していないが、ネットワーク制御部、電源制御部及びマ
イクロプロセッサ等から構成されており、ネットワーク
１７０５経由で電源制御指示を受け取ると、主電源１７
０３を制御する論理回路を備えている。

【０２８３】この電源投入論理１７０１により、例えば
下記のような管理端末装置１０４の遠隔オペレーション
が可能となる。

【０２８４】本実施形態の並列計算機システムの管理装
置において、ネットワーク１７０５で接続された別の端
末装置１７０４は、例えばｔｅｌｎｅｔプロトコルを使
用して、電源投入論理１７０１にログインする。（この
時、管理端末装置１０４には補助電源１７００が投入さ
れている状態である。） 次に、端末装置１７０４は、電源投入論理１７０１にパ
ワーオンコマンドを発行する。電源投入論理１７０１
は、パワーオンコマンドを受け取ると、外部から電源投
入指示があったことを認識し、電源制御信号１７０２を
出力し、管理端末装置１０４の主電源１７０３を投入す
る。

【０２８５】管理端末装置１０４の主電源１７０３が投
入されると、ブートストラップＲＯＭ３０３に格納され
ているブートストラッププログラムが管理端末装置１０
４のシステム立ち上げ処理を行い、ソフトウェア３０１
を起動する。

【０２８６】図１８は、本実施形態の並列計算機システ
ムの管理装置における管理端末装置１０４のシェルプロ
グラムの一例を示す図である。ここで、シェルプログラ
ムとは、汎用のオペレーティングシステムであるＵＮＩ
Ｘで実行される複数のコマンド名またはプログラム名を
記載した、一連の手続きを行うプログラムを指すが、図
１８においては、ＵＮＩＸのコマンド名またはプログラ
ム名の代わりに、そのコマンドの機能を簡単に記載して
いる。

【０２８７】図１８に示す様に、本実施形態の並列計算
機システムの管理装置の管理端末装置１０４のシステム
立ち上げ処理の際に実行されるシェルプログラムに、予
め、ノード１００ａ〜１００ｃの主電源２００を投入指
示するシステム制御コマンドを記載しておき、管理端末
装置１０４の主電源１７０３が投入されたときに、この
シェルプログラムが実行されるようにしておく。

【０２８８】このようにすることで管理端末装置１０４
の起動を契機として、ノード１００ａ〜１００ｃの主電
源２００を投入し、ノード１００ａ〜１００ｃのメイン
プロセッサ２０２のシステム立ち上げ処理を自動的に行
うことが可能である。

【０２８９】以上説明した様に、本実施形態の並列計算
機システムの管理装置によれば、遠隔地からのアクセス
により管理端末装置１０４の主電源１７０３を投入し、
さらにノード１００ａ〜１００ｃの起動（主電源２００
の投入）が可能となり、並列計算機システムの運用管理
を遠隔地から行うことができる。

【０２９０】以上、説明してきた本実施形態の並列計算
機システムの管理装置では、特に図示していないが、下
記のようなシステムにも適用可能である。

【０２９１】（１）各ノードに汎用のオペレーティング
システムを搭載していない、特定の機能を実行する専用
の並列計算機システムにおいては、汎用のオペレーティ
ングシステムのネットワーク機能を使用しない前記シス
テム制御インタフェースのみを用いて運用管理を行う。

【０２９２】本発明の並列計算機システムの管理装置に
よれば、前記システム制御インタフェースは、運用管理
の対象となるプロセッサとは独立した補助電源とネット
ワーク機能を備えており、汎用のオペレーティングシス
テムのＴＣＰ／ＩＰ等のネットワーク機能を使用しない
ので、前記汎用のオペレーティングシステムを搭載して
いない専用の並列計算機システムにおいても適用するこ
とが可能である。

【０２９３】（２）各ノードに補助電源で動作する機能
を持たない、或いは補助電源で動作する機能が限定され
ている様な並列計算機システムにおいては、補助電源を
使用しない前記システム運用支援インタフェースのみを
用いて管理を行う。

【０２９４】この場合には、主電源の投入等、補助電源
を必須とする機能を除き、システム制御インタフェース
の機能をシステム運用支援インタフェースによって代行
することにより、本発明の並列計算機システムの管理装
置を適用することが可能である。

【０２９５】以上、本発明を、前記実施形態に基づき具
体的に説明したが、本発明は、前記実施形態に限定され
るものではなく、その要旨を逸脱しない範囲において種
々変更可能であることは勿論である。

【０２９６】

【発明の効果】本願において開示される発明のうち代表
的なものによって得られる効果を簡単に説明すれば、下
記のとおりである。

【０２９７】（１）複数のノードの補助電源で動作し、
メインプロセッサが使用するネットワークソフトウェア
及び通信ケーブルとは別のネットワークソフトウェア及
び通信ケーブルを使用して管理端末装置と通信を行うシ
ステム制御機構に対し、前記管理端末装置からシステム
制御コマンドを送信し、前記システム制御コマンドを前
記補助電源で動作するサブプロセッサで実行することよ
り複数のノードのメインプロセッサの制御を行うので、
並列処理を実行するメインプロセッサの動作並びに前記
メインプロセッサのオペレーティングシステム及びネッ
トワークソフトウェアの動作とは無関係に、並列計算機
システムを構成する複数のノードの運用管理を管理端末
装置で一括して行うことが可能である。

【０２９８】（２）管理端末装置からの指示により複数
のノードの主電源の投入または切断を行うので、並列計
算機システムを構成する複数のノードの電源の投入また
は切断を管理端末装置で一括または個別に行うことが可
能である。

【０２９９】（３）複数のノードへの主電源の投入指示
を、予め設定された特定の時間間隔で行うので、並列計
算機システムに電力を供給する電源設備の突入電流を低
く抑えることが可能である。

【０３００】（４）管理端末装置からの特定のシステム
制御コマンドに対する正常なレスポンスが一定時間中に
受信されるかどうかを調べるので、並列計算機システム
を構成する複数のノードが正常に動作中であるかを管理
端末装置で監視することが可能である。

【０３０１】（５）特定のノードのメインプロセッサま
たはサブプロセッサが動作時に出力するノードメッセー
ジを蓄積し、管理端末装置が前記の蓄積されたノードメ
ッセージを読み取るので、並列計算機システムを構成す
る複数のノードのメインプロセッサがノードメッセージ
を出力した後にその動作を停止した場合であっても、前
記ノードメッセージを管理端末装置で一括して管理する
ことが可能である。

【０３０２】（６）管理端末装置からの指示によりノー
ドのメインメモリまたはレジスタの内容を参照または更
新するので、並列計算機システムを構成する複数のノー
ドの障害発生時のメインメモリ及びレジスタの内容を管
理端末装置で一括して管理することが可能である。

【０３０３】（７）管理端末装置からの指示により複数
のノードのメインプロセッサのリセットを行うので、並
列計算機システムを構成する複数のノードのメインプロ
セッサのリセットを管理端末装置から一括して行うこと
が可能である。

【０３０４】（８）管理端末装置からの指示により複数
のノードのメインメモリ中のブートストラップパス情報
を変更し、メインプロセッサのリセットを行うので、並
列計算機システムを構成する複数のノードの特定のブー
トストラップデバイスに障害が発生した場合に、管理端
末装置からの指示により、ブートストラップデバイスを
変更して前記複数のノードのメインプロセッサのシステ
ム立ち上げ処理を行うことが可能である。

【０３０５】（９）複数の管理端末装置を備えることも
可能であるので、１つの管理端末装置に障害が発生した
場合でも並列計算機システムの運用管理を続行すること
が可能であり、複数の管理端末装置をメイン管理端末装
置とサブ管理端末装置とに設定するので、並列計算機シ
ステムを複数の管理端末装置で管理した場合に、前記複
数の管理端末装置の動作の競合を防止することが可能で
ある。

【０３０６】（１０）遠隔地からのアクセスにより管理
端末装置の主電源を投入し、さらに複数のノードの主電
源を投入するので、並列計算機システムの運用管理を遠
隔地から行うことが可能である。

【図面の簡単な説明】

【図１】本発明の並列計算機システムの管理装置を実施
する実施形態１の概略構成を示す図である。

【図２】実施形態１の並列計算機システムの管理装置に
おいて並列計算機システムを構成するノードの概略構成
を示す図である。

【図３】実施形態１の並列計算機システムの管理装置に
おける管理端末装置の概略構成を示す図である。

【図４】実施形態１の並列計算機システムの管理装置に
おける管理端末装置と各ノードとの通信シーケンスの一
例を示す図である。

【図５】実施形態１の並列計算機システムの管理装置に
おけるアダプタ制御コマンド及びそのレスポンスのパケ
ットフォーマットを示す図である。

【図６】実施形態１の並列計算機システムの管理装置に
おけるシステム制御コマンド及びそのレスポンスのパケ
ットフォーマットを示す図である。

【図７】実施形態１の並列計算機システムの管理装置に
おけるシステム制御機構のモード遷移を示す図である。

【図８】実施形態１の並列計算機システムの管理装置に
おけるシステム制御機構の非パケットモードでのコネク
ション状態の遷移を示す図である。

【図９】実施形態１の並列計算機システムの管理装置に
おけるシステム制御機構のプロセッサの処理手順の一部
を示すフローチャートである。

【図１０】実施形態１の並列計算機システムの管理装置
におけるシステムサポート機構のサブプロセッサの処理
手順の一部を示すフローチャートである。

【図１１】実施形態２の並列計算機システムの管理装置
における管理端末装置から各ノードへ主電源の投入を指
示する電源投入シーケンスの一例を示す図である。

【図１２】実施形態３の並列計算機システムの管理装置
における管理端末装置に各ノードのノードメッセージを
表示するシーケンスの一例を示す図である。

【図１３】実施形態４の並列計算機システムの管理装置
におけるノードのメインプロセッサのシステム立ち上げ
処理手順を示すフローチャートである。

【図１４】実施形態４の並列計算機システムの管理装置
におけるノード内のＳＲＡＭ内のメモリマップを示す図
である。

【図１５】本発明の並列計算機システムの管理装置にお
いて管理端末装置を二重化した実施形態５の概略構成を
示す図である。

【図１６】実施形態５の並列計算機システムの管理装置
において複数の管理端末装置の動作の競合を防止する処
理手順を示すフローチャートである。

【図１７】実施形態６の並列計算機システムの管理装置
における管理端末装置に補助電源で動作する電源投入論
理を付加した場合の管理端末装置内のハードウェアの概
略構成を示す図である。

【図１８】実施形態６の並列計算機システムの管理装置
における管理端末装置のシェルプログラムを示す。

【符号の説明】

１００ａ〜１００ｃ…ノード、１０１…通信処理装置、
１０２ａ〜１０２ｃ…通信インタフェース機構、１０３
ａ〜１０３ｃ…通信ケーブル、１０４…管理端末装置、
１０５ａ〜１０５ｄ…システム制御機構、１０６ａ〜１
０６ｄ…通信ケーブル、１０７…ネットワーク集線装
置、１０８ａ〜１０８ｄ…ＬＡＮ制御機構、１０９ａ〜
１０９ｄ…通信ケーブル、１１０…ネットワーク集線装
置、２００…主電源、２０１…補助電源、２０２…メイ
ンプロセッサ、２０３…ソフトウェア、２０４…メイン
メモリ、２０５…プロセッサメモリ制御機構、２０６…
システムバス、２０７…システムディスク、２０８…Ｉ
／Ｏ制御機構、２０９…ＲＳ−２３２Ｃ制御機構、２１
０…ブートストラップＲＯＭ、２１１…システムサポー
ト機構、２１２…サブプロセッサ、２１３…ＲＯＭ、２
１４…ＳＲＡＭ、２１５…ローカルバス、２１６…電源
投入／切断信号、２１７…プロセッサリセット信号、２
１８…ＬＡＮ制御部、２１９…ＲＳ−２３２Ｃ制御部、
２２０…プロセッサ、２２１…ＲＯＭ、２２２…ＲＡ
Ｍ、２２３…データインタフェース、２２４…制御イン
タフェース、３００…プロセッサ、３０１…ソフトウェ
ア、３０２…メインメモリ、３０３…ブートストラップ
ＲＯＭ、３０４…プロセッサメモリ制御機構、３０５…
システムバス、３０６…Ｉ／Ｏ制御機構、３０７…シス
テムディスク、３０８及び３０９…ＲＳ−２３２Ｃ制御
機構、３１０…グラフィックス制御機構、３１１…ＬＡ
Ｎ制御部、３１２…ＲＳ−２３２Ｃ制御部、３１３…プ
ロセッサ、３１４…ＲＯＭ、３１５…ＲＡＭ、３１６…
制御インタフェース、３１７…データインタフェース、
４０１…アダプタ制御コマンド及びそのレスポンス、４
０２…システム制御コマンド及びそのレスポンス、４０
３…ノードメッセージ、５０１…種別フィールド、５０
２…送信元アドレスフィールド、５０３…受信先アドレ
スフィールド、５０４…情報部フィールド、５０５…識
別子、６０１…種別フィールド、６０２…送信元アドレ
スフィールド、６０３…受信先アドレスフィールド、６
０４…情報部フィールド、６０５…識別子、７０１…パ
ケットモード、７０２…非パケットモード、７０３…
「ＳＥＴ−ＭＯＤＥ」コマンド、８００…ディスコネク
ト状態、８０１…ウェイトコネクト状態、８０２…コネ
クト状態、８０３…「ＳＥＴ−ＣＯＮＮＥＣＴ」コマン
ド、８０４…システム制御機構間の呼制御、１４００…
プライマリブートストラップパス情報、１４０１…オル
タネートブートストラップパス情報、１０５ｅ…システ
ム制御機構、１０６ｅ…通信ケーブル、１０８ｅ…ＬＡ
Ｎ制御機構、１０９ｅ…通信ケーブル、１１１…管理端
末装置、１７００…補助電源、１７０１…電源投入論
理、１７０２…電源制御信号、１７０３…主電源、１７
０４…端末装置、１７０５…ネットワーク。

───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平７−129282（ＪＰ，Ａ) 特開 平５−324133（ＪＰ，Ａ) 特開 昭64−25270（ＪＰ，Ａ) 実開 昭60−5541（ＪＰ，Ｕ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) G06F 15/16 640 G06F 1/26 G06F 15/177 678

Claims (9)

(57)【特許請求の範囲】
1. 【請求項１】 複数の計算機であるノードを接続した並
   列計算機システムを管理する管理端末装置を備えた並列
   計算機システムの管理装置において、 前記複数のノードは、当該ノードの主電源により動作し
   並列処理を実行するメインプロセッサと、当該ノードの
   補助電源により動作し前記メインプロセッサを管理する
   システム制御コマンドを実行するサブプロセッサと、前
   記補助電源により動作し前記管理端末装置との通信を行
   い、前記管理端末装置から発行されたシステム制御コマ
   ンドをもとに制御データを生成するシステム制御機構
   と、該システム制御機構とは異なるネットワークで前記
   管理端末装置に接続され、前記管理端末装置の制御下で
   前記ノードのアプリケーションソフトウェアを管理する
   ＬＡＮ制御機構とを備え、 前記管理端末装置は、前記複数のノードの複数のシステ
   ム制御機構と通信を行うシステム制御機構を備え、 前記複数のノードの複数のシステム制御機構と前記管理
   端末装置のシステム制御機構とを接続して成り、前記複
   数のノードの複数のメインプロセッサを管理するシステ
   ム制御コマンドを前記管理端末装置から前記複数のノー
   ドの複数のシステム制御機構に送信し、前記システム制
   御コマンドを受け取った前記複数のノードが、該コマン
   ドの内容を実行するシステム制御インタフェースを備え
   ることを特徴とする並列計算機システムの管理装置。
2. 【請求項２】 前記複数のノードのサブプロセッサは、
   当該ノードの主電源を投入または切断する機能を備え、
   前記管理端末装置は、前記複数のノードのサブプロセッ
   サに、一括または個別に主電源を投入または切断するシ
   ステム制御コマンドを送信する手段を備えることを特徴
   とする請求項１に記載された並列計算機システムの管理
   装置。
3. 【請求項３】 前記管理端末装置は、前記複数のノード
   の主電源を個別に投入するシステム制御コマンドを、予
   め設定された時間間隔で前記複数のノードのサブプロセ
   ッサに個別に送信する手段を備えることを特徴とする請
   求項２に記載された並列計算機システムの管理装置。
4. 【請求項４】 前記管理端末装置は、前記複数のノード
   の特定のノードのサブプロセッサに特定のシステム制御
   コマンドを送信し、予め設定された時間内に前記特定の
   システム制御コマンドに対する正常な応答が受信されな
   い場合に、前記特定のノードに異常が発生しているとみ
   なす手段を備えることを特徴とする請求項１に記載され
   た並列計算機システムの管理装置。
5. 【請求項５】 前記複数のノードのシステム制御機構
   は、当該ノードのメインプロセッサまたはサブプロセッ
   サが動作時に出力するメッセージであるノードメッセー
   ジを蓄積する手段を備え、前記管理端末装置は、当該ノ
   ードのシステム制御機構に蓄積されたノードメッセージ
   を読み取る手段を備えることを特徴とする請求項１に記
   載された並列計算機システムの管理装置。
6. 【請求項６】 前記複数のノードのサブプロセッサは、
   当該ノードのメインメモリまたはレジスタの内容を参照
   及び更新する手段を備え、前記管理端末装置は、前記複
   数のノードのサブプロセッサに、当該ノードのメインメ
   モリまたはレジスタの内容を参照または更新するシステ
   ム制御コマンドを送信する手段を備えることを特徴とす
   る請求項１に記載された並列計算機システムの管理装
   置。
7. 【請求項７】 前記複数のノードのサブプロセッサは、
   当該ノードのメインプロセッサをリセットする手段を備
   え、前記管理端末装置は、当該ノードのサブプロセッサ
   に、当該ノードのメインプロセッサをリセットするシス
   テム制御コマンドを送信する手段を備えることを特徴と
   する請求項１に記載された並列計算機システムの管理装
   置。
8. 【請求項８】 前記複数のノードのサブプロセッサは、
   当該ノードのメインメモリの内容を参照及び更新する手
   段と、当該ノードのメインプロセッサをリセットする手
   段とを備え、前記管理端末装置は、当該ノードのメイン
   プロセッサが格納しているメインメモリ中のブートスト
   ラップデバイス名を参照及び更新するシステム制御コマ
   ンドと、当該ノードのメインプロセッサをリセットする
   システム制御コマンドとを送信する手段を備えることを
   特徴とする請求項１に記載された並列計算機システムの
   管理装置。
9. 【請求項９】 前記管理端末装置を複数備え、前記複数
   の管理端末装置のうちの一部の管理端末装置の機能を制
   限する手段を備えることを特徴とする請求項１に記載さ
   れた並列計算機システムの管理装置。