JP2003030162A - コンピュータシステム - Google Patents

コンピュータシステム

Info

Publication number
JP2003030162A
JP2003030162A JP2002143284A JP2002143284A JP2003030162A JP 2003030162 A JP2003030162 A JP 2003030162A JP 2002143284 A JP2002143284 A JP 2002143284A JP 2002143284 A JP2002143284 A JP 2002143284A JP 2003030162 A JP2003030162 A JP 2003030162A
Authority
JP
Japan
Prior art keywords
domain
configuration
computer system
register
server manager
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002143284A
Other languages
English (en)
Inventor
Kazunori Masuyama
マスヤマ カズノリ
N Conway Patrick
エヌ．コンウェイ パトリック
Hitoshi Oi
オイ ヒトシ
Jeremy Farrell
ファーレル ジェレミー
Sudheer Kumar Rao Miryala
クマール ラオ ミルヤラ サダール
Yukio Nishimura
ニシムラ ユキオ
Prabhunanadan B Narasimhamurthy
ビー．ナラシンハマシー プラブフナンダン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of JP2003030162A publication Critical patent/JP2003030162A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0803—Configuration setting
    • H04L41/0813—Configuration setting characterised by the conditions triggering a change of settings
    • H04L41/082—Configuration setting characterised by the conditions triggering a change of settings the condition being updates or upgrades of network functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0803—Configuration setting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12—Discovery or management of network topologies

Abstract

(57)【要約】 【課題】 本発明の目的は、従来の欠陥に鑑み、改善さ
れたドメイン区分け制御を備えたドメイン区分けシステ
ム及びその方法を提供することである。 【解決手段】 本発明のシステム及び方法は、システム
相互接続構成に結合された複数のコンピュータノードを
有するコンピュータシステムのドメイン区分けを開示し
ている。システム相互接続構成に結合されたドメイン構
成ユニットはコンピュータシステムの区分け状態を規定
する複数のドメイン構成レジスタを含む。いずれのドメ
インもドメイン構成レジスタに対して書き込みアクセス
特権を持たない。コンピュータシステムとは別個のサー
バマネージャは、専用の通信チャンネルによりドメイン
構成ユニットに結合され、ドメイン構成ユニットにおけ
る区分け状態を書き込むように適応される。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、ドメイン内でコン
ピュータシステムの区分けに関するもので、特に、ドメ
イン内における多重ノードコンピュータシステムのドメ
イン構成レジスタのプログラムに関する。
【０００２】
【従来の技術】多重ノードコンピュータネットワークは
しばしば、各ドメインがそれ自身のアドレス空間にて独
立のマシンとして機能する複数のドメインに区分され
る。ＯＳは独立に各ドメインを実行する。区分けによっ
て種々のタスクに効率的にコンピュータのリソースの割
り当てを可能とし、それにより、コンピュータシステム
の使用上の柔軟性を可能とし、全体システムの動作の干
渉からネットワークの一部におけるハードウェア又はソ
フトウェア障害の影響を制限するためのコンピュータリ
ソース間でのアイソレーションを可能とする。
【０００３】図１は、中央処理装置（ＣＰＵ）ノード１
０５、メモリノード１１０、及びシステム相互接続構成
１２０に結合された入出力（Ｉ／Ｏ）ノード１１５、を
含む多重ノードコンピュータシステムの構成図である。
システム相互接続構成１２０は、各ドメインが独立のコ
ンピュータシステムとして機能する複数のドメインに前
記システムを区分けすることを可能にするために、パケ
ットルータ及び／又はクロスバースイッチのような構成
要素を含むことができる。ドメイン制御レジスタとして
知られた区分規定レジスタ１２５は、それ自身がローカ
ルドメインレジスタ１４５、１５０、１５５を有するド
メイン１３０、１３５、１４０に前記多重ノードシステ
ムを区分けするために使用される。ルーティングテーブ
ルは、通常、ドメイン内でメッセージのルーティンを容
易にするために使用される。ローカルドメインレジスタ
は、例えば構成空間レジスタ、コントロールレジスタ、
ステータスレジスタ、エラーロギングレジスタのよう
な、種々の異なるタイプの従来のレジスタを含むことが
できる。
【０００４】
【発明が解決しようとする課題】しかしながら、従来の
ドメイン区分けは、いずれか１つのドメインのソフトウ
ェア及びハードウェアエラーによってドメイン区分けに
対して有害な影響を与える問題がある。第１は、個々の
ドメイン１３０、１３５、又は１４０で実行しているソ
フトウェアが、他のドメインの動作と干渉するドメイン
を生じるような欠陥（「バグ」）をもつことであり、例
えば、ドメイン１３０のソフトウェアの欠陥によって、
他のドメイン１３５の動作と干渉する位置にデータを誤
って書き込むような場合である。第２は、不正ユーザ
（「ハッカー」）が１つのドメインの機能又はドメイン
区分けを破壊するようなソフトウェアを意図的に入力す
る場合である。第３は、ハードウェアの欠陥が結果的に
個々のドメインの欠陥を生じ、さらにシステム全体の無
機能状態を生じる場合である。
【０００５】従って、本発明の目的は、従来の欠陥に鑑
み、改善されたドメイン区分け制御を備えたドメイン区
分けシステム及びその方法を提供することである。
【０００６】
【課題を解決するための手段】本発明のシステム及び方
法は、システム相互接続構成に結合された複数のコンピ
ュータノードを有するコンピュータシステムのドメイン
区分けを開示している。システム相互接続構成に結合さ
れたドメイン構成ユニットはコンピュータシステムの区
分け状態を規定する複数のドメイン構成レジスタを含
む。いずれのドメインもドメイン構成レジスタに対して
書き込みアクセス特権を持たない。コンピュータシステ
ムとは別個のサーバマネージャは、専用の通信チャンネ
ルによりドメイン構成ユニットに結合され、ドメイン構
成ユニットにおける区分け状態を書き込むように適応さ
れる。
【０００７】好適な実施形態として、サーバマネージャ
はコンピュータシステムの外部のコンピュータに属する
ソフトウェアアプリケーションである。またサーバマネ
ージャはドメイン構成レジスタの読み出し及び書き込み
アクセスの両方を有する。またサーバマネージャはロー
カルドメイン内でレジスタへの書き込みアクセスを有す
る。
【０００８】
【発明の実施の形態】図２は本発明の一実施形態におけ
る多重ノードコンピュータシステム２００の全体構成の
ブロック図である。本発明によれば、多重ノードコンピ
ュータシステムは、システム相互接続構成１２０に接続
された、複数の中央処理ユニット（ＣＰＵ）ノード１０
５、メモリノード１１０、及び入出力（Ｉ／Ｏ）ノード
１１５、を含む。各ノードは別個のコンピュータチッ
プ、コンピュータボード、又は独立のユニットに装着し
てもよい。システム相互接続構成１２０は、例えばグロ
ーバルインターコネクトであり、又はルータを含む。シ
ステム２００の適用例としてサーバアプリケーションを
含み、例えばシステム２００はサーバである。
【０００９】一実施形態として、ドメイン構成ユニット
１２６は、ドメイン構成レジスタ１２５及びルーティン
テーブルレジスタ（図２に示さず）を含む。ドメイン構
成レジスタ１２５（「区分定義レジスタ」と記載するこ
ともある）はコンピュータシステム２００をドメイン１
３０、１３５、１４０に区分けするために使用される。
各ドメインは、各自、ローカルドメインレジスタ１４
５、１５０、１５５を有し、これらによりローカルドメ
インの状態を制御する。ローカルドメインレジスタは、
コントロールレジスタ、ステータスレジスタ及びエラー
ロギングレジスタのような、種々のタイプのローカルレ
ジスタを含む。図示の都合上、３つのドメインが示され
ているが、それ以上のドメインをドメイン構成レジスタ
１２５によって形成することができる。
【００１０】サーバマネージャ１６０はドメイン構成レ
ジスタ１２５を含むドメイン構成の書き込みポートに結
合される。書き込みポートへの結合は、好ましくは専用
サイドバンド１６５、即ち、個々のドメインでのソフト
ウェア及びハードウェアエラーによって破壊されないデ
ータチャンネルにより形成される。従って、チャンネル
１６５は好ましくはサーバマネージャ１６０によって使
用するために予約されるチャンネルである。例えば、チ
ャンネル１６５は専用のデータバスとしてハードウェア
で実現してもよい。一方、チャンネル１６５は同じデー
タバス上のチャンネルにより実行される通信によって破
壊されない専用データチャンネルでもよい。専用サイド
バンドチャンネルの他の望ましいと特性として、１）サ
イドバンドチャンネルはドメインでハードウェア資源を
共有しない。２）ドメイン内でのデッドロック、ライブ
ロック、又はスターベーション(starvation)の出現はサ
イドバンドチャンネル上の通信に影響を与えない。３）
サイドバンドチャンネルは１つのマスタ、即ち、サーバ
マネージャをもつ。４）サイドバンドチャンネルは決し
てブロックされない。
【００１１】サーバマネージャ１６０は、ハードウェ
ア、ソフトウェア、ファームウェア、及びこれらの組み
合わせで実現できる。サーバマネージャ１６０は、シス
テム管理者１７２（信頼できるヒューマンエージェン
ト）に対する制御インタフェース１７０を有するシステ
ムコントローラ１６８の一部でよい。システムコントロ
ーラ１６８は好ましくはより大きなシステム２００の構
成、監視及び制御として作用する。図２に示すように、
実施形態として、コンピュータシステム２００の動作を
制御するため、信頼されたエージェント１７２であるユ
ーザに対する制御インタフェース１７０がある。例え
ば、システムコントローラ１６８は、パーソナルコンピ
ュータ（ＰＣ）又はグラフィカルユーザインタフェース
を有するワークステーションでよく、ＰＣ又はワークス
テーションのローカルメモリ上のソフトウェアモジュー
ルであるサーバマネージャ１６０にコマンドを入力す
る。以下に詳しく述べるように、サーバマネージャ１６
０はローカルドメイン内のコントロールレジスタに対し
て読み出し及び書き込みアクセスをもつ。これは、使用
されるサーバマネージャ１６０が、例えば、再構成プロ
セスの一部としてドメインを静止するような、個々のド
メインの動作モードを変更できるようにするものであ
る。
【００１２】サーバマネージャ１６０はいずれの個々の
ドメイン上で実行しているハードウェア又はソフトウェ
アを独立に動作させる。従って、以下に詳しく述べるよ
うに、サーバマネージャ１６０はコンピュータシステム
２００のいずれの個々のドメインにおけるハードウェア
及びソフトウェアの欠陥によっても影響を受けない。サ
ーバマネージャ１６０はドメイン構成レジスタでの区分
け状態（即ち、ドメインの選択された全部の各々に属す
るノードを決めるマッピング）を書き込むための書き込
みアクセスを有する。
【００１３】図３は本発明による個々のドメイン構成レ
ジスタ３００の好適なハードウェア構成を示すブロック
図である。サーバマネージャ１６０は専用サイドバンド
により各ドメイン構成レジスタ３０２の書き込みアクセ
スポート３０５に結合され、かつ書き込みアクセス特権
を有する。サーバマネージャ１６０は好ましくは各ドメ
イン構成レジスタ３０２の読み出しポートに結合され、
さらにサーバマネージャ１６０は各構成レジスタに対し
て読み出し及び書き込み特権を有する。一方、ローカル
ドメインはドメイン構成レジスタの書き込みポートに結
合されていない。図３に示すように、個々のドメインは
ドメイン構成レジスタ３００の読み出しポート３１０に
結合される。サーバマネージャは各ドメイン構成レジス
タに対する読み出しポート３１５を経て読み出しアクセ
スを有する。
【００１４】好適な実施形態として、サーバマネージャ
１６０は、コントロールレジスタ、ステータスレジス
タ、及びドメイン構成レジスタのような、各ドメインに
おける１つ又はそれ以上のローカルドメインレジスタに
対して読み出し及び書き込みアクセス特権を有する。こ
れは、使用されるサーバマネージャが、ドメイン構成レ
ジスタ及びコントロールレジスタを監視し、これらに書
き込むことで、個々のドメインの状態を監視し制御でき
るようにする利点がある。ローカルドメインは、そのド
メインのローカルレジスタに対してのみ読み出し及び書
き込みアクセスをもつことに注目すべきである。実施形
態として、ドメインはシステム２００の他のドメインの
ローカルドメインレジスタにより読み出しアクセスを与
えられる。ローカルドメインレジスタへのドメイン読み
出し／書き込みアクセス権はサーバマネージャによりプ
ログラム可能であり、アドレスマップ及びルーティング
テーブルにより実施される。アドレスマップ及びルーテ
ィングテーブルは結合される。ドメインがレジスタにア
クセスを試みるときはいつでも、アドレスマップ及びル
ーティングテーブルは、何のアクセス権かパケットはど
のルートかを決めるためにアクセスされる。アクセス権
がアクセスを許可しないときは、アクセスの試みは失敗
しエラーが報告される。
【００１５】表１は本発明の好適な実施形態として、選
択されたレジスタの読み出し及び書き込みアクセス特権
をまとめたものである。
【００１６】
【表１】
【００１７】前述したように、各ドメインは各自のアド
レス空間を有する。レジスタアドレスはアドレス空間内
でマッピングされる。レジスタアドレスをアドレス空間
にマッピングする技術の例として、アドレス対により規
定（ベース、リミット）されるウインドウを使用するメ
モリマッピングを含み、又は周辺要素インタフェース
（ＰＣＩ）のようなレジスタアクセスに対して完全な個
々のアドレス空間へのマッピングを含む。従来のメモリ
マッピングは、デバイスのインタフェースレジスタがメ
モリアドレスに割り当てられているＩ／Ｏデバイスを管
理するプロセスを含む。メモリマッピングはコンピュー
タ／ドメインの密着したアドレス空間内でのウインドウ
の規定であり、その領域への読み出し／書き込みアクセ
スがメモリへのアクセスではなく、Ｉ／Ｏコントローラ
にアクセスする、即ち、これらのアドレスはＩ／Ｏコン
トローラに「マッピング」される。例えばこれらのＩ／
Ｏコントローラは、周辺要素相互接続（ＰＣＩ）ファイ
バチャンネルコントローラ又はＰＣＩ―イーサネット
（登録商標）コントローラである。
【００１８】図４はメモリマップレジスタウインドウを
備えたシステムアドレスマップ４００の一例である。シ
ステムアドレスマップ４００は各ドメインに対して構成
空間ウインドウ４０５を含む。各構成空間ウインドウ
は、「レジスタ構成空間識別子」と称する識別子により
特定される。個々の構成区間４０５はドメインアドレス
マップ４１０及び関連ルーティンテーブル４１５を含
む。ルーティングテーブルはレジスタのグループに対す
るルーティング情報及びアクセス制御情報を含む。ルー
ティングテーブル４１５はレジスタ構成空間識別子によ
りインデックスされ、その値はメモリマップレジスタウ
インドウにより与えられる。ルーティングテーブルのド
メイン読み出しアクセスフィールド４２０は、ルーティ
ングテーブル４１５により支配されるレジスタのグルー
プに対する読み出しアクセスを有するドメインのリスト
である。１つの例として、ドメイン読み出しアクセスフ
ィールド４２０は、読み出し許可を持つ各ドメインに対
してビット「１」を設定し、読み出し許可を持たない各
ドメインに対してビット「０」を設定するビットベクト
ルとして実行される。ドメイン読み出しアクセスフィー
ルド４２０はオプションであることに注目すべきであ
る。もしフィールドが不在ならば、欠陥は各ドメインが
読み出しアクセスを持つことである。
【００１９】ドメインルーティンテーブル４１５のドメ
イン書き込みアクセスフィールド４２５は、ドメインル
ーティングテーブル４１５により支配されるローカルド
メインレジスタ（即ち、ローカルドメインレジスタ１４
５、１５０、１５５）に対して書き込みアクセスを有す
るドメインのリストである。実施形態として、ドメイン
書き込みアクセスフィールド４２５は、ドメイン読み出
しアクセスフィールド４２０が、例えば、書き込みアク
セス許可を持つ各ドメインに対してビット「１」を設定
し、書き込みアクセスを持たない各ドメインに対してビ
ット「０」を設定するビットベクトルとして実行され
る。フィールドはオプショナルである。もしフィールド
が不在ならば、欠陥は、レジスタが書き込み許可を持た
ないドメインの場合のドメイン構成レジスタでなけれ
ば、ローカルドメインは書き込み許可のみをもつことで
ある。
【００２０】ルーティング宛先フィールド４３０は、
（ベース２、リミット２）により規定されたウインドウ
内で如何にしてリクエストが扱われるかを規定する。ル
ーティング宛先フィールド４３０は必要なフィールドで
ある。規定されないウインドウへのアクセスの試みはト
ラップされ、アクセス制御侵害として処理される。
【００２１】ルーティングテーブル４１５はシステムア
ドレスマップ４００のドメイン構成レジスタウインドウ
４０５のための構成スペースである。ドメインはルーテ
ィングテーブル４１５に対しては書き込みアクセスを持
たないことに注目すべきである。サーバマネージャ１６
０のみがルーティングテーブルに書き込むことができ
る。
【００２２】本発明のサーバマネージャ１６０及び専用
サイドバンドチャンネル１６５の１つの利点は、ドメイ
ンアイソレーションを実施しかつ他のドメインの動作と
の干渉から１つのドメインを防止することである。ルー
ティングテーブルはドメイン構成ユニット１２６にある
から、１つのドメインで生じたいずれかのメッセージが
他のドメインの宛先にルーティングすることは物理的に
可能ではない。ハードウェア構成は、いずれか個々のド
メインをドメイン区分けの変更から除外する。
【００２３】本発明の他の利点はダイナミックな構成を
可能とすることであり、ノードのハードウェアに変更が
あるとき、例えば、ＣＰＵノード１０５、メモリノード
１１０、又はＩ／Ｏノード１１５がコンピュータシステ
ムに追加され、又は除去されるような場合に、本発明は
ダイナミックな構成を可能とする。サーバマネージャ１
６０はローカルレジスタ上の制御により、コンピュータ
システム２００を静止するために使用される。サーバマ
ネージャ１６０は、コンピュータシステム２００を所定
のモード（いわゆる「チップセットドレインモード」）
におくことにより、コンピュータシステム２００を静止
する。この場合、新たなトランザクションは受け入れら
れず、全てのドメインにおける未処理のトランザクショ
ンは完了される。システムが静止された後、システムコ
ンピュータ２０に対してハードウェアの変更がなされ
る。ドメイン構成レジスタはサーバマネージャ１６０を
使用して更新される。コンピュータシステムの通常動作
は再開され、「チップセットドレインモード」は終了す
る。
【００２４】本発明のさらに他の利点は、サーバマネー
ジャ１６０が、デッドロックされたドメインのドメイン
状態をリセットする機能を有することである。もしハー
ドウェア欠陥がドメイン内に生じると、ドメインは、ド
メイン相互接続ネットワークがデッドロックしているの
で、デッドロック状態となる。従来のコンピュータシス
テム１００では、デッドロックドメインは、ドメインを
わたって共有する資源によって他のドメインの動作にエ
ラーを生じされる可能性をもっている。しかし、本発明
ではサーバマネージャ１６０はデッドロックドメインの
ハードウェア状態を選択的にリセットする専用チャンネ
ル１６５を有する。さらに、ローカルドメインがドメイ
ン構成レジスタ１２５への書き込みアクセスをもたない
ので、ハードウェア欠陥をもつドメイン内にエラーが含
まれる。同様に、サーバマネージャ１６０はライブロッ
ク又はスターベーションにより動作不能なドメインの状
態をリセットする機能を有する。
【００２５】上記において、本発明の特定の実施形態及
び応用が例示され説明されたが、本発明は、上記した細
かな構成及び構成要素に制限されるものではなく、本発
明の精神と範囲を逸脱しない範囲で、種々の修正例、変
更及び変形例が、当業者において明らかである。 （付記１）コンピュータシステムであって、複数のコン
ピュータノードを結合するシステム相互接続構成と、前
記システム相互接続構成に結合され、前記コンピュータ
システムを複数のドメインに区分した区分状態を記録し
たドメイン構成ユニットであって、いずれのドメインも
前記ドメイン構成ユニットに記録された区分状態に書き
込みアクセスをもたないものと、通信チャンネルにより
前記ドメイン構成ユニットに結合され、前記ドメイン構
成ユニットに区分状態を書き込むために適応されるサー
バマネージャと、を具備するコンピュータシステム。 （付記２）前記ドメイン構成ユニットは複数のドメイン
構成レジスタを具備する付記１に記載のコンピュータ。 （付記３）前記ドメイン構成レジスタの各々は読み出し
及び書き込みポートを有し、前記サーバマネージャは各
ドメイン構成レジスタの書き込みポートに通信的に結合
される付記２に記載のコンピュータシステム。 （付記４）前記サーバマネージャは、区分状態の規定と
関連しない各ドメインにおける少なくとも１つのレジス
タの書き込みポートに通信的に結合される付記１に記載
のコンピュータシステム。 （付記５）前記少なくとも１つのレジスタは、ステータ
スレジスタ、コントロールレジスタ、エラーロギングレ
ジスタからなるグループから選択される付記４に記載の
コンピュータシステム。 （付記６）前記サーバマネージャは、前記コンピュータ
システムのドメイン区分けを監視し制御するユーザイン
タフェースに結合される付記５に記載のコンピュータシ
ステム。 （付記７）コンピュータシステムであって、コンピュー
タネットワークに、ＣＰＵノード、メモリノード及びＩ
／Ｏノードを含む複数のコンピュータノードを結合する
システム相互接続構成と、前記システム相互接続構成に
結合された複数のドメイン構成レジスタであって、複数
のドメインにて複数のコンピュータノードの区分状態を
規定し、各ドメインは各々のアドレス空間と少なくとも
１つのドメインレジスタを有し、複数のドメインのいず
れもが前記ドメイン構成レジスタに対して書き込みアク
セス特権を有するものと、専用の通信チャンネルにより
前記ドメイン構成規定レジスタに通信的に結合されたサ
ーバマネージャであって前記サーバマネージャは前記ド
メイン構成レジスタに対して書き込みアクセス特権を有
するものと、を具備するコンピュータシステム。 （付記８）前記サーバマネージャは各ドメインの少なく
とも１つのローカルレジスタに対して読み出しアクセス
及び書き込みアクセスをもつ付記７に記載のコンピュー
タシステム。 （付記９）各ドメイン構成レジスタは、少なくとも１つ
のローカルドメインと前記サーバマネージャに結合され
た読み出しポートと、前記サーバマネージャに結合され
た書き込みポートを、さらに具備する付記７に記載のコ
ンピュータシステム。 （付記１０）前記サーバマネージャはハードウェアで実
現される付記７に記載のコンピュータシステム。 （付記１１）前記サーバマネージャはファームウェアで
実現される付記７に記載のコンピュータシステム。 （付記１２）前記サーバマネージャは、前記コンピュー
タシステムの外部のコンピュータに存在するソフトウェ
アで実現される付記７に記載のコンピュータシステム。 （付記１３）前記サーバマネージャは、各ドメインの前
記少なくとも１つのローカルレジスタへ読み出しアクセ
ス及び書き込みアクセスをもつ付記７に記載のコンピュ
ータシステム。 （付記１４）各ドメインは、前記サーバマネージャに結
合されたシステムを静止するために制御状態を有する少
なくとも１つのレジスタを有し、それによりサーバマネ
ージャは静止状態で前記コンピュータシステムをプログ
ラムする付記８に記載のコンピュータシステム。 （付記１５）コンピュータシステムにおいて、ドメイン
構成ユニットに専用サイドバンドチャンネルにより通信
的に結合されたサーバマネージャを使用して、複数のド
メインにコンピュータシステムを区分する方法であっ
て、ドメイン構成状態を選択する段階と、前記サーバマ
ネージャで前記ドメイン構成ユニットにドメイン区分状
態を書き込む段階と、を具備する方法。 （付記１６）前記ドメイン構成ユニットは、ドメイン構
成を規定する複数のドメイン構成レジスタを具備する付
記１５に記載の方法。 （付記１７）前記サーバマネージャは、前記システムの
各ドメイン内に少なくとも１つのコントロールレジスタ
への読み出しアクセス及び書き込みアクセスを有し、前
記方法は、新たなシステム状態を選択する段階と、前記
コントロールレジスタに新たなシステム状態をエンター
するために少なくとも１つの指示を書き込む段階と、を
具備する付記１５に記載の方法。 （付記１８）前記新たなシステム状態は静止状態である
付記１７に記載の方法。 （付記１９）前記新たなシステム状態は少なくとも１つ
のドメインの新たな構成である付記１７に記載の方法。 （付記２０）前記サーバマネージャは少なくとも１つの
ステータスレジスタの読み出しアクセスを有し、前記方
法は、デッドロック、ライブロック、又はスターベーシ
ョン状態にて動作不能ドメインを検出する段階と、前記
動作不能ドメインの状態をリセットする段階と、を具備
する付記１７に記載の方法。 （付記２１）複数のドメインに区分可能なコンピュータ
システムにおいて、ドメイン構成レジスタに排他的な書
き込みアクセスを有し、ドメインを構成する各ドメイン
内のコントロールレジスタに読み出し及び書き込みアク
セスを行い、前記方法は、静止状態をエンターするため
に前記システムに複数のドメインレジスタをプログラム
する段階と、前記コンピュータシステムの物理的構成を
変更する段階と、複数のドメイン構成レジスタを更新す
る段階と、通常動作を再開するために複数のドメインレ
ジスタをプログラムする段階と、を具備する方法。 （付記２２）複数のドメインを有するコンピュータシス
テムにおいて、システムの一部をデッドロックするハー
ドウェアエラーに応答して、各ドメインにローカルドメ
インレジスタに結合された外部サーバマネージャを使用
する方法であって、前記方法は、デッドロックされたド
メインを検出する段階と、前記デッドロックされたドメ
インのローカルドメインレジスタをリセットする段階
と、を具備する方法。
【００２６】
【発明の効果】前述のように、本発明のサーバマネージ
ャ及び専用サイドバンドチャンネルの１つの利点は、ド
メインアイソレーションを実施しかつ他のドメインの動
作との干渉から１つのドメインを防止することである。
【００２７】また、本発明の他の利点はダイナミックな
構成を可能とすることであり、ノードのハードウェアに
変更があるときダイナミックな構成を可能とする。
【００２８】本発明のさらに他の利点は、サーバマネー
ジャが、デッドロックされたドメインのドメイン状態を
リセットする機能を有することである。本発明ではサー
バマネージャはデッドロックドメインのハードウェア状
態を選択的にリセットする専用チャンネルを有する。
【図面の簡単な説明】
【図１】従来の多重ノードコンピュータシステムの構成
図である。
【図２】本発明の実施形態における多重ノードコンピュ
ータシステムの全体構成のブロック図である。
【図３】本発明による個々のドメイン構成レジスタの好
適なハードウェア構成を示すブロック図である。
【図４】本発明によるメモリマップレジスタウインドウ
を備えたシステムアドレスマップの一例である。
【符号の説明】
１０５…ＣＰＵノード １１０…メモリノード １１５…Ｉ／Ｏノード １３０、１３５、１４０…ドメイン １２５…ドメイン構成レジスタ １４５…ローカルドメインレジスタ １６０…サーバマネージャ １６８…システムコントローラ １７０…コントロールインタフェース
───────────────────────────────────────────────────── フロントページの続き (72)発明者 パトリック エヌ．コンウェイ アメリカ合衆国，カリフォルニア 94024, ロス アルトス，ドロレス アベニュ 973 (72)発明者 ヒトシ オイ アメリカ合衆国，カリフォルニア 95128, サンノゼ，ウィロウリーフ ドライブ 935，ナンバー1006 (72)発明者 ジェレミー ファーレル アメリカ合衆国，カリフォルニア 95008, キャンプベル，パトリシア コート 1030 (72)発明者 サダール クマール ラオ ミルヤラ アメリカ合衆国，カリフォルニア 95129, サンノゼ，ウエスト ウォルブルック ド ライブ 5725 (72)発明者 ユキオ ニシムラ アメリカ合衆国，カリフォルニア 95014, カッパーティーノ，プルーンリッジ アベ ニュ 19500 ナンバー7101 (72)発明者 プラブフナンダン ビー．ナラシンハマシ ー アメリカ合衆国，カリフォルニア 95129, サンノゼ，キーリー ブールバード 353 ナンバーイー01 Ｆターム(参考） 5B045 BB16 BB17 BB28 EE01 EE25 KK06

Claims (10)

    【特許請求の範囲】
  1. 【請求項１】 コンピュータシステムであって、 複数のコンピュータノードを結合するシステム相互接続
    構成と、 前記システム相互接続構成に結合され、前記コンピュー
    タシステムを複数のドメインに区分した区分状態を記録
    したドメイン構成ユニットであって、いずれのドメイン
    も前記ドメイン構成ユニットに記録された区分状態に書
    き込みアクセスをもたないものと、 通信チャンネルにより前記ドメイン構成ユニットに結合
    され、前記ドメイン構成ユニットに区分状態を書き込む
    ために適応されるサーバマネージャと、を具備するコン
    ピュータシステム。
  2. 【請求項２】 前記ドメイン構成ユニットは複数のドメ
    イン構成レジスタを具備する請求項１に記載のコンピュ
    ータシステム。
  3. 【請求項３】 前記ドメイン構成レジスタの各々は読み
    出し及び書き込みポートを有し、前記サーバマネージャ
    は各ドメイン構成レジスタの書き込みポートに通信的に
    結合される請求項２に記載のコンピュータシステム。
  4. 【請求項４】 コンピュータシステムであって、 コンピュータネットワークに、ＣＰＵノード、メモリノ
    ード及びＩ／Ｏノードを含む複数のコンピュータノード
    を結合するシステム相互接続構成と、 前記システム相互接続構成に結合された複数のドメイン
    構成レジスタであって、複数のドメインにて複数のコン
    ピュータノードの区分状態を規定し、各ドメインは各々
    のアドレス空間と少なくとも１つのドメインレジスタを
    有し、複数のドメインのいずれもが前記ドメイン構成レ
    ジスタに対して書き込みアクセス特権を有するものと、 専用の通信チャンネルにより前記ドメイン構成規定レジ
    スタに通信的に結合されたサーバマネージャであって、
    前記サーバマネージャは前記ドメイン構成レジスタに対
    して書き込みアクセス特権を有するものと、を具備する
    コンピュータシステム。
  5. 【請求項５】 前記サーバマネージャは各ドメインの少
    なくとも１つのローカルレジスタに対して読み出しアク
    セス及び書き込みアクセスをもつ請求項４に記載のコン
    ピュータシステム。
  6. 【請求項６】 各ドメイン構成レジスタは、 少なくとも１つのローカルドメインと前記サーバマネー
    ジャに結合された読み出しポートと、 前記サーバマネージャに結合された書き込みポートを、
    さらに具備する請求項４に記載のコンピュータシステ
    ム。
  7. 【請求項７】 コンピュータシステムにおいて、ドメイ
    ン構成ユニットに専用サイドバンドチャンネルにより通
    信的に結合されたサーバマネージャを使用して、複数の
    ドメインにコンピュータシステムを区分する方法であっ
    て、 ドメイン構成状態を選択する段階と、 前記サーバマネージャで前記ドメイン構成ユニットにド
    メイン区分状態を書き込む段階と、を具備する方法。
  8. 【請求項８】 前記ドメイン構成ユニットは、ドメイン
    構成を規定する複数のドメイン構成レジスタを具備する
    請求項７に記載の方法。
  9. 【請求項９】 複数のドメインに区分可能なコンピュー
    タシステムにおいて、ドメイン構成レジスタに排他的な
    書き込みアクセスを有し、ドメインを構成する各ドメイ
    ン内のコントロールレジスタに読み出し及び書き込みア
    クセスを行い、前記方法は、 静止状態をエンターするために前記システムに複数のド
    メインレジスタをプログラムする段階と、 前記コンピュータシステムの物理的構成を変更する段階
    と、 複数のドメイン構成レジスタを更新する段階と、 通常動作を再開するために複数のドメインレジスタをプ
    ログラムする段階と、を具備する方法。
  10. 【請求項１０】 複数のドメインを有するコンピュータ
    システムにおいて、システムの一部をデッドロックする
    ハードウェアエラーに応答して、各ドメインにローカル
    ドメインレジスタに結合された外部サーバマネージャを
    使用する方法であって、前記方法は、 デッドロックされたドメインを検出する段階と、 前記デッドロックされたドメインのローカルドメインレ
    ジスタをリセットする段階と、を具備する方法。
JP2002143284A 2001-05-17 2002-05-17 コンピュータシステム Pending JP2003030162A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/861,293 US6961761B2 (en) 2001-05-17 2001-05-17 System and method for partitioning a computer system into domains
US09/861293 2001-05-17

Publications (1)

Publication Number Publication Date
JP2003030162A true JP2003030162A (ja) 2003-01-31

Family

ID=25335410

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002143284A Pending JP2003030162A (ja) 2001-05-17 2002-05-17 コンピュータシステム

Country Status (2)

Country Link
US (1) US6961761B2 (ja)
JP (1) JP2003030162A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100714760B1 (ko) 2003-04-17 2007-05-07 인터내셔널 비지네스 머신즈 코포레이션 논리 파티션 환경에서의 구성 크기 결정 방법
US7644252B2 (en) 2004-03-23 2010-01-05 Nec Corporation Multi-processor system and memory accessing method
WO2014027416A1 (ja) * 2012-08-17 2014-02-20 富士通株式会社 情報処理装置、及び情報処理装置の制御方法

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6766360B1 (en) 2000-07-14 2004-07-20 Fujitsu Limited Caching mechanism for remote read-only data in a cache coherent non-uniform memory access (CCNUMA) architecture
US6961761B2 (en) 2001-05-17 2005-11-01 Fujitsu Limited System and method for partitioning a computer system into domains
US6754776B2 (en) 2001-05-17 2004-06-22 Fujitsu Limited Method and system for logical partitioning of cache memory structures in a partitoned computer system
US7380001B2 (en) * 2001-05-17 2008-05-27 Fujitsu Limited Fault containment and error handling in a partitioned system with shared resources
US7159017B2 (en) * 2001-06-28 2007-01-02 Fujitsu Limited Routing mechanism for static load balancing in a partitioned computer system with a fully connected network
US6862634B2 (en) 2001-06-29 2005-03-01 Fujitsu Limited Mechanism to improve performance in a multi-node computer system
GB0118294D0 (en) * 2001-07-27 2001-09-19 Ibm Method and system for deadlock detection and avoidance
US7921188B2 (en) * 2001-08-16 2011-04-05 Newisys, Inc. Computer system partitioning using data transfer routing mechanism
US20040076204A1 (en) * 2002-10-16 2004-04-22 Kruschwitz Brian E. External cavity organic laser
US7617333B2 (en) 2003-01-21 2009-11-10 Nextio Inc. Fibre channel controller shareable by a plurality of operating system domains within a load-store architecture
US7188209B2 (en) * 2003-04-18 2007-03-06 Nextio, Inc. Apparatus and method for sharing I/O endpoints within a load store fabric by encapsulation of domain information in transaction layer packets
US8102843B2 (en) 2003-01-21 2012-01-24 Emulex Design And Manufacturing Corporation Switching apparatus and method for providing shared I/O within a load-store fabric
US7046668B2 (en) * 2003-01-21 2006-05-16 Pettey Christopher J Method and apparatus for shared I/O in a load/store fabric
US7664909B2 (en) 2003-04-18 2010-02-16 Nextio, Inc. Method and apparatus for a shared I/O serial ATA controller
US8346884B2 (en) 2003-01-21 2013-01-01 Nextio Inc. Method and apparatus for a shared I/O network interface controller
US7953074B2 (en) 2003-01-21 2011-05-31 Emulex Design And Manufacturing Corporation Apparatus and method for port polarity initialization in a shared I/O device
US7698483B2 (en) 2003-01-21 2010-04-13 Nextio, Inc. Switching apparatus and method for link initialization in a shared I/O environment
US7103064B2 (en) * 2003-01-21 2006-09-05 Nextio Inc. Method and apparatus for shared I/O in a load/store fabric
US7512717B2 (en) * 2003-01-21 2009-03-31 Nextio Inc. Fibre channel controller shareable by a plurality of operating system domains within a load-store architecture
US7174413B2 (en) * 2003-01-21 2007-02-06 Nextio Inc. Switching apparatus and method for providing shared I/O within a load-store fabric
US7219183B2 (en) * 2003-01-21 2007-05-15 Nextio, Inc. Switching apparatus and method for providing shared I/O within a load-store fabric
US7493416B2 (en) * 2003-01-21 2009-02-17 Nextio Inc. Fibre channel controller shareable by a plurality of operating system domains within a load-store architecture
US7457906B2 (en) 2003-01-21 2008-11-25 Nextio, Inc. Method and apparatus for shared I/O in a load/store fabric
US8032659B2 (en) 2003-01-21 2011-10-04 Nextio Inc. Method and apparatus for a shared I/O network interface controller
US7502370B2 (en) * 2003-01-21 2009-03-10 Nextio Inc. Network controller for obtaining a plurality of network port identifiers in response to load-store transactions from a corresponding plurality of operating system domains within a load-store architecture
US7836211B2 (en) 2003-01-21 2010-11-16 Emulex Design And Manufacturing Corporation Shared input/output load-store architecture
US7917658B2 (en) 2003-01-21 2011-03-29 Emulex Design And Manufacturing Corporation Switching apparatus and method for link initialization in a shared I/O environment
US20040158605A1 (en) * 2003-02-10 2004-08-12 International Business Machines Corporation Domain-wide reset agents
EP1527777A1 (de) * 2003-10-31 2005-05-04 MERCK PATENT GmbH Zubereitung mit antioxidanten Eigenschaften, die einen Benzoesäureester der Ascorbinsäure enthält
US7162560B2 (en) * 2003-12-31 2007-01-09 Intel Corporation Partitionable multiprocessor system having programmable interrupt controllers
US20050198461A1 (en) * 2004-01-12 2005-09-08 Shaw Mark E. Security measures in a partitionable computing system
US7356678B2 (en) * 2004-01-12 2008-04-08 Hewlett-Packard Development Company, L.P. Security measures in a partitionable computing system
US7296146B2 (en) * 2004-01-12 2007-11-13 Hewlett-Packard Development Company, L.P. Security measures in a partitionable computing system
US20050188064A1 (en) * 2004-02-24 2005-08-25 Ioannis Schoinas Using a configuration mode for partition management in server platforms
US7451302B2 (en) * 2004-03-10 2008-11-11 Hewlett-Packard Development Company, L.P. System and method for managing configuration data for a multi-cell computer system
US7530071B2 (en) * 2004-04-22 2009-05-05 International Business Machines Corporation Facilitating access to input/output resources via an I/O partition shared by multiple consumer partitions
US7386688B2 (en) * 2004-07-29 2008-06-10 Hewlett-Packard Development Company, L.P. Communication among partitioned devices
DE602004011928T2 (de) * 2004-08-02 2009-02-12 Alcatel Lucent Verfahren zur Steuerung einer gemeinsamen genutzten Ressource durch verschiedene Manager
JP2006215816A (ja) * 2005-02-03 2006-08-17 Fujitsu Ltd 情報処理システムおよび情報処理システムの制御方法
US8365294B2 (en) * 2006-06-30 2013-01-29 Intel Corporation Hardware platform authentication and multi-platform validation
US7640453B2 (en) * 2006-12-29 2009-12-29 Intel Corporation Methods and apparatus to change a configuration of a processor system
US20080270827A1 (en) * 2007-04-26 2008-10-30 International Business Machines Corporation Recovering diagnostic data after out-of-band data capture failure
US7882327B2 (en) * 2007-07-31 2011-02-01 Advanced Micro Devices, Inc. Communicating between partitions in a statically partitioned multiprocessing system
US8200738B2 (en) * 2007-09-30 2012-06-12 Oracle America, Inc. Virtual cluster based upon operating system virtualization
US8544065B2 (en) * 2008-01-23 2013-09-24 International Business Machines Corporation Dataspace protection utilizing virtual private networks on a multi-node computer system
US9100348B2 (en) 2011-10-03 2015-08-04 Intel Corporation Managing sideband routers in on-die system fabric
US11481241B2 (en) 2018-08-30 2022-10-25 Micron Technology, Inc. Virtual machine register in a computer processor
US10942863B2 (en) 2018-08-30 2021-03-09 Micron Technology, Inc. Security configurations in page table entries for execution domains using a sandbox application operation
US11500665B2 (en) 2018-08-30 2022-11-15 Micron Technology, Inc. Dynamic configuration of a computer processor based on the presence of a hypervisor
US11914726B2 (en) * 2018-08-30 2024-02-27 Micron Technology, Inc. Access control for processor registers based on execution domains

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5175839A (en) 1987-12-24 1992-12-29 Fujitsu Limited Storage control system in a computer system for double-writing
JP2809962B2 (ja) 1993-03-02 1998-10-15 株式会社東芝 資源管理方式
US5465338A (en) 1993-08-24 1995-11-07 Conner Peripherals, Inc. Disk drive system interface architecture employing state machines
US5561780A (en) 1993-12-30 1996-10-01 Intel Corporation Method and apparatus for combining uncacheable write data into cache-line-sized write buffers
JPH08185359A (ja) 1994-10-31 1996-07-16 Toshiba Corp メモリサブシステム
EP0769171A1 (en) 1995-05-05 1997-04-23 Silicon Graphics, Inc. Page migration in a non-uniform memory access (numa) system
US5859985A (en) 1996-01-14 1999-01-12 At&T Wireless Services, Inc. Arbitration controller for providing arbitration on a multipoint high speed serial bus using drivers having output enable pins
US6006255A (en) 1996-04-05 1999-12-21 International Business Machines Corporation Networked computer system and method of communicating using multiple request packet classes to prevent deadlock
US5761460A (en) 1996-07-19 1998-06-02 Compaq Computer Corporation Reconfigurable dual master IDE interface
US6026472A (en) 1997-06-24 2000-02-15 Intel Corporation Method and apparatus for determining memory page access information in a non-uniform memory access computer system
US5887134A (en) 1997-06-30 1999-03-23 Sun Microsystems System and method for preserving message order while employing both programmed I/O and DMA operations
US6092213A (en) * 1997-09-30 2000-07-18 Tandem Computers Incorporated Fault tolerant method of maintaining and distributing configuration information in a distributed processing system
US6014669A (en) * 1997-10-01 2000-01-11 Sun Microsystems, Inc. Highly-available distributed cluster configuration database
US6014690A (en) 1997-10-24 2000-01-11 Digital Equipment Corporation Employing multiple channels for deadlock avoidance in a cache coherency protocol
US6163855A (en) * 1998-04-17 2000-12-19 Microsoft Corporation Method and system for replicated and consistent modifications in a server cluster
US6738818B1 (en) * 1999-12-27 2004-05-18 Intel Corporation Centralized technique for assigning I/O controllers to hosts in a cluster
US6725261B1 (en) * 2000-05-31 2004-04-20 International Business Machines Corporation Method, system and program products for automatically configuring clusters of a computing environment
US7296268B2 (en) * 2000-12-18 2007-11-13 Microsoft Corporation Dynamic monitor and controller of availability of a load-balancing cluster
US7380001B2 (en) 2001-05-17 2008-05-27 Fujitsu Limited Fault containment and error handling in a partitioned system with shared resources
US6961761B2 (en) 2001-05-17 2005-11-01 Fujitsu Limited System and method for partitioning a computer system into domains
US7159017B2 (en) 2001-06-28 2007-01-02 Fujitsu Limited Routing mechanism for static load balancing in a partitioned computer system with a fully connected network
US7194517B2 (en) 2001-06-28 2007-03-20 Fujitsu Limited System and method for low overhead message passing between domains in a partitioned server
US6862634B2 (en) 2001-06-29 2005-03-01 Fujitsu Limited Mechanism to improve performance in a multi-node computer system
US6742101B2 (en) 2001-06-29 2004-05-25 Fujitsu Limited Scalable and flexible method for address space decoding in a multiple node computer system
US7213081B2 (en) 2001-06-29 2007-05-01 Fujitsu Limited Dynamic determination of memory mapped input output range granularity for multi-node computer system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100714760B1 (ko) 2003-04-17 2007-05-07 인터내셔널 비지네스 머신즈 코포레이션 논리 파티션 환경에서의 구성 크기 결정 방법
US7644252B2 (en) 2004-03-23 2010-01-05 Nec Corporation Multi-processor system and memory accessing method
WO2014027416A1 (ja) * 2012-08-17 2014-02-20 富士通株式会社 情報処理装置、及び情報処理装置の制御方法
JP5930046B2 (ja) * 2012-08-17 2016-06-08 富士通株式会社 情報処理装置、及び情報処理装置の制御方法

Also Published As

Publication number Publication date
US20020184345A1 (en) 2002-12-05
US6961761B2 (en) 2005-11-01

Similar Documents

Publication Publication Date Title
JP2003030162A (ja) コンピュータシステム
JP3962026B2 (ja) 拡張されたインテリジェントプラットフォーム管理のためのアプリケーションプログラミングインタフェースシステムおよび方法
US11500670B2 (en) Computing service with configurable virtualization control levels and accelerated launches
US7506094B2 (en) Method using a master node to control I/O fabric configuration in a multi-host environment
US8095701B2 (en) Computer system and I/O bridge
US6973517B1 (en) Partition formation using microprocessors in a multiprocessor computer system
US7930598B2 (en) Broadcast of shared I/O fabric error messages in a multi-host environment to all affected root nodes
US8346997B2 (en) Use of peripheral component interconnect input/output virtualization devices to create redundant configurations
US7549003B2 (en) Creation and management of destination ID routing structures in multi-host PCI topologies
US8040900B2 (en) N-port network adaptor
US20070136458A1 (en) Creation and management of ATPT in switches of multi-host PCI topologies
US8171176B2 (en) Method for selective replication of physical devices on a virtual self-configuring zoning expander
US20070165596A1 (en) Creation and management of routing table for PCI bus address based routing with integrated DID
US20070234130A1 (en) Managing system components
US20100146089A1 (en) Use of Peripheral Component Interconnect Input/Output Virtualization Devices to Create High-Speed, Low-Latency Interconnect
EP4031963B1 (en) Tracing status of a programmable device
US20150074375A1 (en) Reconfigurable Protocol Tables Within An ASIC
US8031637B2 (en) Ineligible group member status
DE102022119705A1 (de) Cluster-identifikatorneuabbildung für asymmetrische topologien
US6754753B2 (en) Atomic ownership change operation for input/output (I/O) bridge device in clustered computer system
US7536694B2 (en) Exception handling in a multiprocessor system
CN113986800A (zh) 多处理器系统及配置多处理器系统的方法
US6957312B1 (en) NVRAM control protocol
WO2022007644A1 (zh) 多处理器系统及配置多处理器系统的方法
US7496743B1 (en) Modeling operating system instances

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050426

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070306

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070327

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070528

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070807