JP2001503889A - 複数のシステムバスを有するコンピュータシステムにおいてメモリコヒーレンスを維持するためのシステムおよび方法 - Google Patents
複数のシステムバスを有するコンピュータシステムにおいてメモリコヒーレンスを維持するためのシステムおよび方法Info
- Publication number
- JP2001503889A JP2001503889A JP51390898A JP51390898A JP2001503889A JP 2001503889 A JP2001503889 A JP 2001503889A JP 51390898 A JP51390898 A JP 51390898A JP 51390898 A JP51390898 A JP 51390898A JP 2001503889 A JP2001503889 A JP 2001503889A
- Authority
- JP
- Japan
- Prior art keywords
- bus
- coherence
- memory
- cache
- address
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000015654 memory Effects 0.000 title claims abstract description 515
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000001427 coherent effect Effects 0.000 claims abstract description 6
- 238000004891 communication Methods 0.000 claims abstract description 6
- 238000012545 processing Methods 0.000 claims description 28
- 238000012546 transfer Methods 0.000 claims description 23
- 230000008859 change Effects 0.000 claims description 13
- 238000012544 monitoring process Methods 0.000 claims description 9
- 230000009471 action Effects 0.000 claims description 6
- 238000011010 flushing procedure Methods 0.000 claims 1
- 230000003862 health status Effects 0.000 claims 1
- 238000012986 modification Methods 0.000 claims 1
- 230000004048 modification Effects 0.000 claims 1
- 230000003111 delayed effect Effects 0.000 description 20
- 238000013507 mapping Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 8
- 230000003068 static effect Effects 0.000 description 8
- 230000004044 response Effects 0.000 description 7
- 230000007246 mechanism Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 230000011664 signaling Effects 0.000 description 3
- 230000001934 delay Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 241000254158 Lampyridae Species 0.000 description 1
- 235000013418 Myrtus communis Nutrition 0.000 description 1
- 240000005125 Myrtus communis Species 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
- G06F13/14—Handling requests for interconnection or transfer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
- G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
- G06F12/0806—Multiuser, multiprocessor or multiprocessing cache systems
- G06F12/0815—Cache consistency protocols
- G06F12/0831—Cache consistency protocols using a bus scheme, e.g. with bus monitoring or watching means
- G06F12/0833—Cache consistency protocols using a bus scheme, e.g. with bus monitoring or watching means in combination with broadcast means (e.g. for invalidation or updating)
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Memory System Of A Hierarchy Structure (AREA)
Abstract
Description
Claims (1)
- 【特許請求の範囲】 1. システムメモリと、 前記システムメモリと通信を行う第1のバスであって、前記第1のバスに接続 され、前記システムメモリから取得した複数のデータ値を格納するように構成さ れ、かつ前記データ値についてのキャッシュコヒーレンス情報を第1の一組のコ ヒーレンスステートと一緒に維持するように構成された少なくとも1つのキャッ シュメモリを有する第1のバスと、 前記第1のバスと通信を行うコヒーレンスメモリであって、前記データ値に関 連したコヒーレンスステータスレコードを、前記第1の一組のコヒーレンスステ ートよりも少ない数のコヒーレンスステートを含む第2の一組のコヒーレンスス テートと一緒に維持するように構成されたコヒーレンスメモリと、 バストランザクションを生成することができ、前記システムメモリと通信を行 う第2のバスと、 前記第2のバスと通信を行うコヒーレンスフィルタであって、前記第2のバス 上の前記バストランザクションを監視し、前記コヒーレンスステータスレコード に基づいて前記第1のバス上でのクロスバストランザクションを抑制するように 構成されたコヒーレンスフィルタと、を備えることを特徴とするマルチバス多重 処理システム。 2. 複数のキャッシュメモリをさらに備え、前記キャッシュメモリが、キャ ッシュコヒーレンス情報を前記第1の一組のコヒーレンスステートと一緒に維持 することを特徴とする請求項1に記載のシステム。 3. 前記バストランザクションが、前記データ値のうちの1つに関連し たメモリアドレスを識別することを特徴とする請求項1に記載のシステム。 4. 前記コヒーレンスステータスレコードが複数のエントリを含み、前記エ ントリが各々、前記キャッシュメモリに格納されたデータ値に関連したメモリア ドレスを格納するように構成されていることを特徴とする請求項3に記載のシス テム。 5. 前記エントリが各々、前記第2の一組のコヒーレンスステートを格納す るように構成されていることを特徴とする請求項1に記載のシステム。 6. 前記エントリが各々、前記第2の一組のコヒーレンスステートのうちの 1つを格納するように構成されていることを特徴とする請求項5に記載のシステ ム。 7. 前記メモリアドレスが各々、前記エントリのうちの1つに直接マッピン グされることを特徴とする請求項6に記載のシステム。 8. 第1のバスに接続されたキャッシュユニットに存在する第1の複数のデ ータ値に関連したキャッシュステータス情報であって、第1の一組のコヒーレン スステートに基づくキャッシュステータス情報を維持し、 前記データ値に関連し、前記第1の一組のコヒーレンスステートよりも少ない 数のコヒーレンスステートを利用する第2の一組のコヒーレンスステートに基づ くコヒーレンスステータスレコードを維持し、 バストランザクションを第2のバスで送信し、 メモリインコヒーレンスが前記バストランザクションによるものではないこと が前記コヒーレンスステータスレコードによって示される場合に、前 記第1のバスでのクロスバストランザクションを抑制することを含む、マルチバ スシステムにおいてキャッシュコヒーレンスを維持するための方法。 9. 前記コヒーレンスステータスレコードが、前記エントリが各々前記第2 の一組のコヒーレンスステートのうち1つを含むように前記データ値各々につい て複数のエントリを維持することを特徴とする請求項8に記載の方法。 10. 前記検知するステップが、前記バストランザクションに関連した前記 コヒーレンスステータスレコードにおいて前記エントリを調べ、前記エントリが 無効ステートにあるか否かを判断するステップをさらに含むことを特徴とする請 求項9に記載の方法。 11. 前記検知するステップが、前記バストランザクションに関連した前記 コヒーレンスステータスレコードにおいて前記エントリを調べ、前記エントリが 無効ステートにあるか否かを判断するステップをさらに含むことを特徴とする請 求項9に記載の方法。 12. 前記エントリが所有ステートにある場合に、前記バストランザクショ ンに関連した前記エントリを変更するステップをさらに含むことを特徴とする請 求項11に記載の方法。 13. 前記バストランザクションに関連した前記エントリを所有ステートか ら共有ステートに変更するステップをさらに含むことを特徴とする請求項11に 記載の方法。 14. 前記バストランザクションに関連した前記エントリを所有ステートか ら無効ステートに変更するステップをさらに含むことを特徴とする請求項11に 記載の方法。 15. システムメモリと、 前記システムメモリと通信を行うシステムバスであって、前記システムバスに 接続され、前記システムメモリから取得した複数のデータ値を格納するように構 成され、かつ前記データ値についてのキャッシュコヒーレンス情報を第1の一組 のコヒーレンスステートと一緒に維持するように構成された少なくとも1つのキ ャッシュメモリを有するシステムバスと、 前記システムバスと通信を行うコヒーレンスメモリであって、前記データ値に 関連したシステムバスコヒーレンスステータスレコードを、前記第1の一組のコ ヒーレンスステートよりも少ない数のコヒーレンスステートを含む第2の一組の コヒーレンスステートと一緒に維持するように構成されたコヒーレンスメモリと 、 少なくとも1つのバストランザクションを生成することができ、前記システム メモリと通信を行う入力/出力バスと、 前記入力/出力バスと通信を行う入力/出力コヒーレンスフィルタであって、 前記入力/出力バス上の前記バストランザクションを監視し、前記システムバス コヒーレンスステータスレコードに基づいて前記システムバス上でのクロスバス トランザクションを抑制するように構成された入力/出力コヒーレンスフィルタ と、を備えることを特徴とするマルチバス多重処理システム。 16. 前記入力/出力コヒーレンスフィルタが、前記I/Oバス上でのダイ レクトメモリアクセスを監視し、前記キャッシュメモリにおけるキャッ シュラインのフラッシングを回避するために必要なクロスバストランザクション を実行するようにも構成されていることを特徴とする請求項15に記載のシステ ム。 17. 前記入力/出力バスが、内部I/Oキャッシュメモリを含む複数のI /Oブリッジをさらに備え、前記I/Oキャッシュメモリが第2の複数のデータ 値を格納するように構成され、前記I/Oキャッシュメモリがさらに、前記デー タ値に関するキャッシュコヒーレンス情報を前記第1の一組のコヒーレンスステ ートと一緒に維持するようにも構成されていることを特徴とする請求項15に記 載のシステム。 18. 前記I/Oバスと通信を行うI/Oコヒーレンスメモリであって、前 記データ値に関連したI/Oコヒーレンスステータスレコードを前記第2の一組 のコヒーレンスステートと一緒に維持するように構成されたI/Oコヒーレンス メモリをさらに備えることを特徴とする請求項17に記載のシステム。 19. 前記システムバスと通信を行うシステムバスコヒーレンスフィルタで あって、前記システムバス上の前記バストランザクションを監視し、前記I/O コヒーレンスステータスレコードに基づいて前記I/Oバスでのクロスバストラ ンザクションを抑制するように構成されたシステムバスコヒーレンスフィルタを さらに備えることを特徴とする請求項18に記載のシステム。 20. システムバスに接続されたキャッシュユニットに存在する第1の複数 のデータ値に関連したキャッシュステータス情報であって、第1の一組 のコヒーレンスステートに基づくキャッシュステータス情報を維持し、 前記データ値に関連し、前記第1の一組のコヒーレンスステートよりも少ない 数のコヒーレンスステートを含む第2の一組のコヒーレンスステートに基づくコ ヒーレンスステータスレコードを維持し、 バストランザクションを入力/出力バスで送信し、 メモリインコヒーレンスが前記入力/出力バストランザクションによるもので はないことが前記コヒーレンスステータスレコードによって示される場合に、前 記システムバスでのクロスバストランザクションを抑制することを含む、マルチ バスシステムにおいてキャッシュコヒーレンスを維持するための方法。 21. 入力/出力バスでバストランザクションを送信する前記ステップが、 ダイレクトメモリアクセスであることを特徴とする請求項20に記載の方法。 22. 前記I/Oバスで転送される複数のI/Oデータ値をキャッシュする ステップをさらに含むことを特徴とする請求項20に記載のシステム。 23. 前記第1の一組のコヒーレンスステートに基づいて前記I/Oデータ 値に関連したキャッシュステータス情報を維持するステップをさらに含むことを 特徴とする請求項22に記載のシステム。 24. 前記I/Oデータ値に関連したI/Oコヒーレンスステータスレコー ドであって、前記第2の一組のコヒーレンスステートに基づくI/Oコヒーレン スステータスレコードを維持するステップをさらに含むことを特徴とする請求項 23に記載の方法。 25. 前記システムバスでバストランザクションを送信するステップと、メ モリインコヒーレンスが前記システムバストランザクションによるものではない ことが前記I/Oコヒーレンスステータスレコードによって示される場合に、前 記I/Oバスでのクロスバストランザクションを抑制するステップとをさらに含 むことを特徴とする請求項24に記載の方法。 26. システムメモリと、 前記システムメモリと通信を行う第1のシステムバスおよび第2のシステムバ スであって、前記第1のシステムバスおよび前記第2のシステムバスに接続され 、前記システムメモリから取得した複数のデータ値を格納するように構成され、 かつ前記データ値についてのキャッシュコヒーレンス情報を第1の一組のコヒー レンスステートと一緒に維持するように構成された少なくとも1つのキャッシュ メモリを有する第1のシステムバスおよび第2のシステムバスと、 前記第1のシステムバスと通信を行う第1のコヒーレンスメモリであって、前 記第1のシステムバスに接続された前記キャッシュユニット内の前記データ値に 関連した第1のコヒーレンスステータスレコードを、前記第1の一組のコヒーレ ンスステートよりも少ない数のコヒーレンスステートを含む第2の一組のコヒー レンスステートと一緒に維持するように構成された第1のコヒーレンスメモリと 、 前記第2のシステムバスと通信を行う第2のコヒーレンスメモリであって、前 記第2のシステムバスに接続された前記キャッシュメモリにおける前記データ値 に関連した第2のコヒーレンスステータスレコードを、前記第2のコヒーレンス プロトコルと一緒に維持するように構成された第2のコヒーレンスメモリと、 前記第1のバスと通信を行う第1のコヒーレンスフィルタであって、前記第1 のバスでのバストランザクションを監視し、前記第2のコヒーレンスステータス レコードに基づいて前記第2のバスでのクロスバストランザクションを抑制する ように構成された第1のコヒーレンスフィルタと、 前記第2のバスと通信を行う第2のコヒーレンスフィルタであって、前記第2 のバスでのバストランザクションを監視し、前記第1のコヒーレンスステータス レコードに基づいて前記第1のバスでのクロスバストランザクションを抑制する 第2のコヒーレンスフィルタと、を備えることを特徴とするマルチバス多重処理 システム。 27. 前記システムメモリおよびI/Oデータ値を少なくとも1つのI/O キャッシュメモリに格納する複数のI/O装置と通信を行うI/Oバスと、 I/Oバスと通信を行うI/Oコヒーレンスメモリであって、I/Oデータ値 に関連したI/Oコヒーレンスステータスレコードを前記第2のコヒーレンスプ ロトコルと一緒に維持するように構成されたI/Oコヒーレンスメモリと、をさ らに備えることを特徴とする請求項26に記載のシステム。 28. 前記第1のコヒーレンスフィルタが、前記I/Oコヒーレンスメモリ とも通信を行い、前記第1のバス上のバストランザクションを監視し、前記I/ Oコヒーレンスステータスレコードに基づいて前記I/Oバスでのクロスバスト ランザクションを抑制するように構成されることを特徴とする請求項27に記載 のシステム。 29. 前記第2のコヒーレンスフィルタが、前記I/Oコヒーレンスメモリ とも通信を行い、前記第2のバス上のバストランザクションを監視し、 前記I/Oコヒーレンスステータスレコードに基づいて前記I/Oバスでのクロ スバストランザクションを抑制するように構成されることを特徴とする請求項2 7に記載のシステム。 30. 前記第1のコヒーレンスメモリおよび前記第2のコヒーレンスメモリと 通信を行うI/Oコヒーレンスフィルタをさらに備え、前記I/Oコヒーレンス フィルタが、前記I/Oバス上のバストランザクションを監視し、前記第1のコ ヒーレンスステータスレコードに基づいて前記第1のバス上でのクロスバストラ ンザクションを抑制し、前記第2のコヒーレンスステータスレコードに基づいて 前記第2のバス上でのクロスバストランザクションを抑制するように構成されて いることを特徴とする請求項27に記載のシステム。 31. システムメモリと、 前記システムメモリと通信を行う第1のバスおよび第2のバスであって、前記 第1のバスおよび前記第2のバスに接続され、前記システムメモリから取得した 複数のデータ値を格納するように構成され、かつ前記データ値についてのキャッ シュコヒーレンス情報を、複数のコヒーレンスステートを含む第1のコヒーレン スプロトコルと一緒に維持するように構成された少なくとも1つのキャッシュメ モリを有する第1のシステムバスおよび第2のシステムバスと、 前記データ値に関連した第1のコヒーレンスステータスレコードを、前記第1 のコヒーレンスプロトコルとは異なるコヒーレンスステートを含む第2のコヒー レンスプロトコルと一緒に維持するための第1のコヒーレンスメモリ手段と、 前記第2のバス上のバストランザクションを監視し、前記第1のコヒーレ ンスステータスレコードに基づいて前記第1のバスでのクロスバストランザクシ ョンを抑制するための第1のコヒーレンスフィルタ手段と、を備えることを特徴 とするマルチバス多重処理システム。 32. システムメモリと、 前記システムメモリと通信を行う第1のバスであって、前記第1のバスに接続 され、前記システムメモリから取得した複数のデータ値を格納するように構成さ れ、かつ前記データ値についてのコヒーレンスステータス情報を第1の一組のコ ヒーレンスステートと一緒に維持するように構成された少なくとも1つのキャッ シュメモリを有する第1のバスと、 前記第1のバスと通信を行うコヒーレンスメモリであって、前記データ値に関 連したコヒーレンスステータスレコードを、前記第1の一組のコヒーレンスステ ートとは異なる第2の一組のコヒーレンスステートと一緒に維持するように構成 されたコヒーレンスメモリと、 バストランザクションを生成することができ、前記システムメモリと通信を行 う第2のバスと、 前記第2のバスと通信を行うコヒーレンスフィルタであって、前記第2のバス 上のバストランザクションを監視し、前記コヒーレンスステータスレコードに基 づいて前記第1のバス上でのクロスバストランザクションを抑制するように構成 されたコヒーレンスフィルタと、を備えることを特徴とするマルチバス多重処理 システム。 33. 前記第1のコヒーレンスフィルタが、バストランザクションアドレス を受信するように構成され、前記バストランザクションアドレスに対応する前記 第2のコヒーレンスステータスレコード内のエントリにアクセスするように構成 された第1のコヒーレンスメモリコントローラをさらに備 えることを特徴とする請求項32に記載のシステム。 34. 前記第1のコヒーレンスメモリコントローラが、前記エントリ内に存 在する前記コヒーレンスステートを取得することを特徴とする請求項33に記載 のシステム。 35. 前記第1のコヒーレンスフィルタが、前記バストランザクションを識 別するバストランザクションコードを識別するサイクルエンコーダをさらに備え ることを特徴とする請求項34に記載のシステム。 36. 前記第1のコヒーレンスフィルタが、前記コヒーレンスステータスと 前記バストランザクションを識別するバストランザクションコードとを受信する ルールテーブルをさらに備えることを特徴とする請求項35に記載のシステム。 37. 第1のバスに接続されたキャッシュユニットに存在する第1の複数の データ値に関連したキャッシュステータス情報であって、第1の一組のコヒーレ ンスステートに基づくキャッシュステータス情報を維持し、 前記データ値に関連し、前記第1の一組のコヒーレンスステートとは異なる第 2の一組のコヒーレンスステートに基づくコヒーレンスステータスレコードを維 持し、 バストランザクションを第2のバスで送信し、 メモリインコヒーレンスが前記バストランザクションによるものではないこと が前記コヒーレンスステータスレコードによって示される場合に、前記第1のバ スでのクロスバストランザクションを抑制することを含む、マルチバスシステム においてキャッシュコヒーレンスを維持するための方法。 38. バストランザクションアドレスに対応する前記第2のコヒーレンスス テータスレコード内のエントリにアクセスするステップをさらに含むことを特徴 とする請求項37に記載の方法。 39. 前記エントリ内に存在する前記コヒーレンスステートを取得するステ ップをさらに含むことを特徴とする請求項37に記載の方法。 40. 前記バストランザクションコードを符号化し、前記バストランザクシ ョンを識別するバストランザクションコードを生成するステップをさらに含むこ とを特徴とする請求項39に記載の方法。 41. 前記バストランザクションコードおよび前記コヒーレンスステートを 評価して、キャッシュコヒーレンスを維持するためにクロスバストランザクショ ンが必要であるか否かを判断するステップをさらに含むことを特徴とする請求項 40に記載の方法。 42. システムメモリと、 前記システムメモリと通信を行う第1のバスおよび第2のバスであって、前記 第1のバスおよび前記第2のバスに接続され、スヌープ動作を行って前記システ ムメモリから取得した複数のデータ値に対するキャッシュステータス情報を維持 するように構成され、前記データ値のうちのいくつかに関連した前記キャッシュ ステータス情報を、内部的な変更の出力を行わずに内部的に変更するように構成 された複数のキャッシュメモリを有する第1のバスおよび第2のバスと、 前記第1のバスと通信を行うコヒーレンスメモリであって、前記第1のバ ス上のキャッシュメモリによって取得した前記データ値に関連したコヒーレンス ステータスレコードを維持するように構成されたコヒーレンスメモリと、 前記第2のバスと通信を行うコヒーレンスフィルタであって、前記第2のバス 上のバストランザクションを監視し、前記コヒーレンスステータスレコードに基 づいて前記第1のバス上でのクロスバストランザクションを抑制するように構成 されたコヒーレンスフィルタと、を備えることを特徴とするマルチバス多重処理 システム。 43. システムバスに接続されたキャッシュユニットに存在する第1の複数 のデータ値に関連したキャッシュステータス情報を維持し、 前記キャッシュユニット内の前記キャッシュステータス情報を、内部的な変更 の出力を行わずに内部的に変更し、 前記データ値に関連したコヒーレンスステータスレコードを維持し、 バストランザクションを第2のバスで送信し、 メモリインコヒーレンスが前記バストランザクションによるものではないこと が前記コヒーレンスステータスレコードによって示される場合に、前記システム バスでのクロスバストランザクションを抑制することを含む、マルチバスシステ ムにおいてキャッシュコヒーレンスを維持するための方法。 44. 複数のプロセッサ内に存在するデータ値のコヒーレンスステータスを 記録するように各々構成された複数のエントリを有するメモリアレイと、 前記メモリアレイと通信を行う無効待ち行列であって、前記メモリアレイより も高い関連度を有するように構成され、前記メモリアレイから追い出される前記 エントリを格納するように構成された無効待ち行列と、を備えるこ とを特徴とする、多重処理システムにおいてメモリコヒーレンスを維持するコヒ ーレンスフィルタ。 45. 第1のバスであって、前記第1のバスに接続された少なくとも1つの プロセッサを有する第1のバスと、 第2のバスであって、前記第2のバスに接続された少なくとも1つのプロセッ サを有する第2のバスと、 前記第1のバスおよび前記第2のバスに接続され、前記第1のバスと前記第2 のバスとの間でバストランザクションを転送するように構成されたメモリセルの プールを有するマルチポートメモリであって、前記メモリセルが各々、前記第1 のバスまたは前記第2のバスのいずれかを宛先のバスとして識別するバスコード を格納するように構成され、前記宛先のバスにバストランザクションを行うよう 指示するバストランザクション情報を格納するように構成された、マルチポート メモリと、 前記メモリセルおよび前記第1のバスに接続され、前記メモリセルを評価して どのメモリセルが前記第1のバスを指定しているかを識別する第1のバスプライ オリティエンコーダと、 前記メモリセルおよび前記第1のバスに接続され、前記メモリセルを評価して どのメモリセルが前記第2のバスを指定しているかを識別する第2のバスプライ オリティエンコーダと、を備えることを特徴とするマルチバス多重処理システム 。 46. どのメモリセルがフリーでバストランザクション情報を格納できるか を判断するように構成されたフリーセルエンコーダをさらに備えることを特徴と する請求項45に記載のシステム。 47. 新たなバストランザクションと前記メモリセル内に存在する前記バス トランザクションとを比較する一組のアドレス比較器であって、前記メモリセル 内に存在する前記新たなバストランザクションおよび前記バストランザクション との衝突がいつ存在するかを示すように構成されたアドレス比較器をさらに備え ることを特徴とする請求項45に記載のシステム。 48. 前記メモリが各々、アドレスセルと、リクエストセルと、データセル とを含むことを特徴とする請求項45に記載のシステム。 49. 前記アドレスセルが各々、バストランザクションアドレス情報を格納 するように構成されていることを特徴とする請求項48に記載のシステム。 50. 前記アドレスセルが各々、使用中情報を格納するようにも構成されて いることを特徴とする請求項49に記載のシステム。 51. 前記リクエストセルが各々、前記バスコードおよび前記バストランザ クション情報を格納するように構成されていることを特徴とする請求項48に記 載のシステム。 52. 前記データセルの各々が前記バストランザクションデータを格納するよ うに構成されていることを特徴とする請求項48に記載のシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US08/714,750 | 1996-09-16 | ||
US08/714,750 US5897656A (en) | 1996-09-16 | 1996-09-16 | System and method for maintaining memory coherency in a computer system having multiple system buses |
PCT/US1997/016207 WO1998011488A1 (en) | 1996-09-16 | 1997-09-16 | System and method for maintaining memory coherency in a computer system having multiple system buses |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2001503889A true JP2001503889A (ja) | 2001-03-21 |
JP2001503889A5 JP2001503889A5 (ja) | 2005-03-10 |
JP4316016B2 JP4316016B2 (ja) | 2009-08-19 |
Family
ID=24871306
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP51390898A Expired - Lifetime JP4316016B2 (ja) | 1996-09-16 | 1997-09-16 | 複数のシステムバスを有するコンピュータシステムにおいてメモリコヒーレンスを維持するためのシステムおよび方法 |
Country Status (9)
Country | Link |
---|---|
US (2) | US5897656A (ja) |
EP (1) | EP1021768A4 (ja) |
JP (1) | JP4316016B2 (ja) |
KR (1) | KR100491435B1 (ja) |
CN (1) | CN1130644C (ja) |
AU (1) | AU4345197A (ja) |
CA (1) | CA2264518C (ja) |
RU (1) | RU2221271C2 (ja) |
WO (1) | WO1998011488A1 (ja) |
Families Citing this family (63)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6581126B1 (en) * | 1996-12-20 | 2003-06-17 | Plx Technology, Inc. | Method, system and apparatus for a computer subsystem interconnection using a chain of bus repeaters |
US6073225A (en) * | 1997-06-24 | 2000-06-06 | Intel Corporation | Method and apparatus for monitoring bus transactions based on cycle type and memory address range |
US7197625B1 (en) * | 1997-10-09 | 2007-03-27 | Mips Technologies, Inc. | Alignment and ordering of vector elements for single instruction multiple data processing |
US6633945B1 (en) | 1997-12-07 | 2003-10-14 | Conexant Systems, Inc. | Fully connected cache coherent multiprocessing systems |
US6292705B1 (en) | 1998-09-29 | 2001-09-18 | Conexant Systems, Inc. | Method and apparatus for address transfers, system serialization, and centralized cache and transaction control, in a symetric multiprocessor system |
US6516442B1 (en) | 1997-12-07 | 2003-02-04 | Conexant Systems, Inc. | Channel interface and protocols for cache coherency in a scalable symmetric multiprocessor system |
US6065077A (en) * | 1997-12-07 | 2000-05-16 | Hotrail, Inc. | Apparatus and method for a cache coherent shared memory multiprocessing system |
US6418537B1 (en) | 1997-12-07 | 2002-07-09 | Conexant Systems, Inc. | Accurate timing calibration for each of multiple high-speed clocked receivers using a single DLL |
US6134635A (en) * | 1997-12-09 | 2000-10-17 | Intel Corporation | Method and apparatus of resolving a deadlock by collapsing writebacks to a memory |
US6334172B1 (en) * | 1998-02-17 | 2001-12-25 | International Business Machines Corporation | Cache coherency protocol with tagged state for modified values |
US6289419B1 (en) * | 1998-03-06 | 2001-09-11 | Sharp Kabushiki Kaisha | Consistency control device merging updated memory blocks |
US6295598B1 (en) * | 1998-06-30 | 2001-09-25 | Src Computers, Inc. | Split directory-based cache coherency technique for a multi-processor computer system |
US6304945B1 (en) | 1999-05-13 | 2001-10-16 | Compaq Computer Corporation | Method and apparatus for maintaining cache coherency in a computer system having multiple processor buses |
US6469988B1 (en) | 1999-07-08 | 2002-10-22 | Conexant Systems, Inc. | Low-level circuit implementation of signal flow graphs for real-time signal processing of high-speed digital signals |
JP3946393B2 (ja) * | 1999-10-19 | 2007-07-18 | 株式会社東芝 | 階層構造をもつ並列計算機 |
US6643787B1 (en) * | 1999-10-19 | 2003-11-04 | Rambus Inc. | Bus system optimization |
US7558923B1 (en) | 1999-12-22 | 2009-07-07 | Intel Corporation | Prevention of live-lock in a multi-processor system |
US6662278B1 (en) * | 2000-09-22 | 2003-12-09 | Intel Corporation | Adaptive throttling of memory acceses, such as throttling RDRAM accesses in a real-time system |
US6868481B1 (en) * | 2000-10-31 | 2005-03-15 | Hewlett-Packard Development Company, L.P. | Cache coherence protocol for a multiple bus multiprocessor system |
US6757790B2 (en) * | 2002-02-19 | 2004-06-29 | Emc Corporation | Distributed, scalable data storage facility with cache memory |
US6959372B1 (en) * | 2002-02-19 | 2005-10-25 | Cogent Chipware Inc. | Processor cluster architecture and associated parallel processing methods |
US7085866B1 (en) * | 2002-02-19 | 2006-08-01 | Hobson Richard F | Hierarchical bus structure and memory access protocol for multiprocessor systems |
CN100401731C (zh) * | 2002-06-15 | 2008-07-09 | 华为技术有限公司 | 高速数据链路控制协议接收处理模块及其数据处理方法 |
CN1293739C (zh) * | 2002-06-15 | 2007-01-03 | 华为技术有限公司 | 高速数据链路控制协议发送处理模块及其数据处理方法 |
US8185602B2 (en) | 2002-11-05 | 2012-05-22 | Newisys, Inc. | Transaction processing using multiple protocol engines in systems having multiple multi-processor clusters |
US7191318B2 (en) * | 2002-12-12 | 2007-03-13 | Alacritech, Inc. | Native copy instruction for file-access processor with copy-rule-based validation |
US7032079B1 (en) * | 2002-12-13 | 2006-04-18 | Unisys Corporation | System and method for accelerating read requests within a multiprocessor system |
US8751753B1 (en) | 2003-04-09 | 2014-06-10 | Guillermo J. Rozas | Coherence de-coupling buffer |
US7636815B1 (en) * | 2003-04-09 | 2009-12-22 | Klaiber Alexander C | System and method for handling direct memory accesses |
US7334123B2 (en) * | 2003-05-02 | 2008-02-19 | Advanced Micro Devices, Inc. | Computer system including a bus bridge for connection to a security services processor |
DE10329680A1 (de) * | 2003-07-01 | 2005-02-10 | Universität Stuttgart | Prozessorarchitektur für exakte Zeigeridentifizierung |
US8117392B2 (en) * | 2003-10-22 | 2012-02-14 | Intel Corporation | Method and apparatus for efficient ordered stores over an interconnection network |
US20050216625A1 (en) * | 2004-03-09 | 2005-09-29 | Smith Zachary S | Suppressing production of bus transactions by a virtual-bus interface |
US7434008B2 (en) * | 2004-04-23 | 2008-10-07 | Hewlett-Packard Development Company, L.P. | System and method for coherency filtering |
US7398338B2 (en) * | 2004-06-30 | 2008-07-08 | Sap Ag | Flexible and error resistant data buffering and connectivity |
CN100463393C (zh) * | 2004-08-20 | 2009-02-18 | 中兴通讯股份有限公司 | 一种异构系统之间数据安全共享的装置及方法 |
US7941585B2 (en) | 2004-09-10 | 2011-05-10 | Cavium Networks, Inc. | Local scratchpad and data caching system |
US7594081B2 (en) | 2004-09-10 | 2009-09-22 | Cavium Networks, Inc. | Direct access to low-latency memory |
WO2006031551A2 (en) | 2004-09-10 | 2006-03-23 | Cavium Networks | Selective replication of data structure |
US7366931B2 (en) | 2004-12-30 | 2008-04-29 | Intel Corporation | Memory modules that receive clock information and are placed in a low power state |
US7417883B2 (en) * | 2004-12-30 | 2008-08-26 | Intel Corporation | I/O data interconnect reuse as repeater |
US7203780B2 (en) * | 2005-02-22 | 2007-04-10 | Kabushiki Kaisha Toshiba | System and method for facilitating communication between devices on a bus using tags |
JP4956900B2 (ja) * | 2005-03-07 | 2012-06-20 | 富士通株式会社 | アドレススヌープ方法及びマルチプロセッサシステム |
US7386683B2 (en) * | 2005-03-29 | 2008-06-10 | International Business Machines Corporation | Method and apparatus for filtering snoop requests in a point-to-point interconnect architecture |
US7290074B2 (en) * | 2005-04-06 | 2007-10-30 | Kabushiki Kaisha Toshiba | Back-off timing mechanism |
US7971002B1 (en) | 2005-04-07 | 2011-06-28 | Guillermo Rozas | Maintaining instruction coherency in a translation-based computer system architecture |
US7373444B2 (en) * | 2005-04-15 | 2008-05-13 | Kabushiki Kaisha Toshiba | Systems and methods for manipulating entries in a command buffer using tag information |
US7738483B2 (en) * | 2005-09-08 | 2010-06-15 | Kabushiki Kaisha Toshiba | Systems and methods for managing communication between master and slave devices |
JP2007079958A (ja) * | 2005-09-14 | 2007-03-29 | Hitachi Ltd | 記憶制御装置、データ処理方法、及びコンピュータプログラム |
US20070088918A1 (en) * | 2005-10-13 | 2007-04-19 | Sun Microsystems, Inc. | Tracking dependencies among memory requests |
US8924653B2 (en) * | 2006-10-31 | 2014-12-30 | Hewlett-Packard Development Company, L.P. | Transactional cache memory system |
US7613859B2 (en) * | 2007-09-12 | 2009-11-03 | Kabushiki Kaisha Toshiba | Back-off timing mechanism in a digital signal processor |
JP5453872B2 (ja) * | 2009-03-27 | 2014-03-26 | 日本電気株式会社 | ディスクアレイ装置、ディスク制御装置、ディスクアレイ装置における負荷分散方法 |
WO2011048582A1 (en) * | 2009-10-25 | 2011-04-28 | Plurality Ltd. | Shared cache for a tightly-coupled multiprocessor |
FR2992446B1 (fr) | 2012-06-22 | 2015-04-10 | Commissariat Energie Atomique | Systeme et procede de traitement de donnees a gestion d'une coherence de caches dans un reseau de processeurs munis de memoires caches. |
CN104298617B (zh) * | 2014-08-20 | 2017-12-08 | 深圳大学 | 一种numa平台中非核部件数据流缓冲管理的优化方法及系统 |
WO2017012667A1 (en) | 2015-07-22 | 2017-01-26 | Huawei Technologies Co., Ltd. | Hardware transactional memory in non volatile memory with log and no lock |
US9921962B2 (en) * | 2015-09-24 | 2018-03-20 | Qualcomm Incorporated | Maintaining cache coherency using conditional intervention among multiple master devices |
US10102129B2 (en) * | 2015-12-21 | 2018-10-16 | Intel Corporation | Minimizing snoop traffic locally and across cores on a chip multi-core fabric |
US10073776B2 (en) | 2016-06-23 | 2018-09-11 | Advanced Micro Device, Inc. | Shadow tag memory to monitor state of cachelines at different cache level |
EP3260986B1 (en) * | 2016-06-23 | 2019-08-14 | Advanced Micro Devices, Inc. | Shadow tag memory to monitor state of cachelines at different cache level |
US10303603B2 (en) | 2017-06-13 | 2019-05-28 | Microsoft Technology Licensing, Llc | Low power multi-core coherency |
US10282298B2 (en) | 2017-06-13 | 2019-05-07 | Microsoft Technology Licensing, Llc | Store buffer supporting direct stores to a coherence point |
Family Cites Families (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4245344A (en) * | 1979-04-02 | 1981-01-13 | Rockwell International Corporation | Processing system with dual buses |
US4796232A (en) * | 1987-10-20 | 1989-01-03 | Contel Corporation | Dual port memory controller |
US4982321A (en) * | 1987-10-23 | 1991-01-01 | Honeywell Inc. | Dual bus system |
US5225374A (en) * | 1988-05-13 | 1993-07-06 | The United States Of America As Represented By The Secretary Of The Navy | Method of fabricating a receptor-based sensor |
US4953081A (en) * | 1988-12-21 | 1990-08-28 | International Business Machines Corporation | Least recently used arbiter with programmable high priority mode and performance monitor |
US5119485A (en) * | 1989-05-15 | 1992-06-02 | Motorola, Inc. | Method for data bus snooping in a data processing system by selective concurrent read and invalidate cache operation |
US5317718A (en) * | 1990-03-27 | 1994-05-31 | Digital Equipment Corporation | Data processing system and method with prefetch buffers |
US5261066A (en) * | 1990-03-27 | 1993-11-09 | Digital Equipment Corporation | Data processing system and method with small fully-associative cache and prefetch buffers |
US5325510A (en) * | 1990-05-25 | 1994-06-28 | Texas Instruments Incorporated | Multiprocessor system and architecture with a computation system for minimizing duplicate read requests |
US5115411A (en) * | 1990-06-06 | 1992-05-19 | Ncr Corporation | Dual port memory system |
CA2044689A1 (en) * | 1990-06-15 | 1991-12-16 | Roger E. Tipley | Multilevel inclusion in multilevel cache hierarchies |
IE860318L (en) * | 1990-10-01 | 1986-08-05 | Digital Equipment Corp | System bus for a multi-cache data processing system |
US5265232A (en) * | 1991-04-03 | 1993-11-23 | International Business Machines Corporation | Coherence control by data invalidation in selected processor caches without broadcasting to processor caches not having the data |
US5293603A (en) * | 1991-06-04 | 1994-03-08 | Intel Corporation | Cache subsystem for microprocessor based computer system with synchronous and asynchronous data path |
DE69227956T2 (de) * | 1991-07-18 | 1999-06-10 | Tandem Computers Inc | Multiprozessorsystem mit gespiegeltem Speicher |
US5369748A (en) * | 1991-08-23 | 1994-11-29 | Nexgen Microsystems | Bus arbitration in a dual-bus architecture where one bus has relatively high latency |
US5269005A (en) * | 1991-09-17 | 1993-12-07 | Ncr Corporation | Method and apparatus for transferring data within a computer system |
US5359715A (en) * | 1991-09-16 | 1994-10-25 | Ncr Corporation | Architectures for computer systems having multiple processors, multiple system buses and multiple I/O buses interfaced via multiple ported interfaces |
US5265211A (en) * | 1992-01-02 | 1993-11-23 | International Business Machines Corporation | Arbitration control logic for computer system having dual bus architecture |
US5553258A (en) * | 1992-04-24 | 1996-09-03 | Digital Equipment Corporation | Method and apparatus for forming an exchange address for a system with different size caches |
US5319766A (en) * | 1992-04-24 | 1994-06-07 | Digital Equipment Corporation | Duplicate tag store for a processor having primary and backup cache memories in a multiprocessor computer system |
US5398325A (en) * | 1992-05-07 | 1995-03-14 | Sun Microsystems, Inc. | Methods and apparatus for improving cache consistency using a single copy of a cache tag memory in multiple processor computer systems |
US5404462A (en) * | 1992-10-16 | 1995-04-04 | Unisys Corporation | Dual bus interface transfer system for central processing module |
US5495585A (en) * | 1992-10-16 | 1996-02-27 | Unisys Corporation | Programmable timing logic system for dual bus interface |
US5442754A (en) * | 1992-12-04 | 1995-08-15 | Unisys Corporation | Receiving control logic system for dual bus network |
US5386517A (en) * | 1993-01-26 | 1995-01-31 | Unisys Corporation | Dual bus communication system connecting multiple processors to multiple I/O subsystems having a plurality of I/O devices with varying transfer speeds |
US5553263A (en) * | 1993-07-16 | 1996-09-03 | Unisys Corporation | Cache memory system with fault tolerance having concurrently operational cache controllers processing disjoint groups of memory |
US5857084A (en) | 1993-11-02 | 1999-01-05 | Klein; Dean A. | Hierarchical bus structure access system |
US5623628A (en) * | 1994-03-02 | 1997-04-22 | Intel Corporation | Computer system and method for maintaining memory consistency in a pipelined, non-blocking caching bus request queue |
US5684977A (en) * | 1995-03-31 | 1997-11-04 | Sun Microsystems, Inc. | Writeback cancellation processing system for use in a packet switched cache coherent multiprocessor system |
EP0735487B1 (en) * | 1995-03-31 | 2001-10-31 | Sun Microsystems, Inc. | A fast, dual ported cache controller for data processors in a packet switched cache coherent multiprocessor system |
US5802278A (en) | 1995-05-10 | 1998-09-01 | 3Com Corporation | Bridge/router architecture for high performance scalable networking |
US5740400A (en) * | 1995-06-05 | 1998-04-14 | Advanced Micro Devices Inc. | Reducing cache snooping overhead in a multilevel cache system with multiple bus masters and a shared level two cache by using an inclusion field |
US5673400A (en) | 1995-06-06 | 1997-09-30 | National Semiconductor Corporation | Method and apparatus for identifying and controlling a target peripheral device in a multiple bus system |
US5822755A (en) * | 1996-01-25 | 1998-10-13 | International Business Machines Corporation | Dual usage memory selectively behaving as a victim cache for L1 cache or as a tag array for L2 cache |
US5829033A (en) * | 1996-07-01 | 1998-10-27 | Sun Microsystems, Inc. | Optimizing responses in a coherent distributed electronic system including a computer system |
US5900011A (en) * | 1996-07-01 | 1999-05-04 | Sun Microsystems, Inc. | Integrated processor/memory device with victim data cache |
-
1996
- 1996-09-16 US US08/714,750 patent/US5897656A/en not_active Expired - Lifetime
-
1997
- 1997-09-16 CN CN97199718A patent/CN1130644C/zh not_active Expired - Fee Related
- 1997-09-16 EP EP97941565A patent/EP1021768A4/en not_active Withdrawn
- 1997-09-16 JP JP51390898A patent/JP4316016B2/ja not_active Expired - Lifetime
- 1997-09-16 KR KR10-1999-7002186A patent/KR100491435B1/ko not_active IP Right Cessation
- 1997-09-16 AU AU43451/97A patent/AU4345197A/en not_active Abandoned
- 1997-09-16 RU RU99107385/09A patent/RU2221271C2/ru not_active IP Right Cessation
- 1997-09-16 CA CA002264518A patent/CA2264518C/en not_active Expired - Fee Related
- 1997-09-16 WO PCT/US1997/016207 patent/WO1998011488A1/en active IP Right Grant
-
1999
- 1999-01-12 US US09/228,665 patent/US6622214B1/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
AU4345197A (en) | 1998-04-02 |
WO1998011488A1 (en) | 1998-03-19 |
EP1021768A1 (en) | 2000-07-26 |
CA2264518A1 (en) | 1998-03-19 |
US6622214B1 (en) | 2003-09-16 |
US5897656A (en) | 1999-04-27 |
KR20000036144A (ko) | 2000-06-26 |
RU2221271C2 (ru) | 2004-01-10 |
CN1130644C (zh) | 2003-12-10 |
JP4316016B2 (ja) | 2009-08-19 |
KR100491435B1 (ko) | 2005-05-24 |
CA2264518C (en) | 2006-01-10 |
EP1021768A4 (en) | 2002-08-14 |
CN1238050A (zh) | 1999-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4316016B2 (ja) | 複数のシステムバスを有するコンピュータシステムにおいてメモリコヒーレンスを維持するためのシステムおよび方法 | |
US6049847A (en) | System and method for maintaining memory coherency in a computer system having multiple system buses | |
US6141733A (en) | Cache coherency protocol with independent implementation of optimized cache operations | |
US6405289B1 (en) | Multiprocessor system in which a cache serving as a highest point of coherency is indicated by a snoop response | |
US6345342B1 (en) | Cache coherency protocol employing a read operation including a programmable flag to indicate deallocation of an intervened cache line | |
US5276852A (en) | Method and apparatus for controlling a processor bus used by multiple processor components during writeback cache transactions | |
US5692149A (en) | Block replacement method in cache only memory architecture multiprocessor | |
US6330643B1 (en) | Cache coherency protocols with global and local posted operations | |
US20030046356A1 (en) | Method and apparatus for transaction tag assignment and maintenance in a distributed symmetric multiprocessor system | |
US6334172B1 (en) | Cache coherency protocol with tagged state for modified values | |
US6321306B1 (en) | High performance multiprocessor system with modified-unsolicited cache state | |
US6279085B1 (en) | Method and system for avoiding livelocks due to colliding writebacks within a non-uniform memory access system | |
JP2000250812A (ja) | メモリ・キャッシュ・システムおよびその管理方法 | |
US6751705B1 (en) | Cache line converter | |
JPH10154100A (ja) | 情報処理システム及び装置及びその制御方法 | |
US6418514B1 (en) | Removal of posted operations from cache operations queue | |
US5987544A (en) | System interface protocol with optional module cache | |
US20040111565A1 (en) | High speed memory cloner with extended cache coherency protocols and responses | |
US6226718B1 (en) | Method and system for avoiding livelocks due to stale exclusive/modified directory entries within a non-uniform access system | |
US6247098B1 (en) | Cache coherency protocol with selectively implemented tagged state | |
US6345344B1 (en) | Cache allocation mechanism for modified-unsolicited cache state that modifies victimization priority bits | |
US6701416B1 (en) | Cache coherency protocol with tagged intervention of modified values | |
US6341336B1 (en) | Cache coherency protocol having tagged state used with cross-bars | |
US6345340B1 (en) | Cache coherency protocol with ambiguous state for posted operations | |
US6374333B1 (en) | Cache coherency protocol in which a load instruction hint bit is employed to indicate deallocation of a modified cache line supplied by intervention |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040614 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040614 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080205 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080507 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090421 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090520 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120529 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130529 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |