JP5127815B2 - Cpuトラフィックを特殊とマークすることによるデッドロックの回避 - Google Patents

Cpuトラフィックを特殊とマークすることによるデッドロックの回避 Download PDF

Info

Publication number
JP5127815B2
JP5127815B2 JP2009275656A JP2009275656A JP5127815B2 JP 5127815 B2 JP5127815 B2 JP 5127815B2 JP 2009275656 A JP2009275656 A JP 2009275656A JP 2009275656 A JP2009275656 A JP 2009275656A JP 5127815 B2 JP5127815 B2 JP 5127815B2
Authority
JP
Japan
Prior art keywords
memory
read request
request
processing unit
derivative
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009275656A
Other languages
English (en)
Other versions
JP2010140480A (ja
Inventor
エイチ. ダンカン サムエル
ビー. グラスコ デイヴィッド
フアン ウェイ−ジェ
カランバー アトゥル
アール. マーチャンド パトリック
ケイ. マ デニス
Original Assignee
エヌヴィディア コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by エヌヴィディア コーポレイション filed Critical エヌヴィディア コーポレイション
Publication of JP2010140480A publication Critical patent/JP2010140480A/ja
Application granted granted Critical
Publication of JP5127815B2 publication Critical patent/JP5127815B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14Handling requests for interconnection or transfer
    • G06F13/36Handling requests for interconnection or transfer for access to common bus or bus system
    • G06F13/368Handling requests for interconnection or transfer for access to common bus or bus system with decentralised access control
    • G06F13/376Handling requests for interconnection or transfer for access to common bus or bus system with decentralised access control using a contention resolving method, e.g. collision detection, collision avoidance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/42Bus transfer protocol, e.g. handshake; Synchronisation
    • G06F13/4204Bus transfer protocol, e.g. handshake; Synchronisation on a parallel bus
    • G06F13/4221Bus transfer protocol, e.g. handshake; Synchronisation on a parallel bus being an input/output bus, e.g. ISA bus, EISA bus, PCI bus, SCSI bus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14Handling requests for interconnection or transfer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14Handling requests for interconnection or transfer
    • G06F13/16Handling requests for interconnection or transfer for access to memory bus
    • G06F13/1605Handling requests for interconnection or transfer for access to memory bus based on arbitration
    • G06F13/1652Handling requests for interconnection or transfer for access to memory bus based on arbitration in a multiprocessor architecture
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14Handling requests for interconnection or transfer
    • G06F13/16Handling requests for interconnection or transfer for access to memory bus
    • G06F13/1605Handling requests for interconnection or transfer for access to memory bus based on arbitration
    • G06F13/1652Handling requests for interconnection or transfer for access to memory bus based on arbitration in a multiprocessor architecture
    • G06F13/1663Access to shared memory
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14Handling requests for interconnection or transfer
    • G06F13/36Handling requests for interconnection or transfer for access to common bus or bus system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/40Bus structure
    • G06F13/4004Coupling between buses
    • G06F13/4027Coupling between buses using bus bridges
    • G06F13/4031Coupling between buses using bus bridges with arbitration
    • G06F13/4036Coupling between buses using bus bridges with arbitration and deadlock prevention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G06F15/163Interprocessor communication
    • G06F15/173Interprocessor communication using an interconnection network, e.g. matrix, shuffle, pyramid, star, snowflake
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/38Concurrent instruction execution, e.g. pipeline or look ahead
    • G06F9/3877Concurrent instruction execution, e.g. pipeline or look ahead using a slave processor, e.g. coprocessor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Memory System Of A Hierarchy Structure (AREA)
  • Techniques For Improving Reliability Of Storages (AREA)
  • Debugging And Monitoring (AREA)
  • Multi Processors (AREA)

Description

[0001]本発明は、一般的に、コンピュータハードウェアに関し、より詳細には、CPUトラフィックを特殊とマークすることによりデッドロックを回避する方法及びシステムに関する。
[0002]従来のコンピュータシステムは、中央処理ユニット(CPU)を備え、また、パラレル処理ユニット(PPU)として知られているコプロセッサを含むこともある。CPUは、CPUの処理ワークロードを減少するために幾つかの処理オペレーションをPPUへオフロードする。これらの処理オペレーションは、とりわけ、圧縮及び解凍オペレーションを含む。CPUは、これらの処理オペレーションを要求するときに、読み取り要求及び/又は書き込み要求を含む要求をPPUへ発行する。例えば、CPUは、圧縮フォーマットで記憶することのできるデータをシステムメモリへ書き込むことが要求される。CPUは、書き込み要求をPPUへ送出し、次いで、PPUは、その書き込み要求に関連したデータを読み取って解凍し、そして解凍されて新たなデータと合体されたオリジナルデータをシステムメモリに書き込む。
[0003]時々、CPUにより発行される書き込み要求は、最初の書き込み要求を完了できる前に完了しなければならない1つ以上の「デリバティブ」読み取り要求をPPUが発行する状態を生じさせることがある。例えば、PPUは、CPUに関連したシステムメモリユニットをターゲットとするデリバティブ読み取り要求を発行することがある。読み取りトランザクションが完了すると、システムメモリは、トランザクションが完了したことをPPUに通知する読み取り完了をPPUへ発行する。
[0004]しかしながら、1つ以上の書き込み要求が保留中となっている周辺コンポーネントインターフェイスエクスプレス(PCIe)バスによりCPU及びPPUが接続されたときに、問題が生じる。PCIeバスの順序付けルールのために、読み取りが完了しても書き込み要求をパスできず、従って、デリバティブ読み取り要求は、書き込み完了をPPUへ返送することができない。それ故、最初の書き込み要求を完了することができない。この状態は、この技術では、循環依存性又は「デッドロック(deadlock)」として知られている。デッドロックは、CPUとPPUとの間の幾つかの又は全ての通信を停止し、コンピュータシステムの処理スループットに否定的な影響を与える。デッドロック状態の幾つかの例を以下に述べる。
[0005]第1の例では、PPUが、システムメモリに記憶されたページテーブルから読み取りを行う必要があり、且つPCIeバスにおいて書き込み要求が保留中である場合に、デッドロックが生じることがある。PPUがシステムメモリへ読み取り要求を発行して、ページテーブルからエントリーを検索するときには、その読み取り要求に関連した読み取り完了をPPUへ返送することができず、従って、最初の書き込み要求を完了することができない。
[0006]また、CPUが、PPUに関連したキャッシュメモリユニット内のキャッシュラインをターゲットとする書き込み要求をPPUへ発行するときにも、デッドロックが生じることがある。書き込み要求を完了するために、PPUは、先ず、タグ記憶装置を検査することによりキャッシュラインが圧縮されたかどうか決定する。タグ記憶装置は、キャッシュメモリユニット内の最近アクセスされたキャッシュラインに関連した圧縮状態を指示する。タグ記憶装置が、書き込み要求により指定されたキャッシュラインの圧縮状態を含まないときには、PPUは、キャッシュメモリユニット内の各キャッシュラインの圧縮状態を含むバッキング記憶装置にアクセスするために読み取り要求をシステムメモリへ発行する。バッキング記憶装置は、指定のキャッシュラインの圧縮状態を返送すると共に、読み取り完了を発行する。しかしながら、書き込み要求がPCIeにおいて保留中であるときには、読み取り要求に関連した読み取り完了ではそれらの保留中の書き込み要求をパスできないので、デッドロックが発生し得る。
[0007]CPUが、この技術において「圧縮タイル」として知られている圧縮されたシステムメモリの領域へデータを書き込むように試みたときに、第3のデッドロックが発生し得る。CPUは、圧縮タイルを指定し且つ書き込みデータを含む書き込み要求をPPUへ発行する。PPUは、圧縮タイルを読み取るために読み取り要求をシステムメモリへ発行する。この場合も、書き込み要求がPCIeにおいて保留中であるときには、読み取り要求に関連した読み取り完了ではそれらの保留中の書き込み要求をパスできないので、デッドロックが発生し得る。
[0008]これら3つの例に加えて、多数の他の環境でも、デッドロックが生じ得る。従って、この技術では、デッドロックを回避する方法及びシステムが要望される。
[0009]本発明の実施形態は、第1処理ユニットと、第2処理ユニットと、メモリブリッジと、システムメモリと、第2処理ユニットを第1処理ユニット、メモリブリッジ、及びシステムメモリに接続するバスとを有するコンピュータシステムにおいてデッドロックを回避する方法及びシステムを提供する。第1処理ユニットから第2処理ユニットへ読み取り要求又は書き込み要求が送出されるときにデッドロックが回避される。
[0010]本発明の実施形態によるデッドロックを回避する方法は、バスの第1バーチャルチャンネルを経て第2処理ユニットで読み取り要求又は書き込み要求を受け取り、その読み取り要求又は書き込み要求を処理する間に第2処理ユニットにおいてデリバティブ読み取り要求を発生し、バスの第2バーチャルチャンネルを経てデリバティブ読み取り要求をシステムメモリへ送出し、バスの第2バーチャルチャンネルを経てデリバティブ読み取り要求の完了を受け取り、更に、受け取られた読み取り要求又は書き込み要求を完了することを含む。
[0011]本発明の実施形態によるデッドロックを回避するシステムは、第2処理ユニット内にバスインターフェイスユニットを備えている。このバスインターフェイスユニットは、第1バーチャルチャンネルを経て第1処理ユニットから読み取り要求又は書き込み要求を受け取り、そしてその読み取り要求又は書き込み要求を処理する間に発生されるデリバティブ読み取り要求を、第2バーチャルチャンネルを経て送出するように構成される。
[0012]本発明の前述した特徴を詳細に理解できるように、概要について簡単に前述した本発明について、幾つかを添付図面に例示している実施形態に関して、以下により特定して説明する。しかしながら、添付図面は、本発明の典型的な実施形態のみを例示したもので、従って、本発明の範囲は、それに限定されるものではなく、本発明は、同等の効果を発揮できる他の実施形態も包含できることに注意されたい。
本発明の1つ以上の態様を具現化するように構成されたコンピュータシステムを示すブロック図である。 本発明の一実施形態による図1のコンピュータシステムのためのパラレル処理サブシステムのブロック図である。 本発明の一実施形態による図2の1つのパラレル処理ユニット(PPU)内の一般的処理クラスター(GPC)のブロック図である。 本発明の一実施形態による図2の1つのPPU内のパーティションユニットのブロック図である。 本発明の一実施形態によりデッドロックを回避するように構成されたコンピュータシステムのブロック図である。 本発明の一実施形態によりデッドロックを回避する方法のステップのフローチャートである。
[0019]以下の説明において、本発明をより完全に理解するために多数の特定の細部について述べる。しかしながら、当業者であれば、1つ以上のこれら特定の細部をもたずに、本発明を実施できることが明らかであろう。他の点について、本発明を不明瞭にしないために、良く知られた特徴は説明しない。
システムの概略
[0020]図1は、本発明の1つ以上の態様を具現化するように構成されたコンピュータシステム100を示すブロック図である。このコンピュータシステム100は、中央処理ユニット(CPU)102と、メモリブリッジ105を通るバス経路を経て通信するシステムメモリ104とを備えている。メモリブリッジ105は、図1に示すようにCPU102に一体化されてもよい。或いはまた、メモリブリッジ105は、バスを経てCPU102に接続される、例えば、ノースブリッジチップのような従来の装置でもよい。メモリブリッジ105は、通信経路106(例えば、ハイパートランスポートリンク)を経てI/O(入力/出力)ブリッジ107へ接続される。例えば、サウスブリッジチップでよいI/Oブリッジ107は、1つ以上のユーザ入力装置108(例えば、キーボード、マウス)からユーザ入力を受け取り、そしてその入力を、経路106及びメモリブリッジ105を経てCPU102へ転送する。パラレル処理サブシステム112がバス又は他の通信経路113(例えば、PCIエクスプレス、アクセラレーテッドグラフィックポート、又はハイパートランスポートリンク)を経てメモリブリッジ105へ結合され、一実施形態では、パラレル処理サブシステム112は、ディスプレイ装置110(例えば、従来のCRT又はLCDベースのモニタ)へピクセルを配送するグラフィックサブシステムである。システムディスク114もI/Oブリッジ107に接続される。スイッチ116は、I/Oブリッジ107と、他のコンポーネント、例えば、ネットワークアダプタ118及び種々のアドインカード120及び121との間の接続を与える。I/Oブリッジ107には、USB又は他のポートコネクタ、CDドライブ、DVDドライブ、フィルム記録装置、等を含む他のコンポーネント(明確に示されていない)を接続することもできる。図1における種々のコンポーネントを相互接続する通信経路は、任意の適当なプロトコル、例えば、PCI(周辺コンポーネント相互接続)、PCIエクスプレス(PCI−E)、AGP(アクセラレーテッドグラフィックポート)、ハイパートランスポート、或いは他のバス又はポイント対ポイント通信プロトコル(1つ又は複数)を使用して具現化されてもよいし、異なる装置間の接続が、この技術で良く知られたように、異なるプロトコルを使用してもよい。
[0021]一実施形態において、パラレル処理サブシステム112は、例えば、ビデオ出力回路を含むグラフィック及びビデオ処理に最適な回路を合体して、グラフィック処理ユニット(GPU)を構成する。別の実施形態では、パラレル処理サブシステム112は、ここで詳細に述べる基礎的な計算アーキテクチャーを維持しながら、汎用処理に対して最適化された回路を合体する。更に別の実施形態では、パラレル処理サブシステム112は、1つ以上の他のシステム要素、例えば、メモリブリッジ105、CPU102及びI/Oブリッジ107と一体化されて、システムオンチップ(SoC)を形成してもよい。
[0022]ここに示すシステムは、例示に過ぎず、変更や修正が可能であることが明らかである。ブリッジの数及び配列を含む接続トポロジーは、必要に応じて変更されてもよい。例えば、ある実施形態では、システムメモリ104は、ブリッジを通さずにCPU102に直結され、他の装置は、メモリブリッジ105及びCPU102を経てシステムメモリ104と通信する。他の別のトポロジーにおいて、パラレル処理サブシステム112は、I/Oブリッジ107へ接続されるか、又はメモリブリッジ105ではなくCPU102に直結される。更に他の実施形態では、1つ以上のCPU102、I/Oブリッジ107、パラレル処理サブシステム112、及びメモリブリッジ105が、1つ以上のチップに一体化されてもよい。ここに示す特定のコンポーネントは、任意のものであり、例えば、いかなる数のアドインカード又は周辺装置がサポートされてもよい。ある実施形態では、スイッチ116が取り去られ、ネットワークアダプタ118及びアドインカード120、121がI/Oブリッジ107に直結される。
[0023]図2は、本発明の一実施形態によるパラレル処理サブシステム112を示す。図示されたように、パラレル処理サブシステム112は、1つ以上のパラレル処理ユニット(PPU)202を備え、その各々がローカルパラレル処理(PP)メモリ204に結合される。一般的に、パラレル処理サブシステムは、多数UのPPUを備え、但し、U≧1である。(ここで、同じオブジェクトの複数のインスタンスは、オブジェクトを識別する参照番号と、必要に応じてインスタンスを識別するかっこ付き番号とで示される。)PPU202及びパラレル処理メモリ204は、1つ以上の集積回路デバイス、例えば、プログラム可能なプロセッサ、特定用途向け集積回路(ASIC)又はメモリデバイスを使用して具現化されてもよいし、或いは他の技術的に実現可能な形態で具現化されてもよい。
[0024]再び図1を参照すれば、ある実施形態において、パラレル処理サブシステム112における幾つかの又は全てのPPU202は、CPU102及び/又はシステムメモリ104により供給されるグラフィックデータからピクセルデータを発生し、ローカルパラレル処理メモリ204(例えば、従来のフレームバッファを含むグラフィックメモリとして使用できる)と相互作用して、ピクセルデータを記憶及び更新し、ピクセルデータをディスプレイ装置110へ配送し、等々に関連した種々のタスクを遂行するように構成できるレンダリングパイプラインを伴うグラフィックプロセッサである。ある実施形態では、パラレル処理サブシステム112は、グラフィックプロセッサとして動作する1つ以上のPPU202、及び汎用の計算に使用される1つ以上の他のPPU202を含んでもよい。PPUは、同じものでも異なるものでもよく、また、各PPUは、それ自身の専用のパラレル処理メモリデバイス(1つ又は複数)を有してもよいし、又は専用のパラレル処理メモリデバイス(1つ又は複数)を有していなくてもよい。1つ以上のPPU202がディスプレイ装置110へデータを出力してもよいし、又は各PPU202が1つ以上のディスプレイ装置110へデータを出力してもよい。
[0025]図2を参照すれば、ある実施形態において、ローカルPPメモリ204がなくてもよく、メモリの参照は、ローカルキャッシュ(図示せず)によりクロスバーユニット210及びI/Oユニット205を通してシステムメモリ104(図示せず)へ反映されて戻される。
[0026]動作中に、CPU102がコンピュータシステム100のマスタープロセッサとなり、他のシステムコンポーネントのオペレーションを制御し整合させる。特に、CPU102は、PPU202のオペレーションを制御するコマンドを発生する。ある実施形態では、CPU102は、各PPU202のためのコマンドのストリームをコマンドバッファ(図1又は図2のいずれにも明確に示されていない)へ書き込み、このバッファは、システムメモリ104、パラレル処理メモリ204、或いはCPU102及びPPU202の両方にアクセス可能な別の記憶位置に配置される。PPU202は、コマンドバッファからコマンドストリームを読み取り、次いで、CPU102のオペレーションに対して非同期でコマンドを実行する。また、CPU102は、コマンドバッファのコマンドに応答してPPU202が読み取ることのできるデータバッファを生成することもできる。各コマンド及びデータバッファは、各PPU202によって読み取ることができる。
[0027]図2に戻ると、各PPU202は、メモリブリッジ105へ接続される(或いは1つの別の実施形態では、CPU102へ直結される)通信経路113を経てコンピュータシステム100の残部と通信するI/O(入力/出力)ユニット205を備えている。コンピュータシステム100の残部へのPPU202の接続を変更することもできる。ある実施形態では、パラレル処理サブシステム112は、コンピュータシステム100の拡張スロットへ挿入できるアドインカードとして具現化される。他の実施形態では、PPU202は、メモリブリッジ105又はI/Oブリッジ107のようなバスブリッジと共に単一チップ上に集積化することができる。更に別の実施形態では、PPU202の幾つかの又は全ての要素をCPU102と共に単一チップ上に集積化することができる。
[0028]一実施形態では、通信経路113は、この技術で知られたように各PPU202に専用レーンが割り当てられたPCI−Eリンクである。他の通信経路を使用することもできる。I/Oユニット205は、通信経路113を経て送出するためのパケット(又は他の信号)を発生すると共に、通信経路113から全ての到来パケット(又は他の信号)を受信して、それら到来パケットをPPU202の適当なコンポーネントに向ける。例えば、処理タスクに関連したコマンドは、ホストインターフェイス206に向けることができる一方、メモリオペレーション(例えば、パラレル処理メモリ204からの読み取り又はそこへの書き込み)に関連したコマンドは、メモリクロスバーユニット210に向けることができる。ホストインターフェイス206は、各コマンドバッファを読み取り、また、コマンドバッファにより指定されたワークをフロントエンド212へ出力する。
[0029]各PPU202は、高度なパラレル処理アーキテクチャーを具現化するのが好都合である。詳細に示されたように、PPU202(0)は、多数Cの一般的処理クラスター(GPC)208を含む処理クラスターアレイ230を備え、但し、C≧1である。各GPC208は、多数(例えば、数百又は数千)のスレッドを同時に実行することができ、ここで、各スレッドは、プログラムのインスタンスである。種々のアプリケーションにおいて、異なる形式のプログラムを処理するか又は異なる形式の計算を遂行するために異なるGPC208が割り当てられる。例えば、グラフィックアプリケーションでは、テセレーションオペレーションを遂行してパッチに対するプリミティブトポロジーを発生するためにGPC208の第1セットを割り当てることができ、また、テセレーションシェーディングを遂行してプリミティブトポロジーに対してパッチパラメータを評価すると共に、頂点位置及び他の頂点ごとの属性を決定するためにGPC208の第2セットを割り当てることができる。GPC208の割り当ては、各形式のプログラム又は計算に対して生じるワークロードに基づいて変更し得る。或いはまた、GPC208は、異なる処理タスク間を切り換えるためにタイムスライススキムを使用して処理タスクを遂行するように割り当てられてもよい。
[0030]GPC208は、フロントエンドユニット212から処理タスクを定義するコマンドを受け取るワーク分配ユニット200を経て実行されるべき処理タスクを受け取る。処理タスクは、処理されるべきデータ、例えば、表面(パッチ)データ、プリミティブデータ、頂点データ、及び/又はピクセルデータ、並びにどのようにデータを処理すべきか(例えば、どんなプログラムを実行すべきか)を定義する状態パラメータ及びコマンドのポインタを含む。ワーク分配ユニット200は、処理タスクに対応するポインタをフェッチするように構成されてもよいし、又はフロントエンド212からポインタを受け取ってもよいし、或いはフロントエンド212からデータを直接受け取ってもよい。ある実施形態では、インデックスがアレイ内のデータの位置を指定する。フロントエンド212は、コマンドバッファによって指定された処理が開始される前にGPC208が有効な状態へと構成されることを保証する。
[0031]PPU202が、例えば、グラフィック処理に使用されるときには、各パッチに対する処理ワークロードが、ほぼ等しいサイズのタスクへ分割され、テセレーション処理を複数のGPC208へ分配できるようにする。ワーク分配ユニット200は、タスクを処理のために複数のGPC208に与えることのできる頻度でタスクを出力するように構成することができる。本発明のある実施形態では、GPC208の各部分は、異なる形式の処理を遂行するように構成される。例えば、第1部分は、頂点シェーディング及びトポロジー発生を遂行するように構成され、第2部分は、テセレーション及び幾何学的シェーディングを遂行するように構成され、更に、第3部分は、スクリーンスペースにおいてピクセルシェーディングを遂行して、レンダリングされた像を形成するように構成することができる。異なる形式の処理タスクを効率的に遂行するようにGPC208の各部分を割り当てする能力は、これら異なる形式の処理タスクにより生じるデータの膨張及び収縮を受け容れる。下流のGPC208によりデータが受け容れられる速度が、上流のGPC208によりデータが発生される速度より遅い場合には、GPC208によって発生される中間データは、その中間データを最小のストール状態でGPC208間に送出できるように、バッファすることができる。
[0032]メモリインターフェイス214は、パラレル処理メモリ204の一部分に各々結合された多数Dのメモリパーティションユニットへ区画化することができ、但し、D≧1である。パラレル処理メモリ204の各部分は、一般的に、1つ以上のメモリデバイス(例えば、DRAM220)を含む。当業者であれば、DRAM220は、他の適当な記憶装置と置き換えることができ、一般的に従来設計のものでよいことが明らかであろう。それ故、詳細な説明は省略する。一実施形態では、DRAM220は、完全に省略されてもよく、メモリ要求は、クロスバー210及びI/Oユニット205を経てメモリブリッジ105へ反映されて戻される。フレームバッファ又はテクスチャマップのようなレンダーターゲットは、DRAM220にわたって記憶され、パーティションユニット215が各レンダーターゲットの部分をパラレルに書き込み、パラレル処理メモリ204の使用可能な帯域巾を効率的に使用できるようにする。
[0033]GPC208のいずれの1つも、パラレル処理メモリ204内の任意のパーティションユニット215に書き込まれるべきデータを処理することができる。クロスバーユニット210は、各GPC208の出力を任意のパーティションユニット214の入力へ又は別のGPC208へ更なる処理のためにルーティングするように構成される。GPC208は、クロスバーユニット210を通してメモリインターフェイス214と通信し、種々の外部メモリ装置から読み取ったり又はそこへ書き込んだりする。一実施形態では、クロスバーユニット210は、I/Oユニット205と通信するためにメモリインターフェイス214への接続を有すると共に、ローカルのパラレル処理メモリ204への接続を有し、これにより、異なるGPC208内の処理コアが、システムメモリ104と通信するか、又はPPU202に対してローカルでない他のメモリと通信できるようにする。クロスバーユニット210は、バーチャルチャンネルを使用して、GPC208とパーティションユニット215との間でトラフィックストリームを分離することができる。
[0034]この場合も、GPC208は、これに限定されないが、直線的及び非直線的データ変換、ビデオ及び/又はオーディオデータのフィルタリング、モデリングオペレーション(例えば、物理の法則を適用して対象物の位置、速度及び他の属性を決定すること)、像レンダリングオペレーション(例えば、テセレーションシェーダー、頂点シェーダー、幾何学的シェーダー及び/又はピクセルシェーダープログラム)、等を含む種々様々なアプリケーションに関する処理タスクを実行するようにプログラムすることができる。PPU202は、システムメモリ104及び/又はローカルパラレル処理メモリ204からのデータを内部(オンチップ)メモリへ転送し、そのデータを処理し、そしてそれにより得られるデータをシステムメモリ104及び/又はローカルパラレル処理メモリ204へ書き戻すことができ、このようなデータは、CPU102又は別のパラレル処理サブシステム112を含む他のシステムコンポーネントによってアクセスすることができる。
[0035]PPU202には、ローカルメモリを含まない任意の量のローカルパラレル処理メモリ204を設けることができ、また、ローカルメモリ及びシステムメモリを任意の組み合わせで使用することもできる。例えば、PPU202は、統合型メモリアーキテクチャー(UMA)実施形態では、グラフィックプロセッサである。このような実施形態では、専用グラフィック(パラレル処理)メモリがほとんど又は全く設けられず、PPU202は、システムメモリを排他的又はほぼ排他的に使用する。UMA実施形態では、PPU202は、ブリッジチップ又はプロセッサチップに一体化されてもよいし、或いはブリッジチップ又は他の通信手段を経てシステムメモリへPPU202を接続する高速リンク(例えば、PCI−E)をもつ個別のチップとして設けられてもよい。
[0036]上述したように、パラレル処理サブシステム112には、いかなる数のPPU202を含ませることもできる。例えば、複数のPPU202を単一のアドインカード上に設けることもできるし、又は複数のアドインカードを通信経路113に接続することもできるし、或いは1つ以上のPPU202をブリッジチップに一体化することもできる。マルチPPUシステムにおけるPPU202は、互いに同じものでも異なるものでもよい。例えば、異なるPPU202は、異なる数の処理コア、異なる量のローカルパラレル処理メモリ、等を有してもよい。複数のPPU202が存在する場合には、それらPPUは、単一のPPU202で可能であるよりも高いスループットでデータを処理するためにパラレルに動作させることができる。1つ以上のPPU202を組み込んだシステムは、デスクトップ、ラップトップ、又はハンドヘルドパーソナルコンピュータ、サーバー、ワークステーション、ゲームコンソール、埋め込み型システム、等々を含む種々のコンフィギュレーション及びフォームファクタで具現化することができる。
処理クラスターアレイの概略
[0037]図3Aは、本発明の一実施形態による図2の1つのPPU202内のGPC208のブロック図である。各GPC208は、多数のスレッドをパラレルに実行するように構成することができ、ここで、「スレッド」という語は、入力データの特定のセットに対して実行される特定のプログラムのインスタンスを指す。ある実施形態では、複数の独立したインストラクションユニットを設けずに、多数のスレッドのパラレル実行をサポートするために、単一インストラクション多データ(SIMD)のインストラクション発行技術が使用される。他の実施形態では、各1つのGPC208内の処理エンジンのセットへインストラクションを発行するように構成された共通のインストラクションユニットを使用して、多数の一般的に同期されるスレッドのパラレル実行をサポートするために、単一インストラクション多スレッド(SIMT)技術が使用される。全処理エンジンが典型的に同じインストラクションを実行するSIMD実行形態とは異なり、SIMT実行は、異なるスレッドが、所与のスレッドプログラムを通じて、発散する実行経路を容易にたどることができるようにする。当業者であれば、SIMD処理形態は、SIMT処理形態の機能的サブセットを表すことが理解されよう。
[0038]グラフィックアプリケーションでは、GPC208は、これに限定されないが、プリミティブ設定、ラスタ化及びzカリングを含むスクリーンスペースグラフィック処理ファンクションを遂行するためのプリミティブエンジンを具現化するように構成されてもよい。プリミティブエンジンは、ワーク分配ユニット200から処理タスクを受け取り、そして処理タスクは、それがプリミティブエンジンにより遂行されるオペレーションを必要としないときに、プリミティブエンジンを経てパイプラインマネージャー305へ通される。GPC208のオペレーションは、処理タスクをストリーミングマルチプロセッサ(SPM)310へ分配するパイプラインマネージャー305を経て制御されるのが好都合である。また、パイプラインマネージャー305は、SPM310により出力される処理データの行先を指定することにより、ワーク分配クロスバー330を制御するように構成することもできる。
[0039]一実施形態では、各GPC208は、多数MのSPM310を含み、但し、M≧1であり、また、各SPM310は、1つ以上のスレッドグループを処理するように構成される。また、各SPM310は、この技術で知られたように、手前のインストラクションが終了する前に新たなインストラクションを発行できるように、パイプライン化できる機能的ユニット(例えば、演算論理ユニット、等々)の同一セットを含むのが好都合である。機能的ユニットの任意の組み合わせを設けることができる。一実施形態では、機能的ユニットは、整数及び浮動小数点演算(例えば、加算及び乗算)、比較演算、ブール演算(AND、OR、XOR)、ビットシフト、及び種々の代数関数(例えば、平面補間、三角関数、指数関数、対数関数、等)の計算を含む様々なオペレーションをサポートし、そして同じ機能的ユニットハードウェアをレバレッジして、異なるオペレーションを遂行することができる。
[0040]特定のGPC208へ送出される一連のインストラクションは、前記で定義したスレッドを構成し、SPM310内のパラレル処理エンジン(図示せず)にわたるある個数の同時実行スレッドの集合がここで「ワープ」又は「スレッドグループ」と称される。ここで使用する「スレッドグループ」は、異なる入力データに対して同じプログラムを同時に実行するスレッドのグループを指し、グループの各スレッドがSPM310内の異なる処理エンジンに指定される。スレッドグループは、SPM310内の処理エンジンの個数より少ないスレッドを含んでもよく、この場合に、幾つかの処理エンジンは、そのスレッドグループが処理されるときのサイクル中にアイドル状態となる。また、スレッドグループは、SPM310内の処理エンジンの個数より多いスレッドを含んでもよく、この場合に、複数のクロックサイクルにわたって処理が行われる。各SPM310がG個までのスレッドグループを同時にサポートできるので、いかなる所与の時間にもGPC208ではGxM個までのスレッドグループを実行できることになる。
[0041]更に、SPM310内で複数の関連スレッドグループが同時にアクティブなことがある(異なる実行フェーズにおいて)。スレッドグループのこの集合は、ここでは、「協働スレッドアレイ」(CTA)と称される。特定のCTAのサイズは、m*kに等しく、但し、kは、スレッドグループ内の同時実行スレッドの数で、典型的に、SPM310内のパラレル処理エンジンの数の整数倍であり、また、mは、SPM310内の同時にアクティブなスレッドグループの数である。CTAのサイズは、一般的に、プログラマーと、CTAに使用可能なメモリ又はレジスタのようなハードウェアリソースの量とで決定される。
[0042]各スレッドには排他的ローカルアドレススペースが利用でき、共有のパー・CTAアドレススペースを使用してCTA内のスレッド間にデータを通すことができる。パー・スレッドのローカルアドレススペース及びパー・CTAアドレススペースに記憶されたデータは、L1キャッシュ320に記憶され、そして立ち退きポリシーを使用して、L1キャッシュ320にデータを好意的に保持することができる。
各SPM310は、ロード及び記憶オペレーションを遂行するのに使用される対応L1キャッシュ320内のスペースを使用する。また、各SPM310は、全てのGPC208間に共有されてスレッド間のデータ転送に使用できるパーティションユニット215内のL2キャッシュにもアクセスする。最終的に、SPM310は、例えば、パラレル処理メモリ204及び/又はシステムメモリ104を含むことのできるオフチップ「グローバル」メモリにもアクセスする。グローバルメモリへ書き込まれ及びそこから読み取られるデータを記憶するのに、L2キャッシュを使用することができる。PPU202の外部のメモリをグローバルメモリとして使用できることを理解されたい。
[0043]グラフィックアプリケーションでは、GPC208は、例えば、テクスチャサンプル位置を決定し、テクスチャデータを読み取り、テクスチャデータをフィルタリングするようなテクスチャマッピングオペレーションを遂行するために各SPM310がテクスチャユニット315に結合されるように構成できる。テクスチャデータは、メモリインターフェイス214を経て読み取られ、L2キャッシュ、パラレル処理メモリ204、又はシステムメモリ104から必要に応じてフェッチされる。テクスチャユニット315は、テクスチャデータを内部キャッシュに記憶するように構成できる。ある実施形態では、テクスチャユニット315がL1キャッシュ320に結合され、テクスチャデータがL1キャッシュ320に記憶される。各SPM310は、処理されたタスクをワーク分配クロスバー330へ出力し、処理されたタスクを更なる処理のために別のGPC208に与えるか、又は処理されたタスクを、クロスバーユニット210を経てL2キャッシュ、パラレル処理メモリ204又はシステムメモリ104に記憶する。プレROP(プレ・ラスタオペレーション)325は、SPM310からデータを受け取り、パーティションユニット215内のROPユニットへデータを向け、カラー混合のための最適化を遂行し、ピクセルカラーデータを編成し、そしてアドレス変換を遂行するように構成される。
[0044]ここに述べるコアアーキテクチャーは、例示に過ぎず、変更や修正が可能であることが明らかである。いかなる数の処理エンジン、例えば、プリミティブエンジン304、SPM310、テクスチャユニット315又はプレROP325がGPC208内に含まれてもよい。更に、1つのGPC208しか示されていないが、PPU202は、いかなる数のGPC208を含んでもよく、これらGPCは、どのGPC208が特定の処理タスクを受け取るかに実行振舞いが依存しないように、互いに機能的に同様であるのが好都合である。更に、各GPC208は、別々の個別の処理エンジン、L1キャッシュ320、等を使用して、他のGPC208とは独立して動作するのが好都合である。
[0045]図3Bは、本発明の一実施形態による図2の1つのPPU202内のパーティションユニット215のブロック図である。図示されたように、パーティションユニット215は、L2キャッシュ350、フレームバッファ(FB)355、及びラスタオペレーションユニット(ROP)360を備えている。L2キャッシュ350は、クロスバーユニット210及びROP360から受け取られるロード及び記憶オペレーションを遂行するように構成された読み取り/書き込みキャッシュである。読み取りミス及び緊急書き戻し要求がL2キャッシュ350によりFB355へ処理のために出力される。FB355は、パラレル処理メモリ204と直接インターフェイスし、読み取り及び書き込み要求を出力すると共に、パラレル処理メモリ204から読み取られたデータを受け取る。
[0046]グラフィックアプリケーションでは、ROP360は、ステンシル、zテスト、ブレンド、等のラスタオペレーションを遂行し、そしてピクセルデータを処理済みグラフィックデータとして出力してグラフィックメモリに記憶する処理ユニットである。本発明のある実施形態では、ROP360は、パーティションユニット215ではなく、各GPC208内に含まれ、そしてピクセル断片データではなく、ピクセル読み取り及び書き込み要求が、クロスバーユニット210を経て送出される。
[0047]処理済みのグラフィックデータは、ディスプレイ装置110に表示されるか、或いはCPU102、又はパラレル処理サブシステム112内の1つの処理エンティティにより更に処理するためにルーティングされる。各パーティションユニット215は、ラスタオペレーションの処理を分配するためにROP360を備えている。ある実施形態では、ROP360は、メモリに書き込まれるz又はカラーデータを圧縮し、そしてメモリから読み取られるz又はカラーデータを解凍するように構成される。
[0048]当業者であれば、図1、2、3A及び3Bについて述べたアーキテクチャーは、本発明の範囲を何ら限定するものではなく、また、ここに教示される技術は、これに限定されないが、1つ以上のCPU、1つ以上のマルチコアCPU、1つ以上のPPU202、1つ以上のGPC208、1つ以上のグラフィック又は特殊目的の処理ユニット、等を含む適切に構成された処理ユニットにおいて、本発明の範囲から逸脱せずに、具現化できることが理解されよう。
デッドロックの回避
[0049]通信経路113がPCIeバスであるとき、PCIeバスにおける保留中の書き込み要求は、システムメモリ104から返送される読み取り完了がPPサブシステム202に到着するのを妨げる。保留中の書き込み要求を取り扱いできる前にPPサブシステム202により読み取り完了が要求されるときに、デッドロックが発生する。本発明の実施形態は、書き込み要求を送出するのに使用されるバーチャルチャンネル(VC)とは個別のPCIeのVCを通して読み取り完了をルーティングする技術を提供する。従って、読み取り完了がPPサブシステム202に到着することが妨げられず、デッドロックが回避される。
[0050]図4は、本発明の一実施形態によりデッドロックを回避するよう構成されたコンピュータシステム400のブロック図である。図示されたように、コンピュータシステム400は、メモリブリッジ105と一体化されたCPU102と、システムメモリ104と、周辺コンポーネントインターフェイスエクスプレス(PCIe)バス401と、PPサブシステム202とを備えている。CPU102は、メモリブリッジ105を経てシステムメモリ104に結合される。また、CPU102は、メモリブリッジ105及びPCIeバス401を経てPPサブシステム202へも結合される。CPU102は、メモリブリッジ105及びPCIeバス401を経てPPサブシステム202内のメモリユニットにアクセスすることができる。同様に、PPサブシステム202は、PCIeバス401及びメモリブリッジ105を経てシステムメモリ104にアクセスすることができる。
[0051]CPU102は、コンピュータシステム400の主プロセッサであり、読み取り要求及び書き込み要求を含む要求を、メモリブリッジ105を経てシステムメモリ104へ発行するように構成されている。また、CPU102は、メモリブリッジ105及びPCIeバス401を横切ってPPサブシステム202へも要求を発行する。
[0052]PPサブシステム202は、CPU102に対して異なる処理オペレーションを遂行するように構成されたコプロセッサである。これらの処理オペレーションは、データ圧縮及び解凍を含む。PPサブシステム202は、PCIeインターフェイス402を備え、これは、CPU102からPCIeバス401を横切って要求を受け取り、そしてその要求を処理のためにPPサブシステム202の異なるコンポーネントへルーティングするように構成される。また、PCIeインターフェイス402は、PCIeバス401を横切ってCPU102又はシステムメモリ104へも要求を送出する。PCIeインターフェイス402は、PCIeバス401の異なるバーチャルチャンネル(VC)を横切ってデータをルーティングする。これらのバーチャルチャンネルは、VC0及びVC1(図示せず)を含む。
[0053]PPサブシステムは、更に、ホスト404と、クライアント406A−406Nと、I/Oユニット205と、x−バーユニット210と、L2キャッシュ350と、PPメモリ204とを備えている。I/Oユニット205は、PPサブシステムがメモリアクセスオペレーションを遂行できるようにし、メモリマネージメントユニット(MMU)アービター408と、MMU410と、変換ルックアサイドバッファ(TLB)412と、1つ以上のイテレータ414とを備えている。
[0054]ホスト404は、CPU102がI/Oユニット205にアクセスできるようにするエンジンである。ホスト404は、I/Oユニット205内のMMUアービター408に結合される。ホスト404は、CPU102から要求を受け取り、それらの要求を、MMUアービター408を経てMMU410へ送出する。また、クライアント406A−406Nも、MMUアービター408に結合される。クライアント406A−406Nは、メモリマネージメント、グラフィックディスプレイ、インストラクションフェッチ、暗号化、テクスチャ処理、及びビデオデコーディングを含む異なるファンクションを遂行するエンジンである。クライアント406A−406Nは、I/Oユニット205へ要求を発行するように構成される。
[0055]MMUアービター408は、ホスト404と各クライアント406A−406Nとの間を仲裁し、これらのエンジンがMMU410にアクセスできるようにする。MMUアービター408は、ホスト404及びクライアント406A−406Nから受け取った要求に関連したエンジンIDであって、それら要求がCPU102から発せられたものであるかどうか指示するエンジンIDを検査する。要求がCPU102から発せられたものであることをエンジンIDが指示するときには、要求内の「特殊(special)」ビットを1に等しくすることで、要求が「特殊」とマークされる。この要求は、次いで、MMU410へルーティングされる。
[0056]MMU410は、ホスト404及びクライアント406A−406Nに対してバーチャル/物理的アドレス変換を行う。ホスト404及び/又はクライアント406A−406NがMMUアービター408を経てMMU410へ要求を送出するときに、MMU410は、要求において指定されたバーチャルアドレスを物理的アドレスへと変換する。バーチャル/物理的アドレス変換は、TLB412を使用して加速される。TLB412は、最近アドレスされたバーチャル/物理的アドレスマッピングを記憶している。受け取られたバーチャルアドレスがTLB412内に含まれる場合には、そのバーチャルアドレスに関連した物理的アドレスをTLB412から迅速に検索することができる。TLB412が、要求されたバーチャル/物理的マッピングを記憶していない場合には、MMU410は、要求されたバーチャル/物理的アドレスマッピングを含むページテーブルを検索するための読み取り要求を発行する。
[0057]別の要求の直接的な結果として発行される読み取り要求は、以後、「デリバティブ(derivative)読み取り要求」と称される。デリバティブ読み取り要求を生じさせる最初の要求が特殊とマークされる場合には、MMU410がそのデリバティブ読み取り要求を特殊とマークする。MMU410は、デリバティブ読み取り要求をPCIeインターフェイス402へ送出する。PCIeインターフェイス402は、デリバティブ要求が特殊とマークされないときにはVC0を経てデリバティブ読み取り要求をルーティングし、また、デリバティブ読み取り要求が特殊とマークされるときにはVC1を経てデリバティブ読み取り要求をルーティングする。特殊とマークされない要求から返送される読み取り完了は、VC0を経て返送されるが、特殊とマークされた要求から返送される読み取り完了は、VC1を経て返送される。システムメモリ104が、要求されたデータに関連した読み取り完了を受け取ると、最初の要求の処理が続けられる。
[0058]MMU410は、要求及び物理的アドレスをイテレータ414の1つへ送出する。イテレータ414は、物理的アドレスをxバーの生のアドレスへと変換し、そして要求及びxバーの生のアドレスをxバーユニット210へ送出する。xバーユニット210は、要求をL2キャッシュ350へルーティングする。
[0059]L2キャッシュ350は、I/Oユニット205によって要求され得るデータを記憶する低待ち時間のメモリユニットである。L2キャッシュ350は、システムメモリ104から受け取ったデータ又はL2ラッチ350に記憶されたデータをPPサブシステム202が圧縮及び解凍できるようにする圧縮及び解凍ユニット(図示せず)を備えている。また、L2キャッシュ350は、L2キャッシュ350の最近アクセスされたキャッシュラインの圧縮状態を示すタグを含むタグ記憶装置(図示せず)を備えている。
[0060]L2キャッシュ350は、L2キャッシュ350の特定キャッシュラインをターゲットとする書き込み要求を受け取ると、タグ記憶装置を使用して、そのターゲットとするキャッシュラインが圧縮されるかどうか決定する。要求によって指示されたキャッシュラインの圧縮状態をタグ記憶装置が含まないときには、L2キャッシュ350は、システムメモリ104内のバッキング記憶装置(図示せず)にアクセスするためにデリバティブ読み取り要求を発生する。L2キャッシュ250は、そのデリバティブ読み取り要求を、xバーユニット210を経てPCIeインターフェイス402へ送出する。このPCIeインターフェイス402は、デリバティブ読み取り要求が特殊とマークされたかどうか決定し、それに応じて、デリバティブ読み取り要求を、PCIeバス401を経てルーティングする。システムメモリ104がデリバティブ読み取り要求に関連した読み取り完了を返送すると、この読み取り完了は、デリバティブ読み取り要求が特殊とマークされたときにVC1を経て送出され、従って、書き込み要求がPCIeバス401に既にあるときのデッドロック状態を回避する。
[0061]ターゲットとするキャッシュラインが圧縮されたことをバッキング記憶装置が指示する場合に、L2キャッシュ350は、ターゲットとするキャッシュラインを解凍し、その解凍したデータを、書き込み要求に含まれたデータと合体し、その解凍及び合体されたデータをL2キャッシュ350のキャッシュラインへ書き戻す。また、L2キャッシュ350は、最近アクセスされたキャッシュラインの圧縮状態を含むようにタグ記憶装置を更新することもできる。一実施形態では、合体されたデータが再び圧縮されてもよい。データが解凍されると、解凍フォーマットで記憶される。タグ記憶装置は、タイルが圧縮され、ひいては、解凍を必要とするかどうか、或いは最初の解凍を行わずに直接書き込みできるかどうか指示する。
[0062]また、L2キャッシュ350は、CPU102がデータを書き込む必要のあるシステムメモリ104の圧縮領域又は「圧縮タイル」を指定する書き込み要求を受け取ることもできる。典型的に、圧縮タイルは、PPサブシステム202に発生するが、一実施形態では、CPU102が圧縮タイルを発生する。L2キャッシュ350は、書き込み要求を受け取り、デリバティブ読み取り要求を発生し、システムメモリ104にアクセスして、圧縮タイルをシステムメモリ350から読み取る。L2キャッシュ350は、xバーユニット210を経てPCIeインターフェイス402へデリバティブ読み取り要求を送出する。PCIeインターフェイス402は、デリバティブ読み取り要求が特殊とマークされたかどうか決定し、それに応じて、PCIe401を経てデリバティブ読み取り要求をルーティングする。デリバティブ読み取り要求が特殊とマークされた場合には、システムメモリ104が、デリバティブ読み取り要求に関連した読み取り完了を、VC1を経て返送し、従って、書き込み要求がPCIeバス401において保留されているときに発生し得るデッドロック状態を回避する。L2キャッシュ350は、デリバティブ要求から返送される圧縮データを受け取り、その圧縮データを解凍し、その解凍されたデータを書き込みデータと合体し、その合体されたデータを圧縮し、そしてその合体され圧縮されたデータをシステムメモリ104へ書き戻す。
[0063]従って、CPU102によって発行された要求を特殊とマークし、また、それらの要求に応答して発生されたデリバティブ読み取り要求を特殊とマークすることで、デッドロックを回避することができる。というのは、特殊とマークされた要求に関連した読み取り完了が、VC0ではなく、VC1を経て送出されるからである。また、それらの要求は、「緩和型(relaxed)順序付け」とマークされてもよいし、或いは順序付けルールに関与せずに読み取り完了を返送できることを指示する標準的(非PCIe)バスプロトコル技術を使用する他の仕方でマークされてもよい。この技術は、デッドロックを生じ得る特定の環境を参照して上述したが、当業者であれば、CPU102によって発行された要求を特殊とマークし、また、それらの要求に応答して発生されたデリバティブ読み取り要求を特殊とマークすることで、PCIeバス401に保留中の書き込み要求があるときにデッドロックを回避できることが理解されよう。
[0064]図5は、本発明の一実施形態によりデッドロックを回避するための方法ステップのフローチャートである。当業者であれば、図1から4のシステムに関連して方法500を説明するが、この方法ステップを任意の順序で遂行するように構成された任意のシステムも本発明の範囲内であることが理解されよう。
[0065]図示されたように、方法500は、ステップ502で始まり、MMUアービター408がホスト404又はクライアント406A−406Nの1つから要求を受け取る。この要求は、読み取り要求又は書き込み要求である。更に、この要求は、L2キャッシュ350、PPメモリ204又はシステムメモリ104をターゲットとするものである。ステップ504では、MMUアービター408は、その要求に関連したエンジンIDを検査する。エンジンIDは、要求の起点を指示する。例えば、要求は、クライアント406A−406Nの1つから送出されたものであるか、或いはCPU102からホスト404を経て送出されたものである。ステップ506では、MMUアービター410は、CPU102が要求を送出したかどうか決定する。CPU102が要求を送出したことをエンジンIDが指示する場合には、方法500は、ステップ508へ進む。ステップ506において、CPU102が要求を送出していないことをMMUアービター410が決定すると、方法500は、ステップ518へ進む。
[0066]ステップ508において、MMUアービター408は、要求を特殊とマークする。MMUアービター408は、要求がCPU102から送出されたことを指示するために要求におけるビットを“1”にセットするように構成される。ステップ510において、要求は、デリバティブ読み取り要求を発生させる。要求は、異なる環境のもとでデリバティブ読み取り要求を発生させる。例えば、MMU410がバーチャル/物理的アドレス変換を遂行できるようにシステムメモリ104の読み取りが要求されるときに、MMU410は、システムメモリ104をターゲットとするデリバティブ読み取り要求を発生する。或いはまた、L2キャッシュ350がキャッシュラインの圧縮状態を決定できるようにシステムメモリ104の読み取りが要求されるときは、L2キャッシュ350は、システムメモリ104をターゲットとするデリバティブ読み取り要求を発生する。最初の要求がデリバティブ読み取り要求を発生させる種々の他のシナリオも考えられる。
[0067]ステップ512において、デリバティブ読み取り要求が特殊とマークされる。MMU410がデリバティブ読み取り要求を発生するときには、MMU410が、デリバティブ読み取り要求を特殊とマークする。L2キャッシュ250がデリバティブ読み取り要求を発生するときには、L2キャッシュ350がデリバティブ読み取り要求を特殊とマークする。PPサブシステム202の別のコンポーネントがデリバティブ読み取り要求を発生するときには、そのコンポーネントがデリバティブ読み取り要求を特殊とマークする。ステップ514において、PCIeインターフェイス402は、要求を受け取って検査する。要求は、デリバティブ読み取り要求でもよいし、或いは異なる要求でもよい。
[0068]ステップ516において、PCIeインターフェイス402は、要求が特殊とマークされるかどうか決定する。要求が特殊とマークされない場合には、方法500は、ステップ518へ進み、PCIeインターフェイス402は、要求及び要求に関連した読み取り完了を、PCIeバス401のVC0を横切ってルーティングする。要求が特殊とマークされる場合には、方法500は、ステップ520へ進み、PCIeインターフェイス402は、要求及び要求に関連した読み取り完了を、PCIeバス401のVC1を横切ってルーティングする。次いで、この方法は、終了となる。
[0069]要するに、パラレル処理ユニット(PPU)は、中央処理ユニット(CPU)から受け取った要求を「特殊」とマークし、その要求に応答して発生されるデリバティブ読み取り要求も特殊とマークされ、従って、周辺コンポーネントインターフェイスエクスプレス(PCIe)バスの二次バーチャルチャンネルを経てルーティングされる。PPUは、特殊とマークされた要求を、周辺コンポーネントインターフェイスエクスプレス(PCIe)バスのバーチャルチャンネル(VC)1を横切って送出する。特殊とマークされた要求が読み取り完了を発生する場合には、PCIeバスのVC1を横切って読み取り完了が返送される。
[0070]特殊とマークされた要求から返送される読み取り完了は、書き込み要求がVC0に既に存在するときにデッドロックを生じることがない。というのは、特殊とマークされた要求に関連した読み取り完了は、異なるバーチャルチャンネルを経て送出されるからである。
[0071]従って、本発明の実施形態は、CPU102によりPPサブシステム202へ発行されてデッドロックを生じることになる幾つかの要求(例えば、読み取り及び書き込み要求)を、ファブリックを通して伝播する状態ビットを使用して識別し及びマークすると共に、その要求によって生じるデリバティブトランザクションもその状態ビットでマークするための技術を提供する。他の実施形態では、標準バスインターフェイス定義メカニズム(例えば、「緩和型順序付け」)をデッドロック回避に使用することができる。
[0072]PPサブシステム202によりシステムメモリ104へ送出される幾つかのトランザクションは、デッドロックを生じることがなく、従って、第2のバーチャルチャンネルを経て搬送されないことに注意されたい。例えば、同期プリミティブとして使用されるか、さもなければ、読み取り完了が書き込み要求をパスしない順序付けルールに依存するトランザクションは、第1のバーチャルチャンネルを経て送出される。例えば、PPメモリ204へのCPU102の書き込みが完了したときを検出するためにPPサブシステム202によってセマフォ取得が発行されたときには、読み取り完了は、それ以前の全てのCPU開始書き込みトランザクションがコヒレンシー点に到達することを保証する。
[0073]本発明の一実施形態は、コンピュータシステムに使用するためのプログラム製品として具現化することができる。このプログラム製品のプログラム(1つ又は複数)は、(ここに述べる方法を含めて)実施形態のファンクションを定義し、種々のコンピュータ読み取り可能な記憶媒体にこれを含ませることができる。ここに例示するコンピュータ読み取り可能な記憶媒体は、(i)情報が永久的に記憶される書き込み不能の記憶媒体(例えば、コンピュータ内のリードオンリメモリ装置、例えば、CD−ROMドライブにより読み取り可能なCD−ROMディスク、フラッシュメモリ、ROMチップ、又は任意の形式のソリッドステート不揮発性半導体メモリ)、及び(ii)変更可能な情報が記憶される書き込み可能な記憶媒体(例えば、ディスケットドライブ又はハードディスクドライブ内のフロッピーディスク、又は任意の形式のソリッドステートランダムアクセス半導体メモリ)を含むが、これらに限定されない。
[0074]特定の実施形態を参照して本発明を上述した。しかしながら、当業者であれば、特許請求の範囲に記載された本発明の広い精神及び範囲から逸脱せずに種々の変更や修正がなされ得ることが理解されよう。従って、前記説明及び添付図面は、単なる例示に過ぎず、それに限定されるものではない。
100・・・コンピュータシステム、102・・・中央処理ユニット(CPU)、103・・・装置ドライバ、104・・・システムメモリ、105・・・メモリブリッジ、106・・・通信経路、107・・・I/Oブリッジ、108・・・ユーザ入力装置、110・・・ディスプレイ装置、112・・・パラレル処理サブシステム、113・・・通信経路、116・・・スイッチ、118・・・ネットワークアダプタ、120、121・・・アドインカード、200・・・ワーク分配ユニット、202・・・パラレル処理ユニット(PPU)、204・・・パラレル処理(PP)メモリ、205・・・I/Oユニット、206・・・ホストインターフェイス、208・・・一般的処理クラスター(GPC)、210・・・クロスバーユニット、212・・・フロントエンド、214・・・メモリインターフェイス、230・・・処理クラスターアレイ、305・・・パイプラインマネージャー、310・・・SPM、315・・・テクスチャユニット、320・・・L1キャッシュ、325・・・カラープレROP、330・・・ワーク分配クロスバー、350・・・L2キャッシュ、355・・・フレームバッファ(FB)、360・・・ラスタオペレーションユニット(ROP)、400・・・コンピュータシステム、401・・・PCIeバス、402・・・PCIeインターフェイス、404・・・ホスト、406A・・・クライアント、406N・・クライアント、408・・・MMUアービター、410・・・MMU、412・・・TLB、414・・・イテレータ

Claims (10)

  1. 第1処理ユニットと、
    第2処理ユニットと、
    メモリブリッジと、
    システムメモリと、
    前記第2処理ユニットを、第1バーチャルチャンネル及び第2バーチャルチャンネルを経て前記第1処理ユニット、前記メモリブリッジ及び前記システムメモリに接続するバスとを備え、
    前記第2処理ユニットは、(i)前記第1処理ユニットから前記第1バーチャルチャンネルを経て読み取り要求又は書き込み要求を受け取り、(ii)前記読み取り要求又は前記書き込み要求を処理している間に発生されるデリバティブ読み取り要求を、該読み取り要求又は該書き込み要求が前記第1処理ユニットにより発行されたものであることに基づき特殊とマークし、且つ(iii)特殊とマークされた前記デリバティブ読み取り要求を、前記第2バーチャルチャンネルを経て送出するように構成されたバスインターフェイスユニットを含む、コンピュータシステム。
  2. 前記第2処理ユニットは、変換ルックアサイドバッファを有するメモリマネージメントユニットを更に含み、このメモリマネージメントユニットは、前記変換ルックアサイドバッファにミスが発生したときに前記デリバティブ読み取り要求を発生する、請求項1に記載のコンピュータシステム。
  3. 前記第2処理ユニットのためのローカルメモリを更に備え、
    前記第2処理ユニットは、キャッシュメモリユニットを通して前記ローカルメモリに接続され、更に、前記キャッシュメモリユニットは、前記デリバティブ読み取り要求を発生する、請求項1に記載のコンピュータシステム。
  4. 前記キャッシュメモリユニットは、前記読み取り要求又は前記書き込み要求が、前記キャッシュメモリユニットに記憶されていない圧縮状態情報にアクセスするときに、前記デリバティブ読み取り要求を発生する、請求項3に記載のコンピュータシステム。
  5. 前記キャッシュメモリユニットは、前記読み取り要求又は前記書き込み要求が前記システムメモリの圧縮領域からのデータにアクセスするときに前記デリバティブ読み取り要求を発生する、請求項3に記載のコンピュータシステム。
  6. 前記第2処理ユニットは、複数のクライアントから読み取り要求又は書き込み要求を受け取り、前記読み取り要求又は前記書き込み要求が前記第1処理ユニットから受け取られた場合に前記読み取り要求又は前記書き込み要求を特殊とマークするように構成されたメモリマネージメントユニットアービターを更に備え
    デリバティブ読み取り要求が、特殊とマークされた前記読み取り要求又は前記書き込み要求に応じて発生されたものである場合に、該デリバティブ読み取り要求を特殊とマークする、
    請求項1に記載のコンピュータシステム。
  7. 前記クライアントの各々は、クライアント識別子を有し、前記メモリマネージメントユニットアービターは、前記読み取り要求又は前記書き込み要求の各々に関連したクライアント識別子を検査するように構成される、請求項6に記載のコンピュータシステム。
  8. 前記第1処理ユニットは中央処理ユニットであり、前記第2処理ユニットはパラレル処理ユニットである、請求項1に記載のコンピュータシステム。
  9. 第1処理ユニットと、
    第2処理ユニットと、
    メモリブリッジと、
    システムメモリと、
    前記第2処理ユニットを前記第1処理ユニット、前記メモリブリッジ及び前記システムメモリに接続するバスとを有するコンピュータシステムにおいて、前記第2処理ユニットで読み取り要求又は書き込み要求を処理する方法であって、
    前記バスの第1バーチャルチャンネルを経て前記第2処理ユニットで読み取り要求又は書き込み要求を受け取るステップと、
    前記読み取り要求又は前記書き込み要求に応じた1つ以上のデリバティブ読み取り要求を前記第2処理ユニットにおいて発生するステップと、
    該読み取り要求又は該書き込み要求が前記第1処理ユニットにより発行されたものであることに基づき、前記デリバティブ読み取り要求を特殊とマークするステップと
    前記バスの第2バーチャルチャンネルを経て、特殊とマークされた前記デリバティブ読み取り要求を前記システムメモリへ送出するステップと、
    前記バスの前記第2バーチャルチャンネルを経て前記デリバティブ読み取り要求の完了を受け取るステップと、
    受け取られたオリジナルの前記読み取り要求又は前記書き込み要求を完了するステップと、を備える方法。
  10. 前記読み取り要求又は前記書き込み要求を処理している間で、前記システムメモリの圧縮領域がアクセスされたときに、前記デリバティブ読み取り要求が発生される、請求項9に記載の方法。
JP2009275656A 2008-12-12 2009-12-03 Cpuトラフィックを特殊とマークすることによるデッドロックの回避 Active JP5127815B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/334,394 US8392667B2 (en) 2008-12-12 2008-12-12 Deadlock avoidance by marking CPU traffic as special
US12/334,394 2008-12-12

Publications (2)

Publication Number Publication Date
JP2010140480A JP2010140480A (ja) 2010-06-24
JP5127815B2 true JP5127815B2 (ja) 2013-01-23

Family

ID=41572725

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009275656A Active JP5127815B2 (ja) 2008-12-12 2009-12-03 Cpuトラフィックを特殊とマークすることによるデッドロックの回避

Country Status (6)

Country Link
US (1) US8392667B2 (ja)
JP (1) JP5127815B2 (ja)
KR (1) KR101086507B1 (ja)
CN (2) CN101901198A (ja)
DE (1) DE102009047518B4 (ja)
GB (1) GB2466106B (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8539130B2 (en) * 2009-09-24 2013-09-17 Nvidia Corporation Virtual channels for effective packet transfer
US8789170B2 (en) * 2010-09-24 2014-07-22 Intel Corporation Method for enforcing resource access control in computer systems
CN102497527B (zh) * 2011-12-16 2013-11-27 杭州海康威视数字技术股份有限公司 多处理器视频处理系统及其中的视频图像同步传输与显示方法
US9324126B2 (en) * 2012-03-20 2016-04-26 Massively Parallel Technologies, Inc. Automated latency management and cross-communication exchange conversion
US9075952B2 (en) * 2013-01-17 2015-07-07 Intel Corporation Controlling bandwidth allocations in a system on a chip (SoC)
US9229688B2 (en) 2013-03-14 2016-01-05 Massively Parallel Technologies, Inc. Automated latency management and cross-communication exchange conversion
CN103532876A (zh) * 2013-10-23 2014-01-22 中国科学院声学研究所 数据流的处理方法与系统
US10019375B2 (en) 2016-03-02 2018-07-10 Toshiba Memory Corporation Cache device and semiconductor device including a tag memory storing absence, compression and write state information
US9996471B2 (en) * 2016-06-28 2018-06-12 Arm Limited Cache with compressed data and tag
CN107656884A (zh) * 2016-07-25 2018-02-02 中兴通讯股份有限公司 一种数据处理方法和系统,外围组件快速互连设备及主机
JP2019061631A (ja) * 2017-09-28 2019-04-18 ルネサスエレクトロニクス株式会社 半導体装置、及びメモリアクセス方法
CN109343984B (zh) * 2018-10-19 2020-05-19 珠海金山网络游戏科技有限公司 数据处理方法、系统、计算设备及存储介质
KR102588143B1 (ko) 2018-11-07 2023-10-13 삼성전자주식회사 메모리 컨트롤러를 포함하는 스토리지 장치 및 메모리를 포함하는 전자 시스템을 동작시키는 방법
CN111382849B (zh) * 2018-12-28 2022-11-22 上海寒武纪信息科技有限公司 数据压缩方法、处理器、数据压缩装置及存储介质
US11418455B2 (en) 2020-08-31 2022-08-16 Micron Technology, Inc. Transparent packet splitting and recombining
US11360920B2 (en) * 2020-08-31 2022-06-14 Micron Technology, Inc. Mapping high-speed, point-to-point interface channels to packet virtual channels
US11296995B2 (en) 2020-08-31 2022-04-05 Micron Technology, Inc. Reduced sized encoding of packet length field
US11539623B2 (en) 2020-08-31 2022-12-27 Micron Technology, Inc. Single field for encoding multiple elements
US11412075B2 (en) 2020-08-31 2022-08-09 Micron Technology, Inc. Multiple protocol header processing

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5696927A (en) * 1995-12-21 1997-12-09 Advanced Micro Devices, Inc. Memory paging system and method including compressed page mapping hierarchy
US6104417A (en) 1996-09-13 2000-08-15 Silicon Graphics, Inc. Unified memory computer architecture with dynamic graphics memory allocation
US6026451A (en) * 1997-12-22 2000-02-15 Intel Corporation System for controlling a dispatch of requested data packets by generating size signals for buffer space availability and preventing a dispatch prior to a data request granted signal asserted
US6349372B1 (en) 1999-05-19 2002-02-19 International Business Machines Corporation Virtual uncompressed cache for compressed main memory
US6950438B1 (en) 1999-09-17 2005-09-27 Advanced Micro Devices, Inc. System and method for implementing a separate virtual channel for posted requests in a multiprocessor computer system
WO2002015470A2 (en) 2000-08-17 2002-02-21 Advanced Micro Devices, Inc. System and method for separate virtual channels for posted requests in a multiprocessor system
US6574708B2 (en) * 2001-05-18 2003-06-03 Broadcom Corporation Source controlled cache allocation
US6807599B2 (en) * 2001-10-15 2004-10-19 Advanced Micro Devices, Inc. Computer system I/O node for connection serially in a chain to a host
US20050237329A1 (en) * 2004-04-27 2005-10-27 Nvidia Corporation GPU rendering to system memory
US7165131B2 (en) 2004-04-27 2007-01-16 Intel Corporation Separating transactions into different virtual channels
US7748001B2 (en) * 2004-09-23 2010-06-29 Intel Corporation Multi-thread processing system for detecting and handling live-lock conditions by arbitrating livelock priority of logical processors based on a predertermined amount of time
US7499452B2 (en) * 2004-12-28 2009-03-03 International Business Machines Corporation Self-healing link sequence counts within a circular buffer
CN100543770C (zh) * 2006-07-31 2009-09-23 辉达公司 用于gpu中的页映射的专门机制
US20080028181A1 (en) 2006-07-31 2008-01-31 Nvidia Corporation Dedicated mechanism for page mapping in a gpu

Also Published As

Publication number Publication date
CN105302524A (zh) 2016-02-03
GB0920727D0 (en) 2010-01-13
JP2010140480A (ja) 2010-06-24
DE102009047518A1 (de) 2010-07-08
KR101086507B1 (ko) 2011-11-23
GB2466106B (en) 2011-03-30
GB2466106A (en) 2010-06-16
US8392667B2 (en) 2013-03-05
KR20100068225A (ko) 2010-06-22
US20100153658A1 (en) 2010-06-17
CN101901198A (zh) 2010-12-01
DE102009047518B4 (de) 2014-07-03

Similar Documents

Publication Publication Date Title
JP5127815B2 (ja) Cpuトラフィックを特殊とマークすることによるデッドロックの回避
JP5142299B2 (ja) 圧縮状態ビットキャッシュ及びバッキング記憶装置
US8938598B2 (en) Facilitating simultaneous submission to a multi-producer queue by multiple threads with inner and outer pointers
US8868838B1 (en) Multi-class data cache policies
JP5303787B2 (ja) 単一パステセレーション
US9589310B2 (en) Methods to facilitate primitive batching
US8760455B2 (en) Restart index that sets a topology
US8595437B1 (en) Compression status bit cache with deterministic isochronous latency
US8458440B2 (en) Deferred complete virtual address computation for local memory space requests
US8624910B2 (en) Register indexed sampler for texture opcodes
US8427493B2 (en) Draw commands with built-in begin/end
US8564616B1 (en) Cull before vertex attribute fetch and vertex lighting
US20110081100A1 (en) Using a pixel offset for evaluating a plane equation
US9916680B2 (en) Low-power processing in depth read-only operating regimes
US8570916B1 (en) Just in time distributed transaction crediting
US8947444B1 (en) Distributed vertex attribute fetch
US9013498B1 (en) Determining a working set of texture maps
US8624916B2 (en) Processing global atomic operations using the bending unit datapath
US8489839B1 (en) Increasing memory capacity of a frame buffer via a memory splitter chip
US9401004B2 (en) State shadowing to support a multi-threaded driver environment
US8704835B1 (en) Distributed clip, cull, viewport transform and perspective correction
US20140136793A1 (en) System and method for reduced cache mode
US9147224B2 (en) Method for handling state transitions in a network of virtual processing nodes
US8976185B2 (en) Method for handling state transitions in a network of virtual processing nodes
US8948167B2 (en) System and method for using domains to identify dependent and independent operations

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120402

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120807

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120912

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121002

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121030

R150 Certificate of patent or registration of utility model

Ref document number: 5127815

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151109

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250