JP2008192164A - グラフィカル画像生成分析方法 - Google Patents

グラフィカル画像生成分析方法 Download PDF

Info

Publication number
JP2008192164A
JP2008192164A JP2008056063A JP2008056063A JP2008192164A JP 2008192164 A JP2008192164 A JP 2008192164A JP 2008056063 A JP2008056063 A JP 2008056063A JP 2008056063 A JP2008056063 A JP 2008056063A JP 2008192164 A JP2008192164 A JP 2008192164A
Authority
JP
Japan
Prior art keywords
state
graphical
primitive
represented
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008056063A
Other languages
English (en)
Inventor
M Brown John
ジョン・エム・ブラウン
Mehrotra Gautam
ガウタム・メロトラ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HP Inc
Original Assignee
Hewlett Packard Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Co filed Critical Hewlett Packard Co
Publication of JP2008192164A publication Critical patent/JP2008192164A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Debugging And Monitoring (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】アプリケーションプログラムの画像生成をデバッグ、チューニングまたは最適化するグラフィックスルーチンのライブラリの使用法を分析するための、改善された方法を提供すること。
【解決手段】命令シーケンスによって表現されるプリミティブを、これらのプリミティブが表現される合成グラフィカル状態と共に識別するステップを含み、さらに、命令シーケンスの特徴を表す信号、具体的にはその命令シーケンスがプリミティブを表現する合成グラフィカル状態を示し、それらの合成グラフィカル状態でどのプリミティブが表現されるかを集計して示す信号、を生成するステップを含む。
【選択図】図2

Description

本発明はコンピュータグラフィックスに係り、とりわけグラフィカル画像の生成を分析する方法に関する。本発明は、例えば3次元グラフィックスソフトウェアのチューニングおよび最適化を容易にするために適用される。
コンピュータは、グラフィカル画像を生成するために長い間使用されてきた。初期のコンピュータシステムは2次元のみの画像しか生成することができなかったが、自動製図や地図作製などではすぐに受け入れられた。1970年代中頃までに、3次元グラフィックスシステムが市販されるようになった。このシステムは非常に高価になる傾向があり、専用のハードウェアおよびカスタムソフトウェアを必要とした。
何年もたち、標準化されたグラフィカルプログラミングインタフェースおよびライブラリは市場で容易に手に入れることができるようになった。現在では、「OpenGL」仕様に従うものなどの業界標準グラフィックスライブラリに備えられたサブルーチン(または関数)を呼び出すことにより、アプリケーションプログラムを書込み3次元画像を生成することができる。比較的容易にグラフィックスを生成できることにより、例えばビジネス、技術および科学シミュレーション、ユーザインタフェースや、アニメーションなどのグラフィックスアプリケーションが増加した。
グラフィカル画像、特に3次元画像のコンピュータによる生成は、集中的にコンピュータを使用するタスクである。物体の縁部のみを描写するワイヤフレーム画像の場合でも、例えば物体の遠近図を与え、見る人の視点からそれを表示するためには多数の数学的計算が必要とされる。物体を立体として描写する場合、すなわち(それらの縁部のみでなく)それらの表面を表現する場合には、計算の数は劇的に増加する。これらの例では、システムは、物体およびその表面の隠れた表面、色、陰影、質感、照度、およびその他の属性を考慮に入れなければならない。
3次元立体を描写する一般的な技術は、直線、三角形、四角形やその他の多角形など、「プリミティブ」な幾何形状から複雑な表面を構成することによるものである。例えば机の画像は、並んで配置され、個別に質感を出して実際の机に対応する表面を表す数千の小さな線分および三角形の内、数十または数百を描写することにより表現することができる。
通常の光景に必要とされるプリミティブの数が非常に多いため、この表現処理のデバッグまたはその他の分析が非常に困難になる可能性がある。ある光景を表現するのに時間が長くかかりすぎる場合、プログラマは基礎となるアプリケーションプログラムがグラフィックスライブラリに対して行った全ての呼出しをトラックすることを試みるであろう。あいにく、光景描写中に行われたグラフィックス呼出しの数はプリミティブ自体の数の数桁倍になる可能性がある。このような多くの呼出しを意味深長にトラックすることは、必要になる場合もあるが、実質的に不可能となることがある。
従来技術では、この点に関連していくつかの補助手段を提供している。従来のいくつかのグラフィックスパッケージでは、表現されるプリミティブのタイプによってグラフィックスの使用法をカタログすることができる。このような分析により、例えば、机を描写するグラフィックスプログラムが3万本の線分プリミティブおよび2万5千の三角形プリミティブを表現することが分かる。これで十分な場合もあるが、このような分析は、プログラマがグラフィックスプログラムを質的および量的に分析することを可能にするのに適当ではない。
なお、本発明の背景技術の一部を開示する特許文献、非特許文献を下記して参考に供する。
特開平06−242771号公報 特開平07−262405号公報 特開平07−282290号公報 木村浩三、外6名,画像生成用マルチスレッド・プロセッサのマイクロ・アーキテクチャ,情報処理学会研究報告 94−ARC−104(94−OS−62),日本,社団法人情報処理学会,1994年1月28日,Vol.94 No.13,P97〜P104
本発明の目的は、コンピュータグラフィックスアプリケーションの品質および性能の改善を容易にすることである。さらに具体的な目的は、このようなアプリケーションプログラムの画像生成の特徴を決定する方法を提供することである。
本発明の関連する目的は、画像の生成をデバッグ、チューニングまたは最適化するグラフィックスルーチンのライブラリの使用法を分析するための、改善された方法を提供することである。
さらに別の目的は、実行中のコンピュータプログラム、およびソースコードフォーマットのコンピュータプログラムの分析に使用する上記のような方法を提供することである。
本発明のさらに別の目的は、3次元画像を生成するコンピュータプログラムの分析に使用する上記のような方法を提供することである。
前述の目的は、表現される状態に従いプリミティブをカタログすることによってグラフィカル画像の生成を分析する方法を提供する本発明によって達成される。
具体的に言うと、本発明は一実施形態で、複数のプリミティブを含むグラフィカル画像を生成するタイプのコンピュータ命令シーケンス、例えばコンピュータプログラムの特徴を決定する方法を提供する。この方法は、命令シーケンスによって表現されるプリミティブを、それらのプリミティブが表現されるグラフィカル状態(なお、混同の恐れがないときは単に「状態」とも称する。)と共に識別するステップを含む。これに関して、合成グラフィカル状態とは、プリミティブが表現されるサブステート(substates)の集合を指す。いくつかの例では、サブステートの照度、陰影、質感などの組み合わせを含む。
この方法はさらに、命令シーケンスの特徴を表す信号、具体的にはその命令シーケンスがプリミティブを表現する合成グラフィカル状態を示し、それらの状態でどのプリミティブが表現されるかを示す信号を生成するステップを含む。この信号は、デジタルデータプロセッサの、例えばランダムアクセスメモリ(RAM)やディスクドライブなどの記憶手段に含まれたレコードまたはデータ構造に記憶することができる。これを使用して、例えばモニタまたはプリンタ上に表示を生成することもできる。
関連する形態で、本発明は、画像生成中に切り換わる状態の量を定める方法を提供する。本発明のこの形態は、プリミティブが表現される各状態について、異なる状態でプリミティブを表現した後の状態で、プリミティブが表現される回数をカウントするステップをさらに含む上述の方法を提供する。各カウントは、そのそれぞれの状態と共に前述の信号中に示すことができる。
さらに別の形態で、本発明は、合成グラフィカル状態を設定する冗長の量を定めるステップを含む方法を提供する。本発明のこの形態は、現在の状態で既に規定されたサブステートを設定する試みがなされた回数を、各合成グラフィカル状態に対してカウントするステップをさらに含む上述の方法を提供する。本発明のこの形態でも、それらの「冗長」カウントを前述の信号中に含むようになっている。
別の形態で、本発明は、(i)プリミティブを表現するプリミティブ描写命令、および(ii)合成グラフィカル状態を規定するサブステートを設定する状態設定命令を実行することによってグラフィカル画像を生成するタイプのコンピュータ命令シーケンスを分析する方法を提供する。この方法は、状態設定命令に応答して現在の合成グラフィカル状態、すなわち現在の全てのサブステートセットによって規定される合成状態を識別するステップを含む。これはさらに、プリミティブ描写命令に応答して、現在の合成グラフィカル状態およびそのプリミティブ描写命令によって表現されるプリミティブを識別する、例えばデータ構造などの記憶レコードを生成するステップを含む。プリミティブが既に現在の状態と同様の合成状態で表現されている場合には、その状態に関連するレコードにアクセスし、現在のプリミティブ描写命令によって表現されているプリミティブの識別を含むように更新する。この方法によって生成される信号は、プリミティブをそれらが表現された状態によって識別する。
本発明の別の形態は、例えばオブジェクトコードなどの実行可能な形態の命令シーケンスをデジタルデータプロセッサ上で実行する上述の方法を提供する。プログラムによる、少なくとも選択されたサブルーチンおよび関数の呼出しは、プリミティブ設定命令および状態設定命令を識別するために(例えば「シェル」または「スタブ(stub)」手続きによって)インタセプト(intercept)される。本発明の代替の形態では、これらの命令はソースコード形態の命令シーケンスを解析するインタプリタ(interpreter)によって識別される。
上述のように本発明によれば、アプリケーションプログラムの動作とグラフィックスライブラリの相互作用に対するはるかに大きな洞察を、グラフィックスのプログラマに与えることができる。したがって、プログラマはデバッグ、チューニング、および/または最適化などに関するプログラムの動作をより容易に理解することができる。
本発明の以上およびその他の形態は、図面および以下の説明において明らかである。図面を参照することによって、本発明をより完全に理解することができる。
図1は、本発明を実施するために使用するタイプのデジタルデータ処理システム5を示す図である。デジタルデータ処理システム5は、バックプレーンまたはバス18により相互接続された中央処理装置(CPU)12、ランダムアクセスメモリ(RAM)14、および入出力コントローラ(I/O)16を含むデジタルデータプロセッサ10を含む。キーボード22および指示装置24は、データおよび制御情報を入力するために、その他の入力装置(図示せず)とともに入出力コントローラ16を介してデジタルデータプロセッサ10に結合される。デジタルデータプロセッサ10は、情報にアクセスし記憶するために、記憶装置であるディスクドライブ26およびその他の静的記憶装置(図示せず)にも接続される。モニタ28およびその他の出力装置(図示せず)もまた、3次元グラフィックスなどの情報を表示するために入出力コントローラ16に結合される。
構成要素10〜28を含む図示のデジタルデータ処理システム5は、既知の任意の汎用または専用コンピュータシステムにすることができる。それらは、例えば本発明の譲受人が利用できるタイプであり、改善したグラフィックス生成の分析に関する本発明の技術に従ってプログラムされ、および/または動作する3次元グラフィックスが可能なワークステーションであることが好ましい。
図2を参照すると、本発明の一実施形態で、図示のデジタルデータ処理システム5が、ユーザから受信した命令に例えば入力装置であるキーボード22および/または指示装置24を介して応答し、例えば机の3次元画像を生成するなどの特定のグラフィックスタスクを実行するアプリケーションプログラムを実行する(30)様子が示されている。出力装置であるモニタ28でのグラフィックスの生成を容易にするために、アプリケーションプログラム30はグラフィックスライブラリ32に含まれる手続きに対する呼出しを生成する。これらの呼出しの内少なくとも選択した呼出しは本発明によって分析およびカタログするためにインタセプタ(interceptor)31により識別され、その他の呼出しは分析されずに直接グラフィックスライブラリ32に渡される。
グラフィックスライブラリ32はデータ構造を初期化し、表現する物体の状態をトラックし、グラフィックスを表示するようハードウェア装置ドライバ34にコマンドを発行する。これは、データ構造を維持し、グラフィックスを表示するコマンド(通常はハードウェアとは無関係)を発行する、例えば性質が手続き型やオブジェクト指向型である手続きおよびデータ構造の任意のセットである。このライブラリは、OpenGLアプリケーションプログラムインタフェース(API)仕様など、任意の業界標準に従って動作することができる。また、任意ベンダー特有の標準または特別の標準に従って動作することもできる。本発明の一実施形態ではグラフィックスライブラリ32が存在する(かつこれを有利に利用する)ものと想定するが、本発明のその他の実施形態ではこの要素を必要としない。
ハードウェア装置ドライバ34は、これらのコマンドをハードウェアに特定の命令として解釈および再フォーマットし、これをモニタ28、プリンタまたはその他の出力装置に送信して所望のグラフィック画像を表示する。これは、市販またはその他の方法で入手可能な、ハードウェア固有コマンドを出力装置に駆動する任意のソフトウェアドライバである。図示の実施形態ではハードウェア装置ドライバ34を含むが、本発明のその他の実施形態ではこれを含まない。
アプリケーションプログラム30は、オブジェクトコードまたはその他のデジタルデータプロセッサ10上で実行される命令を表す。例えばこれは、机など特定の物体の画像を作成および処理するための専用コンピュータプログラムにすることができる。これはまた、別の例として、計算機援用設計(CAD)、またはその他のユーザが発行したコマンドに応答して物体の画像を生成できる汎用グラフィックスプログラムにすることもできる。
図2の実施形態では、インタセプタ31は、グラフィックスライブラリ32へのアプリケーションプログラム30によってなされ、またプリミティブの描写およびそれらの状態設定を行う関数または手続き呼出し(まとめて「手続き呼出し」とする)を識別する。OpenGLと互換性のあるライブラリとともに使用する好ましい実施形態では、プリミティブ描写の呼出しは関数glBegin、glEnd、glVertexなどを含み、状態設定呼出しは特に、glCullFace、glDepthFunc、glDisable、glEnable、glFrustum、glLightModel、glLight、glLineWidth、glPointSize、glPolygonMode、glRenderMode、glShadeModelなどの関数を含む。glColorやglLoadMatrixなどの属性設定呼出しは、状態設定呼出しと同様に扱うことができることが理解されるであろう。
その他の業界標準または企業標準と互換性のあるライブラリとともに使用する実施形態では、インタセプタ31はプリミティブを描写しそれらの状態を設定するアナログ呼出しを識別することを当業者は理解するであろう。インタセプタ31はまた、グラフィックスライブラリ32を利用しない、すなわちアプリケーションプログラム30が直接ハードウェア装置ドライバ34または出力装置を呼び出す実施形態では、アナログ呼出しまたは命令(すなわちプリミティブを描写する、または状態を設定する命令)も識別する。
インタセプタ31は、非侵害的に、すなわちアプリケーションプログラム30またはグラフィックスライブラリ32のソースコードに影響を与えることなく、ライブラリ呼出し(またはその他の呼出しおよび命令)を識別することが好ましい。
図2の実施形態では、分析すべき呼出しと同じ名前およびパラメータリストを有する「シェル」または「スタブ(stub)」手続きとしてインタセプタ31を実施することにより、このことが認識される。シェル手続きは、例えばグラフィックスライブラリ32にリンクされる前にアプリケーションプログラム30にリンクされる動的リンクライブラリ(DLL)として実施することができる。もちろん、当技術分野で一般に既知の任意数のその他の方法でシェル手続きをアプリケーションプログラム30にリンクできることを当業者なら理解するであろう。
当業者なら、アプリケーションプログラム30からグラフィックスライブラリ32になされた呼出しをその他の方法でも識別できることを理解するであろう。例えば、図3に示すように、インタプリタ(interpreter)31'を使用して、例えばアプリケーションプログラム30をソースコードフォーマットで表すソースコード30'のファイルに含まれるソースコード流を解析する。
このようなソースコードファイルは、本発明と同時に出願され、同時係属であり共通の譲受人に譲渡され、その教示が参照により本明細書に組み込まれる、発明者John M.Brown、Don W.Dyer、Gautam MehrotraおよびCarol L.Langによる米国特許出願に開示のタイプの方法を使用して生成されるタイプにすることができる。この出願の教示によれば、コンピュータプログラムを実行することによって発行される呼出しに対応するソースコード命令は、ファイルに記憶される。そのソースコードファイルはファイルの役目を果たし、その呼出しをインタプリタ31'によって識別することができる。別の方法として、そのソースコードファイルをデジタルデータプロセッサ10上でコンパイルおよび実行し、その呼出しをインタセプタ31によって識別することもできる。
当技術分野で一般に使用されるタイプのインタプリタ31'は、従来の方法でソースコードを解析し、その中の状態設定およびプリミティブ描写命令を識別する。従って、インタセプタ31はアプリケーションプログラム30の実行によって発行された呼出しをインタセプトすることを介してそれらの命令を識別するが、インタプリタ31'は対応するソースコード30'を解析することを介してそれらの命令を識別する。
上記に加えて、本発明のさらに別の実施形態では、各呼出しが行われるごとに識別する出力信号を生成するプログラミングステートメントを直接アプリケーションプログラム30またはグラフィックスライブラリ32に組み込むなど、プリミティブ描写命令および状態設定命令を識別する侵害性の技術を企図する。
好ましい実施形態では、アプリケーションプログラム30からグラフィックスライブラリ32に発行される全ての手続き呼出しは、インタセプタ31によって分析のためにインタセプトされる。代替の実施形態では、プリミティブの状態または描写に影響を与えない呼出しはインタセプトおよびトラックされない。これは例えば、glGetLight(glGetXxxxxの形態のその他の呼出しを含む)などの状態検索呼出しを含むことができる。
インタセプタ31(およびインタプリタ31')によって識別された状態設定呼出しおよびプリミティブ描写呼出しの、識別およびパラメータが分析器33に供給され、分析器33は、アプリケーションプログラム30(またはソースコード30'に相当するもの)を、それが描写するプリミティブとプリミティブが描写される状態とを共にカタログすることによって特徴付ける。その特徴を反映する中間および最後の状態レコード39またはその他のデータ構造は、デジタルデータプロセッサ10の例えばRAM14などの動的または静的メモリ、および/またはディスクドライブ26上に存在する可能性があるメモリ38に含まれる。
図4は、分析器33が動作する方法を示す図である。この図面を参照すると、この方法はステップ42で、アプリケーションプログラム30からグラフィックスライブラリ32に対して行われる呼出しのタイプを決定する。プリミティブを描写する呼出しはステップ44以下で処理される。状態を設定する呼出しはステップ58以下で処理される。
ステップ44でこの方法は、現在の合成グラフィカル状態に対する状態レコード39が前もって生成されているかどうかを決定する。生成されている場合、そのレコードを検索し(ステップ46)、現在のプリミティブがその状態で描写されていることを示すように修正する(ステップ48)。ステップ50でこの方法は、現在の合成状態を最も最近表現された最後のプリミティブを描写した状態と比較する。これら2つの合成状態が異なる場合、現在のプリミティブが最も最近表現されたプリミティブとは異なる合成状態で描写されていることを反映するように現在のレコード中の「切換え」カウンタを増分する(ステップ50)。
現在の状態と同じ状態でプリミティブを表現することに関する状態レコード39が前もって生成されていない場合、この方法はステップ52で現在の合成状態に関する新しいレコードを作成する(ステップ52)。その後この方法は、呼出し中で識別されたプリミティブの識別をそのレコードに記録し(ステップ54)、「切換え」カウンタを1に初期化する(ステップ56)。
ステップ58でこの方法は、状態設定呼出し中で要求されたサブステートが最後のプリミティブが描写された合成状態に含まれるかどうかを決定する(ステップ58)(例えばそのサブステートが現在の合成状態の一部である場合でも、その呼出しがカル(culling)の設定を要求する)。含まれる場合、この方法はそのプリミティブの描写が記録されたレコードを検索し(ステップ60)、その「冗長」カウンタを増分し(ステップ62)、現在の状態設定呼出しが冗長であることを示す。要求されたサブステートが冗長でない場合、この方法は別のプリミティブに備えて合成状態を更新する(ステップ64)。
図2に示すタイプの「実時間」実施形態では、上記に概説した処理ステップに続いて、ステップ66でこの方法は、インタセプタ31中の対応するシェル手続きの引き起こした呼出しと同じ手続き呼出し(およびパラメータ)でグラフィックスライブラリ32を呼び出すことができる(ステップ66)。
分析器33の前述の動作は、アプリケーションプログラム30に含まれるグラフィックス呼出し(例えば状態設定およびプリミティブ描写命令)によってメモリ38中の状態レコード39を作成および更新する。以下の表1を参照すれば、よりよく理解することができる。
Figure 2008192164
表1のステップ1を参照すると、アプリケーションプログラム30はイネーブルサブステート1に対する呼出しを行う。これは例えば、特定のライティング(lighting)構成、またはプリミティブの表現に対してグラフィックスライブラリ32が許す多くのサブステートの内の任意の1つにすることができる。分析器33は、合成状態のデータ構造(図示せず)を0−0−0(デフォルト初期状態)から1−0−0に更新して呼出しに応答する。
表1のステップ2で、アプリケーションプログラム30はイネーブルサブステート2に対する呼出しを発行する。この場合も、これはライティング条件、またはグラフィックスライブラリ32が許すその他の任意の描写状態にすることができる。分析器33は合成状態を1−1−0に更新して呼出しに応答する。
表1のステップ3で、アプリケーションプログラム30は描写プリミティブA、例えば点、直線、三角形、多角形、またはグラフィックスライブラリ32が表現できるその他の任意のプリミティブに対する呼出しを発行する。分析器33は状態1−1−0に対する状態レコード39を作成して呼出しに応答する。図示の実施形態では、このレコードは現在の合成状態および描写すべきプリミティブを識別する。このレコードはまた、それぞれに1および0に初期化される「切換え」および「冗長」の2つのカウンタも含む。カウンタ「切換え」は、別の状態でプリミティブを表現した後でプリミティブを表現するために、関連する状態(ここでは1−1−0)が何回使用されたかをトラックする。カウンタ「冗長」は、状態設定呼出しがその合成状態に既に存在する状態を何回要求したかをトラックする。
表1のステップ4で、アプリケーションプログラム30はイネーブルサブステート3に対する呼出しを発行する。グラフィック使用情報収集セクション36は合成状態を1−1−1に更新して応答する。
表1のステップ5で、アプリケーションプログラム30は使用不能サブステート1に対する呼出しを発行する。グラフィック使用情報収集セクション36は合成状態を0−1−1に更新して応答する。
表1のステップ6で、アプリケーションプログラム30は描写プリミティブBに対する呼出しを発行する。分析器33は状態0−1−1に対するレコードを作成して応答する。このレコードはその合成状態および描写すべきプリミティブを識別する。前記の場合と同様に、2つのカウンタ「切換え」および「冗長」はそれぞれ1および0に初期化される。
表1のステップ7〜ステップ9で、アプリケーションプログラム30はイネーブルサブステート1、使用不能サブステート3、および描写プリミティブBに対する呼出しを発行する。分析器33は、上記のように合成状態を1−1−0に設定して応答する。その後対応するレコードをメモリ38から獲得し、そのレコードをプリミティブBの描写を反映するように更新し、それをメモリ38に戻す。そのレコードへのアクセスおよびその更新を、例として図2の分析器33およびメモリ38を接続する矢印で図示する。重要なことは、そのレコードのエントリを識別するプリミティブが、プリミティブAおよびBを表現するためにこの状態が使用されていることを反映することである。
表1のステップ10〜ステップ12で、アプリケーションプログラム30はイネーブルサブステート3、使用不能サブステート3、および描写プリミティブAに対する呼出しを発行する。分析器33は上記の表1に示すように応答する。重要なことは、1−1−0レコードの「切換え」カウンタが、描写プリミティブAに対する呼出しを受信したときに増分されないことである。これは、描写すべき最後のプリミティブ(プリミティブB)が現在のプリミティブ(A)と同じ状態(1−1−0)で表現されたためである。本発明の代替の実施形態では、分析器33はレコードの追加フィールドでのサブステート3の余分なイネーブル化および使用不能化をトラックする。
表1のステップ13〜ステップ15で、アプリケーションプログラム30は使用不能サブステート1、イネーブルサブステート3、および描写プリミティブAに対する呼出しを発行する。分析器33は上記の表1に示すように応答する。
表1のステップ16で、アプリケーションプログラム30は描写プリミティブCに対する呼出しを発行する。このプリミティブは最後のプリミティブと同じ状態で描写されるので、対応する状態レコードは現在のプリミティブの識別を含むことによってのみ更新される。
表1のステップ17で、アプリケーションプログラム30はイネーブルサブステート3に対する呼出しを発行する。このサブステートは既に合成状態で規定されているので、分析器33は、冗長状態設定呼出しが発行されたことを反映するように対応する状態レコードを更新する。
分析器33の動作の結果、メモリ38はアプリケーションプログラム30を特徴付ける状態レコード39を含む。具体的に言うと、これらの状態レコード39は、アプリケーションプログラム30によって描写されたプリミティブをそれらのプリミティブが描写された状態と共にカタログする。以前は当技術分野で知られていなかったこの特徴付けにより、アプリケーションプログラム30の動作とこれのグラフィックスライブラリ32との相互作用に対するはるかに大きな洞察を、グラフィックスのプログラマに与えることができる。したがって、これによりプログラマは、例えばデバッグ、チューニング、および/または最適化に関するプログラムの動作をより容易に理解することができる。
分析器33によって生成され、メモリ38に含まれる特徴付けを反映する信号は、例えばバイナリデータ構造(例えばレコード)やテキストなどの従来の任意の形態で出力することができる。好ましい実施形態では、出力セクション40がモニタ28、プロッタ、またはプリンタなどの出力装置にこれらの信号を駆動してオペレータに表示する。このような1つの表示は、描写された状態でカタログされたプログラムによって描写されるプリミティブを識別する、文字によるレポートにすることができる。
上記の表1に基づく、このようなレポートの例を以下の表2に示す。これは上述の、各状態で描写されるプリミティブの数およびそれらのタイプ、ならびに「切換え」および「冗長」呼出しの数を示す。
Figure 2008192164
表2に示した例および上記のレポートは相当に簡略化したものであることを、当業者なら理解するであろう。従来の3Dグラフィックスのアプリケーションプログラム30およびグラフィックスライブラリ32の場合は、数千乃至数百万のプリミティブをそれぞれに記録する百を越える状態レコードが生成される可能性がある。好ましい実施形態では、本発明により、オペレータはトラックするサブステートを選択することができる。例えばプログラマは、照度に関係する状態の変化のみをトラックしようとする可能性がある。これによりグラフィックスの使用法のより集中した分析が容易になることが当業者には理解されるであろう。
本発明が、メモリ38中の分析器33によって作成および維持される状態レコード39内に、より多くの情報を含むことを企図するものであることも当業者なら理解するであろう。好ましい実施形態では、例えば各レコードは、各プリミティブの表現中に描写された直線および/または小面の数についての情報を追加的に含む。この情報もまた出力セクション40から出力されることが好ましい。これらのレコードおよびレポートもまた、プリミティブが表現される詳細な属性(例えば色、法線、材質など)に関する情報を記憶および提供することができる。
出力セクション40が、上記に示したフォーマット以外のレポートを適当な出力装置に駆動できることを、当業者ならさらに理解するであろう。これは、図表、グラフ、アニメーションなどを含む。
本発明による方法は、状態によって使用法をカタログおよびレポートせず、描写されるプリミティブの数と、おそらくはこれらを構成する直線および小面の数とをトラックするだけの従来技術のシステムとは大幅に異なる。本発明によるシステムおよび方法を使用することにより、プログラムの動作およびそれのライブラリとの相互作用に対するはるかに大きな洞察が、グラフィックスのプログラマに与えられる。したがって、プログラマは、例えばデバッグ、チューニングおよび/または最適化に関するプログラムの動作をより容易に理解することができる。
上述したのは、コンピュータグラフィックス、具体的に言うと上記に述べた物体と一致するグラフィカル画像の生成を分析するための改善した方法に関するものである。図面に示し上記に説明した実施形態は単に例として与えたものであること、および修正形態がその中に組み込まれるその他の実施形態が本発明の範囲内にあることは理解されるであろう。したがって例えば、3次元画像と同様に、2次元画像およびアニメーション画像の分析にも本発明を適用できることが理解されるであろう。さらに別の例として、状態(照度、陰影、質感など)に加えて属性(色や変換行列など)をトラックするために、本発明を利用可能であることが理解されるであろう。さらに別の例として、手続き指向プログラムと同様にオブジェクト指向プログラムにも本発明を適用できることが理解されるであろう。また、本発明は、グラフィックスの手続きおよびライブラリと同様に、非グラフィックの手続きおよびライブラリに対して行われた呼出しの解釈にも適用することができる。
以下に本発明の実施の形態を要約する。
1. それぞれが合成グラフィカル状態で表現される複数のプリミティブからグラフィカル画像を生成するコンピュータの命令シーケンス(30)の特徴を決定するグラフィカル画像生成分析方法であって、A.前記命令シーケンスによって表現される少なくとも1つのプリミティブを識別するステップ(44)と、B.該プリミティブが表現される合成グラフィカル状態を識別するステップ(58)と、C.段階Bで識別した少なくとも1つの前記合成グラフィカル状態を示し、該合成グラフィカル状態のそれぞれに対して前記合成グラフィカル状態の前記命令シーケンスによって表現される少なくとも1つの前記プリミティブを示す、前記命令シーケンスのグラフィカル画像生成の特徴を統計的に集計して表す信号を生成するステップ(39)と、を含むグラフィカル画像生成分析方法。
2. 前記命令シーケンスをデジタルデータ処理システム(5)上で実行するステップと、前記命令シーケンスによって表現される前記プリミティブを識別するために段階Aにおける実行を監視するステップ(31)と、該プリミティブが表現される前記合成グラフィカル状態を識別するために段階Bにおける実行を監視するステップ(31)と、を含む上記1に記載のグラフィカル画像生成分析方法。
3. 前記命令シーケンスがソースコードを含み、少なくとも前記命令シーケンス中のグラフィカル画像生成呼出しを識別するソースコードインタプリタ(31')で前記命令シーケンスを解釈するステップと、前記命令シーケンスによって表現される前記プリミティブを識別するために段階Aにおける解釈を監視するステップ(31)と、該プリミティブが表現される前記合成グラフィカル状態を識別するために段階Bにおける解釈を監視するステップ(31)と、を含む上記1に記載のグラフィカル画像生成分析方法。
4. 任意の動的および静的記憶手段(38)で段階Cにより生成された前記特徴を表す信号を記憶するステップ、および/または段階Bで識別された少なくとも1つの前記合成グラフィカル状態を示し、該合成グラフィカル状態のそれぞれに対して前記合成グラフィカル状態の前記命令シーケンスによって表現される少なくとも1つの前記プリミティブを示す、段階Cで生成された前記特徴を表す信号に基づいて表示信号を生成するステップ(40)、の内の少なくとも1つを段階Cが含む上記1に記載のグラフィカル画像生成分析方法。
5. 段階Bが、各合成グラフィカル状態に対して、異なる合成状態でプリミティブを表現した後の合成状態でプリミティブが表現された回数をカウントするステップ(50)を含み、段階Cが、前記特徴を表す信号を生成して、前記合成グラフィカル状態のそれぞれに対して、異なる合成状態でプリミティブを前記表現した後の合成状態でプリミティブが表現された回数を示すステップを含む上記1に記載のグラフィカル画像生成分析方法。
6. 前記合成グラフィカル状態が少なくとも1つのサブステートを含み、各合成グラフィカル状態に対して、前記命令シーケンスの実行中に現在の合成グラフィカル状態で既に規定されたサブステートを設定する試みがなされた回数をカウントするステップ(62)を含み、段階Cが、前記特徴を表す信号を生成して、各合成グラフィカル状態に対して、前記命令シーケンスの実行中に前記現在の合成グラフィカル状態で既に規定されたサブステートを設定する試みがなされた前記回数を示すステップを含む上記1に記載のグラフィカル画像生成分析方法。
7. 複数のサブステートによって規定される合成グラフィカル状態でそれぞれに表現される複数のプリミティブから形成されたグラフィカル画像を生成し、(i)プリミティブを表現するプリミティブ描写命令と、(ii)合成グラフィカル状態を規定するサブステートを設定する状態設定命令と、を含むコンピュータの命令シーケンス(30)の特徴を決定するグラフィカル画像生成分析方法であって、A.前記命令シーケンス中の状態設定命令に応答して現在の合成グラフィカル状態を決定するステップ(58)と、B.前記命令シーケンス中のプリミティブ描写命令に応答して、デジタルデータ処理システム(5)の記憶手段(38)中で、(i)前記現在の合成グラフィカル状態と、(ii)前記プリミティブ描写命令によって表現されるプリミティブと、の識別を記憶するレコード(39)の生成および更新の少なくとも一方を行うステップ(44〜56)と、C.前記デジタルデータ処理システム(5)の前記記憶手段(38)にアクセスして、少なくとも1つの前記レコード(39)から、プリミティブが表現される少なくとも1つの合成グラフィカル状態を示し、このような各合成グラフィカル状態に対して、当該合成グラフィカル状態で表現される少なくとも1つの前記プリミティブを示す、前記命令シーケンスのグラフィカル画像生成特徴を表す信号を生成するステップとを含むグラフィカル画像生成分析方法。
8. (i)前記命令シーケンスの実行(31)、および(ii)ソースコード形態の前記命令シーケンスの解釈(31')のいずれかによって、前記命令シーケンス中の状態設定命令およびプリミティブ描写命令を識別するステップを含む上記7に記載のグラフィカル画像生成分析方法。
9. 段階Bが、プリミティブが前記現在の合成グラフィカル状態で前もって表現されているかどうかを決定するステップ(44)と、該決定に否定応答し、前述の前記識別を記憶する新しいレコードを生成するステップ(52)と、該決定に肯定応答し、前記現在の合成グラフィカル状態の識別を記憶するレコードにアクセスし、前記プリミティブ描写命令によって表現される前記プリミティブの識別を記憶するように前記レコードを更新するステップ(46)と、を含む上記7に記載のグラフィカル画像生成分析方法。
10. 段階Aが、前記状態設定命令で識別されたサブステートが既に前記現在の合成グラフィカル状態に含まれるかどうかを決定するステップ(58)と、該決定に肯定応答し、含まれる場合には前記現在の合成グラフィカル状態の識別を記憶し、前記現在の合成グラフィカル状態で既に規定されたサブステートを設定する試みがなされた回数を反映する冗長カウントを前記レコード中で増分するステップ(62)と、を含む上記7に記載のグラフィカル画像生成分析方法。
本発明の一実施形態に係るデジタルデータ処理システムを示す説明図である。 グラフィカル画像の生成を分析するシステムを示す説明図である。 アプリケーションプログラムによって行われるグラフィックス呼出しを識別する、代替技術を示すブロック図である。 本発明によるシステムにおいて、プリミティブをカタログするステップを示すフローチャートである。
符号の説明
5 デジタルデータ処理システム
10 デジタルデータプロセッサ
12 中央処理装置
14 ランダムアクセスメモリ
16 入出力コントローラ
18 バス
22 キーボード
24 指示装置
28 モニタ

Claims (5)

  1. 複数のプリミティブで形成されるグラフィカル画像を生成するコンピュータの命令シーケンスを分析するグラフィカル画像生成分析方法であって、それぞれの前記プリミティブは、複数のサブステートによって規定される1つの合成グラフィカル状態において表現され、前記コンピュータの前記命令シーケンスは、(i)前記プリミティブを表現するプリミティブ描写命令と、(ii)前記合成グラフィカル状態を規定する前記サブステートを設定する状態設定命令とを含んでいて、
    A.現在の前記合成グラフィカル状態を決定するために、前記命令シーケンスの前記状態設定命令に応答するステップと、
    B.デジタルデータ処理システムの記憶手段において、(i)前記現在の合成グラフィカル状態と、(ii)前記プリミティブ描写命令によって表現される前記プリミティブと、の識別を記憶するレコードの生成および更新の少なくとも一方を行うために、前記命令シーケンスの前記プリミティブ描写命令に応答するステップと、
    C.前記命令シーケンスの前記グラフィカル画像生成の特徴を表す信号を、少なくとも1つの前記レコードから生成するために、前記デジタルデータ処理システムの記憶手段にアクセスするステップとを含み、
    前記信号は前記プリミティブが表現される少なくとも1つの前記合成グラフィカル状態を示し、それぞれの前記合成グラフィカル状態に対して、少なくとも1つの前記プリミティブがその合成グラフィカル状態で表現される、グラフィカル画像生成分析方法。
  2. (i)前記命令シーケンスの実行、および(ii)ソースコード形態の前記命令シーケンスの解釈のいずれかによって、前記命令シーケンス中の状態設定命令とプリミティブ描写命令とを識別するステップを含む請求項1に記載のグラフィカル画像生成分析方法。
  3. 複数のプリミティブで形成されるグラフィカル画像を生成するコンピュータの命令シーケンスを分析するグラフィカル画像生成分析方法であって、それぞれの前記プリミティブは、複数のサブステートによって規定される1つの合成グラフィカル状態において表現され、前記コンピュータの前記命令シーケンスは、(i)前記プリミティブを表現するプリミティブ描写命令と、(ii)前記合成グラフィカル状態を規定する前記サブステートを設定する状態設定命令とを含んでいて、
    A.現在の前記合成グラフィカル状態を決定するために、前記命令シーケンスの前記状態設定命令に応答するステップと、
    B.デジタルデータ処理システムの記憶手段において、(i)前記現在の合成グラフィカル状態と、(ii)前記プリミティブ描写命令によって表現される前記プリミティブと、の識別を記憶するレコードの生成および更新の少なくとも一方を行うために、前記命令シーケンスの前記プリミティブ描写命令に応答するステップと、
    C.前記命令シーケンスの前記グラフィカル画像生成の特徴を表す信号を、少なくとも1つの前記レコードから生成するために、前記デジタルデータ処理システムの記憶手段にアクセスするステップとを含み、
    前記信号は前記プリミティブが表現される少なくとも1つの前記合成グラフィカル状態を示し、それぞれの前記合成グラフィカル状態に対して、少なくとも1つの前記プリミティブがその合成グラフィカル状態で表現されており、
    前記ステップ(B)が、
    プリミティブが前記現在の合成グラフィカル状態で前に表現されているかどうかを決定するステップと、
    前に表現されていないとの前記決定に応答して、前記識別を記憶する新しいレコードを生成するステップと、
    前に表現されているとの前記決定に応答して、前記現在の合成グラフィカル状態の識別を記憶しているレコードにアクセスして、前記プリミティブ描写命令によって表現される前記プリミティブの識別を記憶するために前記レコードを更新するステップと、を含むことを特徴とするグラフィカル画像生成分析方法。
  4. 最後の最も新しく表現されたプリミティブが、現在の合成状態と異なる合成状態で表現されたかどうか決定するステップと、表現されている場合は、前記最後の最も新しく表現されたプリミティブの合成グラフィカル状態と異なる合成グラフィカル状態で表現されたプリミティブの回数を反映するために、切替えカウンタを前記レコードで増分するステップと、を含むことを特徴とする請求項3に記載のグラフィカル画像生成分析方法。
  5. 複数のプリミティブで形成されるグラフィカル画像を生成するコンピュータの命令シーケンスを分析するグラフィカル画像生成分析方法であって、それぞれの前記プリミティブは、複数のサブステートによって規定される1つの合成グラフィカル状態において表現され、前記コンピュータの前記命令シーケンスは、(i)前記プリミティブを表現するプリミティブ描写命令と、(ii)前記合成グラフィカル状態を規定する前記サブステートを設定する状態設定命令とを含んでいて、
    A.現在の前記合成グラフィカル状態を決定するために、前記命令シーケンスの前記状態設定命令に応答するステップと、
    B.デジタルデータ処理システムの記憶手段において、(i)前記現在の合成グラフィカル状態と、(ii)前記プリミティブ描写命令によって表現される前記プリミティブと、の識別を記憶するレコードの生成および更新の少なくとも一方を行うために、前記命令シーケンスの前記プリミティブ描写命令に応答するステップと、
    C.前記命令シーケンスの前記グラフィカル画像生成の特徴を表す信号を、少なくとも1つの前記レコードから生成するために、前記デジタルデータ処理システムの記憶手段にアクセスするステップとを含み、
    前記信号は前記プリミティブが表現される少なくとも1つの前記合成グラフィカル状態を示し、それぞれの前記合成グラフィカル状態に対して、少なくとも1つの前記プリミティブがその合成グラフィカル状態で表現されており、
    前記ステップ(A)が、
    前記状態設定命令で識別されたサブステートが既に前記現在の合成グラフィカル状態に含まれるかどうかを決定するステップと、
    前記現在の合成グラフィカル状態の識別を記憶し、前記現在の合成グラフィカル状態で既に規定されたサブステートを設定する試みがなされた回数を反映する冗長カウントを前記レコードで増分するために、含まれているとの決定に応答するステップと、を含む
    ことを特徴とするグラフィカル画像生成分析方法。
JP2008056063A 1997-03-27 2008-03-06 グラフィカル画像生成分析方法 Pending JP2008192164A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US08/775,272 US5889994A (en) 1997-03-27 1997-03-27 Method for cataloging graphics primitives by rendering state

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP6331098A Division JPH10275248A (ja) 1997-03-27 1998-03-13 グラフィカル画像生成分析方法

Publications (1)

Publication Number Publication Date
JP2008192164A true JP2008192164A (ja) 2008-08-21

Family

ID=25103882

Family Applications (2)

Application Number Title Priority Date Filing Date
JP6331098A Withdrawn JPH10275248A (ja) 1997-03-27 1998-03-13 グラフィカル画像生成分析方法
JP2008056063A Pending JP2008192164A (ja) 1997-03-27 2008-03-06 グラフィカル画像生成分析方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP6331098A Withdrawn JPH10275248A (ja) 1997-03-27 1998-03-13 グラフィカル画像生成分析方法

Country Status (2)

Country Link
US (1) US5889994A (ja)
JP (2) JPH10275248A (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6421821B1 (en) * 1999-03-10 2002-07-16 Ronald J. Lavallee Flow chart-based programming method and system for object-oriented languages
US6952215B1 (en) 1999-03-31 2005-10-04 International Business Machines Corporation Method and system for graphics rendering using captured graphics hardware instructions
US7203946B2 (en) * 1999-10-11 2007-04-10 Hewlett-Packard Development Company, L.P. System and method for intercepting, instrumenting and characterizing usage of an application programming interface
US7870504B1 (en) 2003-10-01 2011-01-11 TestPlant Inc. Method for monitoring a graphical user interface on a second computer display from a first computer
US7385608B1 (en) * 2003-12-31 2008-06-10 3Dlabs Inc. Ltd. State tracking methodology
US8149242B2 (en) * 2006-11-10 2012-04-03 Sony Computer Entertainment Inc. Graphics processing apparatus, graphics library module and graphics processing method
US9013494B2 (en) 2006-12-07 2015-04-21 Sony Computer Entertainment Inc. Heads-up-display software development tool
US7950003B1 (en) * 2006-12-07 2011-05-24 Sony Computer Entertainment Inc. Heads-up-display software development tool for analyzing and optimizing computer software
US8739189B2 (en) * 2008-01-24 2014-05-27 Mcafee, Inc. System, method, and computer program product for invoking an application program interface within an interception of another application program interface
US9792718B2 (en) * 2008-07-25 2017-10-17 Qualcomm Incorporated Mapping graphics instructions to associated graphics data during performance analysis
US8587593B2 (en) 2008-07-25 2013-11-19 Qualcomm Incorporated Performance analysis during visual creation of graphics images
US8707434B2 (en) 2011-08-17 2014-04-22 Mcafee, Inc. System and method for indirect interface monitoring and plumb-lining
US8938718B2 (en) * 2012-12-18 2015-01-20 International Business Machines Corporation Managing window focus while debugging a graphical user interface program
GB2547220A (en) 2016-02-10 2017-08-16 Testplant Europe Ltd Method of, and apparatus for, testing computer hardware and software
GB2547222A (en) 2016-02-10 2017-08-16 Testplant Europe Ltd Method of, and apparatus for, testing computer hardware and software

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5027291A (en) * 1987-11-24 1991-06-25 International Business Machines Corporation Application exit for potentially pickable primitives in a graphics system
US4910683A (en) * 1988-12-20 1990-03-20 Sun Microsystems, Inc. Method and apparatus for fractional double buffering
US5255359A (en) * 1989-10-23 1993-10-19 International Business Machines Corporation Picking function for a pipeline graphics system using hierarchical graphics structures
US5249265A (en) * 1989-10-24 1993-09-28 International Business Machines Corporation Structure storage management in a graphics display device
US5307450A (en) * 1991-02-19 1994-04-26 Silicon Graphics, Inc. Z-subdivision for improved texture mapping
US5325485A (en) * 1992-10-30 1994-06-28 International Business Machines Corporation Method and apparatus for displaying primitives processed by a parallel processor system in a sequential order
US5617548A (en) * 1992-12-01 1997-04-01 Landmark Graphics Corporation Method of interacting with computer graphics
US5649173A (en) * 1995-03-06 1997-07-15 Seiko Epson Corporation Hardware architecture for image generation and manipulation
US5764243A (en) * 1995-03-24 1998-06-09 3Dlabs Inc. Ltd. Rendering architecture with selectable processing of multi-pixel spans
US5745118A (en) * 1995-06-06 1998-04-28 Hewlett-Packard Company 3D bypass for download of textures

Also Published As

Publication number Publication date
US5889994A (en) 1999-03-30
JPH10275248A (ja) 1998-10-13

Similar Documents

Publication Publication Date Title
JP2008192164A (ja) グラフィカル画像生成分析方法
US6047123A (en) Methods for recording a compilable graphics call trace
CA2147847C (en) Object-oriented rendering system
US7095416B1 (en) Facilitating performance analysis for processing
KR101286318B1 (ko) 렌더링된 그래픽 엘리먼트들을 위한 성능 메트릭들의 시각적 표현의 디스플레이
US6167404A (en) Multimedia plug-in using dynamic objects
US6046747A (en) Graphics application programming interface avoiding repetitive transfer of texture mapping data
US9792718B2 (en) Mapping graphics instructions to associated graphics data during performance analysis
US8587593B2 (en) Performance analysis during visual creation of graphics images
CA2479931A1 (en) System, method and computer program product for generating a shader program
US7533371B1 (en) User interface for facilitating performance analysis for processing
JPH08227349A (ja) 表示装置
US20040100480A1 (en) Input redirection
US5995113A (en) Coloring events in event streams in order to provide information about operation of a software library
EP2321730B1 (en) Performance analysis during visual creation of graphics images
US7523406B2 (en) Dynamic parameter interface
US6392662B1 (en) Draw order preservation in a computer-implemented graphics system
DE69518238T2 (de) Objekt für die definition einer dialogeinheitschnittstelle
Sharma et al. Scalable and portable visualization of large atomistic datasets
CN114995705B (zh) 一种三维显示信息的构建方法、装置及设备
Sung et al. Working with HTML5 and WebGL
Erbacher Visual assistance for concurrent processing
Hubbold et al. GKS-3D and PHIGS—Theory and Practice
Zlabinger A project completed as part of the requirements for the BSc (Hons) Computer Studies entitled Fast Real-Time Terrain Visualisation Algorithms
GB2440667A (en) A graphical user interface for debugging a graphics pipeline subunit

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080729

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20081029

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20081104

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090519