JP5002742B2 - パラメトリックテクスチャマップを使用して3dオブジェクトをレンダリングするための装置および方法 - Google Patents
パラメトリックテクスチャマップを使用して3dオブジェクトをレンダリングするための装置および方法 Download PDFInfo
- Publication number
- JP5002742B2 JP5002742B2 JP2001569769A JP2001569769A JP5002742B2 JP 5002742 B2 JP5002742 B2 JP 5002742B2 JP 2001569769 A JP2001569769 A JP 2001569769A JP 2001569769 A JP2001569769 A JP 2001569769A JP 5002742 B2 JP5002742 B2 JP 5002742B2
- Authority
- JP
- Japan
- Prior art keywords
- texture map
- parametric texture
- coefficients
- vector
- parametric
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 32
- 238000009877 rendering Methods 0.000 title description 16
- 239000013598 vector Substances 0.000 claims description 86
- 230000000694 effects Effects 0.000 claims description 22
- 230000006870 function Effects 0.000 claims description 19
- 238000005286 illumination Methods 0.000 claims description 14
- 230000004044 response Effects 0.000 claims description 11
- 230000008859 change Effects 0.000 claims description 9
- 230000015654 memory Effects 0.000 claims description 7
- 238000002310 reflectometry Methods 0.000 claims description 4
- 238000005070 sampling Methods 0.000 claims description 3
- 230000002238 attenuated effect Effects 0.000 claims 2
- 230000007704 transition Effects 0.000 claims 2
- 238000004364 calculation method Methods 0.000 description 9
- 238000013507 mapping Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 239000000463 material Substances 0.000 description 6
- 238000007796 conventional method Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 229910052751 metal Inorganic materials 0.000 description 3
- 239000002184 metal Substances 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 150000002739 metals Chemical class 0.000 description 2
- 238000002156 mixing Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 239000003989 dielectric material Substances 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012417 linear regression Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- PHEDXBVPIONUQT-RGYGYFBISA-N phorbol 13-acetate 12-myristate Chemical compound C([C@]1(O)C(=O)C(C)=C[C@H]1[C@@]1(O)[C@H](C)[C@H]2OC(=O)CCCCCCCCCCCCC)C(CO)=C[C@H]1[C@H]1[C@]2(OC(C)=O)C1(C)C PHEDXBVPIONUQT-RGYGYFBISA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/04—Texture mapping
Landscapes
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Generation (AREA)
Description
【発明の背景】
1.発明の分野
本発明は、概して、コンピュータグラフィックスの分野に関し、特に、コンピュータグラフィックスシステムにおいてパラメトリックテクスチャマップを使用して三次元(3D)オブジェクトをレンダリングするための装置および方法に関する。
【0002】
2.従来技術の説明
近代のコンピュータシステムは、ますますグラフィックスを多用するようになってきた。このニーズを満たすために、専用の特殊用途メモリおよびハードウェアが開発されてきた。従来のコンピュータグラフィックスシステムは、二次元(2D)アレイの発光領域を有するディスプレイを含む。発光領域は通常、画素の略語であるピクセルと呼ばれる。このようなグラフィックスシステムは通常、ディスプレイの対応するピクセルから発せられるべき色または濃淡を決定する2Dアレイの値を生成するハードウェア、ソフトウェア、またはこれら双方を使用する。
【0003】
コンピュータグラフィックスシステムは一般に、3Dオブジェクトの表示に使用される。通常、かかるシステムは、コンピュータメモリにおいてモデリングされる3Dオブジェクトの二次元(2D)ビューを生成することにより、2D表示装置上に3Dオブジェクトに見えるものを生成する。特定の時間に生成される3Dオブジェクトの2Dビューは通常、少なくとも、特定の時間における3Dオブジェクトと3Dオブジェクトのビューアとの間の空間関係に依存する。この空間関係は、視野方向または視点方向と呼ばれる場合がある。たとえば、車は、前後を有する3Dオブジェクトである。しかし、テールライトを見ることができるかどうかは、どこから車を見ているかに依存する。視野方向が車の真正面である場合、テールライトは見えないが、視野方向が車の背後である場合にはテールライトが見える。
【0004】
コンピュータグラフィックスシステムが3Dオブジェクトの2Dビューに対する値を生成するプロセスは、イメージレンダリングまたは走査変換と一般に呼ばれる。グラフィックスシステムは通常、3Dオブジェクトをポリゴンのセットに細分し、各ポリゴンを個々にレンダリングすることにより、3Dオブジェクトをレンダリングする。
【0005】
特定の視野方向に関してレンダリングされるポリゴンの値は通常、ポリゴンの表面特徴およびポリゴンに対する照明の影響に依存する。表面特徴は、表面の色および表面の構造などの詳細を含む。照明の影響は通常、ポリゴンと1つ以上の照明源との間の空間関係に依存する。この空間関係は、光源方向と呼ばれる場合がある。たとえば、光源が1つしかない場合、オブジェクトの光源に最も近い側が照明される一方、オブジェクトの光源から最も離れた側は影になりうる。
【0006】
通常、特定の視野方向でのポリゴンの個々のピクセルに対する照明の影響の評価には、多数の3Dベクトル計算が必要とされる。当業者ならば、標準的なブリン(Blinn)/フォン(Phong)の照明方程式は以下であることを理解するであろう。
【数1】
I=kaIa+kdId(N・L)+ksIs(N・H)n (1)
ここで、ka、kd、およびksは定数である。数1は、特定ピクセルの光強度Iが、その場所での周囲の寄与Ia、拡散寄与Id、およびスペキュラ(specular)寄与Isの合計の関数であることを表す。数1に基づく照明計算は、正規化ベクトルと共に使用される場合、浮動小数点、平方根、および除算演算を含む。かかる計算は通常、ハードウェアで実施されるか、またはソフトウェアで実施されるかに関わりなく時間がかかり、かつコストがかかる。
【0007】
このような計算のオーバヘッドを低減するための1つの従来の方法は、頂点等、ポリゴンの少数の領域のみにおける照明の影響を評価し、次いでその結果をポリゴン全体にわたって補間するというものである。このような方法の例には、一般にフラットシェーディングおよびグローシェーディングと呼ばれる方法が含まれる。このような方法は通常、走査変換中に行われる計算の数を低減し、それによってレンダリング速度を増大させる。不都合なことに、このような方法はまた、通常、個々のポリゴンの領域よりも小さなシェーディング特徴をレンダリングすることができない。ポリゴンが比較的大きい場合、ビューは目に見えてわかるように歪む。
【0008】
ポリゴンの領域よりも小さな特徴をレンダリングするための1つの従来の方法は、一般にテクスチャマップと呼ばれるものを使用することである。典型的なテクスチャマップは、特定の表面特徴についての色値パターンを含むテーブルである。たとえば、木目調の表面特徴は、その表面と木目模様のカラーパターンを保持するテクスチャマップとを使用してレンダリングされ得る。不都合なことに、テクスチャマッピングは通常、視野方向または光源方向でもって変化しない相対的にフラットな表面特徴をもたらす。一方、実際の3Dオブジェクトの視覚的な見た目(appearance)は一般に、視野方向、光源方向、またはこれら双方でもって変化する。これらの方向性変化は一般に、オブジェクト表面上の3D構造(すなわち、オブジェクトは完全に平坦ではない)に起因する。かかる構造は、局所的なシェーディングまたはオクルージョン、または光源からの鏡面反射の変化をもたらしうる。影響は、所与の光源方向に対して視野方向でもって変化し、また所与の視野方向に対して光源方向でもって変化し得る。レンダリングされた2Dビューに、よりリアル感を提供するために、これら方向性変化を考慮するべきである。
【0009】
ポリゴン表面におけるこのような構造的影響の方向依存性を処理するための1つの従来の方法は、一般にバンプマップと呼ばれるものを使用することである。典型的なバンプマップは、表面の3D法線ベクトルパターンが抽出される高さフィールドを含む。法線ベクトルは、表面の各ピクセルにおける照明方程式を解くために使用される。不都合なことに、かかる評価には通常、除算および平方根を含む、多数の高価で時間のかかる3Dベクトル計算が含まれる。これにより、レンダリング速度が低下する、またはグラフィックスシステムのコストが増大することになる。
【0010】
グラフィックスを多用するコンピュータシステムの効率要件を満たすような能力を有するシステムが明確に必要とされている。特に、3Dオブジェクトの2Dビューを巧みにレンダリングすることのできるシステムが必要とされている。理想的には、かかるシステムは、従来のシステムよりも低いコストおよび高い生産性を有する。このタイプのシステムを使用すると、システムパフォーマンスを向上させることができる。本発明の主な目的は、この必要性を解決し、さらに関連する利点を提供することである。
【0011】
【発明の概要】
パラメトリックテクスチャマップを使用するグラフィックスシステムが開示される。本グラフィックスシステムは、方向に依存するが、時間がかからず、またピクセル単位で照明方程式を解く際に高価な計算を含めることなく、3Dオブジェクトの表面特徴をレンダリングする。パラメトリックテクスチャマップは、表面構造の視覚的な見た目が方向ベクトルに応答して変化するように、表面構造を定義するパラメータのセットを保持する。方向ベクトルは、光源ベクトルまたは半角ベクトルを含む、任意のユーザ定義ベクトルとすることができる。パラメータは、所定の方程式のパラメータであり、式を解くに当たり、ベクトル計算は含まれない。方程式は、多項式または非多項式を含む、任意の形態をとることができる。本グラフィックスシステムは、方程式を使用して表面構造を有するポリゴンをレンダリングする。
【0012】
本発明の上記および他の目的ならびに利点は、以下の詳細な説明を添付図面と併せて読むことからより容易に理解されるであろう。
【0013】
【好適な実施形態の詳細な説明】
まず図1を参照すると、本発明の好適な実施形態によるコンピュータグラフィックスシステム10のブロック図が示される。コンピュータグラフィックスシステム10は、バッファ12、グラフィックスプロセッサ14、パラメトリックテクスチャマップ16、フレームバッファ18、およびディスプレイ20を含む。バッファ12は、ディスプレイ20上に生成されるべき3Dオブジェクトを記述する幾何学的形状データを保持する。バッファ12において、3Dオブジェクトは3D空間におけるポリゴンのセットとして表される。一実施形態では、ポリゴンは三角形であり、バッファ12において、幾何学的形状データは三角形の頂点の3D座標を含む。
【0014】
グラフィックスプロセッサ14は、バッファ12からポリゴンを定義するパラメータを読み取り、各ポリゴンを走査変換する。ポリゴンの走査変換により、視野方向および光源方向に依存するポリゴンの2Dビューが生成される。ポリゴンの2Dビューは、ディスプレイ20の平面で見ることのできるポリゴンの各ピクセルの色値を含む。グラフィックスプロセッサ14は、レンダリングされるポリゴンの色値をフレームバッファ18に書き込む。色値は、フレーム単位でフレームバッファ18からディスプレイ20に提供される。ディスプレイ20は、ラスタ走査装置またはフラットパネル表示装置などの任意の従来の2D表示装置とすることができる。
【0015】
パラメトリックテクスチャマップ16は、表面構造の視覚的な見た目が、ビューベクトル、光源ベクトル、または半角ベクトル等の任意のユーザ定義ベクトルでもって変化するように表面構造を定義するパラメータを保持する。半角ベクトルは、ビューベクトルと光源ベクトルとの中間にあるベクトルである。グラフィックスプロセッサ14は、走査変換中に、パラメトリックテクスチャマップ16で定義される表面構造を、バッファ12から得られるポリゴンにマッピングする。その結果、テクスチャマッピングと比較して、3Dオブジェクトの表面の3D特徴がよりリアルにレンダリングされるが、バンプマッピングに関連する計算の犠牲がない。
【0016】
一実施形態では、パラメトリックテクスチャマップ16に含まれるパラメータは、以下の二次多項式を解くためのA1、A2、A3、A4、A5、およびA6の係数である。
【数2】
Ci=A1D2 u+A2D2 v+A3DuDv+A4Du+A5Dv+A6
(2)
ここで、DuおよびDvは、ユーザ定義ベクトルの2D成分である。たとえば、パラメトリックテクスチャマップ16が視野方向に適合された場合、DuおよびDvは、視点ベクトルの2D成分である。同様に、パラメトリックテクスチャマップ16が半角ベクトルに適合される場合、DuおよびDv項は、半角ベクトルの2D成分である。
【0017】
表1は、パラメトリックテクスチャマップ16の全体的なコンテンツを示す。パラメトリックテクスチャマップ16は、n×m個のエントリを含む。n×m個のエントリはそれぞれ、パラメトリックテクスチャマップ16によってモデリングされる特定表面のサンプルに対応する。これらサンプルは、テクスチャエレメントの略語であるテクセルと呼ぶことができる。個々のテクセルについての係数はA1i,j〜A6i,jと表される。但し、iの範囲は1〜nであり、jの範囲は1〜mである。
【0018】
【表1】
【0019】
パラメトリックテクスチャマップ16は、グラフィックスシステム10における3Dオブジェクトのレンダリングに使用され得るパラメトリックテクスチャマップのセットを表す。本技術による各パラメトリックテクスチャマップは、3Dオブジェクトにマッピングされるべき特定の表面構造に適合する。さらに、各パラメトリックテクスチャマップは、ユーザ定義ベクトルに応答してリアルな3Dレンダリングを提供するように適応される。たとえば、パラメトリックテクスチャマップ16は、所与の固定された閲覧方向について様々な光源方向に応答してリアルな3Dレンダリングを提供するように適応され得る。代案として、パラメトリックテクスチャマップ16は、所与の固定された光源方向について様々な視野方向に応答してリアルな3Dレンダリングを提供するように適応され得る。
【0020】
一実施形態では、パラメトリックテクスチャマップは、ディスプレイ20の特定のカラーチャネルに適合することができる。たとえば、グラフィックスシステム10は、特定の表面構造についてRGBディスプレイの赤、緑、および青の各チャネルごとに別個のパラメトリックテクスチャマップを含むことができる。この手法の1つの欠点は、3つのパラメトリックテクスチャマップが必要なことである。代案として、単一のパラメトリックテクスチャマップを完全なRGBテクスチャマップ中の各チャネルで乗算してもよい。この実施形態では、パラメトリックテクスチャマップは、たとえば、光ベクトルの変化の結果としての輝度変化を符号化し、対応するテクスチャマップにおけるRGB色値を変調し、結果としての色値を生じる。また、このタイプのパラメトリックテクスチャマップを使用して、複数の光源で照明されるオブジェクトをレンダリングすることも可能である。RGB色値は強さとは別個であるため、異なる光源について強度値を計算し、組み合わせて最終的な強度値を得ることができる。次に、ピクセル単位での強度値をRGB値で乗算して、出力色を得る。グラフィックスパイプラインにおけるテクスチャブレンディング中に、異なるブレンディングモードを用いて、パラメトリックテクスチャマップ評価結果を計算された照明、テクスチャマップ、または他のソースと組み合わせることにより、広範囲の有用な動作が達成され得る。
【0021】
次に図2を参照すると、図1のバッファ12において定義され、図1のパラメトリックテクスチャマップ16により定義される表面特徴を用いて、図1のグラフィックスプロセッサ14によってレンダリングされるべきポリゴン22の図的表現が示される。ポリゴン22は、3D空間における3つの頂点(T1、T2、およびT3)のセットにより定義される。局所的座標空間は、通常ポリゴン22の空間テクスチャ座標によって定義される、u軸およびv軸24のセットによって表される。
【0022】
ポリゴン22の表面法線ベクトルNを、視点ベクトルV、光源ベクトルL、および半角ベクトルHと共に示す。法線ベクトルは通常、リアルさを増すために、ポリゴン全体ではなく頂点について定義されることに留意されたい。ここでは、簡略化のために、ポリゴンの単一の法線を示す。視点ベクトルVは、ポリゴン22のピクセルPkから視点26までの視野方向を表す。光源ベクトルLは、ピクセルPkから光源28までの光源方向を表す。半角ベクトルHは、視点ベクトルVと光源ベクトルLとの間の中間にあるベクトルを表す。また、ポリゴン22の平面に射影される視点ベクトルVである(Vu,Vv)ベクトルも示される。同様に、(Lu,Lv)ベクトルは光源ベクトルLの射影であり、(Hu,Hv)ベクトルは半角ベクトルHの射影である。
【0023】
図3は、パラメトリックテクスチャマップによって定義される表面特徴を用いて、ポリゴンをレンダリングするための本発明による方法の流れ図を示す。図示されたステップは、図2のポリゴン22におけるピクセルの各セットについて色値を生成するために使用される。例示のための以下の説明は、例として、図2のピクセルPkに焦点を合わせる。図1のパラメトリックテクスチャマップ16中の係数A1ij〜A6ijは、光源ベクトルまたは半角ベクトル等のユーザ定義ベクトルに応答して色値をもたらすように適合される。この適合は、様々なベクトル方向について各ピクセルでの色値を提供するイメージのセットからの線形回帰を用いることによって行われる。例示のための以下の説明は、係数A1ij〜A6ijが、固定の視点ベクトルについて光源ベクトルに応答して色値を生成するように適合される例に焦点を合わせる。それにも関わらず、これらの技術は、任意のユーザ定義ベクトルに応答して色値を生成するように適合された係数を含むパラメトリックテクスチャマップに容易に適用可能である。さらに、パラメトリックテクスチャマップ16中の係数A1ij〜A6ijは、図1のディスプレイ20の特定のカラーチャネルについての色値を生成する。さらなるパラメトリックテクスチャマップを使用して、残りのチャネルについての色値を生成することもできる。ステップは、図1のバッファ12に格納されている3Dオブジェクトを表すポリゴンのセット中の各ポリゴンでもって繰り返される。プロセスは開始から始められる。
【0024】
ステップ30において、図1のグラフィックスプロセッサ14は、ポリゴン22の各頂点T1、T2、およびT3にパラメトリックテクスチャマップ16の空間テクスチャ座標uおよびvを割り当てる。頂点T1、T2、およびT3の空間テクスチャ座標は、uT1、vT1、uT2、vT2、およびuT3、vT3、とそれぞれ示される。
【0025】
ステップ32において、グラフィックスプロセッサ14は、ポリゴン22の頂点における方向ベクトルを決定する。本例での方向ベクトルは、ポリゴン22の頂点における光源ベクトルである。頂点T1における光源ベクトルは、T1から図2の光源28の3D座標を指す正規化3Dベクトルである。同様に、頂点T2およびT3における光源ベクトルは、T2およびT3それぞれから光源28の3D座標を指す正規化3Dベクトルである。
【0026】
ステップ34において、グラフィックスプロセッサ14は、ステップ32において決定された正規化3D方向ベクトルを、パラメトリックテクスチャマップ16のテクスチャ座標系uおよびvに射影する。これにより、パラメトリックテクスチャマップ16のテクスチャ座標系における各正規化3D方向ベクトルの2Dパラメータ表示または2D成分が得られる。正規化3D方向ベクトルの2Dパラメータ表示は、Du,Dvと示される。
【0027】
ステップ36において、グラフィックスプロセッサ14は、ステップ34において決定された、射影された方向ベクトルDu,Dvと、ステップ30において決定された空間テクスチャ座標uT1、vT1、uT2、vT2、およびuT3、vT3とをポリゴン22にわたって補間する。これにより、ポリゴン22の各ピクセルが、Du,Dvパラメータ、およびパラメータテクスチャマップ16の座標空間におけるuおよびvテクセル座標に関連付けられる。ステップ36の補間は、様々な既知の技術を使用して実行され得る。
【0028】
ステップ38において、グラフィックスプロセッサ14は、パラメトリックテクスチャマップ16から多項式係数A1ij〜A6ijを得て、補間する。テクスチャマップの値を求めること、および補間には、いくつかのオプションがあることに留意することが重要である。補間されたテクスチャ座標は、入力テクスチャマップにおいて正確なテクセルを生成しないため、テクスチャ補間が必要である。これらの補間方法はよく知られており、最隣接、双線形、トライリニア(trilinear)、および異方性補間(anisotropic interpolation)を含む。1つのオプションは、各サンプルポイントで多項式の数値を求めてから、出力値を補間するということである。別のオプションは、多項式係数を補間して、補間後の多項式を生成してから、多項式の数値を求めることである。図3は、2番目のオプションを示している。
【0029】
ステップ40において、グラフィックスプロセッサ14は、ステップ36からの補間後のDuおよびDv項と、ステップ38からの補間後のA1ij〜A6ij係数とを使用してピクセル単位で数2の数値を求める。ピクセルPkの場合、数2は、テクセル値Ciをもたらし、次にこのテクセル値を色値、輝度値、または他のピクセルもしくはテクスチャデータとして使用できる。
【0030】
概して、パラメトリックテクスチャマッピングの効果は、使用中のユーザ定義ベクトルに対して正面対向するポリゴンにのみ適用されるべきである場合がある。正面対向または背面対向のポリゴンを識別するために、第3の変数を使用する。この第3のパラメータDは通常、ユーザ定義ベクトルを頂点法線ベクトルに射影した結果である。正面対向ポリゴンの場合、Dは正であり、背面対向ポリゴンの場合、Dは負である。根本的に、Dは、頂点法線ベクトルとユーザ定義ベクトルとのドット積である。正面対向から背面対向に遷移するときにパラメトリックテクスチャマッピング効果を急に停止させることが望ましい場合もあれば、望ましくない場合もある。望ましい場合、ユーザは、効果を減衰させて、おそらくユーザ定義ベクトルに関して背面対向する三角形の評価を含む、急なまたはゆるやかなカットオフを必要に応じて与えることができる。
【0031】
本技術は、表面の色への表面特徴の寄与を直接的にモデリングすることにより、表面特徴の3D効果をモデリングする。寄与は、数2の係数で表される。本技術は、方向依存性であり、ピクセル単位での照明方程式を解くことによりもたらされるものに匹敵する質のリアルさを提供する、表面特徴のポリゴンへのマッピングをもたらす。二次多項式である数2を解くことは、ピクセル単位で照明方程式を解くことと比較して、ハードウェア、ソフトウェア、またはこれら双方における実行が比較的容易である。数2を解くことには、整数の乗算および加法演算が含まれるが、照明方程式を解くことには、浮動小数点、平方根、および除算演算が含まれる。数2には四次多項式が選択されているが、双三次、およびより高次の多項式を使用してもよい。本技術は、非多項式関数であってもサポートすることができる。しかし、より複雑な関数は現在、実施コストがより高く、これは目下過度と考えられるため、好ましくない。
【0032】
次に、図4A〜図4Cを参照すると、例示的な表面構造42に関する図1のパラメトリックテクスチャマップ16の係数A1ij〜A6ijを決定するための構成が示される。図4Aは、表面構造42の上面図を示す。表面構造42は、一対の軸DuおよびDvに位置合わせされて示される。表面構造は、正方形ピラミッド構造44〜52のアレイからなる。サブ領域54は、表面構造のテクセルのうちの1つを表す。この表面構造は、表面構造の一例にすぎず、本技術を利用して、想像しうるあらゆる表面構造をモデリングすることができる。
【0033】
図4Bは、カメラ58および光源を位置決めするために使用される半球形ドーム56と共に図4Aの表面構造42の側面図を示す。この場合、単一の光源が、ドームの2つの例示的な位置60および62に配置されて示される。ベクトル64は、位置60の場合の光源ベクトルを表し、ベクトル66は、位置62の場合の光源ベクトルを表す。
【0034】
カメラ58は、光源ベクトルに応答して色値を生成するように適合されるパラメトリックテクスチャマップ16の係数を得る際に、ドーム56の定位置に固定される。ベクトル68は、カメラの固定位置の視点ベクトルを表す。カメラは、ドーム56の光源の所定位置の各セットについて、表面構造42のイメージを得るために使用される。光源の各所定位置は、異なる光源ベクトルを表し、カメラを使用して得られる対応イメージは、表面構造42の各テクセルの色値をもたらす。たとえば、n個の異なる光源位置から得られるイメージは、各テクセルごとにn個の色値をもたらし、各色値は、視点ベクトル68について異なる光源ベクトルに対応する。
【0035】
図4Cは、ドーム56の6つの異なる光源位置についてカメラ58を使用して得られるテクセル54の色値のグラフを示す。これらの色値は、位置60にある光源を使用して得られた色値60’、および位置62にある光源を使用して得られた色値62’を含む。色値は、軸DuおよびDvに対してプロットした。視点ベクトル68についてのテクセル54の係数A1ij〜A6ijは、既知の技術を使用して、数2の多項式をテクセル54について得られた色値にフィッテイングさせることにより得られる。数2の多項式とテクセル54についてカメラ58によって得られた6つの色値との間のフィッテイングを表す表面70が示される。表面70の、カメラ58によって得られたn個の色値へのフィッテイングは、標準の最小平均二乗法を使用して多項式係数をもたらすことによって達成され得る。
【0036】
この技術は、任意のユーザ定義ベクトルに応答して色値をもたらすように適合されたパラメトリックテクスチャマップ16の係数を得るように容易に修正され得る。たとえば、光源を、光源ベクトル64に対応する位置60に固定することができる。次に、視点ベクトルを表すカメラ58がドーム56上のn個の異なる位置に移動する。得られた色値への表面フィッティングは、上記と同様に行われる。
【0037】
本技術のさらなる修正は、有用な各種効果を生み出すように、パラメトリックテクスチャマップを、既存の頂点毎にまたはピクセル毎に照明ハードウェアに組み合わせることである。1つの方法は、標準のブリン/フォン照明計算の出力を、光源ベクトル依存のパラメトリックテクスチャマップの値を求めた結果により変調するということである。こうすることにより、数1は以下になる。
【数3】
I=kaIa+kdId(N・L)+ksIs(N・H)nPTM(u,v,Lu,Lv)
(3)
ここで、PTMは、数2の場合と同様にパラメトリックテクスチャマップ関数であり、LuおよびLvは、上記のように光源ベクトルLの射影を表す。パラメトリックテクスチャマップが空間的に変化するが、すべての光入射方向について一定であるという普通の場合では、数3は、当技術分野において良く知られているスペキュラマップまたはグロスマップに機能的に等価になる。従来のスペキュラマップでもって利用できない光方向の依存性は、テクセルが、小規模な表面のばらつきによるシャドーイングによりスペキュラハイライトを示さない、シャドーイング等の効果を再現するために使用され得る。
【0038】
別の修正は、パラメトリックテクスチャマップを利用して、オフスペキュラ(off-specular)およびフレネル効果をシミュレートするということである。多くの表面では、目に見える粗さが減るため、入射角が低い場合にスペキュラが増大する。これは、入射角がグレージングに近づくにつれて大きさが増大するパラメトリックテクスチャマップを使用してスペキュラ寄与を変調することにより、上述の技術を使用して再現され得る。また、入射照明依存性を使用して、良く知られたフレネル効果を近似することも可能である。フレネル効果は、グレージング照明入射角の場合に反射率が大幅に増大する金属およびガラスなどの多くの表面に重要である。ガラスおよび他の誘電体の反射率は、入射方向が表面法線にほぼ等しい場合には低い。金属もまた、波長依存性を含むフレネル反射を示す。この結果、異なる波長について反射率が変化するため、反射光の色が、入射角の変化に応じて変化する。これらの依存性は、各テクセルに格納される多項式関数により近似され得る。これらの照明依存効果の組み合わせはすべて、単一のパラメトリックテクスチャマップに格納され得る。さらに、パラメトリックテクスチャマップにおけるテクセル多項式は独立しているため、これらの属性は表面にわたって変化することができる。この結果、パラメトリックテクスチャマップは、単一のテクスチャマップで異なる材料を表すことができる。
【0039】
さらにまた、パラメトリックテクスチャマップを使用して、良く知られている異方性材料をモデリングすることができる。異方性材料は、反射関数が表面法線を中心にして循環変化する。それらの例には、毛皮、髪の毛、毛羽仕上げの材料、および艶出し加工された金属が含まれる。異方性材料をレンダリングするための従来の技術は、異方性の方向と並ぶ表面ポイントの法平面を定義する。次に、照明計算において、光入射方向の法平面への射影を用いる。本技術によれば、テクスチャマップ中の各テクセルについての関数は、法平面に射影された光入射方向の大きさに基づく。次に、パラメトリックテクスチャマップの値を求めた結果は、計算されたスペキュラ照明(specular lighting)でもって変調されるため、スペキュラハイライトは、光入射方向が異方性方向と整列する領域でのみ発生する。いくつかの従来の方法とは異なり、この技術によって、異方性材料が局所的な光源を使用しての遠近画法的ビューのもとでレンダリングされることが可能になる。
【0040】
良く知られた従来の結果とは異なり、広範囲の新しい効果も達成され得る。これは、ユーザが、所望であれば射影されたベクトルを直接割り当てることができるため、パラメトリックテクスチャマップを使用して任意の所望のデータを表すことにより可能になる。ユーザは、一次元(1D)関数を表すために、パラメータのうちの1つを定数のままにするように選択することができる。たとえば、1日の中で時間が変化するようなあるシーンの連続写真など、いくつかの時変関数をこの方法で表現することができる。この効果に対する1つの制約は、フレームからフレームに急な変化を含むシーンを取り扱うことが困難なことである。
【0041】
さらに、空間色変化を符号化するために、標準的な2Dテクスチャマッピングの2つの軸を使用する代わりに、テクスチャマップの2つのテクスチャ座標を、二変量関数のパラメータとして使用して、オブジェクトの反射属性を表すことができる。本技術は、単純な色値をテクスチャマップに格納する代わりに、本技術が2つの変数の関数を格納することができるという点において、従来の技術に対してさらなる利点を有する。この関数は、必要に応じて、光、視点、半角、または他のベクトルにより制御され得る。したがって、本技術を使用して、従来の技術でのような2つだけではなく、完全な四次元の反射関数を有するオブジェクトを表現しレンダリングすることができる。また、従来の技術とは異なり、本技術は、局所的な光または視点の影響を再現することができる。
【0042】
さらにまた、本技術は、ボリュームレンダリングにも利用され得る。ボリュームレンダリングは、単に2Dパラメトリックテクスチャマップを格納する代わりに、3Dパラメトリックテクスチャマップを利用する。これは、2Dテクスチャマップのスタックとして視覚化され得る。ボリュームレンダリングの場合、上記と同様に、関数の係数があらゆるテクセルについて格納される。次に、あらゆるテクセルにおいてパラメトリックテクスチャマップの値を求めて、ボクセル、単位ボリュームエレメント、色値を決定することにより、3Dテクスチャマッピングハードウェアを使用してボリュームをレンダリングすることができる。さらに、さらなる関数を使用して、各ボクセルの透明度を表すことができる。透明度関数のパラメータは、所望の属性を有するボクセルを他のボクセルよりも多少不透明にするように、ユーザによって指定される。
【0043】
伝統的なバンプマップを使用して表面の細部を表示することに伴う問題の1つは、特定のサンプリングレートに合わせるためにバンプマップをフィルタリングすることである。MIPマップを使用する幼稚な手法は、表面の平滑化につながり、それによってバンプ自体がなくなる。これは、バンプマップの目的に反する。再考すると、積分したい関数は、表面の乱れ自体ではなく、でこぼこなパッチから放射される光であることが認識されるであろう。パラメトリックテクスチャマップはイメージベースの表現であるため、係数A1〜A6自体をMIPマッピングすることによりフィルタリング効果を達成することができる。かかる結論の裏付けは、n個のサンプルを使用してパッチΩにわたって積分した以下の式を考えることによって認識され得る。
【0044】
【数4】
【0045】
点検することにより、光依存性が係数において線形であることがわかる。数4によれば、パッチにわたって係数を累積してからその和を求めることは、独立して求めた場合の各テクセル寄与の色を累積することに等しい。これにより、係数を直接MIPマッピングすることが可能になるだけではなく、フットプリントアセンブリ(footprint assembly)等の向上した画質をもたらす異方性フィルタリング技術もサポートされ得る。したがって、パラメトリックテクスチャマップを使用しての補間には2つのオプションがある。第1に、すべてのサンプルポイントにおいて多項式の値を求めてから、計算された値を補間することができる。第2に、多項式の係数を補間してから、補間された多項式の値を求めることができる。どちらのオプションが好ましいかは、特定の実施によって決まる。
【0046】
本発明は、特定の実施形態により例示され説明されたが、特許請求の範囲およびそれらの等価物に定義されるような本発明の思想および範囲から逸脱することなく、多くの変更および修正を行うことができることを理解されたい。
【図面の簡単な説明】
【図1】 本発明の好適な実施形態によるコンピュータグラフィックスシステムのブロック図である。
【図2】 図1のバッファにおいて定義され、図1のパラメトリックテクスチャマップにより定義される表面特徴を用いて、図1のグラフィックスプロセッサによりレンダリングされるべきポリゴンの図的表現である。
【図3】 パラメトリックテクスチャマップによって定義される表面特徴を用いて、ポリゴンをレンダリングする本発明による方法の流れ図である。
【図4A〜図4C】 本発明に使用される表面構造例のパラメトリックテクスチャマップ中の係数を決定するための構成を示す図である。
Claims (14)
- 3Dオブジェクトの2Dビューを表示するコンピュータグラフィックスシステムであって、
3Dオブジェクトを表すポリゴンデータを記憶するバッファメモリと、
パラメトリックテクスチャマップのデータを記憶するメモリと、
前記バッファメモリに記憶された前記ポリゴンデータ、及び前記メモリに記憶されたパラメトリックテクスチャマップのデータに基いて、前記3Dオブジェクトの2Dビューを生成するグラフィックスプロセッサと、
前記グラフィックスプロセッサにより生成された前記3Dオブジェクトの前記2Dビューを表示する表示装置と
を含み、前記パラメトリックテクスチャマップのデータは、表面構造の各テクセルについて、ユーザ定義ベクトルに応答して変化するテクセル値を生成する方程式についての一組の係数を含む、コンピュータグラフィックスシステム。 - 前記パラメトリックテクスチャマップの前記係数が、異なる照明入射角についての反射率の変化を示し、それによってオフスペキュラ効果およびフレネル効果を近似する、請求項1記載のシステム。
- 前記パラメトリックテクスチャマップの前記係数の少なくとも1つが、一次元関数を表すために、定数であるように選択される、請求項1記載のシステム。
- 前記パラメトリックテクスチャマップの前記係数のいずれもが、空間的な色の変化を符号化するために選択されない、請求項1記載のシステム。
- 特定のサンプリングレートに合うように前記パラメトリックテクスチャマップの前記係数をフィルタリングするために、前記係数はMIPマッピングされる、請求項1記載のシステム。
- 前記パラメトリックテクスチャマップの前記係数の効果が、正面対向から背面対向までの移行時に減衰される、請求項1記載のシステム。
- 前記方程式が多項式である、請求項1記載のシステム。
- 前記方程式が非多項式である、請求項1記載のシステム。
- コンピュータグラフィックスシステムにおいて、パラメトリックテクスチャマップを使用して3Dオブジェクトの2Dビューを表示する方法であって、
グラフィックスプロセッサによって、バッファメモリに記憶された3Dオブジェクトを表すポリゴンデータを読み出すステップと、
前記グラフィックスプロセッサによって、メモリに記憶されたパラメトリックテクスチャマップのデータを読み出すステップと、
前記グラフィックスプロセッサによって、前記ポリゴンデータ、及び前記パラメトリックテクスチャマップのデータに基いて、前記3Dオブジェクトの2Dビューを生成するステップと、
前記グラフィックスプロセッサによって、前記3Dオブジェクトの前記2Dビューを表示装置上に表示するステップと
を含み、前記パラメトリックテクスチャマップのデータは、表面構造の各テクセルについて、ユーザ定義ベクトルに応答して変化する前記テクセルの値を生成する方程式についての一組の係数を含む、方法。 - 前記係数は、異なる照明入射角についての増加する反射率の変化を示し、それによってオフスペキュラ効果およびフレネル効果を近似する、請求項9記載の方法。
- 前記係数の少なくとも1つが、一次元関数を表すために、定数であるように選択される、請求項9記載の方法。
- 前記係数のいずれもが、空間的な色の変化を符号化するために選択されない、請求項9記載の方法。
- 特定のサンプリングレートに合うように前記パラメトリックテクスチャマップの前記係数をフィルタリングするために、前記係数はMIPマッピングされる、請求項9記載の方法。
- 前記パラメトリックテクスチャマップの前記係数の効果が、正面対向から背面対向までの移行時に減衰される、請求項9記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/528,700 | 2000-03-17 | ||
US09/528,700 US6515674B1 (en) | 2000-03-17 | 2000-03-17 | Apparatus for and of rendering 3d objects with parametric texture maps |
PCT/US2001/007357 WO2001071668A2 (en) | 2000-03-17 | 2001-03-06 | Apparatus for and method of rendering 3d objects with parametric texture maps |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003528406A JP2003528406A (ja) | 2003-09-24 |
JP5002742B2 true JP5002742B2 (ja) | 2012-08-15 |
Family
ID=24106785
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001569769A Expired - Fee Related JP5002742B2 (ja) | 2000-03-17 | 2001-03-06 | パラメトリックテクスチャマップを使用して3dオブジェクトをレンダリングするための装置および方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US6515674B1 (ja) |
EP (1) | EP1264279A2 (ja) |
JP (1) | JP5002742B2 (ja) |
WO (1) | WO2001071668A2 (ja) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7733349B1 (en) * | 1999-03-09 | 2010-06-08 | Microsoft Corporation | Device, method, and system for generating per-pixel light values using texture parameters |
JP2001084405A (ja) * | 1999-09-16 | 2001-03-30 | Sega Corp | ポリゴン画像形成方法及び、これを用いた画像処理装置 |
US6888544B2 (en) * | 2000-03-17 | 2005-05-03 | Hewlett-Packard Development Company, L.P. | Apparatus for and method of rendering 3D objects with parametric texture maps |
US7071937B1 (en) * | 2000-05-30 | 2006-07-04 | Ccvg, Inc. | Dirt map method and apparatus for graphic display system |
US6593925B1 (en) * | 2000-06-22 | 2003-07-15 | Microsoft Corporation | Parameterized animation compression methods and arrangements |
US6919904B1 (en) * | 2000-12-07 | 2005-07-19 | Nvidia Corporation | Overbright evaluator system and method |
US6753875B2 (en) * | 2001-08-03 | 2004-06-22 | Hewlett-Packard Development Company, L.P. | System and method for rendering a texture map utilizing an illumination modulation value |
US7136072B2 (en) * | 2001-08-03 | 2006-11-14 | Hewlett-Packard Development Company, L.P. | System and method for performing texture synthesis |
US6700585B2 (en) * | 2001-08-03 | 2004-03-02 | Hewlett-Packard Development Company, L.P. | System and method for synthesis of parametric texture map textures |
US6864889B2 (en) * | 2001-10-31 | 2005-03-08 | Hewlett-Packard Development Company, L.P. | System for previewing a photorealistic rendering of a synthetic scene in real-time |
US6781583B2 (en) * | 2001-10-31 | 2004-08-24 | Hewlett-Packard Development Company, L.P. | System for generating a synthetic scene |
AU2003295586B2 (en) * | 2002-11-15 | 2009-05-07 | Warner Bros. Entertainment Inc. | Method for digitally rendering skin or like materials |
US7030884B2 (en) | 2003-02-13 | 2006-04-18 | Hewlett-Packard Development Company, L.P. | System and method for resampling texture maps |
WO2004079663A1 (ja) * | 2003-03-06 | 2004-09-16 | Digital Media Professionals Inc. | 光反射強度計算回路 |
JP4229319B2 (ja) * | 2003-05-12 | 2009-02-25 | 株式会社バンダイナムコゲームス | 画像生成システム、プログラム及び情報記憶媒体 |
US7623730B2 (en) * | 2003-07-30 | 2009-11-24 | Hewlett-Packard Development Company, L.P. | System and method that compensate for rotations of textures defined by parametric texture maps |
US7006103B2 (en) * | 2003-07-30 | 2006-02-28 | Hewlett-Packard Development Company, L.P. | System and method for editing parametric texture maps |
US7009620B2 (en) * | 2003-07-30 | 2006-03-07 | Hewlett-Packard Development Company, L.P. | System and method for combining parametric texture maps |
US7002592B2 (en) * | 2003-07-30 | 2006-02-21 | Hewlett-Packard Development Company, L.P. | Graphical display system and method for applying parametric and non-parametric texture maps to graphical objects |
US6947666B2 (en) * | 2003-10-22 | 2005-09-20 | Hewlett-Packard Development Company, L.P. | Support apparatus and method for use with a camera and strobe lights |
US7012615B2 (en) * | 2004-02-12 | 2006-03-14 | Pixar | Using polynomial texture maps for micro-scale occlusions |
US7340098B2 (en) | 2006-03-15 | 2008-03-04 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for image conversion |
JP5147287B2 (ja) * | 2006-05-23 | 2013-02-20 | パナソニック株式会社 | 画像処理装置、画像処理方法、プログラム、記録媒体および集積回路 |
US8436855B1 (en) * | 2007-02-19 | 2013-05-07 | Aechelon Technology, Inc. | Efficient illumination of large three dimensional environments |
JP6100086B2 (ja) * | 2013-05-15 | 2017-03-22 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63213079A (ja) * | 1987-02-28 | 1988-09-05 | Nippon Telegr & Teleph Corp <Ntt> | 画像生成装置 |
JPH05298460A (ja) * | 1992-04-16 | 1993-11-12 | Dainippon Printing Co Ltd | 貝殻質感表現装置 |
JPH05342368A (ja) * | 1992-06-11 | 1993-12-24 | Hitachi Ltd | 3次元画像生成方法及び装置 |
JPH07200867A (ja) * | 1993-12-28 | 1995-08-04 | Matsushita Electric Ind Co Ltd | 画像生成装置 |
JPH0822556A (ja) * | 1994-07-08 | 1996-01-23 | Ricoh Co Ltd | テクスチャマッピング装置 |
JPH1083180A (ja) * | 1996-09-06 | 1998-03-31 | Hitachi Ltd | グラフィックス表示装置及び方法 |
JPH113432A (ja) * | 1997-06-12 | 1999-01-06 | Sega Enterp Ltd | 画像処理装置、ゲーム装置、その方法および記録媒体 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5544291A (en) | 1993-11-10 | 1996-08-06 | Adobe Systems, Inc. | Resolution-independent method for displaying a three dimensional model in two-dimensional display space |
-
2000
- 2000-03-17 US US09/528,700 patent/US6515674B1/en not_active Expired - Lifetime
-
2001
- 2001-03-06 JP JP2001569769A patent/JP5002742B2/ja not_active Expired - Fee Related
- 2001-03-06 WO PCT/US2001/007357 patent/WO2001071668A2/en active Application Filing
- 2001-03-06 EP EP01959942A patent/EP1264279A2/en not_active Ceased
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63213079A (ja) * | 1987-02-28 | 1988-09-05 | Nippon Telegr & Teleph Corp <Ntt> | 画像生成装置 |
JPH05298460A (ja) * | 1992-04-16 | 1993-11-12 | Dainippon Printing Co Ltd | 貝殻質感表現装置 |
JPH05342368A (ja) * | 1992-06-11 | 1993-12-24 | Hitachi Ltd | 3次元画像生成方法及び装置 |
JPH07200867A (ja) * | 1993-12-28 | 1995-08-04 | Matsushita Electric Ind Co Ltd | 画像生成装置 |
JPH0822556A (ja) * | 1994-07-08 | 1996-01-23 | Ricoh Co Ltd | テクスチャマッピング装置 |
JPH1083180A (ja) * | 1996-09-06 | 1998-03-31 | Hitachi Ltd | グラフィックス表示装置及び方法 |
JPH113432A (ja) * | 1997-06-12 | 1999-01-06 | Sega Enterp Ltd | 画像処理装置、ゲーム装置、その方法および記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
US6515674B1 (en) | 2003-02-04 |
EP1264279A2 (en) | 2002-12-11 |
JP2003528406A (ja) | 2003-09-24 |
WO2001071668A2 (en) | 2001-09-27 |
WO2001071668A3 (en) | 2002-01-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5002742B2 (ja) | パラメトリックテクスチャマップを使用して3dオブジェクトをレンダリングするための装置および方法 | |
US6888544B2 (en) | Apparatus for and method of rendering 3D objects with parametric texture maps | |
US6456287B1 (en) | Method and apparatus for 3D model creation based on 2D images | |
US7106325B2 (en) | System and method for rendering digital images having surface reflectance properties | |
US5704024A (en) | Method and an apparatus for generating reflection vectors which can be unnormalized and for using these reflection vectors to index locations on an environment map | |
US6903741B2 (en) | Method, computer program product and system for rendering soft shadows in a frame representing a 3D-scene | |
Alexa et al. | Point-based computer graphics | |
US11625861B2 (en) | Point cloud colorization system with real-time 3D visualization | |
JPH0683979A (ja) | 影の生成を伴うコンピュータ図形表示の方法及びシステム | |
JPH06348864A (ja) | 画像表示装置、コンピュータ・グラフィックス・システム及び画像表示方法 | |
US6654013B1 (en) | Apparatus for and method of enhancing shape perception with parametric texture maps | |
US6583790B1 (en) | Apparatus for and method of converting height fields into parametric texture maps | |
JP3549871B2 (ja) | 描画処理装置及び方法、描画処理プログラムを記録した記録媒体、描画処理プログラム | |
US7133052B1 (en) | Morph map based simulated real-time rendering | |
US6864889B2 (en) | System for previewing a photorealistic rendering of a synthetic scene in real-time | |
US6781583B2 (en) | System for generating a synthetic scene | |
AU2017228700A1 (en) | System and method of rendering a surface | |
US20040233196A1 (en) | Logic arrangements storage mediums, and methods for generating digital images using brush strokes | |
JPH05298460A (ja) | 貝殻質感表現装置 | |
Shreiner et al. | An interactive introduction to opengl programming | |
JP2000067266A (ja) | ラスターイメージの表示方法及び編集方法並びにそれらを利用したコンピュータ支援図形処理システム | |
JP2011065535A (ja) | 画像処理プログラムおよびコンピュータ読み取り可能な記録媒体 | |
Angel et al. | An interactive introduction to OpenGL and OpenGL ES programming | |
JPH06236446A (ja) | 図形表示方法及び装置 | |
Gelb et al. | Image-Based Lighting for Games |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080305 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101130 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20110225 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20110304 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110530 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110712 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110713 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111108 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120113 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20120113 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20120113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150601 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5002742 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150601 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150601 Year of fee payment: 3 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150601 Year of fee payment: 3 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150601 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |