JP2001118083A - 図形データ処理装置 - Google Patents

図形データ処理装置

Info

Publication number
JP2001118083A
JP2001118083A JP30132599A JP30132599A JP2001118083A JP 2001118083 A JP2001118083 A JP 2001118083A JP 30132599 A JP30132599 A JP 30132599A JP 30132599 A JP30132599 A JP 30132599A JP 2001118083 A JP2001118083 A JP 2001118083A
Authority
JP
Japan
Prior art keywords
polygon
value
screen
unit
coordinate system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP30132599A
Other languages
English (en)
Other versions
JP3587105B2 (ja
Inventor
Hayato Nakao
早人 中尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP30132599A priority Critical patent/JP3587105B2/ja
Publication of JP2001118083A publication Critical patent/JP2001118083A/ja
Application granted granted Critical
Publication of JP3587105B2 publication Critical patent/JP3587105B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

(57)【要約】 【課題】 あまり容量の大きくない複数のZバッファや
フレームバッファを用いて、処理能力の高いZバッファ
法での図形データ処理装置を提供する。 【解決手段】 スクリーンを分割して分割スクリーンご
とに処理を行うようにデータ処理部32を並列化する。
各分割スクリーンに対応したデータ処理部32ごとにク
リッピングを行って、Zバッファ法により、スクリーン
上のピクセルに対応したZ値とZバッファに記憶されて
いるZ値との比較を行う。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、Zバッファ法によ
り陰面消去を行って3次元図形を2次元表示するために
図形データを処理する図形データ処理装置に関する。
【0002】
【従来の技術】コンピュータグラフィックス(CG)の
一般的な図形データ処理装置は、物体を3次元空間に配
置した複数のポリゴンと呼ばれる多角形によって表現
し、3次元空間における視点位置、光源位置を決め、視
点から見た画像を生成する。
【0003】図2は、従来の図形データ処理装置の一実
施例を示す構成図である。従来の図形データ処理装置
は、モデリング・視野変換部10、Z面クリッピング部
12、頂点輝度計算部14、透視変換部16、XY面ク
リッピング部18、ビューポート変換部20、頂点輝度
・Z値内挿部22、Z値比較部24、Zバッファ26、
フレームバッファ28、出力部30により構成されてい
る。
【0004】まず、物体を表現した多角形の頂点座標や
物体の色、視点座標、視線の向き、光源座標、光線の向
き、光源の種類(平行光源、点光源)、光源の色などの
生成したい画像の基本的なデータとなるシーンデータを
モデリング・視野変換部10に入力する。モデリング・
視野変換部10において、多角形、光源、視点の位置を
定義した3次元座標を、視点を原点としZ軸が視線の向
きと平行な3次元座標に変換する。変換後の3次元座標
系を視点座標系と呼ぶ。
【0005】Z面クリッピング部12において、視点座
標系のZ軸に垂直なスクリーンを定義する。視点から見
てスクリーンを含む平面の手前に多角形全体が出ている
場合、その多角形を破棄し、多角形の一部が出ている場
合、出ている部分のみを破棄する。頂点輝度計算部14
において、光源座標、光線の向き、光源の種類、光源の
色、多角形の頂点座標、多角形の法線ベクトル、多角形
が表現している物体の色などのシーンデータから、多角
形の頂点における輝度を計算する。
【0006】図3は座標変換の説明図である。透視変換
部16において、視点座標系を透視座標系に変換する。
透視座標系は視点から見てスクリーンを透視した空間
を、スクリーンの横をX=−1からX=1の範囲、スク
リーンの縦をY=−1からY=1の範囲、Z軸とスクリ
ーンの交点を原点、Z軸方向に無限大の位置をZ=1と
定める座標系である。斜線部がスクリーンに投影され表
示される空間である。XY面クリッピング部18におい
て、透視座標系のXY座標であるX=−1からX=1の
範囲、Y=−1からY=1の範囲の外側に多角形全体が
出ている場合、その多角形を破棄し、多角形の一部が出
ている場合、出ている部分のみを破棄する。
【0007】ビューポート変換部20において、透視座
標系からスクリーン座標系への変換を行う。スクリーン
座標系はスクリーンのピクセル数を考慮して、XY座標
をスクリーンのピクセル数に合わせ、Z軸方向をZ=0
からZ=232−1の範囲の整数値となるように定める座
標系である。透視座標系においてX=−1からX=1の
範囲、Y=−1からY=1の範囲で表されたスクリーン
を、X=0からX={横のピクセル数−1}の範囲、Y
={縦のピクセル数−1}からY=0の範囲に変換す
る。また、透視座標系においてZ=0からZ=1の範囲
で表された奥行きを、Z=0からZ=232−1の範囲の
整数値となるように変換する。232は一般にZバッファ
のビット数が4バイト=32ビットであることによるも
のである。
【0008】頂点輝度・Z値内挿部22において、頂点
輝度計算部14で求めた多角形頂点の輝度及び多角形の
頂点のZ軸方向の座標値を内挿して、多角形の内部の点
での輝度とZ軸方向の座標値を算出する。このZ軸方向
の座標値をZ値と呼ぶ。Z値比較部24において、頂点
輝度・Z値内挿部22で求めたスクリーン上のピクセル
に対応したZ値とZバッファ26に記憶されているZ値
とを比較する。頂点輝度・Z値内挿部22で求めたZ値
の方が小さい場合には、Zバッファ26に内挿で求めた
Z値を記憶させ、フレームバッファ28に内挿で求めた
輝度を記憶させる。頂点輝度・Z値内挿部22で求めた
Z値の方が大きい場合は、Zバッファ26、フレームバ
ッファ28への記憶は行わない。なお、Zバッファ2
6、フレームバッファ28はシーンデータをモデリング
・視野変換部10に入力する前にあらかじめ初期化され
ている。
【0009】このようにZバッファに最新のZ値を記憶
させて、そのZ値を用いて陰面消去を行う。すべての多
角形に関して、Z値を算出しZバッファ26に記憶され
ているZ値と比較する処理が終了したら、フレームバッ
ファ28から出力部30を通じて、スクリーン上の各ピ
クセルに対応した輝度を表示データとして出力する。
【0010】
【発明が解決しようとする課題】Zバッファやフレーム
バッファは画像化しようとする画面全体のZ値や輝度を
記憶しなければならず、多角形単位で並列処理すること
はできない。したがって、Z値比較部において、スクリ
ーン上のピクセルに対応したZ値とZバッファに記憶さ
れているZ値とを比較する処理も、多角形単位で並列化
することができない。このため、Z値を記憶するZバッ
ファやフレームバッファには大容量のメモリが必要であ
った。
【0011】本発明は、Zバッファ法により陰面消去を
行って画像を表示するために、図形データを処理する処
理能力の高い図形データ処理装置を提供することを目的
としている。
【0012】
【課題を解決するための手段】本発明では、上記従来の
問題を鑑み、スクリーンを分割して分割スクリーンごと
に処理を行うようにデータ処理部を並列化する。各分割
スクリーンに対応したデータ処理部ごとにクリッピング
を行って、Zバッファ法によりスクリーン上のピクセル
に対応したZ値とZバッファに記憶されているZ値との
比較を行う。
【0013】すなわち本発明によれば、3次元空間に配
置された物体を近似する多角形を、視点を原点とする視
点座標系に設定するモデリング・視野変換部と、前記視
点座標系のZ軸に垂直な方向にスクリーンを定め、前記
スクリーンより前記視点に近い側に存在する前記多角形
のデータを破棄するZ面クリッピング部と、前記多角形
の頂点の輝度を算出する頂点輝度計算部と、前記視点座
標系を透視座標系に変換する透視変換部と、前記スクリ
ーンが分割された複数の分割スクリーンのそれぞれに対
応する複数のデータ処理部と、前記複数のデータ処理部
により算出されたデータを選択し出力する出力セレクタ
とを、有するものであって、前記複数のデータ処理部の
各々が、前記分割スクリーンの前記透視座標系における
X座標及びY座標の範囲の外にある多角形データを破棄
するXY面クリッピング部と、前記透視座標系からスク
リーン座標系への変換を行うビューポート変換部と、前
記頂点輝度計算部で求めた前記輝度及び前記スクリーン
座標系上での前記多角形の頂点のZ軸方向の座標値を内
挿して、前記多角形の内部の点の輝度及び前記多角形の
内部の点のZ軸方向の座標値を算出する頂点輝度・Z値
内挿部と、あらかじめZ値が記憶されているZバッファ
と、前記多角形の内部の点のZ軸方向の座標値と前記Z
値の大きさとを比較するZ値比較部と、前記Z値比較部
での比較結果に応じて、前記頂点輝度・Z値内挿部で求
めた前記多角形の内部の点の輝度を記憶するフレームバ
ッファとにより構成され、前記各Z値比較部での比較の
結果、前記多角形の内部の点のZ軸方向の座標値が前記
Zバッファに記憶されているZ値より小さい場合、前記
多角形の内部の点の輝度を前記フレームバッファに記憶
し、前記多角形の内部の点のZ軸方向の座標値を前記Z
値として前記Zバッファに記憶するよう構成された図形
データ処理装置が提供される。
【0014】
【発明の実施の形態】図1は、本発明の図形データ処理
装置に係る一実施形態を示す構成図である。本発明の図
形データ処理装置は、モデリング・視野変換部10、Z
面クリッピング部12、頂点輝度計算部14、透視変換
部16、出力セレクタ34と複数のデータ処理部32に
より構成されている。各データ処理部32は、XY面ク
リッピング部18、ビューポート変換部20、頂点輝度
・Z値内挿部22、Z値比較部24、Zバッファ26、
フレームバッファ28により構成されている。データ処
理部32は画像の分割数だけ必要となる。すなわち、画
像をn分割する場合はデータ処理部もn個必要となる。
本実施例では、画像を横に2分割し、2つのデータ処理
部32A、データ処理部32Bを設ける場合を説明す
る。
【0015】モデリング・視野変換部10から透視変換
部16までの処理過程は従来と同様である。透視変換部
16から出力されたデータは、データ処理部32A及び
データ処理部32BのXY面クリッピング部18に送ら
れる。透視変換部16から出力されたデータは、後述の
処理により分割スクリーンごとにデータが分けられ、並
列処理される。
【0016】図4(a)は、横に2分割されたスクリー
ンの模式図である。図4(b)は縦に2分割されたスク
リーンの模式図である。図4(a)に示すようにスクリ
ーンを横に2分割する場合を説明する。データ処理部3
2A、32Bは、図4(a)の分割スクリーンA、Bに
対応している。データ処理部32AのXY面クリッピン
グ部18において、透視座標系のXY座標であるX=−
1からX=1の範囲、Y=−1からY=0の範囲の外側
に多角形全体が出ている場合、その多角形を破棄し、多
角形の一部が出ている場合、出ている部分のみを破棄す
る。
【0017】また、データ処理部32BのXY面クリッ
ピング部18において、透視座標系のXY座標であるX
=−1からX=1の範囲、Y=0からY=1の範囲の外
側に多角形全体が出ている場合、その多角形を破棄し、
多角形の一部が出ている場合、出ている部分のみを破棄
する。
【0018】データ処理部32Aのビューポート変換部
20は、透視座標系においてX=−1からX=1の範
囲、Y=−1からY=0の範囲で表されたスクリーン
を、X=0からX={横のピクセル数−1}の範囲、Y
={縦のピクセル数/2−1}からY=0の範囲に、透
視座標系においてZ=0からZ=1の範囲で表された奥
行きを、Z=0からZ=232−1の範囲の整数値に変換
する。
【0019】データ処理部32Bのビューポート変換部
20は、透視座標系においてX=−1からX=1の範
囲、Y=0からY=1の範囲で表されたスクリーンを、
X=0からX={横のピクセル数−1}の範囲、Y=
{縦のピクセル数/2−1}からY=0の範囲に、透視
座標系においてZ=0からZ=1の範囲で表された奥行
きを、Z=0から232−1の範囲の整数値に変換する。
【0020】データ処理部中の頂点輝度・Z値内挿部2
2での処理からフレームバッファ28への書き込みまで
は従来と同様である。このようにして、各分割スクリー
ンに対応して、各データ処理部単位で各分割スクリーン
のピクセルに対して並列処理を行う。すべてのシーンデ
ータの処理が終了したら、出力セレクタ34を通じて、
2つのフレームバッファ28から各分割スクリーンの表
示データを出力する。
【0021】次に、図4(b)に示すようにスクリーン
を縦に2分割する場合を説明する。スクリーンを横に2
分割した場合と同様、各データ処理部32A、32Bは
図4(b)の分割スクリーンA、Bに対応している。X
Y面クリッピング部18で多角形を破棄する範囲、ビュ
ーポート変換部20で変換する座標系が、スクリーンを
横に2分割した場合と異なっている。
【0022】スクリーンを縦に2分割する場合、データ
処理部32AのXY面クリッピング部18において、透
視座標系のXY座標であるX=−1からX=0の範囲、
Y=−1からY=1の範囲の外側に多角形全体が出てい
る場合、その多角形を破棄し、多角形の一部が出ている
場合、出ている部分のみを破棄する。
【0023】また、データ処理部32BのXY面クリッ
ピング部18において、透視座標系のXY座標であるX
=0からX=1の範囲、Y=−1からY=1の範囲の外
側に多角形全体が出ている場合、その多角形を破棄し、
多角形の一部が出ている場合、出ている部分のみを破棄
する。
【0024】データ処理部32Aのビューポート変換部
20において、透視座標系からスクリーン座標系への変
換を行う場合、透視座標系においてX=−1からX=0
の範囲、Y=−1からY=1の範囲で表されたスクリー
ンを、X=0からX={横のピクセル数/2−1}の範
囲、Y={縦のピクセル数/2−1}からY=0の範囲
に変換する。また、透視座標系においてZ=0からZ=
1の範囲で表された奥行きを、Z=0からZ=232−1
の範囲の整数値となるように変換する。
【0025】また、データ処理部32Bのビューポート
変換部20において、透視座標系からスクリーン座標系
への変換を行う場合、透視座標系においてX=0からX
=1の範囲、Y=−1からY=1の範囲で表されたスク
リーンを、X=0からX={横のピクセル数/2−
1}、Y={縦のピクセル数−1}からY=0の範囲に
変換する。また、透視座標系においてZ=0からZ=1
の範囲で表された奥行きを、Z=0からZ=232−1の
範囲の整数値となるように変換する。
【0026】上記のように横又は縦にスクリーンを2分
割した場合、データ処理部の有するXY面クリッピング
部18、ビューポート変換部20、頂点輝度・Z値内挿
部22、Z値比較部24、Zバッファ26、フレームバ
ッファ28の容量が従来の1/2の容量であっても、従
来と同程度の画像処理能力を有する。
【0027】図5は4分割されたスクリーンの模式図で
ある。上記の実施例では、画像を2分割しているので2
つのデータ処理部32A、32Bを使用しているが、図
5に示すように画像を4分割することも可能である。こ
の場合も4つのデータ処理部を使用して、各分割スクリ
ーンのデータを並列処理する。このスクリーン分割は縦
分割又は横分割のどちらも可能であり、その分割パター
ンは図5(a)、図5(b)、図5(c)に示すパター
ンのいずれも可能である。
【0028】また、スクリーンをN分割して、各分割ス
クリーンのデータをN個のデータ処理部で並列処理する
ことも可能である。この場合、データ処理部の有するX
Y面クリッピング部18、ビューポート変換部20、頂
点輝度・Z値内挿部22、Z値比較部24、Zバッファ
26、フレームバッファ28の容量が従来の1/Nの容
量であっても、従来と同程度の画像処理能力を有し、特
にZバッファ26、フレームバッファ28の容量が小さ
い場合に効果を奏する。
【0029】
【発明の効果】本発明では、スクリーンを分割して分割
スクリーンごとに処理を行うようにデータ処理部を並列
化し、各分割スクリーンに対応したデータ処理部ごとに
クリッピングを行うので、スクリーン上のピクセルに対
応したZ値とZバッファに記憶されているZ値との比較
を分割スクリーンごとに行うことができる。分割スクリ
ーンごとに並列処理を行うことによって、従来よりも処
理能力の高い図形データ処理装置を実現することができ
る。また、分割スクリーンごとにZバッファやフレーム
バッファが存在するので、1つのZバッファ、1つのフ
レームバッファに対して大きな容量を必要としないとい
う効果がある。
【図面の簡単な説明】
【図1】本発明の図形データ処理装置に係る一実施形態
を示す構成図である。
【図2】従来の図形データ処理装置の一実施形態を示す
構成図である。
【図3】座標変換の説明図である。
【図4】横又は縦に2分割されたスクリーンの模式図で
ある。
【図5】4分割されたスクリーンの模式図である。
【符号の説明】
10 モデリング・視野変換部 12 Z面クリッピング部 14 頂点輝度計算部 16 透視変換部 18 XY面クリッピング部 20 ビューポート変換部 22 頂点輝度・Z値内挿部 24 Z値比較部 26 Zバッファ 28 フレームバッファ 30 出力部 32 データ処理部 34 出力セレクタ

Claims (1)

    【特許請求の範囲】
  1. 【請求項1】 3次元空間に配置された物体を近似する
    多角形を、視点を原点とする視点座標系に設定するモデ
    リング・視野変換部と、 前記視点座標系のZ軸に垂直な方向にスクリーンを定
    め、前記スクリーンより前記視点に近い側に存在する前
    記多角形のデータを破棄するZ面クリッピング部と、 前記多角形の頂点の輝度を算出する頂点輝度計算部と、 前記視点座標系を透視座標系に変換する透視変換部と、 前記スクリーンが分割された複数の分割スクリーンのそ
    れぞれに対応する複数のデータ処理部と、 前記複数のデータ処理部により算出されたデータを選択
    し出力する出力セレクタとを、 有するものであって、 前記複数のデータ処理部の各々が、 前記分割スクリーンの前記透視座標系におけるX座標及
    びY座標の範囲の外にある多角形データを破棄するXY
    面クリッピング部と、 前記透視座標系からスクリーン座標系への変換を行うビ
    ューポート変換部と、 前記頂点輝度計算部で求めた前記輝度及び前記スクリー
    ン座標系上での前記多角形の頂点のZ軸方向の座標値を
    内挿して、前記多角形の内部の点の輝度及び前記多角形
    の内部の点のZ軸方向の座標値を算出する頂点輝度・Z
    値内挿部と、 あらかじめZ値が記憶されているZバッファと、 前記多角形の内部の点のZ軸方向の座標値と前記Z値の
    大きさとを比較するZ値比較部と、 前記Z値比較部での比較結果に応じて、前記頂点輝度・
    Z値内挿部で求めた前記多角形の内部の点の輝度を記憶
    するフレームバッファとにより構成され、 前記各Z値比較部での比較の結果、前記多角形の内部の
    点のZ軸方向の座標値が前記Zバッファに記憶されてい
    るZ値より小さい場合、前記多角形の内部の点の輝度を
    前記フレームバッファに記憶し、前記多角形の内部の点
    のZ軸方向の座標値を前記Z値として前記Zバッファに
    記憶するよう構成された図形データ処理装置。
JP30132599A 1999-10-22 1999-10-22 図形データ処理装置 Expired - Fee Related JP3587105B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP30132599A JP3587105B2 (ja) 1999-10-22 1999-10-22 図形データ処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP30132599A JP3587105B2 (ja) 1999-10-22 1999-10-22 図形データ処理装置

Publications (2)

Publication Number Publication Date
JP2001118083A true JP2001118083A (ja) 2001-04-27
JP3587105B2 JP3587105B2 (ja) 2004-11-10

Family

ID=17895514

Family Applications (1)

Application Number Title Priority Date Filing Date
JP30132599A Expired - Fee Related JP3587105B2 (ja) 1999-10-22 1999-10-22 図形データ処理装置

Country Status (1)

Country Link
JP (1) JP3587105B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7053907B2 (en) 2002-08-09 2006-05-30 Victor Company Of Japan, Ltd. Image data generating apparatus
JP2010092507A (ja) * 2002-09-06 2010-04-22 Sony Computer Entertainment Inc 画像処理方法、画像処理装置、および画像処理システム
KR100966956B1 (ko) * 2002-09-06 2010-06-30 소니 컴퓨터 엔터테인먼트 인코포레이티드 이미지 프로세싱 방법 및 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7053907B2 (en) 2002-08-09 2006-05-30 Victor Company Of Japan, Ltd. Image data generating apparatus
JP2010092507A (ja) * 2002-09-06 2010-04-22 Sony Computer Entertainment Inc 画像処理方法、画像処理装置、および画像処理システム
KR100966956B1 (ko) * 2002-09-06 2010-06-30 소니 컴퓨터 엔터테인먼트 인코포레이티드 이미지 프로세싱 방법 및 장치

Also Published As

Publication number Publication date
JP3587105B2 (ja) 2004-11-10

Similar Documents

Publication Publication Date Title
US8144158B2 (en) Display system having floating point rasterization and floating point framebuffering
JP3052681B2 (ja) 3次元動画像生成装置
JPH10222694A (ja) 画像処理装置およびその方法
EP1847965A1 (en) Plotting device and plotting method
US5555359A (en) Computer graphics anti-aliasing method using a partitioned look-up table
US6441818B1 (en) Image processing apparatus and method of same
US8068120B2 (en) Guard band clipping systems and methods
JPH11161819A (ja) 画像処理装置、画像処理方法、及び画像処理プログラムを記録した記録媒体
EP0913795B1 (en) Image generation apparatus, image generation method, image generation program recording medium, image composition apparatus, image composition method, and image composition program recording medium
US6052131A (en) Apparatus and method for generating antialiased polygons
JP4148377B2 (ja) 画像生成装置、画像生成方法、画像生成プログラム記録媒体、画像合成装置、画像合成方法、および画像合成プログラム記録媒体
JP3587105B2 (ja) 図形データ処理装置
EP1139294B1 (en) Graphical image system and apparatus
JP3724340B2 (ja) 画像生成装置及び方法
JPS63113785A (ja) 図形表示方法
US6624820B2 (en) Graphic processing method for determining representative texture data for a plurality of pixels and apparatus for same
JP3311905B2 (ja) 画像処理装置
JP4449582B2 (ja) 画像生成装置
JP2004110330A (ja) 画像生成装置及びコンピュータプログラム
JP3438921B2 (ja) 動画像生成装置
JP2010157170A (ja) 全方向影投下レンダラー
JPH09153142A (ja) レンダリング装置およびその方法
KR20070071526A (ko) 스캔라인 형성 방법 및 장치
JPH11339069A (ja) 画像合成装置および画像合成方法
JPH02163886A (ja) 三次元図形処理装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20040413

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040416

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040614

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040720

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040802

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080820

Year of fee payment: 4

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080820

Year of fee payment: 4

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090820

Year of fee payment: 5

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090820

Year of fee payment: 5

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100820

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100820

Year of fee payment: 6

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110820

Year of fee payment: 7

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120820

Year of fee payment: 8

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120820

Year of fee payment: 8

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120820

Year of fee payment: 8

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120820

Year of fee payment: 8

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130820

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees