JP2003061086A - 車両用監視装置 - Google Patents

車両用監視装置

Info

Publication number
JP2003061086A
JP2003061086A JP2001243849A JP2001243849A JP2003061086A JP 2003061086 A JP2003061086 A JP 2003061086A JP 2001243849 A JP2001243849 A JP 2001243849A JP 2001243849 A JP2001243849 A JP 2001243849A JP 2003061086 A JP2003061086 A JP 2003061086A
Authority
JP
Japan
Prior art keywords
image
vehicle
distance
index
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001243849A
Other languages
English (en)
Other versions
JP4094831B2 (ja
Inventor
Katsutoshi Tagami
勝利 田上
Osamu Shima
治 島
Keiichi Nagano
恵一 永野
Yuichi Takahashi
祐一 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HUMAN RINKU KK
Nippon Seiki Co Ltd
Original Assignee
HUMAN RINKU KK
Nippon Seiki Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=19073877&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2003061086(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by HUMAN RINKU KK, Nippon Seiki Co Ltd filed Critical HUMAN RINKU KK
Priority to JP2001243849A priority Critical patent/JP4094831B2/ja
Publication of JP2003061086A publication Critical patent/JP2003061086A/ja
Application granted granted Critical
Publication of JP4094831B2 publication Critical patent/JP4094831B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Rear-View Mirror Devices That Are Mounted On The Exterior Of The Vehicle (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

(57)【要約】 【課題】 車両の幅方向の距離を示す指標と共に、長さ
方向の距離を示す指標とを表示することにより、2方向
の距離を把握できる車両用監視装置を提供する。 【解決手段】 撮像手段は、車両の周辺を撮像する。表
示手段は、少なくとも撮像手段15で撮像した第一の画
像31を画面28aに表示する。画像合成手段は、第一
の画像31と車両からの距離を示す指標である第二の画
像32とを合成して前記表示手段28に表示させる。第
二の画像32は、車両の幅方向の距離を示す第一の指標
32aと、長さ方向の距離を示す第二の指標32bと、
を有する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、電荷結合素子(C
CD)カメラ等の撮像手段により車両の周辺を監視する
車両用監視装置に関するものである。
【0002】
【従来の技術】従来より、車両の周辺を監視する撮像カ
メラを備えた車両用監視装置が種々提案されており、例
えば実開昭61−146450号公報に開示されてい
る。斯かる車両用監視装置は、ドアミラー1のハウジン
グ2内に撮像カメラ3を配設し、この撮像カメラ3によ
り前輪4の近傍を撮像し、前輪4の近傍の映像を車室内
のモニターに表示するものである(図7参照)。このよ
うな車両用監視装置を用いることにより、運転席から目
視できないエリアに障害物等がないかどうかをモニター
で監視することができる。しかし、運転者がモニターで
障害物を発見しても、その障害物が車両からどの程度の
距離に位置しているのか把握し難いという問題を有して
いた。
【0003】この問題に対して、撮像カメラ3で撮った
画像に、車両からの距離の指標となるマークを重畳させ
て表示することが考えられる。例えば、図8に示すよう
に、撮像カメラ3で撮像した画像5と、距離指標画像6
とをスーパーインポーズ回路等で合成してモニターに表
示することで、運転者は距離指標画像6を目安にして、
障害物が車両からどの程度の距離に位置しているか把握
することができる。なお、距離指標画像6は、車両側面
からの距離を示す距離ライン6aと、この距離ライン6
aの傍らに表示される数字6bとからなるものである。
【0004】
【発明が解決しようとする課題】しかしながら、上述の
距離ライン6aは、車両側面からの距離、即ち、幅方向
の距離の目安にはなるが、車両の長さ方向の目安にはな
らないため、例えば、車両前方の壁に車両を可及的に近
付けるための目安にはならないという問題を有してい
た。本発明は、この問題に鑑みなされたものであり、車
両の長さ方向の距離を示す指標を表示することにより、
長さ方向の距離を把握できる車両用監視装置を提供する
ものである。
【0005】
【課題を解決するための手段】本発明は、前記課題を解
決するため、車両の周辺を撮像する撮像手段15と、前
記撮像手段15で撮像した第一の画像31を画面28a
に表示する表示手段28と、前記第一の画像31と車両
からの距離を示す指標である第二の画像32とを合成し
て前記表示手段28に表示させる画像合成手段27と、
を有する車両用監視装置であって、前記第二の画像32
は、車両の長さ方向の距離を示す指標32bを有するも
のである。
【0006】また、本発明は、前記指標32bは複数の
ラインを有するものである。
【0007】また、本発明は、車両の周辺を撮像する撮
像手段15と、前記撮像手段15で撮像した第一の画像
31を画面28aに表示する表示手段28と、前記第一
の画像31と車両からの距離を示す第二の画像32とを
合成して前記表示手段28に表示させる画像合成手段2
7と、を有する車両用監視装置であって、前記第二の画
像32は、車両の幅方向の距離を示す第一の指標32a
と、長さ方向の距離を示す第二の指標32bと、を有す
るものである。
【0008】また、本発明は、前記第一の指標32a及
び前記第二の指標32bは、夫々複数のラインを有する
ものである。
【0009】また、本発明は、前記第二の画像32を表
示するための画像データを記憶した記憶手段26を有す
るものである。
【0010】また、本発明は、前記画面28aにおける
前記第二の画像32の位置を調整する表示位置調整手段
20を設けたものである。
【0011】また、本発明は、前記表示位置調整手段2
0は、前記第二の画像32を上下左右に移動させる操作
スイッチ25を有するものである。
【0012】また、本発明は、前記表示位置調整手段2
0は、前記第二の画像32の角度を調整するものであ
る。
【0013】また、本発明は、前記撮像手段15は、ド
アミラーに配設されており、前輪近傍を撮像するもので
ある。
【0014】
【発明の実施の形態】以下、添付の図面に基いて、本発
明の一実施形態を説明する。
【0015】10はドアミラーであり、このドアミラー
10はハウジング11の内部にミラー12を設けたもの
である(図2及び図3参照)。ドアミラー10は、ハウ
ジング11を支持する支持部13を有しており、この支
持部13は車両のドアに固定されている。ミラー12は
ホルダー14に固定されており、このホルダー14はハ
ウジング11に支持されている。ホルダー14は揺動自
在になっており、使用者はミラー12の角度を調整する
ことができる。
【0016】15はCCDカメラ(撮像手段)であり、
このCCDカメラ15はハウジング11に収容されてい
る。ハウジング11にはCCDカメラ15のレンズに対
向する開口16が形成されており、この開口16からC
CDカメラ15により車両の前輪近傍を撮像する。開口
16には、CCDカメラ15に雨滴が浸入しないように
透明カバー17が接着されている。
【0017】次に、図4に基づいて、表示位置調整手段
20について説明する。表示位置調整手段20は、操作
器21及びマイコン22からなるものである。操作器2
1はメインスイッチ23,セットスイッチ24及び十字
形スイッチ25(操作スイッチ)を有しており、操作器
21から出力される操作信号はマイコン22に出力され
る。26はフラッシュメモリ(記憶手段)であり、この
フラッシュメモリ26には画像データが記憶されてい
る。
【0018】マイコン22は、CPU27,ROM2
8,RAM29を有しており、操作器21からの操作信
号に基づいて、フラッシュメモリ26から画像データを
読み出して、表示コントローラ27に出力する。表示コ
ントローラ27は、CCDカメラ15から出力された画
像データと、フラッシュメモリ26から読み出された画
像データとを合成して、表示器28に表示させる。表示
器28としては、TFT(Thin Film Transistor)型の
液晶表示器,有機電界発光表示素子またはCRT(Cath
ode Ray Tube)等を用いることができる。
【0019】図1は、表示器28の画面28aに表示さ
れた画像の一例を示すものである。31は撮像画像(第
一の画像)であり、この撮像画像31はCCDカメラ1
5で撮像した車両の画像31aや前輪近傍の路面の画像
からなる。32は車両からの距離を示す指標である距離
指標画像(第二の画像)であり、この距離指標画像32
は、車両側面からの距離を示す距離ライン32a(第一
の指標)と、車両先端からの距離を示す距離ライン32
b(第二の指標)と、距離ライン32aの傍らに表示さ
れる数字32cとからなるものである。33は車両指標
画像(第三の画像)であり、この車両指標画像33は、
車両のシルエット形状になっている。距離指標画像32
及び車両指標画像33を表示させるための画像データ
は、フラッシュメモリ26に記憶されている。
【0020】運転者がメインスイッチ23をオンにする
と、撮像画像31及び距離指標画像32が画面28aに
表示され、運転者は、画面28aに映し出された撮像画
像31を参考にしながら、車両を移動させることができ
る。例えば、側方の壁に車両を可及的に近づけたり、高
速道路の入口において自動チケット発券機に車両を近づ
けることができる。このとき、距離ライン32aを目安
にすることにより、側方の壁や自動チケット発券機が、
車両からどの程度の距離があるか判断できる。また、例
えば、車両前方の壁に車両を可及的に近付けることがで
き、このとき、距離ライン32bを目安にすることによ
り、前方の壁が車両の先端からどの程度の距離にあるか
判断できる。
【0021】次に、距離指標画像32の表示位置調整に
ついて説明する。メインスイッチ23がオンになってい
る状態で、セットスイッチ24をオンすると、撮像画像
31及び距離指標画像32と共に、車両指標画像33が
表示される。そして、十字形スイッチ25を操作するこ
とにより、距離指標画像32及び車体指標画像33を上
下左右に移動させることができる。車両指標画像33
が、車両の画像31aに一致していない場合は、画面2
8aにおける距離指標画像32及び車両指標画像33の
表示位置を十字形スイッチ25で調整する。
【0022】例えば、図6のように、車両指標画像33
が車両の画像31よりも左側に位置しているときは、十
字形スイッチ25の右方向マーク部分25aを押して、
距離指標画像32及び車両指標画像33を右側に移動さ
せ、車両指標画像33を車両の画像31aに一致させる
(図1参照)。そして、再びセットスイッチ24を押す
と、表示位置調整が終了する。
【0023】本実施形態にように、車両の幅方向の距離
を示す距離ライン32aと、長さ方向の距離を示す距離
ライン32bとを、画面28aに表示することにより、
側方の障害物までの距離だけでなく、前方の障害物まで
の距離を把握することができる。
【0024】なお、表示器28は、車両用監視装置の専
用であっても良いが、例えばナビゲーション装置のディ
スプレイと共用させても良い。また、本実施形態の車両
用監視装置は、メインスイッチ23がオンになっている
ときは、撮像画像31及び距離指標画像32が表示され
るものであるが、距離指標画像32を選択的に表示させ
るものであっても良い。また、距離指標画像32及び車
両指標画像の位置を調整するだけでなく、距離指標画像
32及び車両指標画像を回転させて角度も調整するよう
にしても良い。また、距離指標画像32,車両指標画像
33は、実線であったが、本実施形態に限定されるもの
ではなく種々の変形が可能であり、例えば点線であって
も良いし、着色領域であっても良い。
【0025】また、本実施形態の撮像手段はCCDカメ
ラ15であったが、例えば撮像管カメラであっても良
い。また、本実施形態の記憶手段はフラッシュメモリ2
6であったが、例えばEEPROMであっても良い。ま
た、CCDカメラ15は、例えば車両のリアバンパーに
取付けても良い。また、本実施形態は、左側のドアミラ
ーにCCDカメラ15を取付けたものであるが、右側の
ドアミラーに取付けても良いし、左右両方のドアミラー
に取付けても良い。
【0026】
【発明の効果】本発明は、車両の周辺を撮像する撮像手
段と、少なくとも前記撮像手段で撮像した第一の画像を
画面に表示する表示手段と、前記第一の画像と車両から
の距離を示す指標である第二の画像とを合成して前記表
示手段に表示させる画像合成手段と、を有する車両用監
視装置であって、前記第二の画像は、長さ方向の距離を
示す指標を有するものであり、障害物までの長さ方向の
距離を把握することができる。
【0027】本発明は、車両の周辺を撮像する撮像手段
と、少なくとも前記撮像手段で撮像した第一の画像を画
面に表示する表示手段と、前記第一の画像と車両からの
距離を示す指標である第二の画像とを合成して前記表示
手段に表示させる画像合成手段と、を有する車両用監視
装置であって、前記第二の画像は、車両の幅方向の距離
を示す第一の指標と、長さ方向の距離を示す第二の指標
と、を有するものであり、障害物までの幅方向の距離及
び長さ方向の距離を把握することができる。
【図面の簡単な説明】
【図1】 本発明の実施形態を示す画面の表示例説明
図。
【図2】 同上実施形態を示すドアミラーの断面図。
【図3】 同上実施形態を示すドアミラーの斜視図。
【図4】 同上実施形態を示すブロック図。
【図5】 同上実施形態を示す操作器の正面図。
【図6】 同上実施形態を示す画面の表示例説明図。
【図7】 従来例を示す車両の斜視図。
【図8】 同上従来例を示す画面の表示例説明図。
【符号の説明】
15 CCDカメラ(撮像手段) 20 表示位置調整手段 24 セットスイッチ(スイッチ) 25 十字形スイッチ(第二のスイッチ) 26 フラッシュメモリ(記憶手段) 27 画像合成手段 28 表示手段 28a 画面 31 撮像画像(第一の画像) 32 距離指標画像(第二の画像) 32a 距離ライン(第一の指標) 32b 距離ライン(第二の指標)
フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) B60R 21/00 628 B60R 21/00 628A G01B 11/00 G01B 11/00 H (72)発明者 永野 恵一 新潟県長岡市藤橋1丁目190番地1 日本 精機株式会社アールアンドデイセンター内 (72)発明者 高橋 祐一 新潟県長岡市藤橋1丁目190番地1 日本 精機株式会社アールアンドデイセンター内 Fターム(参考) 2F065 AA06 CC11 FF04 JJ03 JJ26 QQ24 SS02 SS13 3D053 FF14 FF31 GG06 HH14 HH47 5C054 CD03 FE16 GB12 HA30

Claims (9)

    【特許請求の範囲】
  1. 【請求項1】 車両の周辺を撮像する撮像手段と、前記
    撮像手段で撮像した第一の画像を画面に表示する表示手
    段と、前記第一の画像と車両からの距離を示す第二の画
    像とを合成して前記表示手段に表示させる画像合成手段
    と、を有する車両用監視装置であって、 前記第二の画像は、車両の長さ方向の距離を示す指標を
    有することを特徴とする車両用監視装置。
  2. 【請求項2】 請求項1に記載の車両用監視装置におい
    て、前記指標は複数のラインを有することを特徴とする
    車両用監視装置。
  3. 【請求項3】 車両の周辺を撮像する撮像手段と、前記
    撮像手段で撮像した第一の画像を画面に表示する表示手
    段と、前記第一の画像と車両からの距離を示す第二の画
    像とを合成して前記表示手段に表示させる画像合成手段
    と、を有する車両用監視装置であって、 前記第二の画像は、車両の幅方向の距離を示す第一の指
    標と、長さ方向の距離を示す第二の指標と、を有するこ
    とを特徴とする車両用監視装置。
  4. 【請求項4】 請求項3に記載の車両用監視装置におい
    て、前記第一の指標及び前記第二の指標は、夫々複数の
    ラインを有することを特徴とする車両用監視装置。
  5. 【請求項5】 請求項1乃至請求項4の何れかに記載の
    車両用監視装置において、前記第二の画像を表示するた
    めの画像データを記憶した記憶手段を有することを特徴
    とする車両用監視装置。
  6. 【請求項6】 請求項1乃至請求項5の何れかに記載の
    車両用監視装置において、前記画面における前記第二の
    画像の位置を調整する表示位置調整手段を設けたことを
    特徴とする車両用監視装置。
  7. 【請求項7】 請求項6に記載の車両用監視装置におい
    て、前記表示位置調整手段は、前記第二の画像を上下左
    右に移動させる操作スイッチを有することを特徴とする
    車両用監視装置。
  8. 【請求項8】 請求項6または請求項7に記載の車両用
    監視装置において、前記表示位置調整手段は、前記第二
    の画像の角度を調整することを特徴とする車両用監視装
    置。
  9. 【請求項9】 請求項1乃至請求項8の何れかに記載の
    車両用監視装置において、前記撮像手段は、ドアミラー
    に配設されており、前輪近傍を撮像することを特徴とす
    る車両用監視装置。
JP2001243849A 2001-08-10 2001-08-10 車両用監視装置 Expired - Lifetime JP4094831B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001243849A JP4094831B2 (ja) 2001-08-10 2001-08-10 車両用監視装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001243849A JP4094831B2 (ja) 2001-08-10 2001-08-10 車両用監視装置

Publications (2)

Publication Number Publication Date
JP2003061086A true JP2003061086A (ja) 2003-02-28
JP4094831B2 JP4094831B2 (ja) 2008-06-04

Family

ID=19073877

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001243849A Expired - Lifetime JP4094831B2 (ja) 2001-08-10 2001-08-10 車両用監視装置

Country Status (1)

Country Link
JP (1) JP4094831B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006165946A (ja) * 2004-12-07 2006-06-22 Honda Lock Mfg Co Ltd 車両の視界補助装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61146450U (ja) * 1985-03-05 1986-09-09
JPH01173035U (ja) * 1988-05-30 1989-12-07
JPH04103444A (ja) * 1990-08-23 1992-04-06 Matsushita Electric Ind Co Ltd 後方確認表示装置
JPH0880791A (ja) * 1994-09-13 1996-03-26 Trans Tron:Kk 車載用後方確認装置
JPH09193710A (ja) * 1996-01-24 1997-07-29 Matsushita Electric Ind Co Ltd カメラシステム表示装置
JPH1111210A (ja) * 1997-06-19 1999-01-19 Matsushita Electric Ind Co Ltd カメラスケール表示装置
JP2000272416A (ja) * 1999-03-19 2000-10-03 Aisin Aw Co Ltd 運転支援装置
JP2001180401A (ja) * 1999-12-24 2001-07-03 Aisin Aw Co Ltd 運転支援装置及び運転支援方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61146450U (ja) * 1985-03-05 1986-09-09
JPH01173035U (ja) * 1988-05-30 1989-12-07
JPH04103444A (ja) * 1990-08-23 1992-04-06 Matsushita Electric Ind Co Ltd 後方確認表示装置
JPH0880791A (ja) * 1994-09-13 1996-03-26 Trans Tron:Kk 車載用後方確認装置
JPH09193710A (ja) * 1996-01-24 1997-07-29 Matsushita Electric Ind Co Ltd カメラシステム表示装置
JPH1111210A (ja) * 1997-06-19 1999-01-19 Matsushita Electric Ind Co Ltd カメラスケール表示装置
JP2000272416A (ja) * 1999-03-19 2000-10-03 Aisin Aw Co Ltd 運転支援装置
JP2001180401A (ja) * 1999-12-24 2001-07-03 Aisin Aw Co Ltd 運転支援装置及び運転支援方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006165946A (ja) * 2004-12-07 2006-06-22 Honda Lock Mfg Co Ltd 車両の視界補助装置
JP4615980B2 (ja) * 2004-12-07 2011-01-19 株式会社ホンダロック 車両の視界補助装置

Also Published As

Publication number Publication date
JP4094831B2 (ja) 2008-06-04

Similar Documents

Publication Publication Date Title
US6357883B1 (en) Vehicle image acquisition and display assembly
WO2011078201A1 (ja) 画像処理装置、画像処理システム、および画像処理方法
US20040257442A1 (en) Automobile infrared-night viewing device
TWM353849U (en) Integrated driving assistance apparatus
WO2011078183A1 (ja) 画像処理装置、画像処理システム、および画像処理方法
JP2001245326A (ja) 車載カメラの校正装置および校正方法、並びに校正指標
JP2002308029A (ja) 運転支援装置
JP2003244688A (ja) 車両の画像処理装置
JP2006248374A (ja) 車両安全確認装置及びヘッドアップディスプレイ
JP2000242896A (ja) モニタ装置
JP5914114B2 (ja) 駐車支援装置、及び駐車支援方法
US20190100147A1 (en) Parking assistant panoramic image system
JP2007096638A (ja) 車両周囲映像提供装置
JP4233182B2 (ja) 車両の後方視認装置
JP2003189291A (ja) 車両周辺画像処理装置及び記録媒体
CN112298040A (zh) 一种基于透明a柱的辅助驾驶方法
JPH0648247A (ja) 車載用赤外線画像表示装置
JP2001122163A (ja) ドライブレコーダ
JP2003095028A (ja) 車両用監視装置
JP2005053296A (ja) 車両周辺視認装置
JP2001097116A (ja) 撮像装置の取付構造
JP3468658B2 (ja) 車両用周辺視認装置
JP2003061085A (ja) 車両用監視装置
JP2003061086A (ja) 車両用監視装置
JP2005020502A (ja) 車両用監視装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050617

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050622

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050728

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20050902

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050930

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20051128

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20051216

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080306

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110314

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120314

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130314

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130314

Year of fee payment: 5

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130314

Year of fee payment: 5

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130314

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130314

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140314

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

RVTR Cancellation due to determination of trial for invalidation