JP4238619B2 - Vehicle monitoring device - Google Patents

Vehicle monitoring device Download PDF

Info

Publication number
JP4238619B2
JP4238619B2 JP2003095209A JP2003095209A JP4238619B2 JP 4238619 B2 JP4238619 B2 JP 4238619B2 JP 2003095209 A JP2003095209 A JP 2003095209A JP 2003095209 A JP2003095209 A JP 2003095209A JP 4238619 B2 JP4238619 B2 JP 4238619B2
Authority
JP
Japan
Prior art keywords
imaging
vehicle
lighting body
control
lighting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003095209A
Other languages
Japanese (ja)
Other versions
JP2004299558A (en
Inventor
範史 金田
司 原田
学 廣澤
浩 正分
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mazda Motor Corp
Original Assignee
Mazda Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mazda Motor Corp filed Critical Mazda Motor Corp
Priority to JP2003095209A priority Critical patent/JP4238619B2/en
Publication of JP2004299558A publication Critical patent/JP2004299558A/en
Application granted granted Critical
Publication of JP4238619B2 publication Critical patent/JP4238619B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は車両用監視装置に関するものである。
【0002】
【従来の技術】
車両の周囲状況、特に運転者から死角になりやすい周囲の状況を目視できるようにすることは、安全運転等の観点から重要となる。このため、車両の外部状況を撮像するための全方位カメラを設けて、このカメラで撮像した映像を、車内に設けた表示手段に表示することが提案されている。この場合、全方位カメラは、通常、凸面鏡と、凸面鏡を介して車両の周囲状況を撮像するCCD等の撮像手段(カメラ)とを有して、車両の広い範囲に渡っての周囲状況を表示手段に表示することが提案されている。特許文献1には、全方位カメラで撮像された映像が相当にゆがんだものとなって、運転者から容易には認識しづらいということから、全方位映像を円筒投影画像に変換して、この変化後の映像を表示手段に表示させることが提案されている。
【0003】
また、特許文献2には、車両の前端部に前側全方位カメラを設けると共に、車両後端部に後側全方位カメラを設けて、表示手段に表示する映像としては、前側の全方位カメラで撮像した映像と後側の全方位カメラで撮像した映像とのいずれか一方を選択的に表示することが開示されている。そして、表示手段へ表示する映像の選択を、車両の駆動系に介在された変速機の変速段(走行レンジ位置)に応じて自動的に切換えることも開示されている。すなわち、前進走行時には、前側の全方位カメラで撮像した映像を表示手段に表示させ、後退時には後側の全方位カメラで撮像した映像を表示手段に表示させるように自動切換えを行うことが開示されている。
【0004】
【特許文献1】
特開2000−118298号公報
【0005】
【特許文献2】
特開2003−023623号公報
【0006】
【発明が解決しようとする課題】
ところで、全方位カメラで車両周囲状況を撮像する場合、昼間のように撮像範囲が明るいときは、撮像された映像が明瞭なものとなって、その認識を明確に行える。しかしながら、例えば、夜間や昼間であっても暗い車庫の中等、撮像範囲が暗い状況では、明るさ不足となって撮像手段で撮像された映像が不鮮明となり、表示された映像を明確に認識することが難しいあるいは困難になる。
【0007】
本発明は以上のような事情を勘案してなされたもので、その目的は、撮像範囲が暗い状況であっても、明瞭な映像を撮像できるようにした車両用監視装置を提供することにある。
【0008】
【課題を解決するための手段】
前記目的を達成するため、本発明はその第1の解決手法として次のようしてある。すなわち、特許請求の範囲における請求項1に記載のように、
車外に設けられ、少なくとも一部に非平面を有する反射鏡と、
前記反射鏡を介して車両の周囲状況を撮像する撮像手段と、
車内に設けられ、前記撮像手段により撮像された映像を表示する表示手段と、
車両の周辺を照射する灯火体と、
前記撮像手段および表示手段が作動しているときに、前記灯火体の作動状態を制御する制御手段と、
を備え、
前記灯火体が、照射範囲を変更可能として設定され、
前記制御手段が、前記灯火体の照射範囲が前記撮像手段の撮像範囲に近づくような変更を行うように制御を行う、
ようにしてある。これにより、車両周囲状況を撮像してその映像を表示手段に表示しようとしているときは、灯火体を制御して撮像の補助のための明るさを提供することができ、鮮明な映像を撮像することが可能となる。また、灯火体の照射範囲を撮像範囲に近づけて、灯火体を利用した撮像のための明るさを確保することができる。
【0009】
上記解決手法を前提とした好ましい態様は、特許請求の範囲における請求項2〜請求項9に記載のとおりである。すなわち、
【0010】
【0011】
前記制御手段は、前記灯火体の点灯中の照度を高めるように制御を行う、ようにしてある(請求項対応)。この場合、灯火体の照度を高めることにより、撮像に必要な明るさを確保することができる。
【0012】
前記制御手段は、前記灯火体が非点灯中の状態で初めて前記撮像手段および表示手段の作動を検出したときは該灯火体を点灯させる制御を行い、該灯火体が点灯中の状態で始めて前記撮像手段および表示手段の作動を検出したときは該灯火体の照度を高める制御を行う、ようにしてある(請求項対応)。この場合、灯火体の点灯による明るさ確保と、点灯されている灯火体の照度高めることによる明るさの確保とを適宜行なって、撮像に必要な明るさを十分に確保する上で好ましいものとなる。
【0013】
マニュアル操作される操作手段を有し、
前記制御手段は、前記操作手段が操作されたときに、非点灯中の前記灯火体を点灯させる制御を行う、
ようにしてある(請求項対応)。この場合、マニュアル操作によって、撮像に必要な明るさ確保のための灯火体の点灯を行うので、不必要に灯火体を点灯させることを抑制あるいは防止する上で好ましいものとなる。
【0014】
マニュアル操作される操作手段を有し、
前記制御手段は、前記操作手段が操作されたときに、点灯中の前記灯火体の照度を高める制御を行う、
ようにしてある(請求項対応)。この場合、マニュアル操作によって、撮像に必要な明るさ確保のための灯火体の照度向上を行うので、不必要に灯火体の照度を高めることを抑制あるいは防止する上で好ましいものとなる。
【0015】
マニュアル操作される操作手段を有し、
前記制御手段は、前記操作手段が操作されたときに、前記灯火体が非点灯状態のときは該灯火体を点灯させる制御を行うと共に、該灯火体が点灯中のときは該灯火体の照度を高める制御を行う、
ようにしてある(請求項対応)。この場合、灯火体の点灯と灯火体の照度を高めることとの両方による明るさ確保を適宜行って、撮像に必要な明るさを十分に確保しつつ、不必要に灯火体を点灯させたりその照度を高めることを抑制あるいは防止する上で好ましいものとなる。
【0016】
前記撮像装置が、車両の前部に設けられ、
前記灯火体が、ヘッドランプ、フォグランプ、コーナランプのいずれかである、ようにしてある(請求項対応)。この場合、既存の灯火体を利用して、撮像に必要な明るさを確保することができる。
【0017】
【0018】
前記目的を達成するため、本発明はその第の解決手法として次のようしてある。すなわち、特許請求の範囲における請求項に記載のように、
車外に設けられ、少なくとも一部に非平面を有する反射鏡と、
前記反射鏡を介して車両の周囲状況を撮像する撮像手段と、
車内に設けられ、前記撮像手段により撮像された映像を表示する表示手段と、
前記反射鏡を介して前記撮像手段の撮像範囲に向けて赤外線を照射する赤外線照射源と、
前記反射鏡のうち前記赤外線照射源が映り込む特定部位に、反射を抑制するマスキング加工が施されている、
ようにしてある。このように、赤外線を利用することにより、周囲状況が暗い状況でも、明瞭な映像を撮像することができる。また、赤外線照射源は、反射鏡を介して赤外線を車両の周囲に照射するので、赤外線照射源から直接に車両周囲に赤外線を照射する場合に比して、広い範囲に渡って赤外線を照射することができ、しかも全体的にコンパクトにする上でも好ましいものとなる。
上記第の解決手法を前提として、前記撮像手段および表示手段が作動していることを条件として、前記赤外線照射源の作動を制御する制御手段を備えているようにすることができる(請求項9対応)。この場合、赤外線を利用して撮像を行うので、車両周囲が暗い状況でも鮮明な映像を撮像することができる。
【0019】
【発明の効果】
本発明によれば、車両の周囲が暗い状況でも明瞭な映像を撮像することができ、映像を利用した運転補助を常に行えるようにする上で好ましいものとなる。また、灯火体の照射範囲を撮像範囲に近づけて、灯火体を利用した撮像のための明るさを確保することができる。
【0020】
【発明の実施の形態】
図1において、Vは車両としての自動車であり、その前バンパが符号1で示され、運転席に設けられるステアリングハンドルが符号2で示される。実施形態では、ステアリングハンドル2は、車両Vの右側に設けられた右ハンドル車とされている。
【0021】
車両前端部となる前バンパ1のうち、運転席とは反対側つまりステアリングハンドル2とは反対側となる左側端部には、全方位カメラ10が設けられている。より具体的には、全方位カメラ10は、前バンパ2の左側端部上面に、上方に突出するようにして取付けられている。なお、全方位カメラ10は、全体的に、前バンパ1の上面から上方へ突出した図1に示す使用位置と、この使用位置から下方へ変位されてその上面が前バンパ1の上面と略面一となった収納位置とを選択的にとり得るようになっているが、このための駆動機構等は本発明とは直接関係がない事項でもあり、かつ前述した特許文献2にも開示されているので、これ以上詳細な説明は省略する。
【0022】
全方位カメラ10の一例について、図2を参照しつつ説明する。まず、11はケーシングであり、このケーシング11の側壁のうち所定長さ部位は、その全集に渡って透明なカバー部材12によって構成されている。ケーシング11内には、カバー部材12の高さ位置に対応させて、反射鏡としての凸面鏡13が配置されている。この凸面鏡の表面は、所定の凸線を所定軸線(ケーシング11の上下方向軸線)回りに回転させて得られる凸型回転体の表面となる。上記凸線としては、例えば、円弧線、双曲線、放物線等がある。凸面鏡13は、全体的に下方に向けて凸となるように配設されて、カバー部材12を通して入射される外部からの光が、下方へ向けて反射されるように設定されている。
【0023】
ケーシング11内には、凸面鏡13の下方において、CCDあるいはCMOSイメージセンサ等の撮像手段としてのカメラ14が配置されている。このカメラ14は、凸面鏡で反射された外部からの光が入射されて、入射された光に対応した電気信号を出力する。図2の場合、反射鏡が全周囲が凸となった凸面鏡13であるために、水平方向からみたときに、全方位つまり360度の周囲を撮像可能となっている(車両V自身を除いて、ほぼ270度弱の水平方向の角度範囲の車両周囲状況が撮像可能)。なお、全方位カメラ10は、通常はその撮像範囲角度が180度以上のものをいうが、撮像角度範囲は特に限定されないものである。
【0024】
全方位カメラ10のケーシング11は、その軸線つまり反射鏡13の光軸が、車両上下方向軸線に対して、上方に向かうにつれて徐々に車体外方側に位置するように若干傾斜されている。より具体的には、上方に向かうにつれて車幅方向外側および車体前方側に位置するように傾斜されている。これにより、全方位カメラ10は、下方を向くような姿勢となり、車両V付近の地上面を撮像可能とされており、実施形態では、前バンパ1の一部(外周縁部)をも撮像するように設定されている(撮像された映像中に、前バンパ1の外周縁部が含まれる)。
【0025】
前述したような全方位カメラ10は、ヘッドランプ3とその直側方に位置するコーナランプ4の前方に位置することになる。また、前バンパ1には、フロントフォグランプ5が装備されている。このようなランプ3〜5は、その点灯によって、全方位カメラ10の撮像範囲を少なからず明るくする機能を有することになる。また、ランプ3〜5の通常の点灯状態よりもその照度を高めることにより、全方位カメラ10の撮像範囲をより明るくすることが可能となる。
【0026】
図5は、本発明の制御系統をブロック図的に示したものである。この図5において、Uは、マイクロコンピュータを利用して構成されたコントローラ(制御ユニット)である。このコントローラUには、カメラ10で撮像された映像信号、車速センサS1からの車速信号が入力される。
【0027】
以上に加えて、コントローラUには、マニュアル操作されるメインスイッチSW1からのON、OFF信号と、マニュアル操作される操作手段としてのスイッチSW2からのON、OFF信号が入力される。メインスイッチをONにすると、コントローラUは、モータMを駆動して、カメラ10を図1の使用位置とする。また、メインスイッチSW1がOFFになると、コントローラUは、モータ31を制御して、カメラ10を収納位置とする。また、スイッチSW2は、後述するように、ランプ3〜5のうちコーナランプ4を点灯あるいは照度を高くして、撮像範囲を明るくすることを指令する。
【0028】
一方、コントローラUは、ナビゲーション装置20とで信号の授受を行う。本発明での表示手段としてのディスプレイは、ナビゲーション装置のディスプレイ20aを利用するようにしてある。
【0029】
次に、コントローラUによる制御例について、図6のフローチャートを参照しつつ説明する。なお、以下の説明でQはステップを示す。まず、Q1において、メインスイッチSW1がONであるか否かが判別される。このQ1の判別でYESのときは、Q2に移行されるが、このときカメラ10は使用位置とされる。
【0030】
Q2では、車速が所定車速(例えば20km/h)以下の低車速であるか否かが判別される。Q2の判別でYESのときは、全方位カメラ10による撮像が実行され、かつ撮像された映像がディスプレイ20aに表示されるときである。このときは、Q3において、スイッチSW2がONであるか否かが判別される。このQ3の判別でNOのときは、全方位カメラ10の撮像範囲は十分明るくて、ディスプレイ20aに表示される映像は鮮明であるということで、つまり撮像範囲を明るく補助するための制御は不用ということで、Q9において通常の制御が行われる(撮像と撮像された映像の表示の制御の実行)。
【0031】
前記Q3の判別でYESのときは、Q4において、フラグが1であるか否かが判別される。制御の開始時のイニシャライズでは、フラグは0にリセットされていて、Q4での当初の判別はNOとなる。このときは、Q5において、コーナランプ4が点灯中であるか否かが判別される。このQ5の判別でNOのときは、Q6でコーナランプ4が点灯される。また、Q5の判別でYESのときは、Q7において、既に点灯中のコーナランプ4の照度が高められる。このように、撮像範囲が暗いときは、コーナランプ4の点灯あるいは照度向上によって、撮像範囲が明るくされて、全方位カメラ10で撮像された映像が鮮明なものとなり、ディスプレイ20aに表示される映像が乗員から明確に認識できるものとなる。
【0032】
上記Q6あるいはQ7の後は、Q8においてフラグが1にセットされた後、Q9の通常の制御が行われる。前記Q4の判別でYESのときは、コーナランプ4を利用した明るさ補助が既に実行されているので、このときもそのままQ9に移行される。Q1の判別でNOのとき、あるいはQ2の判別でNOのときは、それぞれQ10に移行して、制御が終了される(全方位カメラ10による撮像の停止とディスプレイ20aへの表示停止)。
【0033】
図7、図8は、本発明の別の実施形態を示すものであり、前記実施形態と同一構成要素には同一符号を付してある。本実施形態では、全方位カメラ10のケーシング11内に、赤外線照射源15を配置してある。具体的には、反射鏡13と相対向する位置において、カメラ14と隣接させて赤外線照射源15が取付けられている。この赤外線照射源15は、反射鏡13に向けて赤外線を発光するもので、反射鏡で反射された赤外線は、撮像範囲Z付近に照射される。これにより、撮像範囲Zにある障害物から赤外線が反射されて、反射された赤外線が反射鏡13を介してカメラ14に入射されて、撮像されることになる。勿論、カメラ14は、赤外線に反応して撮像することができるようになっている。
【0034】
図8に示すように、反射鏡13(の反射面)には、赤外線照射源15が映し出されることになる。この赤外線照射源15そのものをカメラ14で撮像してしまうのを防止するために、反射鏡13のうち、赤外線照射源15を映し出す特定位置にマスキング16が施されて、反射を行わないようにされている。これにより、撮像された映像中に、赤外線照射源15が含まれてしまう事態が防止される。
【0035】
以上実施形態について説明したが、本発明はこれに限らず、例えば次のような場合をも含むものである。全方位カメラ10は、その反射鏡の表面が、一部のみに非平面、特に凸面を有するものであってもよい。全方位カメラ10の設ける位置は、実施形態で示す他、車両前端部の右側端部や中央部、車両後端部の左右端部のいずれか一方または両方、さらには中央部等、その配設位置が適宜設定できるものである。勿論、全方位カメラ10を複数設けることもできる。
【0036】
全方位カメラ10の撮像範囲の明るさを補助するランプとしては、コーナランプ4に限らず、ヘッドランプ3、フォグランプ5等であってもよく、この他、サイドミラーに設けられるサイドランプ、後退時に点灯されるバックランプ等適宜のランプとすることができる。いずれのランプを利用するにしても、その点灯と、点灯時にあってはその照度を高くすることの手法によって、全方位カメラ10の撮像範囲を明るくすることができる。また、ランプを点灯させるときは、通常時よりも常に照度を高くした状態で行うようにすることもできる。勿論、撮像範囲を明るくするために点灯されるランプは、撮像範囲に近い位置にあるランプのみに限定して行うのが好ましい(例えば左右一対存在するランプのうち、全方位カメラ10の撮像範囲側にある一方側のランプのみを点灯させる)。
【0037】
ランプによっては、その照射範囲を変更できるものがある。例えば、最近では、照射方向可変式のヘッドランプが実用化されて、通常は車両の正面前方を照射するが、ハンドル2が操作された方向にヘッドランプの照射方向を変更するようにしたものが既に実用化されている。このように、照射範囲が変更可能なランプにあっては、全方位カメラ10の撮像範囲が暗いときに、照射範囲を撮像範囲に近づくように変更することができる。なお、照射範囲の変更は、照射方向が一定で照射角度が大小に変更可能な場合は照射角度を拡大する方向とし、照射角度が一定で照射方向が変更可能な場合は、照射方向が撮像範囲に近づくようにすればよい。勿論、照射角度と照射方向とが共に可変である場合は、照射角度の拡大と、照射方向を撮像範囲に近づく方向への変更との両方を行うことができる。
【0038】
撮像範囲を照射する専用の赤外線照射源を別途車両に搭載することもできる。例えば、コーナランプ4内に、上記赤外線照射源を内蔵させて、その照射方向を撮像範囲に向けるようにすればよい。
【0039】
最近の車両では、例えばインストルメントパネルの上面に明るさを検出するセンサ(照度センサ)が設けられることが多いが、この明るさセンサによって所定以上の明るさが検出されなかったときは、撮像範囲を明るくするために、例えばランプを自動点灯させたり、その照度を自動的に高くしたり、あるいは別途設けた赤外線照射源を作動させることができ、この場合、マニュアル操作によって撮像範囲を明るくすることを指令する手間が省けることになる。フロ−チャ−トに示す各ステップあるいはセンサやスイッチ等の各種部材は、その機能の上位表現に手段の名称を付して表現することができる。また、本発明の目的は、明記されたものに限らず、実質的に好ましいあるいは利点として表現されたものを提供することをも暗黙的に含むものである。
【図面の簡単な説明】
【図1】本発明が適用された車両を斜め前方から見た斜視図。
【図2】全方位カメラの一例を示す側面断面図。
【図3】全方位カメラの傾斜方向の設定例を示す簡略平面図。
【図4】全方位カメラを車両の前方から見た要部簡略正面図。
【図5】本発明の制御系統をブロック図的に示す図。
【図6】本発明の制御例を示すフローチャート。
【図7】本発明の別の実施形態を示すもので、図2に対応した側面断面図。
【図8】図7の反射鏡を赤外線照射源側から見た図。
【符号の説明】
V:車両
1:前バンパ
2:ステアリングハンドル
3:ヘッドランプ
4:コーナランプ
5:フォグランプ
10全方位カメラ
13:凸面鏡(反射鏡)
14:カメラ(撮像手段)
15:赤外線照射源
16:マスキング部分
20:ナビゲーション装置
20a:ディスプレイ(表示手段)
U:コントローラ
SW1:メインスイッチ
SW2:撮像範囲の明るさ補助を指令するスイッチ
S1:車速センサ
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a vehicle monitoring apparatus.
[0002]
[Prior art]
It is important from the viewpoint of safe driving and the like to make it possible to visually check the surrounding conditions of the vehicle, particularly the surrounding conditions that are likely to cause blind spots from the driver. For this reason, it has been proposed to provide an omnidirectional camera for imaging the external situation of the vehicle and display the image captured by this camera on display means provided in the vehicle. In this case, the omnidirectional camera usually has a convex mirror and an imaging means (camera) such as a CCD that images the surrounding situation of the vehicle via the convex mirror, and displays the surrounding situation over a wide range of the vehicle. It has been proposed to display on the means. In Patent Document 1, since an image captured by an omnidirectional camera is considerably distorted and is not easily recognized by a driver, an omnidirectional image is converted into a cylindrical projection image. It has been proposed to display the changed image on the display means.
[0003]
Further, in Patent Document 2, a front omnidirectional camera is provided at the front end of the vehicle, a rear omnidirectional camera is provided at the rear end of the vehicle, and an image displayed on the display means is a front omnidirectional camera. It is disclosed that either one of a captured image and a video captured by a rear omnidirectional camera is selectively displayed. It is also disclosed that the selection of the video to be displayed on the display means is automatically switched in accordance with the transmission gear position (traveling range position) interposed in the drive system of the vehicle. That is, it is disclosed that when switching forward, automatic switching is performed so that an image captured by the front omnidirectional camera is displayed on the display unit, and an image captured by the rear omnidirectional camera is displayed on the display unit when traveling backward. ing.
[0004]
[Patent Document 1]
Japanese Patent Laid-Open No. 2000-118298
[Patent Document 2]
Japanese Patent Laid-Open No. 2003-023623
[Problems to be solved by the invention]
By the way, when imaging the situation around the vehicle with an omnidirectional camera, when the imaging range is bright as in the daytime, the captured image becomes clear and can be clearly recognized. However, in situations where the imaging range is dark, such as in a dark garage at night or in the daytime, the image captured by the imaging means becomes unclear due to insufficient brightness, and the displayed image is clearly recognized. Is difficult or difficult.
[0007]
The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a vehicle monitoring apparatus that can capture clear images even in a dark imaging range. .
[0008]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides the following as a first solution. That is, as described in claim 1 in the claims,
A reflector provided outside the vehicle and having a non-planar surface at least partially;
Imaging means for imaging the surroundings of the vehicle via the reflecting mirror;
Display means provided in the vehicle for displaying the video imaged by the imaging means;
A lamp that illuminates the surroundings of the vehicle,
Control means for controlling the operating state of the lamp when the imaging means and the display means are operating;
With
The lighting body is set to be able to change the irradiation range,
The control means performs control so as to make a change such that the illumination range of the lighting body approaches the imaging range of the imaging means,
It is like that. As a result, when the vehicle surrounding situation is imaged and the image is to be displayed on the display means, the lighting body can be controlled to provide brightness for assisting the imaging, and a clear image can be captured. It becomes possible. Moreover, the illumination range of the lighting body can be brought close to the imaging range, and the brightness for imaging using the lighting body can be ensured.
[0009]
Preferred embodiments based on the above solution are as described in claims 2 to 9 in the claims. Chi words,
[0010]
[0011]
The control means performs control so as to increase the illuminance during lighting of the lighting body (corresponding to claim 2 ). In this case, the brightness required for imaging can be ensured by increasing the illuminance of the lamp.
[0012]
The control means performs control to turn on the lighting body when the operation of the imaging means and the display means is detected for the first time in a state where the lighting body is not lit, and the control means starts only when the lighting body is turned on. When the operation of the image pickup means and the display means is detected, control for increasing the illuminance of the lighting body is performed (corresponding to claim 3 ). In this case, it is preferable to ensure the brightness necessary for imaging by appropriately performing the securing of the brightness by lighting the lamp and the securing of the brightness by increasing the illuminance of the lamp that is lit. Become.
[0013]
It has operating means that are operated manually,
The control means performs control to turn on the non-lighted lighting body when the operation means is operated.
(Corresponding to claim 4 ). In this case, since the lighting body is turned on to ensure the brightness necessary for imaging by manual operation, it is preferable to suppress or prevent unnecessary lighting of the lighting body.
[0014]
It has operating means that are operated manually,
The control means performs control to increase the illuminance of the lighting body that is lit when the operation means is operated.
(Corresponding to claim 5 ). In this case, since the illuminance of the lighting body is increased by manual operation to ensure the brightness necessary for imaging, it is preferable for suppressing or preventing unnecessarily increasing the illuminance of the lighting body.
[0015]
It has operating means that are operated manually,
The control means performs control to turn on the lighting body when the operating means is operated and the lighting body is in a non-lighting state, and the illumination intensity of the lighting body when the lighting body is on. To increase the control,
(Corresponding to claim 6 ). In this case, it is necessary to appropriately ensure the brightness by both lighting the lamp and increasing the illuminance of the lamp, and to ensure that the brightness necessary for imaging is sufficient, This is preferable in suppressing or preventing increasing the illuminance.
[0016]
The imaging device is provided at the front of the vehicle;
The lighting body is one of a headlamp, a fog lamp, and a corner lamp (corresponding to claim 7 ). In this case, the brightness required for imaging can be ensured using an existing lighting body.
[0017]
[0018]
In order to achieve the above object, the present invention provides the second solution as follows. That is, as described in claim 8 in the claims,
A reflector provided outside the vehicle and having a non-planar surface at least partially;
Imaging means for imaging the surroundings of the vehicle via the reflecting mirror;
Display means provided in the vehicle for displaying the video imaged by the imaging means;
An infrared irradiation source for irradiating infrared rays toward the imaging range of the imaging means via the reflecting mirror;
A masking process for suppressing reflection is applied to a specific part of the reflecting mirror where the infrared irradiation source is reflected,
It is like that. In this way, by using infrared rays, it is possible to capture a clear image even in a dark environment. In addition, since the infrared irradiation source irradiates the vehicle with infrared rays through the reflecting mirror, it irradiates infrared rays over a wider range than when the infrared irradiation source directly irradiates the vehicle periphery with infrared rays. In addition, it is preferable in terms of overall compactness.
On the premise of the above first solution, it is possible to provide control means for controlling the operation of the infrared irradiation source on the condition that the imaging means and the display means are operating. Correspondence). In this case, since imaging is performed using infrared rays, a clear image can be captured even in a situation where the surroundings of the vehicle are dark.
[0019]
【The invention's effect】
According to the present invention, a clear video can be taken even in a situation where the surroundings of the vehicle are dark, which is preferable in that driving assistance using the video can always be performed. Moreover, the illumination range of the lighting body can be brought close to the imaging range, and the brightness for imaging using the lighting body can be ensured.
[0020]
DETAILED DESCRIPTION OF THE INVENTION
In FIG. 1, V is an automobile as a vehicle, a front bumper thereof is indicated by reference numeral 1, and a steering handle provided in the driver's seat is indicated by reference numeral 2. In the embodiment, the steering handle 2 is a right-hand drive vehicle provided on the right side of the vehicle V.
[0021]
An omnidirectional camera 10 is provided on the front bumper 1 that is the front end of the vehicle, at the left end that is opposite to the driver's seat, that is, opposite to the steering handle 2. More specifically, the omnidirectional camera 10 is attached to the upper surface of the left end portion of the front bumper 2 so as to protrude upward. The omnidirectional camera 10 generally has a use position shown in FIG. 1 protruding upward from the upper surface of the front bumper 1 and is displaced downward from the use position so that the upper surface is substantially the same as the upper surface of the front bumper 1. However, the drive mechanism and the like for this purpose are not directly related to the present invention, and are also disclosed in Patent Document 2 described above. Therefore, further detailed description is omitted.
[0022]
An example of the omnidirectional camera 10 will be described with reference to FIG. First, reference numeral 11 denotes a casing, and a predetermined length portion of the side wall of the casing 11 is constituted by a transparent cover member 12 over the entire collection. A convex mirror 13 serving as a reflecting mirror is disposed in the casing 11 so as to correspond to the height position of the cover member 12. The surface of the convex mirror is the surface of a convex rotating body obtained by rotating a predetermined convex line around a predetermined axis (the vertical axis of the casing 11). Examples of the convex line include an arc line, a hyperbola, and a parabola. The convex mirror 13 is disposed so as to be convex downward as a whole, and is set so that light from the outside incident through the cover member 12 is reflected downward.
[0023]
In the casing 11, a camera 14 as an imaging unit such as a CCD or CMOS image sensor is disposed below the convex mirror 13. The camera 14 receives light from the outside reflected by the convex mirror and outputs an electrical signal corresponding to the incident light. In the case of FIG. 2, since the reflecting mirror is a convex mirror 13 whose entire circumference is convex, it is possible to image all directions, that is, around 360 degrees when viewed from the horizontal direction (except for the vehicle V itself). The vehicle surroundings in the horizontal angle range of about 270 degrees can be imaged). The omnidirectional camera 10 usually has an imaging range angle of 180 degrees or more, but the imaging angle range is not particularly limited.
[0024]
The casing 11 of the omnidirectional camera 10 is slightly tilted so that its axis, that is, the optical axis of the reflecting mirror 13 is gradually located on the vehicle body outer side with respect to the vehicle vertical axis. More specifically, it is inclined so as to be positioned on the outer side in the vehicle width direction and on the front side of the vehicle body as it goes upward. As a result, the omnidirectional camera 10 has a posture facing downward, and can image the ground surface near the vehicle V. In the embodiment, the omnidirectional camera 10 also images a part (outer peripheral edge) of the front bumper 1. (The outer peripheral edge portion of the front bumper 1 is included in the captured image).
[0025]
The omnidirectional camera 10 as described above is located in front of the headlamp 3 and the corner lamp 4 located on the right side thereof. Further, the front bumper 1 is equipped with a front fog lamp 5. Such lamps 3 to 5 have a function of brightening the imaging range of the omnidirectional camera 10 by a lighting thereof. Moreover, it becomes possible to make the imaging range of the omnidirectional camera 10 brighter by increasing the illuminance than the normal lighting state of the lamps 3 to 5.
[0026]
FIG. 5 is a block diagram showing the control system of the present invention. In FIG. 5, U is a controller (control unit) configured using a microcomputer. The controller U receives a video signal captured by the camera 10 and a vehicle speed signal from the vehicle speed sensor S1.
[0027]
In addition to the above, the controller U receives ON / OFF signals from the manually operated main switch SW1 and ON / OFF signals from the switch SW2 as manually operated operating means. When the main switch is turned on, the controller U drives the motor M to bring the camera 10 to the use position in FIG. When the main switch SW1 is turned off, the controller U controls the motor 31 to place the camera 10 in the storage position. In addition, as will be described later, the switch SW2 instructs to turn on the corner lamp 4 among the lamps 3 to 5 or increase the illuminance to brighten the imaging range.
[0028]
On the other hand, the controller U exchanges signals with the navigation device 20. The display as the display means in the present invention utilizes the display 20a of the navigation device.
[0029]
Next, an example of control by the controller U will be described with reference to the flowchart of FIG. In the following description, Q indicates a step. First, at Q1, it is determined whether or not the main switch SW1 is ON. If the determination of Q1 is YES, the process moves to Q2, but at this time the camera 10 is in the use position.
[0030]
In Q2, it is determined whether or not the vehicle speed is a low vehicle speed equal to or lower than a predetermined vehicle speed (for example, 20 km / h). When the determination in Q2 is YES, the image is captured by the omnidirectional camera 10 and the captured image is displayed on the display 20a. At this time, it is determined at Q3 whether or not the switch SW2 is ON. If NO in the determination of Q3, the imaging range of the omnidirectional camera 10 is sufficiently bright and the image displayed on the display 20a is clear, that is, control for assisting the imaging range to be bright is unnecessary. Thus, normal control is performed in Q9 (execution of control of imaging and display of the captured video).
[0031]
If YES in Q3, it is determined in Q4 whether the flag is 1. At initialization at the start of control, the flag is reset to 0, and the initial determination at Q4 is NO. At this time, it is determined in Q5 whether or not the corner lamp 4 is lit. When the determination at Q5 is NO, the corner lamp 4 is turned on at Q6. If YES in Q5, the illuminance of the already lit corner lamp 4 is increased in Q7. Thus, when the imaging range is dark, the imaging range is brightened by turning on the corner lamp 4 or improving the illuminance, and the image captured by the omnidirectional camera 10 becomes clear, and the image displayed on the display 20a. Will be clearly recognizable from the passenger.
[0032]
After Q6 or Q7, after the flag is set to 1 in Q8, normal control of Q9 is performed. If the determination in Q4 is YES, brightness assistance using the corner lamp 4 has already been executed, and at this time as well, the process directly proceeds to Q9. If NO in the determination of Q1 or NO in the determination of Q2, the process proceeds to Q10, and the control is terminated (stop of imaging by the omnidirectional camera 10 and stop of display on the display 20a).
[0033]
7 and 8 show another embodiment of the present invention, and the same reference numerals are given to the same components as those of the above-described embodiment. In the present embodiment, an infrared irradiation source 15 is arranged in the casing 11 of the omnidirectional camera 10. Specifically, an infrared irradiation source 15 is attached adjacent to the camera 14 at a position facing the reflecting mirror 13. This infrared irradiation source 15 emits infrared rays toward the reflecting mirror 13, and the infrared rays reflected by the reflecting mirror are irradiated in the vicinity of the imaging range Z. Thereby, infrared rays are reflected from the obstacle in the imaging range Z, and the reflected infrared rays are incident on the camera 14 via the reflecting mirror 13 to be imaged. Of course, the camera 14 can capture images in response to infrared rays.
[0034]
As shown in FIG. 8, the infrared irradiation source 15 is projected on the reflecting mirror 13 (the reflecting surface thereof). In order to prevent the infrared irradiation source 15 itself from being imaged by the camera 14, a masking 16 is applied to a specific position of the reflecting mirror 13 where the infrared irradiation source 15 is projected so as not to perform reflection. ing. Thereby, the situation where the infrared irradiation source 15 is included in the captured image is prevented.
[0035]
Although the embodiment has been described above, the present invention is not limited to this, and includes, for example, the following cases. The omnidirectional camera 10 may have a non-planar surface, particularly a convex surface, on a part of the surface of the reflecting mirror. In addition to the position shown in the embodiment, the omnidirectional camera 10 is provided on the right side or the center of the front end of the vehicle, one or both of the left and right ends of the rear end of the vehicle, or the center. The position can be set as appropriate. Of course, a plurality of omnidirectional cameras 10 may be provided.
[0036]
The lamp that assists the brightness of the imaging range of the omnidirectional camera 10 is not limited to the corner lamp 4, but may be a head lamp 3, a fog lamp 5, or the like. An appropriate lamp such as a back lamp to be lit can be used. Whichever lamp is used, the imaging range of the omnidirectional camera 10 can be brightened by lighting the lamp and increasing the illuminance when the lamp is turned on. In addition, when the lamp is turned on, it can be performed in a state where the illuminance is always higher than in the normal state. Of course, it is preferable to limit the lamps that are turned on in order to brighten the imaging range only to lamps that are close to the imaging range (for example, the imaging range side of the omnidirectional camera 10 out of a pair of left and right lamps). Only the lamp on one side of
[0037]
Some lamps can change the irradiation range. For example, recently, a headlamp with a variable irradiation direction has been put into practical use and normally irradiates the front front of the vehicle, but changes the irradiation direction of the headlamp to the direction in which the handle 2 is operated. Already put into practical use. Thus, in the lamp whose irradiation range can be changed, when the imaging range of the omnidirectional camera 10 is dark, the irradiation range can be changed so as to approach the imaging range. The irradiation range is changed when the irradiation direction is constant and the irradiation angle can be changed between large and small, and the irradiation angle is enlarged. When the irradiation angle is constant and the irradiation direction can be changed, the irradiation direction is the imaging range. You may make it approach. Of course, when both the irradiation angle and the irradiation direction are variable, both the expansion of the irradiation angle and the change of the irradiation direction to the direction approaching the imaging range can be performed.
[0038]
A dedicated infrared radiation source for illuminating the imaging range can also be mounted on the vehicle separately. For example, the infrared irradiation source may be built in the corner lamp 4 and the irradiation direction may be directed to the imaging range.
[0039]
In recent vehicles, for example, a sensor (illuminance sensor) for detecting brightness is often provided on the upper surface of the instrument panel. However, when brightness exceeding a predetermined level is not detected by the brightness sensor, the imaging range is set. In order to brighten the image, for example, the lamp can be turned on automatically, the illuminance can be automatically increased, or an infrared irradiation source provided separately can be activated. In this case, the imaging range can be brightened manually. This saves the trouble of commanding. Each step shown in the flowchart or various members such as sensors and switches can be expressed by adding the name of the means to the high-level expression of the function. Further, the object of the present invention is not limited to what is explicitly stated, but also implicitly includes providing what is substantially preferred or expressed as an advantage.
[Brief description of the drawings]
FIG. 1 is a perspective view of a vehicle to which the present invention is applied as viewed obliquely from the front.
FIG. 2 is a side sectional view showing an example of an omnidirectional camera.
FIG. 3 is a simplified plan view showing an example of setting an inclination direction of an omnidirectional camera.
FIG. 4 is a simplified front view of the main part of an omnidirectional camera as viewed from the front of the vehicle.
FIG. 5 is a block diagram showing a control system of the present invention.
FIG. 6 is a flowchart showing a control example of the present invention.
7 shows another embodiment of the present invention and is a side sectional view corresponding to FIG. 2. FIG.
8 is a view of the reflecting mirror of FIG. 7 as viewed from the infrared irradiation source side.
[Explanation of symbols]
V: Vehicle 1: Front bumper 2: Steering handle 3: Head lamp 4: Corner lamp 5: Fog lamp 10 Omnidirectional camera 13: Convex mirror (reflecting mirror)
14: Camera (imaging means)
15: Infrared irradiation source 16: Masking portion 20: Navigation device 20a: Display (display means)
U: Controller SW1: Main switch SW2: Switch S1 for commanding brightness assistance in the imaging range S1: Vehicle speed sensor

Claims (9)

車外に設けられ、少なくとも一部に非平面を有する反射鏡と、
前記反射鏡を介して車両の周囲状況を撮像する撮像手段と、
車内に設けられ、前記撮像手段により撮像された映像を表示する表示手段と、
車両の周辺を照射する灯火体と、
前記撮像手段および表示手段が作動しているときに、前記灯火体の作動状態を制御する制御手段と、
を備え、
前記灯火体が、照射範囲を変更可能として設定され、
前記制御手段が、前記灯火体の照射範囲が前記撮像手段の撮像範囲に近づくような変更を行うように制御を行う、
ことを特徴とする車両用監視装置。
A reflector provided outside the vehicle and having a non-planar surface at least partially;
Imaging means for imaging the surroundings of the vehicle via the reflecting mirror;
Display means provided in the vehicle for displaying the video imaged by the imaging means;
A lamp that illuminates the surroundings of the vehicle,
Control means for controlling the operating state of the lamp when the imaging means and the display means are operating;
With
The lighting body is set to be able to change the irradiation range,
The control means performs control so as to make a change such that the illumination range of the lighting body approaches the imaging range of the imaging means,
A vehicle monitoring apparatus characterized by that.
請求項1において、
前記制御手段は、前記灯火体の点灯中の照度を高めるように制御を行う、ことを特徴とする車両用監視装置。
In claim 1,
The vehicle monitoring apparatus, wherein the control means performs control to increase illuminance during lighting of the lighting body.
請求項1において、
前記制御手段は、前記灯火体が非点灯中の状態で始めて前記撮像手段および表示手段の作動を検出したときは該灯火体を点灯させる制御を行い、該灯火体が点灯中の状態で初めて前記撮像手段および表示手段の作動を検出したときは該灯火体の照度を高める制御を行う、ことを特徴とする車両用監視装置。
In claim 1,
The control means performs control to turn on the lighting body when detecting the operation of the imaging means and the display means for the first time in a state where the lighting body is not lit, and for the first time in a state where the lighting body is lit. A vehicle monitoring apparatus characterized by performing control to increase the illuminance of the lighting body when detecting the operation of the imaging means and the display means.
請求項1において、
マニュアル操作される操作手段を有し、
前記制御手段は、前記操作手段が操作されたときに、非点灯中の前記灯火体を点灯させる制御を行う、
ことを特徴とする車両用監視装置。
In claim 1,
It has operating means that are operated manually,
The control means performs control to turn on the non-lighted lighting body when the operation means is operated.
A vehicle monitoring apparatus characterized by that.
請求項1において、
マニュアル操作される操作手段を有し、
前記制御手段は、前記操作手段が操作されたときに、点灯中の前記灯火体の照度を高める制御を行う、
ことを特徴とする車両用監視装置。
In claim 1,
It has operating means that are operated manually,
The control means performs control to increase the illuminance of the lighting body that is lit when the operation means is operated.
A vehicle monitoring apparatus characterized by that.
請求項1において、
マニュアル操作される操作手段を有し、
前記制御手段は、前記操作手段が操作されたときに、前記灯火体が非点灯状態のときは該灯火体を点灯させる制御を行うと共に、該灯火体が点灯中のときは該灯火体の照度を高める制御を行う、
ことを特徴とする車両用監視装置。
In claim 1,
It has operating means that are operated manually,
The control means performs control to turn on the lighting body when the operating means is operated and the lighting body is in a non-lighting state, and the illumination intensity of the lighting body when the lighting body is on. To increase the control,
A vehicle monitoring apparatus characterized by that.
請求項1ないし請求項のいずれか1項において、
前記撮像装置が、車両の前部に設けられ、
前記灯火体が、ヘッドランプ、フォグランプ、コーナランプのいずれかであることを特徴とする車両用監視装置。
In any one of Claims 1 thru | or 6 ,
The imaging device is provided at the front of the vehicle;
The vehicle monitoring device, wherein the lighting body is any one of a headlamp, a fog lamp, and a corner lamp.
車外に設けられ、少なくとも一部に非平面を有する反射鏡と、
前記反射鏡を介して車両の周囲状況を撮像する撮像手段と、
車内に設けられ、前記撮像手段により撮像された映像を表示する表示手段と、
前記反射鏡を介して前記撮像手段の撮像範囲に向けて赤外線を照射する赤外線照射源と、
前記反射鏡のうち前記赤外線照射源が映り込む特定部位に、反射を抑制するマスキング加工が施されている、
ことを特徴とする車両用監視装置。
A reflector provided outside the vehicle and having a non-planar surface at least partially;
Imaging means for imaging the surroundings of the vehicle via the reflecting mirror;
Display means provided in the vehicle for displaying the video imaged by the imaging means;
An infrared irradiation source for irradiating infrared rays toward the imaging range of the imaging means via the reflecting mirror;
A masking process for suppressing reflection is applied to a specific part of the reflecting mirror where the infrared irradiation source is reflected,
A vehicle monitoring apparatus characterized by that.
請求項8において、
記撮像手段および表示手段が作動していることを条件として、前記赤外線照射源の作動を制御する制御手段をさらに備えていることを特徴とする車両用監視装置。
In claim 8,
On condition that the previous SL imaging means and the display means is operating, the further comprising a control means for controlling the operation of the infrared radiation source, a vehicle monitoring device, characterized in that.
JP2003095209A 2003-03-31 2003-03-31 Vehicle monitoring device Expired - Fee Related JP4238619B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003095209A JP4238619B2 (en) 2003-03-31 2003-03-31 Vehicle monitoring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003095209A JP4238619B2 (en) 2003-03-31 2003-03-31 Vehicle monitoring device

Publications (2)

Publication Number Publication Date
JP2004299558A JP2004299558A (en) 2004-10-28
JP4238619B2 true JP4238619B2 (en) 2009-03-18

Family

ID=33407587

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003095209A Expired - Fee Related JP4238619B2 (en) 2003-03-31 2003-03-31 Vehicle monitoring device

Country Status (1)

Country Link
JP (1) JP4238619B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2877619B1 (en) * 2004-11-05 2008-06-13 Tietronix Optics Soc Par Actio INFRARED RADIATION LIGHTING SYSTEM FOR MOTOR VEHICLE
JP2008201202A (en) * 2007-02-19 2008-09-04 Hitachi Ltd Camera system for monitoring side of vehicle
JP4999651B2 (en) * 2007-11-19 2012-08-15 アイシン精機株式会社 Vehicle lamp control system
JP5523954B2 (en) * 2010-06-30 2014-06-18 富士通テン株式会社 Image display system
JP5803330B2 (en) * 2011-06-27 2015-11-04 アイシン精機株式会社 Vehicle periphery photographing device
KR101986248B1 (en) * 2018-01-31 2019-06-05 임규연 Noteworthy and Visibility Enhancement Type Manner Notification Mode Function Completion State Notification Device and Moving Means
JP2019147525A (en) * 2018-02-28 2019-09-05 株式会社Jvcケンウッド Vehicular display control device, vehicular display system, vehicular display control method and program

Also Published As

Publication number Publication date
JP2004299558A (en) 2004-10-28

Similar Documents

Publication Publication Date Title
US9286521B2 (en) Camera system for large vehicles
JP3948431B2 (en) Vehicle periphery monitoring device
EP1281571B1 (en) Vehicle visibility assist device and method
JP5604146B2 (en) On-vehicle illumination device, image processing device, image display system, and illumination method
JP2009078597A (en) Rear side confirmation system
JP2003104123A (en) Mirror device for vehicle
JP4735090B2 (en) Infrared imaging device
JP4238619B2 (en) Vehicle monitoring device
JP2000236468A (en) Back mirror with camera
JP5045974B2 (en) Vehicle driving support device
JPH07304390A (en) Monitoring device for vehicle
JP4453619B2 (en) Blind corner monitor system
JP4231962B2 (en) Vehicle monitoring device
JP2004082918A (en) Vehicular noctovision and rearview mirror
JP5082754B2 (en) Night vision display device
JP2007106146A (en) Vehicle front and surrounding area monitoring device
JP4376050B2 (en) Vehicle periphery monitoring device
WO2019194218A1 (en) Device for displaying traveling direction
JP5018912B2 (en) Visibility assist device
JP2005014845A (en) Imaging device for vehicle
JP2003154893A (en) Photofluorographic camera attaching structure
JP2002264725A (en) Vehicle periphery imaging device
JP2006281946A (en) Infrared light source control device
JP2010155593A (en) Vehicular view assisting device
JP6912757B2 (en) Vehicle headlight controller

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060127

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080718

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080805

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081002

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081125

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081208

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120109

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4238619

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120109

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130109

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140109

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees