JP2004282510A - Device for monitoring vehicle surrounding - Google Patents

Device for monitoring vehicle surrounding Download PDF

Info

Publication number
JP2004282510A
JP2004282510A JP2003072619A JP2003072619A JP2004282510A JP 2004282510 A JP2004282510 A JP 2004282510A JP 2003072619 A JP2003072619 A JP 2003072619A JP 2003072619 A JP2003072619 A JP 2003072619A JP 2004282510 A JP2004282510 A JP 2004282510A
Authority
JP
Japan
Prior art keywords
vehicle
garage
predetermined
camera
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003072619A
Other languages
Japanese (ja)
Other versions
JP4096251B2 (en
Inventor
Takao Suzuki
隆夫 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2003072619A priority Critical patent/JP4096251B2/en
Publication of JP2004282510A publication Critical patent/JP2004282510A/en
Application granted granted Critical
Publication of JP4096251B2 publication Critical patent/JP4096251B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a device for monitoring vehicle surroundings for automatically displaying the video by a camera of a position at which a driver wants to look at a prescribed point. <P>SOLUTION: The device is mounted on a vehicle and comprises a plurality of video cameras for photographing for photographing surroundings of the vehicle and an indicator. When a point is registered and it is set to operate a video camera of which position of the vehicle at the point, the video camera corresponding to the point is made to operate when the vehicle is determined to arrive at the point, and an image from the video camera is displayed on the indicator. Thus the device for monitoring the vehicle surrounding can be provided. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、車両の前部または後部等に搭載されて該車両の左右側方の視界を撮像し、該視野画像を運転者に提示する車両の周辺監視装置に関する。
【0002】
【従来の技術】
近年、自動車などの車両の後部に、ビデオカメラを取付けて、そのビデオカメラが撮影した映像を、車内の所定位置に配置されたモニタに表示させるようにした、所謂バックモニタと称されるものが各種実用化されている。このバックモニタは、主として車両を後退させる際に、運転席から死角となる後方がモニタで確認できるようにして、後退時の安全性を向上させるために使用される。この場合のモニタとしては、いわゆるカーナビゲーション装置として、走行中の現在位置近傍の道路地図などを表示させるためのモニタが使用されることが多い。また、バックモニタ専用の表示装置が運転席の近傍に配置される場合もある。
【0003】
さらに、車両の後部以外にも複数のカメラを搭載して周辺監視を行う自動車のカメラシステムも考案されていて、ステアリングの切り角や方向指示器の動作によってディスプレイに表示させるカメラを選択するシステムが提案されている(特許文献1参照)。
【0004】
また、方向指示器の動作の代わりに、電子的な地図データと車両の現在位置データとに基づき、目的地への経路を案内するナビゲーション装置と連携して、ナビゲーション装置で設定されたルートを走行している状況で、そのルート上の曲折位置の近傍を走行するようになったとき、ディスプレイに表示させるカメラを選択するシステムも提案されている(特許文献2参照)。
【0005】
【特許文献1】
特開平10−258682号公報
【特許文献2】
特開2002−225629号公報
【0006】
【発明が解決しようとする課題】
特許文献1の方法では、自宅の車庫などのように、どのカメラの映像を表示したいかが、ステアリングの切り角、方向指示器の動作あるいはシフトレバーの位置ではなく、車庫の形状によって決まる場合には、本当に見たい位置のカメラの映像が表示されないという問題がある。
【0007】
例えば、後退駐車では、通常は車両後部に設置されているカメラの画像が表示される。しかし、車庫入れ時の目標物が車両の後方にあるというわけではない。特に、自宅車庫においては、助手席側の柵との間隔や植木との相対位置などの車両の後方にない物を目安にして、車庫入れを行う場合が多い。また、これらの目標物は、同じ車庫を利用する運転者によっても異なっている。よって、シフトポジションが後退位置になると自動的に車両後部に設置されているカメラの画像が表示される車両では、運転者が車庫入れ時に得たい情報を得られないことがある。
【0008】
特許文献2の方法は、ナビゲーション装置で設定されたルートを走行している状況でのみ有効で、その場合のカメラ位置や、カメラの映像の表示切換のタイミングは運転者には決められないため、本当に見たい位置のカメラの映像が表示されないという問題は残る。
【0009】
上記事情を背景とし、本発明の課題は、所定の車庫に駐車する際に、運転者の見たい位置のカメラの映像を自動的に表示する車両の周辺監視装置を提供することにある。
【0010】
【課題を解決するための手段及び発明の効果】
本発明は、上記課題を解決するための車両の周辺監視装置である。即ち、車両に搭載され、車両の周囲を撮影する複数の撮影用ビデオカメラと表示器で構成される車両の周辺監視装置であって、
該車両において、地点を登録し、その地点で該車両のどの位置のビデオカメラを動作させるかを設定しておくと、該車両が該地点へ到着したと判定された場合には、該地点に対応するビデオカメラを作動させ、当該ビデオカメラからの画像を、前記表示器に表示させることを特徴とする。
【0011】
より具体的には、車両に搭載され、車両の周囲を撮影する複数の撮影用ビデオカメラと、そのビデオカメラで撮影された映像を表示する表示器で構成される車両の周辺監視装置であって、
当該車両の所定の車庫の位置を登録する登録手段と、前記所定の車庫に対応して、前記複数の撮影用ビデオカメラのうちで、該車両のどの位置のビデオカメラを作動させるかを設定する設定手段と、当該車両が前記登録手段により登録された、前記所定の車庫に到着したかを判定する判定手段と、その判定手段により、当該車両が前記所定の車庫に到着したと判定された場合、前記設定手段により設定されている前記所定の車庫に対応したビデオカメラを作動させるビデオカメラ作動手段と、当該ビデオカメラからの画像を受けて前記表示器に送る表示手段と、を含むことを特徴とする車両の周辺監視装置として構成される。
【0012】
本発明によれば、自宅あるいは勤務先等の頻繁に使用する駐車場に駐車する場合、該駐車場の構造や駐車する際に注意すべき場所は運転者にとって周知のものである。例えば、該駐車場では、車両後方よりも車両右側方に注意しなければならない場合、該駐車場の位置と対応して作動させたい位置(この場合は車両右側方)にあるビデオカメラを登録しておけば、該駐車場に接近した際に、自動的に該ビデオカメラからの画像に切り換わるので、運転者は何らの操作をすることもなく必要な画像情報を得ることができ、危険を回避しながら安全に駐車を行うことが可能となる。
【0013】
該駐車場の位置を登録する手段や、該駐車場に接近したか否かを判定する手段の一部として、ナビゲーション装置のもつ地図データ検索機能や車両の現在位置を検出する機能を活用すれば、本発明を安価かつ簡便な構成で実現できる。
【0014】
車両が該駐車場に接近して駐車することを判定する方法として、車両の現在位置と該駐車場との距離が一定の距離値以下になるという条件の他に、該車両の車速が一定の速度を下回っているという条件を加えれば、より正確な接近判定を行うことができる。
【0015】
同様に、車両が該駐車場に接近して駐車することを判定する方法として、車両の現在位置と該駐車場との距離が一定の距離値以下になるという条件の他に、該車両が後退していることを検知するという条件を加えても、接近判定を行うことができる。
【0016】
さらに、本発明を応用すれば、例えば、山間部の道幅が狭くすれ違いが困難な箇所を登録し、該箇所で対向車両とすれ違う際に、路肩の状況をビデオカメラで映すようにすれば、危険の事前予知や転落事故防止に寄与できる。
【0017】
【発明の実施の形態】
以下、本発明の実施の形態を、図面に示す実施例を参照しながら説明する。図1は本発明の一実施例としての車両の周辺監視装置の全体構成を示すブロック図で、車両に取り付けられた左前方カメラ1,右前方カメラ2,左側方カメラ3,右側方カメラ4,後方カメラ5と、画像切換合成ECU6、ナビゲーション装置7、ディスプレイ9、シフトポジションスイッチ10から構成されている。
【0018】
図2は、画像切換合成ECU6を中心として、信号の流れを表したブロック図である。
【0019】
左前方カメラ1,右前方カメラ2,左側方カメラ3,右側方カメラ4,後方カメラ5は、車体に取り付けられて車両周辺の車外を撮影する。図1の斜線で示された部分が各カメラの撮影範囲である。撮影した画像は画像切換合成ECU6に送られる。
【0020】
ディスプレイ9はカラー液晶表示器により構成されており、画像切換合成ECU6から送られてきた画像を表示する。
【0021】
カメラ選択動作開始スイッチ12,カメラ選択スイッチ13,記憶スイッチ14は、それぞれ画像切換合成ECU6に接続され、所定の操作を行う際に使用される。また、これらのスイッチの他に、ポインティングカーソル等の図示しないスイッチも含まれる。
【0022】
上記のスイッチは、例えばディスプレイ9と一体になったタッチスイッチもしくはメカニカルなスイッチ等が用いられる。タッチスイッチは、ディスプレイ9の画面上に縦横に微細に配置された赤外線センサより構成されており、例えば指やタッチペンなどでその赤外線を遮断すると、その遮断した位置が2次元座標値(X,Y)として検出される。これらのスイッチによって、種々の指示を入力することが可能である。
【0023】
シフトポジションスイッチ10は、車両のシフトレバー位置に対応した情報を画像切換合成ECU6に伝えるものである。
【0024】
ナビゲーション装置7は、図示しない接続されたアンテナを介して測位用衛星からの測位信号を受信して、車両の現在位置の測位を行うようにしてある。測位信号としては、例えばGPS(Global Positioning System)として実用化されているものが使用できる。測位された車両の現在位置を画像切換合成ECU6に送る。
【0025】
画像切換合成ECU6は、制御回路8と図示しない周知の信号処理回路などから構成されている。制御回路8は通常のコンピュータとして構成されており、内部には、図3のように周知のCPU81,ROM82,RAM83,I/O84およびこれらの構成を接続するバスライン85が備えられている。
【0026】
また、CPU81は、ROM82およびRAM83に記憶されたプログラムおよびデータにより制御を行う。図3のように、ROM82にはオペレーティングシステム(以下、OSと称する)82sとOS82s上で動作する画像切換合成プログラム82pが格納される。また、画像切換合成プログラム82pは、OS82s上にて画像切換合成プログラム用ワークメモリ83wを作業領域とする形で作動する。さらに、RAM83には、OS82sのワークメモリ83sが形成される。
【0027】
さらに、CPU81には、図3のように不揮発メモリ11が接続されている。不揮発メモリ11は、車両のイグニッションスイッチがオフ状態になっても、記憶内容が保持されるため、車庫データ11a等の常に保持しておくことが必要なデータが記憶されている。
【0028】
このような構成をとることにより、画像切換合成ECU6は、電源を投入すると、CPU81(図3)により画像切換合成プログラム82pが起動され、必要な初期化処理を行った後に、車両の周辺監視装置としての動作を開始する。即ち、カメラ選択動作開始スイッチ12,カメラ選択スイッチ13,記憶スイッチ14,シフトポジションスイッチ10の状態を監視し、車両の周辺監視装置の状態と各スイッチ入力必要に応じた処理を行う。後述の画像切換合成ECU6の動作は、画像切換合成プログラム82pによって実行されるものである。
【0029】
まず、車庫の場所とカメラ位置を設定する。図4は、その設定操作の流れを示したフロー図である。カメラ選択動作開始スイッチ12(図2)が押下されると、画像切換合成ECU6(図2)は該スイッチの押下を検知して、ナビゲーション装置7(図2)に車庫の場所を指定するための地図データを要求する信号を送る(S1)。
【0030】
ナビゲーション装置7(図2)は、画像切換合成ECU6(図2)からの要求に基づいて、画像切換合成ECU6に地図データを含む必要なデータを送り、ディスプレイ9(図2)には、図6(a)のような車庫の場所を設定する画面が表示される。(S2)
【0031】
車庫の場所の設定は、ナビゲーション装置7(図2)が通常有する、地図上で地点を指定する方法や、地名,住所,電話番号による場所検索機能等を利用する。場所検索に必要なパラメータを入力し終えると、該パラメータが画像切換合成ECU6(図2)からナビゲーション装置7に送られる。ナビゲーション装置7は受け取ったデータを基に場所の検索を行い、検索地点の座標値データと検索地点を含む地図データを画像切換合成ECU6へ送る。
【0032】
画像切換合成ECU6(図2)は、ナビゲーション装置7(図2)から送られてきた検索結果のデータをディスプレイ9(図2)に表示する。その検索結果が正しければ次のステップに進む。正しくない場合は再検索を行う。
【0033】
車庫の場所が決定されると、画像切換合成ECU6(図2)はナビゲーション装置7(図2)に該当車庫の座標値データを要求する。ナビゲーション装置7は、画像切換合成ECU6からの要求に対応する座標値データを送る。
【0034】
次に、車両入庫時にディスプレイ9(図2)に表示したいカメラ位置を選択する(S3)。ディスプレイ9には、図6(b)のような設定画面が表示される。本実施例では、運転者は、図1のように車両右側に降車時のための十分な空間を確保するために、車庫の屋根の支柱15(図1)に可能な限り車両を寄せて駐車しようとする。このため、運転者は、車両後方よりも車両左側方の状態に注意を払う傾向にある。よって、この場合は、左側方カメラ3(図1)を選択することとなる。
【0035】
車庫の場所の設定,カメラ位置選択を行う際の、ディスプレイ9(図2)の表示は、図6の例以外にも、図7のように車庫の場所を設定した後に、カメラ位置選択画面がサブウィンドウとして表示し、地図上の車庫表示位置を確認しながら選択できるような表示方法を採ってもよい。サブウィンドウ方式の他にも、車庫の場所の設定画面とカメラ位置選択画面を分割して同時に表示する方法を採ってもよい。
【0036】
車庫の場所の設定,カメラ位置選択を行う際に、前進駐車を行うか後退駐車を行うかの駐車方法を設定してもよい。このデータは不揮発メモリ11の車庫データ11a(図3)に記憶すればよい。これにより、シフトポジションスイッチ10(図2)からの情報も、車庫に駐車するかどうかの判定に使用することが可能となる。
【0037】
車庫の場所の指定とカメラ位置の選択が終了したら、記憶スイッチ14(図2)を押す(S4)。このとき、画像切換合成ECU6(図2)は、車庫の場所の座標値データと車庫の場所に対応して選択されたカメラ位置を車庫データ11a(図3)として記憶する。なお、図3のように、車庫の場所とそれに対応する作動カメラ位置は、複数指定可能である。
【0038】
図5のフロー図を用いて、ナビゲーション装置7(図2)からの位置情報により、自宅車庫であることを判断してカメラを自動選択する処理について説明する。
【0039】
画像切換合成ECU6(図2)は、定期的にナビゲーション装置7(図2)に要求を出して、車両の現在位置の座標値を取得する(S11)。また、画像切換合成ECU6に接続されて車両の速度を測定する図示しない車速センサ、あるいは、ナビゲーション装置7から車速データを定期的に取得する(S12)。
【0040】
取得した座標値と、車庫データ11a(図3)うちの車庫の座標値データから、車両が車庫の近くに来たかどうかを判断する。判断基準は、車両の現在位置の座標値が、車庫の座標値データと一致する場合、車両の現在位置と車庫との距離が一定値以下になった場合が挙げられる。
【0041】
車両が車庫の近くに来たと判断されたときに、車速データが所定の速度(例えば、5km/h)を下回った場合、車両は車庫に入庫するものと判断し(S13:YES)、車庫データ11a(図3)のうちの作動カメラ位置データを読み出して、そのカメラからの画像をディスプレイ9(図2)に表示する(S14)。
【0042】
ディスプレイ9へ(図2)の表示は、図示しないイグニッションスイッチ(図示せず)がオン状態の間続けて(S15:NO)、イグニッションスイッチがオフ状態になったら停止する(S15:YES)。
【0043】
また、ディスプレイ9(図2)への表示は、設定された位置のカメラからの画像のみを表示する方法以外にも、画面を分割して車庫に入庫する前に撮影していたカメラからの画像と同時に表示する方法を採ってもよい。この場合の画面分割形態については、車庫に入庫するときに使用するカメラからの画像を十分確認できるようなものであれば特に制約はない。
【0044】
車両が入庫動作を行っていると判定されているときに、車速が所定の速度(例えば、5km/h)を上回った場合、あるいは、車両が車庫から所定の距離以上離れた場合、画像切換合成ECU6(図2)は車両が入庫を中止したと判断して、ディスプレイ9(図2)に表示するカメラ画像を、車両が入庫する前に表示していたカメラ位置のものに戻す。
【0045】
車両は車庫に入庫するものと判断するパラメータに、シフトポジションスイッチ10(図2)からの情報を利用する方法を採ってもよい。即ち、上記の説明で、車両が車庫の近くに来たと判断されたときに、シフトポジションスイッチ10からの情報が車両のシフトレバーが後退位置にあることを示している場合、車両は車庫に入庫するものと判断できる。
【0046】
また、車庫データ11a(図3)に記憶されている情報の中に、車庫の場所,カメラ位置の他に、駐車方法として後退駐車を行う情報を記憶しておき、上記と同様に、車両が車庫の近くに来たと判断されたときに、シフトポジションスイッチ10の情報が車両のシフトレバーが後退位置にあることを示している場合、車両は車庫に入庫するものと判断方法を採ってもよい。
【0047】
車両が入庫動作を行っていると判定されているときに、シフトポジションスイッチ10(図2)からの情報が車両のシフトレバーが後退位置にないことを示した場合、画像切換合成ECU6(図2)は車両が入庫を中止したと判断して、ディスプレイ9(図2)に表示するカメラ画像を、車両が入庫する前に表示していたカメラ位置のものに戻す方法を採ってもよい。
【0048】
上記に述べた、シフトポジションスイッチ10(図2)からの情報を、車両が車庫に入庫するものと判断するための条件として使用する場合、車両の現在位置と車庫との距離条件と車速条件に加えて使用してもよいし、前記で車速条件を除いて使用する方法を採ってもよい。
【0049】
画像切換合成ECU6(図2)とナビゲーション装置7(図2)を一体化して、本発明の車両の周辺監視装置をナビゲーション装置7の機能の一部として実現する方法を採ってもよい。この場合は、ディスプレイ9(図2)はナビゲーション装置7の表示装置を使用すれば不要となり、カメラ選択動作開始スイッチ12(図2),カメラ選択スイッチ13(図2),記憶スイッチ14(図2)、およびその他の図示しないスイッチもナビゲーション装置7の操作スイッチ群を使用すれば不要となる。
【0050】
本実施例では、車両の入庫時の動作について説明したが、カメラの画像を設定された位置のものに切り換える場所は、駐車場以外の車両の駐車を行わない地点を登録してもよい。この場合、該地点への接近を判定する条件は、車両の現在位置と該地点との距離のみを用いたり、車速の閾値を変更することで対応可能である。また、地点を登録する際に、動作カメラ位置の他に、該地点での車両の状態(駐車,停車,徐行など)を設定し、該地点での車両の挙動が登録してある状態と一致した場合に、カメラの画像を設定された位置のものに切り換える方法を採ってもよい。
【0051】
以上、本発明の実施の形態を説明したが、これらはあくまで例示にすぎず、本発明はこれらに限定されるものではなく、特許請求の範囲の趣旨を逸脱しない限りにおいて、当業者の知識に基づく種々の変更が可能である。
【図面の簡単な説明】
【図1】本発明の一実施例としての車庫駐車支援装置の全体構成を示すブロック図。
【図2】画像切換合成ECUを中心とした各部の信号の流れを説明するブロック図
【図3】画像切換合成ECU内の制御部の詳細を説明するブロック図
【図4】カメラ選択時の動作を示すフロー図。
【図5】車庫駐車時の動作を示すフロー図。
【図6】車庫設定およびカメラ選択時の表示画面の一例を示す説明図。
【図7】車庫設定およびカメラ選択時の表示画面の変形例を示す説明図。
【符号の説明】
1 左前方カメラ
2 右前方カメラ
3 左側方カメラ
4 右側方カメラ
5 後方カメラ
6 画像切換合成ECU
7 ナビゲーション装置
8 制御回路
9 ディスプレイ
10 シフトポジションスイッチ
11 不揮発メモリ
12 カメラ選択動作開始スイッチ
13 カメラ選択スイッチ
14 記憶スイッチ
15 支柱
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a vehicle periphery monitoring device that is mounted on a front portion, a rear portion, or the like of a vehicle, captures a field of view on the left and right sides of the vehicle, and presents the visual field image to a driver.
[0002]
[Prior art]
In recent years, what is called a so-called back monitor, in which a video camera is attached to a rear portion of a vehicle such as an automobile and an image taken by the video camera is displayed on a monitor arranged at a predetermined position in the vehicle. Various applications have been put to practical use. This back monitor is used mainly to improve safety during retreat by allowing the monitor to confirm the rear of the driver's seat, which is a blind spot, when reversing the vehicle. As a monitor in this case, a monitor for displaying a road map or the like near the current position during traveling is often used as a so-called car navigation device. Further, a display device dedicated to the back monitor may be arranged near the driver's seat.
[0003]
In addition, a car camera system that monitors the surroundings by mounting a plurality of cameras besides the rear part of the vehicle has also been devised, and a system that selects a camera to be displayed on a display by a steering angle or a direction indicator operation. It has been proposed (see Patent Document 1).
[0004]
Also, instead of the operation of the direction indicator, the vehicle travels along the route set by the navigation device in cooperation with the navigation device that provides a route to the destination based on the electronic map data and the current position data of the vehicle. In such a situation, a system for selecting a camera to be displayed on a display when traveling near a turning position on the route has been proposed (see Patent Document 2).
[0005]
[Patent Document 1]
JP-A-10-258682 [Patent Document 2]
JP 2002-225629 A
[Problems to be solved by the invention]
In the method of Patent Document 1, when the image of the camera to be displayed is determined not by the steering angle, the operation of the direction indicator or the position of the shift lever but by the shape of the garage, such as in a garage at home. However, there is a problem that an image of a camera at a position that the user really wants to see is not displayed.
[0007]
For example, in reverse parking, an image of a camera usually installed at the rear of the vehicle is displayed. However, the target when entering the garage is not necessarily behind the vehicle. In particular, in a home garage, the garage is often placed using objects that are not behind the vehicle, such as the distance from the fence on the passenger seat side and the relative position to the trees, as a guide. In addition, these targets differ depending on the driver who uses the same garage. Therefore, in a vehicle in which the image of the camera installed at the rear of the vehicle is automatically displayed when the shift position is set to the reverse position, the driver may not be able to obtain the information desired when entering the garage.
[0008]
The method of Patent Literature 2 is effective only in a situation where the vehicle is traveling on a route set by the navigation device. In this case, the driver cannot determine the camera position or the timing of switching the display of the camera image. The problem that the image of the camera at the position you really want to see is not displayed remains.
[0009]
In view of the above circumstances, an object of the present invention is to provide a vehicle periphery monitoring device that automatically displays an image of a camera at a position desired by a driver when parking in a predetermined garage.
[0010]
Means for Solving the Problems and Effects of the Invention
The present invention is a vehicle periphery monitoring device for solving the above problems. That is, a peripheral monitoring device for a vehicle, which is mounted on a vehicle and includes a plurality of video cameras for photographing around the vehicle and a display,
In the vehicle, a point is registered, and a position of the video camera of the vehicle to be operated at the point is set. If it is determined that the vehicle has arrived at the point, the point is set to the point. A corresponding video camera is operated, and an image from the video camera is displayed on the display.
[0011]
More specifically, it is a vehicle periphery monitoring device that is mounted on a vehicle and includes a plurality of video cameras for capturing images around the vehicle, and a display that displays an image captured by the video camera. ,
Registering means for registering a position of a predetermined garage of the vehicle; and setting a position of the video camera of the vehicle to be activated among the plurality of video cameras for shooting corresponding to the predetermined garage. Setting means, determining means for determining whether the vehicle has arrived at the predetermined garage, registered by the registration means, and when the determining means determines that the vehicle has arrived at the predetermined garage. Video camera operating means for operating a video camera corresponding to the predetermined garage set by the setting means, and display means for receiving an image from the video camera and sending the image to the display. It is configured as a vehicle periphery monitoring device.
[0012]
According to the present invention, when parking in a frequently used parking lot, such as at home or at work, the structure of the parking lot and places to be careful in parking are well known to the driver. For example, in the parking lot, when it is necessary to pay more attention to the right side of the vehicle than to the rear of the vehicle, register the video camera at the position to be operated corresponding to the position of the parking lot (in this case, the right side of the vehicle). If this is done, when the vehicle approaches the parking lot, the image is automatically switched to the image from the video camera, so that the driver can obtain necessary image information without performing any operation, thereby reducing the danger. It is possible to safely park while avoiding.
[0013]
As a part of the means for registering the position of the parking lot and the means for judging whether or not the vehicle has approached the parking lot, if a map data search function of the navigation device and a function of detecting the current position of the vehicle are utilized. In addition, the present invention can be realized with a cheap and simple configuration.
[0014]
As a method for determining that the vehicle approaches the parking lot and parks, in addition to the condition that the distance between the current position of the vehicle and the parking lot is equal to or less than a certain distance value, the vehicle speed of the vehicle is constant. If the condition that the speed is lower than the speed is added, more accurate approach determination can be performed.
[0015]
Similarly, as a method of determining that the vehicle approaches the parking lot and parks, in addition to the condition that the distance between the current position of the vehicle and the parking lot becomes equal to or less than a certain distance value, the method also determines that the vehicle moves backward. The approach determination can be performed even if a condition of detecting that the vehicle is performing is added.
[0016]
Further, if the present invention is applied, for example, if a road in a mountainous area where the width of a road is narrow and it is difficult to pass is registered, and when the vehicle passes an oncoming vehicle at this position, the situation of the road shoulder is projected by a video camera, it is dangerous. In advance and prevent fall accidents.
[0017]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to examples shown in the drawings. FIG. 1 is a block diagram showing the overall configuration of a vehicle periphery monitoring device according to one embodiment of the present invention, wherein a left front camera 1, a right front camera 2, a left camera 3, a right camera 4, and It comprises a rear camera 5, an image switching / combining ECU 6, a navigation device 7, a display 9, and a shift position switch 10.
[0018]
FIG. 2 is a block diagram showing a signal flow centering on the image switching / combining ECU 6.
[0019]
The left front camera 1, the right front camera 2, the left camera 3, the right camera 4, and the rear camera 5 are attached to the vehicle body and photograph the outside of the vehicle around the vehicle. The shaded portion in FIG. 1 is the shooting range of each camera. The captured image is sent to the image switching / combining ECU 6.
[0020]
The display 9 is constituted by a color liquid crystal display, and displays an image sent from the image switching / combining ECU 6.
[0021]
The camera selection operation start switch 12, the camera selection switch 13, and the storage switch 14 are respectively connected to the image switching / combining ECU 6, and are used when performing a predetermined operation. In addition to these switches, switches (not shown) such as a pointing cursor are also included.
[0022]
As the switch, for example, a touch switch or a mechanical switch integrated with the display 9 is used. The touch switch is composed of an infrared sensor that is finely arranged vertically and horizontally on the screen of the display 9. For example, when the infrared light is blocked by a finger or a touch pen or the like, the blocked position becomes a two-dimensional coordinate value (X, Y). ). With these switches, various instructions can be input.
[0023]
The shift position switch 10 transmits information corresponding to the shift lever position of the vehicle to the image switching and combining ECU 6.
[0024]
The navigation device 7 receives a positioning signal from a positioning satellite via a connected antenna (not shown), and performs positioning of the current position of the vehicle. As the positioning signal, for example, a signal practically used as a GPS (Global Positioning System) can be used. The current position of the measured vehicle is sent to the image switching / combining ECU 6.
[0025]
The image switching synthesis ECU 6 includes a control circuit 8 and a well-known signal processing circuit (not shown). The control circuit 8 is configured as a normal computer, and internally includes a well-known CPU 81, a ROM 82, a RAM 83, an I / O 84, and a bus line 85 connecting these components, as shown in FIG.
[0026]
Further, the CPU 81 performs control according to programs and data stored in the ROM 82 and the RAM 83. As shown in FIG. 3, the ROM 82 stores an operating system (hereinafter, referred to as OS) 82s and an image switching / synthesizing program 82p that operates on the OS 82s. The image switching / combining program 82p operates on the OS 82s in such a manner that the work memory 83w for the image switching / combining program is used as a work area. Further, a work memory 83s of the OS 82s is formed in the RAM 83.
[0027]
Further, the nonvolatile memory 11 is connected to the CPU 81 as shown in FIG. The nonvolatile memory 11 retains the stored contents even when the ignition switch of the vehicle is turned off, so that data such as the garage data 11a that needs to be constantly stored is stored.
[0028]
With such a configuration, when the power is turned on, the CPU 81 (FIG. 3) activates the image switching / combining program 82p, performs necessary initialization processing, and performs the necessary initialization processing. To start the operation. That is, the state of the camera selection operation start switch 12, the camera selection switch 13, the storage switch 14, and the shift position switch 10 is monitored, and processing is performed according to the state of the vehicle periphery monitoring device and the input of each switch. The operation of the image switching composition ECU 6 described later is executed by the image switching composition program 82p.
[0029]
First, the location of the garage and the camera position are set. FIG. 4 is a flowchart showing the flow of the setting operation. When the camera selection operation start switch 12 (FIG. 2) is depressed, the image switching / combining ECU 6 (FIG. 2) detects the depression of the switch and specifies the location of the garage to the navigation device 7 (FIG. 2). A signal requesting map data is sent (S1).
[0030]
The navigation device 7 (FIG. 2) sends necessary data including map data to the image switching and combining ECU 6 based on a request from the image switching and combining ECU 6 (FIG. 2). A screen for setting the location of the garage as shown in (a) is displayed. (S2)
[0031]
The location of the garage is set using a method of specifying a point on a map, a place search function based on a place name, an address, a telephone number, and the like, which are normally provided in the navigation device 7 (FIG. 2). When the parameters necessary for the location search have been input, the parameters are sent from the image switching / combining ECU 6 (FIG. 2) to the navigation device 7. The navigation device 7 searches for a location based on the received data, and sends coordinate value data of the search point and map data including the search point to the image switching and combining ECU 6.
[0032]
The image switching synthesis ECU 6 (FIG. 2) displays the data of the search result sent from the navigation device 7 (FIG. 2) on the display 9 (FIG. 2). If the search result is correct, proceed to the next step. If not correct, search again.
[0033]
When the location of the garage is determined, the image switching / combining ECU 6 (FIG. 2) requests the navigation device 7 (FIG. 2) for coordinate value data of the garage. The navigation device 7 sends coordinate value data corresponding to a request from the image switching and combining ECU 6.
[0034]
Next, a camera position desired to be displayed on the display 9 (FIG. 2) when the vehicle enters the vehicle is selected (S3). A setting screen as shown in FIG. 6B is displayed on the display 9. In this embodiment, the driver parks the vehicle as close as possible to the pillar 15 (FIG. 1) of the garage roof in order to secure a sufficient space for getting off the vehicle on the right side of the vehicle as shown in FIG. try to. For this reason, the driver tends to pay more attention to the state on the left side of the vehicle than behind the vehicle. Therefore, in this case, the left camera 3 (FIG. 1) is selected.
[0035]
When the garage location is set and the camera position is selected, the display on the display 9 (FIG. 2) is displayed on the camera position selection screen after setting the garage location as shown in FIG. A display method may be adopted in which the information is displayed as a subwindow and can be selected while checking the garage display position on the map. In addition to the sub-window method, a method of dividing the garage location setting screen and the camera position selection screen and displaying them simultaneously may be adopted.
[0036]
When setting the garage location and selecting the camera position, a parking method for performing forward parking or reverse parking may be set. This data may be stored in the garage data 11a of the nonvolatile memory 11 (FIG. 3). As a result, information from the shift position switch 10 (FIG. 2) can also be used to determine whether to park in the garage.
[0037]
When the designation of the garage location and the selection of the camera position are completed, the storage switch 14 (FIG. 2) is pressed (S4). At this time, the image switching synthesis ECU 6 (FIG. 2) stores the coordinate value data of the garage location and the camera position selected corresponding to the garage location as the garage data 11a (FIG. 3). Note that, as shown in FIG. 3, a plurality of garage locations and corresponding operation camera positions can be designated.
[0038]
With reference to the flowchart of FIG. 5, a process for automatically selecting a camera by determining that the vehicle is in a home garage based on position information from the navigation device 7 (FIG. 2) will be described.
[0039]
The image switching synthesis ECU 6 (FIG. 2) periodically issues a request to the navigation device 7 (FIG. 2) to acquire the coordinate value of the current position of the vehicle (S11). In addition, vehicle speed data is periodically acquired from a vehicle speed sensor (not shown) that is connected to the image switching and combining ECU 6 and measures the speed of the vehicle, or from the navigation device 7 (S12).
[0040]
Based on the acquired coordinate values and the garage coordinate value data in the garage data 11a (FIG. 3), it is determined whether the vehicle has come near the garage. The criterion is a case where the coordinate value of the current position of the vehicle matches the coordinate value data of the garage, and a case where the distance between the current position of the vehicle and the garage becomes equal to or less than a certain value.
[0041]
When the vehicle speed data falls below a predetermined speed (for example, 5 km / h) when it is determined that the vehicle has come near the garage, it is determined that the vehicle enters the garage (S13: YES), and the garage data is determined. The operation camera position data of the camera 11a (FIG. 3) is read, and an image from the camera is displayed on the display 9 (FIG. 2) (S14).
[0042]
The display on the display 9 (FIG. 2) is continued while an ignition switch (not shown) (not shown) is on (S15: NO), and stopped when the ignition switch is turned off (S15: YES).
[0043]
The display on the display 9 (FIG. 2) is not limited to the method of displaying only the image from the camera at the set position, and the image from the camera taken before entering the garage by dividing the screen. At the same time, a display method may be adopted. There are no particular restrictions on the screen division mode in this case as long as the image from the camera used when entering the garage can be sufficiently confirmed.
[0044]
When it is determined that the vehicle is performing a parking operation, when the vehicle speed exceeds a predetermined speed (for example, 5 km / h), or when the vehicle is separated from the garage by a predetermined distance or more, image switching synthesis is performed. The ECU 6 (FIG. 2) determines that the vehicle has stopped entering the vehicle, and returns the camera image displayed on the display 9 (FIG. 2) to the camera position displayed before the vehicle entered the warehouse.
[0045]
A method of using information from the shift position switch 10 (FIG. 2) as a parameter for determining that the vehicle enters the garage may be adopted. That is, in the above description, when it is determined that the vehicle has come near the garage, if the information from the shift position switch 10 indicates that the shift lever of the vehicle is in the retreat position, the vehicle enters the garage. You can judge that you do.
[0046]
Further, in the information stored in the garage data 11a (FIG. 3), in addition to the location of the garage and the camera position, information for performing reverse parking as a parking method is stored. When it is determined that the vehicle is near the garage, if the information of the shift position switch 10 indicates that the shift lever of the vehicle is in the reverse position, the vehicle may be determined to enter the garage. .
[0047]
When it is determined that the vehicle is performing the parking operation, if the information from the shift position switch 10 (FIG. 2) indicates that the shift lever of the vehicle is not in the reverse position, the image switching synthesis ECU 6 (FIG. 2) ) May determine that the vehicle has stopped entering the vehicle and return the camera image displayed on the display 9 (FIG. 2) to the camera position displayed before the vehicle entered the vehicle.
[0048]
When the information from the shift position switch 10 (FIG. 2) described above is used as a condition for determining that the vehicle enters the garage, the distance condition between the current position of the vehicle and the garage and the vehicle speed condition are used. In addition, it may be used, or the above-mentioned method may be used except for the vehicle speed condition.
[0049]
A method may be adopted in which the image switching synthesis ECU 6 (FIG. 2) and the navigation device 7 (FIG. 2) are integrated to realize the vehicle periphery monitoring device of the present invention as a part of the function of the navigation device 7. In this case, the display 9 (FIG. 2) becomes unnecessary if the display device of the navigation device 7 is used, and the camera selection operation start switch 12 (FIG. 2), the camera selection switch 13 (FIG. 2), and the storage switch 14 (FIG. 2). ) And other switches (not shown) become unnecessary if the operation switches of the navigation device 7 are used.
[0050]
In the present embodiment, the operation at the time of entry of the vehicle has been described. However, as a place where the image of the camera is switched to the one at the set position, a point other than the parking lot where the vehicle is not parked may be registered. In this case, the condition for determining the approach to the point can be met by using only the distance between the current position of the vehicle and the point or changing the threshold value of the vehicle speed. In addition, when registering a point, the state of the vehicle at the point (parking, stopping, slowing down, etc.) is set in addition to the operation camera position, and the behavior of the vehicle at the point matches the registered state. In such a case, a method of switching the camera image to the image at the set position may be adopted.
[0051]
Although the embodiments of the present invention have been described above, these are merely examples, and the present invention is not limited to these, and may be understood by those skilled in the art without departing from the scope of the claims. Various modifications based on the above are possible.
[Brief description of the drawings]
FIG. 1 is a block diagram showing an overall configuration of a garage parking assist device as one embodiment of the present invention.
FIG. 2 is a block diagram illustrating the flow of signals of various parts centering on the image switching / combining ECU. FIG. 3 is a block diagram illustrating details of a control unit in the image switching / combining ECU. FIG.
FIG. 5 is a flowchart showing an operation during parking in a garage.
FIG. 6 is an explanatory diagram showing an example of a display screen when setting a garage and selecting a camera.
FIG. 7 is an explanatory diagram showing a modified example of a display screen when setting a garage and selecting a camera.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Left front camera 2 Right front camera 3 Left camera 4 Right camera 5 Rear camera 6 Image switching synthesis ECU
Reference Signs List 7 navigation device 8 control circuit 9 display 10 shift position switch 11 nonvolatile memory 12 camera selection operation start switch 13 camera selection switch 14 storage switch 15 support

Claims (6)

車両に搭載され、車両の周囲を撮影する複数の撮影用ビデオカメラと、そのビデオカメラで撮影された映像を表示する表示器で構成される車両の周辺監視装置であって、
該車両において、地点を登録し、その地点で該車両のどの位置のビデオカメラを動作させるかを設定すると、該車両が該地点へ到着したと判定された場合には、当該ビデオカメラを作動させて、その画像を前記表示器に表示させる制御手段を有することを特徴とする車両の周辺監視装置。
Mounted on the vehicle, a plurality of video cameras for shooting around the vehicle, and a vehicle surroundings monitoring device including a display that displays an image captured by the video camera,
In the vehicle, a point is registered, and a position of the video camera of the vehicle to be operated at the point is set. When it is determined that the vehicle has arrived at the point, the video camera is operated. And a control unit for displaying the image on the display unit.
車両に搭載され、車両の周囲を撮影する複数の撮影用ビデオカメラと、そのビデオカメラで撮影された映像を表示する表示器で構成される車両の周辺監視装置であって、
当該車両の所定の車庫の位置を登録する登録手段と、
前記所定の車庫に対応して、前記複数の撮影用ビデオカメラのうちで、該車両のどの位置のビデオカメラを作動させるかを設定する設定手段と、
当該車両が前記登録手段により登録された、前記所定の車庫に到着したかを判定する判定手段と、
その判定手段により、当該車両が前記所定の車庫に到着したと判定された場合、前記設定手段により設定されている前記所定の車庫に対応したビデオカメラを作動させるビデオカメラ作動手段と、
当該ビデオカメラからの画像を受けて前記表示器に送る表示手段と、
を含むことを特徴とする車両の周辺監視装置。
Mounted on the vehicle, a plurality of video cameras for shooting around the vehicle, and a vehicle surroundings monitoring device including a display that displays an image captured by the video camera,
Registration means for registering the position of a predetermined garage of the vehicle;
Corresponding to the predetermined garage, among the plurality of video cameras for shooting, setting means to set which position of the video camera of the vehicle to operate,
Determining means for determining whether the vehicle has arrived at the predetermined garage, registered by the registration means,
A video camera operating unit that operates a video camera corresponding to the predetermined garage set by the setting unit, when the determination unit determines that the vehicle has arrived at the predetermined garage,
Display means for receiving an image from the video camera and sending the image to the display;
A peripheral monitoring device for a vehicle, comprising:
前記表示手段は、前記表示器と当該ビデオカメラからの画像データを自身の持つ表示器に送る画像送信手段からなるものである請求項2に記載の車両の周辺監視装置。3. The vehicle periphery monitoring device according to claim 2, wherein said display means comprises an image transmission means for transmitting image data from said video camera to said own display device. 前記判定手段は、車両の現在位置を検出する位置検出手段と、その位置検出手段から得られる当該車両の現在位置データに基づいて、当該車両と前記所定の車庫との距離を演算し、演算された距離が所定の距離以内となったときに、当該車両が前記所定の車庫に到着したと判定するものである請求項2ないし請求項3のいずれか1項に記載の車両の周辺監視装置。The determining means calculates a distance between the vehicle and the predetermined garage based on position detecting means for detecting a current position of the vehicle and current position data of the vehicle obtained from the position detecting means. The vehicle periphery monitoring device according to any one of claims 2 to 3, wherein it is determined that the vehicle has arrived at the predetermined garage when the distance is within a predetermined distance. 前記判定手段は、車両の現在位置を検出する位置検出手段と、その位置検出手段から得られる当該車両の現在位置データに基づいて、当該車両と前記所定の車庫との距離を演算し、演算された距離が所定の距離以内となり、かつ、当該車両について計測される車速が所定の速度を下回ったことを検出したときに、当該車両が前記所定の車庫に到着したと判定するものである請求項2ないし請求項3のいずれか1項に記載の車両の周辺監視装置。The determining means calculates a distance between the vehicle and the predetermined garage based on position detecting means for detecting a current position of the vehicle and current position data of the vehicle obtained from the position detecting means. And determining that the vehicle has arrived at the predetermined garage when it is detected that the measured distance is within a predetermined distance and the vehicle speed measured for the vehicle is lower than the predetermined speed. The vehicle periphery monitoring device according to any one of claims 2 to 3. 前記判定手段は、前記位置検出手段から得られる当該車両の現在位置データに基づいて、当該車両と前記所定の車庫との距離を演算し、演算された距離が所定の距離以内となり、かつ、当該車両が後退していることを検出したときに、当該車両が前記所定の車庫に到着したと判定するものである請求項2ないし請求項3のいずれか1項に記載の車両の周辺監視装置。The determining means calculates a distance between the vehicle and the predetermined garage based on current position data of the vehicle obtained from the position detecting means, and the calculated distance is within a predetermined distance, and The vehicle periphery monitoring device according to any one of claims 2 to 3, wherein when detecting that the vehicle is moving backward, the vehicle is determined to have arrived at the predetermined garage.
JP2003072619A 2003-03-17 2003-03-17 Vehicle periphery monitoring device Expired - Fee Related JP4096251B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003072619A JP4096251B2 (en) 2003-03-17 2003-03-17 Vehicle periphery monitoring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003072619A JP4096251B2 (en) 2003-03-17 2003-03-17 Vehicle periphery monitoring device

Publications (2)

Publication Number Publication Date
JP2004282510A true JP2004282510A (en) 2004-10-07
JP4096251B2 JP4096251B2 (en) 2008-06-04

Family

ID=33288767

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003072619A Expired - Fee Related JP4096251B2 (en) 2003-03-17 2003-03-17 Vehicle periphery monitoring device

Country Status (1)

Country Link
JP (1) JP4096251B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006142844A (en) * 2004-11-16 2006-06-08 Sony Corp Operation evaluation device and operation evaluation method
WO2006080122A1 (en) * 2005-01-27 2006-08-03 Matsushita Electric Industrial Co., Ltd. Display control device
JP2006344009A (en) * 2005-06-09 2006-12-21 Xanavi Informatics Corp Method and system for monitoring periphery of vehicle
WO2008143079A1 (en) * 2007-05-22 2008-11-27 Autonetworks Technologies, Ltd. Car video changeover module and car image picking-up device
JP2009248952A (en) * 2008-04-11 2009-10-29 Pioneer Electronic Corp Display device of photographic information, display method thereof, and display program thereof
JP2010186257A (en) * 2009-02-10 2010-08-26 Denso Corp Parking support system, onboard parking support device, and marker with information

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08293098A (en) * 1995-04-21 1996-11-05 Nissan Motor Co Ltd Vehicle side monitor device
JPH08297736A (en) * 1995-04-26 1996-11-12 Honda Motor Co Ltd Photographing system for vehicle
JP2000207696A (en) * 1999-01-18 2000-07-28 Sharp Corp On-vehicle camera apparatus
JP2002117496A (en) * 2000-10-12 2002-04-19 Matsushita Electric Ind Co Ltd On-vehicle rear confirmation support device and on- vehicle navigation device
JP2002127823A (en) * 2000-10-24 2002-05-09 Auto Network Gijutsu Kenkyusho:Kk On-vehicle image display device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08293098A (en) * 1995-04-21 1996-11-05 Nissan Motor Co Ltd Vehicle side monitor device
JPH08297736A (en) * 1995-04-26 1996-11-12 Honda Motor Co Ltd Photographing system for vehicle
JP2000207696A (en) * 1999-01-18 2000-07-28 Sharp Corp On-vehicle camera apparatus
JP2002117496A (en) * 2000-10-12 2002-04-19 Matsushita Electric Ind Co Ltd On-vehicle rear confirmation support device and on- vehicle navigation device
JP2002127823A (en) * 2000-10-24 2002-05-09 Auto Network Gijutsu Kenkyusho:Kk On-vehicle image display device

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006142844A (en) * 2004-11-16 2006-06-08 Sony Corp Operation evaluation device and operation evaluation method
JP4622471B2 (en) * 2004-11-16 2011-02-02 ソニー株式会社 Driving evaluation apparatus and driving evaluation method
WO2006080122A1 (en) * 2005-01-27 2006-08-03 Matsushita Electric Industrial Co., Ltd. Display control device
JP2006344009A (en) * 2005-06-09 2006-12-21 Xanavi Informatics Corp Method and system for monitoring periphery of vehicle
WO2008143079A1 (en) * 2007-05-22 2008-11-27 Autonetworks Technologies, Ltd. Car video changeover module and car image picking-up device
JP2009248952A (en) * 2008-04-11 2009-10-29 Pioneer Electronic Corp Display device of photographic information, display method thereof, and display program thereof
JP2010186257A (en) * 2009-02-10 2010-08-26 Denso Corp Parking support system, onboard parking support device, and marker with information

Also Published As

Publication number Publication date
JP4096251B2 (en) 2008-06-04

Similar Documents

Publication Publication Date Title
JP6044335B2 (en) Parking assistance device, parking assistance system, and parking assistance method
EP2981077B1 (en) Periphery monitoring device and program
JP4855158B2 (en) Driving assistance device
KR101229159B1 (en) Periphery monitoring device
JP4665581B2 (en) Direction change support system
JP6044334B2 (en) Parking assistance device, parking assistance system, and parking assistance method
JP6311646B2 (en) Image processing apparatus, electronic mirror system, and image processing method
JP2007519984A (en) VEHICLE DISPLAY DEVICE, VEHICLE, DISPLAY METHOD, IMAGE DISPLAY PROGRAM, AND RECORDING MEDIUM
CN112124097A (en) Parking assist system
JP2012056428A (en) Driving support device
US10926701B2 (en) Parking assistance method and parking assistance device
JP4129368B2 (en) Vehicle rear image display device, vehicle rear image display method, and vehicle rear image display program
JP4797849B2 (en) Driving support image display system and in-vehicle device
JP2731899B2 (en) Vehicle turn signal control device
JP2018108767A (en) Vehicle control device and vehicle control method
JP4096251B2 (en) Vehicle periphery monitoring device
JP5076819B2 (en) Vehicle driving support device and vehicle driving support method
JP2013109505A (en) Periphery monitoring device
JP2007025739A (en) Image display device for vehicle
JP2006268224A (en) Vehicular driving assistance system
JP6932631B2 (en) Image display device and driving support system
JP4353016B2 (en) Reverse guide display device for vehicle
JP2011134237A (en) Image display device for vehicle and image display method for vehicle
JP6364731B2 (en) Vehicle rear image presentation device
JP7137356B2 (en) In-vehicle failure detection device and failure detection method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050726

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070731

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070925

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080214

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080227

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110321

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120321

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120321

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130321

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140321

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees