JP2005199892A - Periphery monitoring device for vehicle - Google Patents

Periphery monitoring device for vehicle Download PDF

Info

Publication number
JP2005199892A
JP2005199892A JP2004008903A JP2004008903A JP2005199892A JP 2005199892 A JP2005199892 A JP 2005199892A JP 2004008903 A JP2004008903 A JP 2004008903A JP 2004008903 A JP2004008903 A JP 2004008903A JP 2005199892 A JP2005199892 A JP 2005199892A
Authority
JP
Japan
Prior art keywords
vehicle
obstacle
camera
distance
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004008903A
Other languages
Japanese (ja)
Other versions
JP4251323B2 (en
Inventor
Manabu Matsumoto
学 松元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2004008903A priority Critical patent/JP4251323B2/en
Publication of JP2005199892A publication Critical patent/JP2005199892A/en
Application granted granted Critical
Publication of JP4251323B2 publication Critical patent/JP4251323B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a periphery monitoring device for a vehicle displaying a camera picture, an image and information adjusting to circumference in a vehicle mounted with a photographing camera for photographing the periphery of the vehicle and a display for displaying the image and the information. <P>SOLUTION: The periphery monitoring device for the vehicle has a display part mounted on the vehicle and displaying the image or the information; the photographing camera mounted on the vehicle and photographing the periphery of the vehicle; a distance measurement means for measuring a distance with an obstacle at a side of the vehicle; and a switching determination means for switching display of the display part by monitoring the distance with the obstacle. When it is determined by the distance measurement means that the obstacle exists in a predetermined range at the side of the vehicle, the image by the photographing camera is displayed on the display part. When the vehicle is stopped, it is switched to the camera picture and when the vehicle is started, it can be switched to navigation information or the like. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、車両に搭載された監視カメラにて、車両周辺の監視を行う車両用周辺監視装置に関する。   The present invention relates to a vehicle periphery monitoring device for monitoring the periphery of a vehicle with a monitoring camera mounted on the vehicle.

近年、自動車などの車両にカメラを搭載し、車両外部の周辺をカメラで監視し、車内のディスプレイでその画像を表示することにより、車両の運転に利用することが行われている。この装置によれば、車両が交差点に進入する場合に、運転席からは、見えない左右の状況をカメラで撮影して、ディスプレイで表示することにより、運転手に注意を促すことができる。また車両の後部に、ビデオカメラを取付けて、そのビデオカメラが撮影した映像を、車内の所定位置に配置されたモニタに表示させるようにした、バックモニタと称されるものが各種実用化されている。このバックモニタは、主として車両を後退させる際に、運転席から死角となる後方がモニタで確認できるようにして、後退時の安全性を向上させるために使用される。   In recent years, a camera is mounted on a vehicle such as an automobile, the periphery of the vehicle is monitored by the camera, and the image is displayed on a display inside the vehicle, thereby being used for driving the vehicle. According to this device, when the vehicle enters the intersection, the driver can be alerted by photographing the left and right situations that cannot be seen from the driver's seat with the camera and displaying them on the display. In addition, various types of so-called back monitors have been put into practical use, in which a video camera is attached to the rear of the vehicle, and images taken by the video camera are displayed on a monitor arranged at a predetermined position in the vehicle. Yes. This back monitor is mainly used to improve the safety at the time of reversing so that when the vehicle is moved backward, the rear that becomes a blind spot from the driver's seat can be confirmed on the monitor.

そして、カメラ映像のディスプレイは、カーナビゲーション装置の走行中の現在位置近傍の道路地図などを表示させるためのディスプレイ(モニタ)と併用されることが多く、いかにカーナビ情報とカメラ映像との切り替えをタイミング良く行うかという考案がされている。   The camera image display is often used in combination with a display (monitor) for displaying a road map in the vicinity of the current position of the car navigation device, and how to switch between the car navigation information and the camera image. It has been devised to do well.

特許文献1においては、履歴情報やナビゲーション情報、インフラストラクチャ情報等に従って、側方視界の確認が必要な交差点が検出された場合に、自動的に側方視界画像の表示機能を作動させるという考案が開示されている。   In Patent Document 1, when an intersection that requires confirmation of a side view is detected according to history information, navigation information, infrastructure information, or the like, a device that automatically activates a side view image display function is proposed. It is disclosed.

また特許文献2においては、ステアリングホイールの舵角および車速に基づいて、車両の向きの変化量、すなわち、偏向角θを検出し、この値から側方撮像画像から前方撮像画像への切り替えを行う考案が開示されている。すなわち表示ディスプレイへのサイドカメラによる側方撮像画像の表示が開始された後、偏向角θが所定値に達した場合に、表示ディスプレイに表示される撮像画像を、サイドカメラによる側方撮像画像からフロントカメラによる前方撮像画像へ切り替える。
In Patent Document 2, the amount of change in the direction of the vehicle, that is, the deflection angle θ is detected based on the steering angle of the steering wheel and the vehicle speed, and switching from the side captured image to the front captured image is performed from this value. A device is disclosed. That is, after the display of the side captured image by the side camera on the display display is started, when the deflection angle θ reaches a predetermined value, the captured image displayed on the display display is changed from the side captured image by the side camera. Switch to the front image captured by the front camera.

特開平10−264722号公報JP-A-10-264722 特開2003−146133号公報JP 2003-146133 A

しかしながら特許文献1においては、側方視界画像を表示させる判定情報が、リアルタイムではないため、工事中の場合や、大型トラックが側方を走行している場合など、突発的な状況の検出ができない問題がある。   However, in Patent Document 1, since the determination information for displaying the side view image is not real-time, it is impossible to detect a sudden situation such as during construction or when a large truck is traveling sideways. There's a problem.

また特許文献2においては、運転手のステアリング操作に応じて、カメラを切り替えている。すなわち周辺の環境に関係なく、進む方向を映し出すだけの制御である。したがって、左右に障害物があって直進の場合は、左右アングルが見えない状況が発生して、安全性向上には、結びつかない状況が発生する。   In Patent Document 2, the camera is switched in accordance with the driver's steering operation. In other words, it is a control that only projects the traveling direction regardless of the surrounding environment. Therefore, when there are obstacles on the left and right and the vehicle goes straight, a situation where the right and left angles cannot be seen occurs, and a situation that does not lead to improvement in safety occurs.

そこで本発明の課題は、車両の周囲を撮影する撮影用カメラと、映像や情報を表示するディスプレイとが搭載された車両において、撮影用カメラによる映像と他の映像や情報とを状況に合わせて表示する車両用周辺監視装置を提供することである。   SUMMARY OF THE INVENTION Accordingly, an object of the present invention is to provide a camera equipped with a photographic camera for photographing the surroundings of a vehicle and a display for displaying video and information in accordance with the situation. It is to provide a vehicle periphery monitoring device for displaying.

課題を解決するための手段および発明の効果Means for Solving the Problems and Effects of the Invention

上記課題を解決するための本発明の車両用周辺監視装置は、
車両に搭載され、映像または情報を表示する表示部と、
車両に搭載され、車両の周囲を撮影する撮影用カメラと、
車両側方の障害物との距離を測定する距離測定手段と、
障害物との距離を監視することにより表示部の表示を切り替える切替判定手段とを有し、
距離測定手段により、車両側方の所定範囲内に障害物があると判定した場合に、撮影用カメラによる映像を表示部に表示する。
The vehicle periphery monitoring device of the present invention for solving the above problems is
A display unit mounted on a vehicle and displaying video or information;
A camera for taking a picture of the surroundings of the vehicle mounted on the vehicle;
A distance measuring means for measuring a distance to an obstacle on the side of the vehicle;
Switching determination means for switching the display of the display unit by monitoring the distance to the obstacle,
When the distance measuring means determines that there is an obstacle within a predetermined range on the side of the vehicle, an image taken by the photographing camera is displayed on the display unit.

上記構成によれば、距離測定手段により、車両近傍に障害物があるかを判定することができ、障害物によって車両運転手の視界が遮られていると判断される場合に、切替判定手段によって、表示部の表示をカメラ画像に切り替えることができる。運転手は表示部を見ることにより、運転席から見えない方向を確認することができ、安全に運転することができる。またこの切り替えは、適切なときに自動的になされるため煩わしい操作は必要なく、運転手の運転の妨げになることもない。なお表示部は、車両の現在位置を指示する電子地図を表示するナビゲーション装置のディスプレイであってもよいし、テレビ画面であってもよい。   According to the above configuration, the distance measuring unit can determine whether there is an obstacle in the vicinity of the vehicle, and when it is determined that the vehicle driver's field of view is blocked by the obstacle, the switching determining unit The display on the display unit can be switched to the camera image. The driver can confirm the direction invisible from the driver's seat by looking at the display unit, and can drive safely. In addition, since this switching is automatically performed at an appropriate time, no troublesome operation is required, and the driver's driving is not hindered. The display unit may be a display of a navigation device that displays an electronic map indicating the current position of the vehicle, or may be a television screen.

そして車両用周辺監視装置は、
複数の距離測定手段と、複数の撮影用カメラとを有し、
切替判定手段は、各距離測定手段からの障害物との距離を示す信号と、車両の前進または後進を示すギア信号とに基づいて、車両進行方向の障害物が存在している側の撮影用カメラの映像に表示部の表示を切り替える。
And the vehicle periphery monitoring device
Having a plurality of distance measuring means and a plurality of photographing cameras;
The switching determination means is for photographing the side where the obstacle in the vehicle traveling direction is present based on the signal indicating the distance from the obstacle from each distance measuring means and the gear signal indicating forward or reverse of the vehicle. Switch the display on the display to the camera image.

このように複数の距離測定手段と撮影用カメラを設置することにより、運転手の死角をなくすことができる。またギア信号も入力されることから、前方に設置されたカメラの映像を表示するのか、後方に設置されたカメラの映像を表示するのかを、切替判定手段が判定し、自動的に表示を切り替えることができる。   By installing a plurality of distance measuring means and photographing cameras in this way, the driver's blind spot can be eliminated. Since a gear signal is also input, the switching determination means determines whether to display the image of the camera installed in the front or the image of the camera installed in the rear, and automatically switches the display. be able to.

そして車両側方の所定範囲内に障害物があると判定した場合、車両が停止した時に、撮影用カメラによる映像を表示部に表示するようにすることができる。車両が停止した場合、交差点と判断し、撮影用カメラの映像を表示することで、左右を確認して、安全に発進することができる。そして車両が停止し、側方に障害物があることによってカメラ映像が表示部に表示された後に、車両が発進することにより、表示部の表示を電子地図または他の映像と切り替えるようにする。再び車両が発進すれば、運転手が左右をカメラ映像で確認したと見なせるので、表示を地図情報や他の映像などに戻す。左右を確認した後にもカメラ映像を表示する必要はなく、運転手が望む情報を表示することができる。   When it is determined that there is an obstacle within a predetermined range on the side of the vehicle, when the vehicle stops, an image taken by the photographing camera can be displayed on the display unit. When the vehicle stops, it is determined that the vehicle is an intersection, and by displaying the video of the camera for photographing, it is possible to confirm the left and right and start safely. And after a vehicle stops and a camera image | video is displayed on a display part by there being an obstruction on the side, when a vehicle starts, the display of a display part is switched with an electronic map or another image | video. If the vehicle starts again, it can be considered that the driver has confirmed the left and right with the camera image, so the display is returned to the map information or other images. It is not necessary to display the camera image even after confirming the left and right, and the information desired by the driver can be displayed.

距離測定手段が、運転手の位置から離れた場所に設置されていると、運転手の側方に障害物があるかの判定に誤りが生じることがあり得る。そこで距離測定手段により障害物を検知した後、車両が走行したため距離測定手段の所定範囲に障害物がなくなった場合に、距離測定手段の設置位置と運転手との距離を加味して、運転手の側方位置に障害物があるかを判定するようにする。このように距離測定手段の設置位置と運転手との距離を加味して判定することにより、的確な映像切り替えを行うことができる。   If the distance measuring means is installed at a location away from the driver's position, an error may occur in determining whether there is an obstacle on the side of the driver. Therefore, after the obstacle is detected by the distance measuring means and the vehicle has traveled and the obstacle disappears in the predetermined range of the distance measuring means, the distance between the installation position of the distance measuring means and the driver is taken into account. It is determined whether there is an obstacle at the side position of. In this way, by determining the distance between the installation position of the distance measuring means and the driver, it is possible to perform accurate video switching.

距離測定手段として例えば、コーナーセンサを使用する。コーナーセンサは、超音波送信機、超音波受信機、距離演算回路を備える。そして超音波の送信から受信までの時間差から、距離演算回路が、コーナーセンサと障害物との間の距離を演算する。距離測定手段は、バンパーコーナーに設置することができる。例えば車両前部と後部の左右に設置することにより、車両の側方に障害物があるかを判定することができる。さらに距離測定手段を車両ピラー部に設置すると、運転手が障害物により、視界が遮られているかを、より正確に判断することができる。   For example, a corner sensor is used as the distance measuring means. The corner sensor includes an ultrasonic transmitter, an ultrasonic receiver, and a distance calculation circuit. Then, the distance calculation circuit calculates the distance between the corner sensor and the obstacle from the time difference between the transmission and reception of the ultrasonic wave. The distance measuring means can be installed at the bumper corner. For example, it can be determined whether there is an obstacle on the side of the vehicle by installing it on the left and right of the front and rear of the vehicle. Furthermore, when the distance measuring means is installed in the vehicle pillar portion, it is possible to more accurately determine whether the driver is obstructed by the obstacle.

撮影用カメラを車両前部左右と、車両後部左右とに設置する。このように前部左右に設置することにより、交差点にさしかかった際に、左右を確認することができる。また後部左右に設置することにより、バックで走行する場合に、左右を確認することができる。   Cameras for photographing are installed on the left and right sides of the front of the vehicle and on the left and right of the rear of the vehicle. By installing in the front left and right in this way, the left and right can be confirmed when approaching the intersection. In addition, by installing the rear left and right, it is possible to check the left and right when traveling in the back.

以下、図を参照しつつ本発明の実施形態について説明する。図1は本発明の構成を示すブロック図である。車両用監視装置100は、ナビゲーション装置110と一体として構成されている。ナビゲーション装置110は、位置検出器1、地図データ入力器6、操作部7、外部記憶媒体が使用可能な外部記憶装置12、表示部10、これらの接続されたナビ処理部8を備えている。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing the configuration of the present invention. The vehicle monitoring device 100 is configured integrally with the navigation device 110. The navigation device 110 includes a position detector 1, a map data input device 6, an operation unit 7, an external storage device 12 that can use an external storage medium, a display unit 10, and a navigation processing unit 8 connected to them.

さらにナビ処理部8には、車両に搭載され車両外部を撮影する撮影用カメラ11,12,13,14が接続され、車速を検出する車速パルス15、前進、後退、停止状態を検出するギアセンサ16の信号も入力される。撮影用カメラは、車両の前後の左右に計4つ設置され、その撮影用カメラにより撮影された映像は、ナビ処理部8によって処理され、ナビ処理部8により表示部10の切り替えが行われ表示される。すなわちナビ処理部8は、切替判定手段にあたる。   Further, the navigation processing unit 8 is connected with photographing cameras 11, 12, 13, and 14 that are mounted on the vehicle and photograph the outside of the vehicle, and a vehicle speed pulse 15 that detects the vehicle speed, and a gear sensor 16 that detects the forward, backward, and stopped states. This signal is also input. A total of four shooting cameras are installed on the left and right sides of the front and rear of the vehicle. The video shot by the shooting camera is processed by the navigation processing unit 8, and the display unit 10 is switched by the navigation processing unit 8 and displayed. Is done. That is, the navigation processing unit 8 corresponds to a switching determination unit.

またナビ処理部8には、車両周辺検知処理部20が接続され、その車両周辺検知処理部20には、車両外の障害物等を検知するためのセンサ21,22,23,24が接続されている。センサは、例えば、超音波などを利用したコーナーセンサで、車両のバンバーコーナーに設置されている。そして車両周辺の障害物までの距離などを検出する。センサは、距離測定手段である。   The navigation processing unit 8 is connected to a vehicle periphery detection processing unit 20, and the vehicle periphery detection processing unit 20 is connected to sensors 21, 22, 23, and 24 for detecting obstacles and the like outside the vehicle. ing. The sensor is, for example, a corner sensor using ultrasonic waves and is installed at a bumper corner of the vehicle. Then, the distance to the obstacle around the vehicle is detected. The sensor is a distance measuring means.

位置検出器1は、周知の地磁気センサ、ジャイロスコープ、距離センサ、および衛星からの電波に基づいて車両の位置を検出するGPS(Global Positioning System)のためのGPS受信機を有している。これらのセンサ等は各々が性質の異なる誤差を持っているため、複数のセンサにより各々補完しながら使用するように構成されている。なお、精度によっては前述したうちの一部センサで構成してもよく、さらに、ステアリングの回転センサや各転動輪の車輪センサ等を用いてもよい。   The position detector 1 has a well-known geomagnetic sensor, gyroscope, distance sensor, and GPS receiver for GPS (Global Positioning System) that detects the position of the vehicle based on radio waves from a satellite. Since these sensors have errors of different properties, they are configured to be used while being complemented by a plurality of sensors. Depending on the accuracy, a part of the sensors described above may be used, and further, a steering rotation sensor, a wheel sensor of each rolling wheel, or the like may be used.

地図データ入力器6は、位置検出の精度向上のためのいわゆるマップマッチング用データ,地図データを含む各種データを入力するための装置である。媒体としては、そのデータ量からCD−ROMまたはDVD−ROMを用いるのが一般的であるが、メモリカード,ハードディスク等の大容量の記憶媒体を用いてもよい。   The map data input device 6 is a device for inputting various data including so-called map matching data and map data for improving the accuracy of position detection. As a medium, a CD-ROM or a DVD-ROM is generally used because of the amount of data, but a large-capacity storage medium such as a memory card or a hard disk may be used.

操作部7は、例えば表示部10と一体になったタッチスイッチもしくはメカニカルなスイッチ等が用いられる。タッチスイッチは、表示部10の画面上に縦横に微細に配置された赤外線センサより構成されており、例えば指やタッチペンなどでその赤外線を遮断すると、その遮断した位置が2次元座標値(X,Y)として検出される。これら操作部7によって、種々の指示を入力することが可能である。   For example, a touch switch or a mechanical switch integrated with the display unit 10 is used as the operation unit 7. The touch switch is composed of infrared sensors that are finely arranged vertically and horizontally on the screen of the display unit 10. For example, when the infrared ray is cut off with a finger or a touch pen, the cut-off position becomes a two-dimensional coordinate value (X, Y). It is possible to input various instructions using the operation unit 7.

表示部10はカラーCRTやカラー液晶表示器により構成されており、表示部10の画面には位置検出器1から入力された車両現在位置マークと、地図データ入力器6から入力された地図データと、更に地図上に表示する誘導経路等付加データとを重ね合わせて表示すると共に、本画面に経路案内の設定および経路誘導中の案内や画面の切り替え操作を行うためのボタンが表示される。   The display unit 10 is configured by a color CRT or a color liquid crystal display. The vehicle current position mark input from the position detector 1 and the map data input from the map data input unit 6 are displayed on the screen of the display unit 10. Further, additional data such as a guidance route to be displayed on the map is displayed in an overlapping manner, and buttons for setting route guidance, guidance during route guidance, and a screen switching operation are displayed on this screen.

以上の構成により、車両が走行中、通常表示部には、車両の現在位置を示す地図が表示されている。そして交差点などにさしかかり、障害物によりドライバから前方側方が見えない場合に、センサがそれを検知し、カメラで車周辺を撮影して、地図に変わって車外の映像を表示部に表示する。   With the above configuration, a map showing the current position of the vehicle is displayed on the normal display unit while the vehicle is traveling. Then, when approaching an intersection or the like and the front side cannot be seen from the driver due to an obstacle, the sensor detects it, photographs the vehicle periphery with a camera, and displays a video outside the vehicle on the display unit instead of a map.

図2を用いて撮影用カメラとセンサの設置位置、およびそれらの動作について説明する。撮影用カメラは、車両41の前後の左右4箇所に設置されている。すなわち撮影用カメラ11は、前方左側に設置され、車両41の前方左側の撮影を行う。また撮影用カメラ12は、前方右側に設置され、車両41の前方右側の撮影を行う。同様に撮影用カメラ13は、後方左側に設置され、車両41の後方左側の撮影を行う。また撮影用カメラ14は、後方右側に設置され、車両41の後方右側の撮影を行う。   With reference to FIG. 2, the installation positions of the photographing camera and sensor and their operations will be described. The photographing cameras are installed at four places on the left and right of the vehicle 41. In other words, the shooting camera 11 is installed on the left front side and performs shooting on the left front side of the vehicle 41. The photographing camera 12 is installed on the front right side and photographs the front right side of the vehicle 41. Similarly, the photographing camera 13 is installed on the rear left side and performs photographing on the rear left side of the vehicle 41. The photographing camera 14 is installed on the right rear side and performs photographing on the right rear side of the vehicle 41.

さらにセンサも車両41の前後の左右の4箇所、コーナー位置に設置されている。すなわちセンサ21は、前方左側に設置され、車両41の前方左側に障害物があるかを測定する。またセンサ22は、前方右側に設置され、車両41の前方右側の測定を行う。同様にセンサ23は、後方左側に設置され、車両41の後方左側の測定を行う。またセンサ24は、後方右側に設置され、車両41の後方右側の測定を行う。各センサの範囲31,32,33,34に障害物があれば、その距離が検知される。   Furthermore, sensors are also installed at four corners on the left and right sides of the vehicle 41. That is, the sensor 21 is installed on the front left side and measures whether there is an obstacle on the front left side of the vehicle 41. The sensor 22 is installed on the right front side, and measures the right front side of the vehicle 41. Similarly, the sensor 23 is installed on the left rear side and measures the left rear side of the vehicle 41. The sensor 24 is installed on the right rear side and performs measurement on the right rear side of the vehicle 41. If there is an obstacle in each sensor range 31, 32, 33, 34, the distance is detected.

センサは、コーナーセンサを用いる。コーナーセンサは、超音波送信機、超音波受信機、距離演算回路を備える。そしてコーナーセンサの超音波送信機は、超音波を送信し、障害物により反射されて戻ってくる超音波は、超音波受信機によって受信される。超音波の送信から受信までの時間差から、距離演算回路は、コーナーセンサと障害物との間の距離を演算する。そして測定距離を車両周辺検知処理部に出力する。   A sensor uses a corner sensor. The corner sensor includes an ultrasonic transmitter, an ultrasonic receiver, and a distance calculation circuit. The ultrasonic transmitter of the corner sensor transmits ultrasonic waves, and the ultrasonic waves reflected and returned by the obstacle are received by the ultrasonic receiver. The distance calculation circuit calculates the distance between the corner sensor and the obstacle from the time difference from transmission to reception of the ultrasonic wave. Then, the measurement distance is output to the vehicle periphery detection processing unit.

図2に示すように車両41が走行する左右側方には、障害物(遮蔽物)80,81がある場合に、車両に設置された各センサ21,22,23,24は、それぞれ側方の障害物との距離を監視する。また各カメラ11,12,13,14は、車両側方を撮影する。障害物とは、例えば、ビルや壁などを表す。センサは、センサ周辺に障害物があるかを判定する。そしてこれらのセンサの判定に基づきカメラの映像が表示されることになる。つまり車両41の運転席からは、障害物80,81によって前方の左右を見ることができないが、撮影用カメラ11,12の映像によって確認することができる。   As shown in FIG. 2, when there are obstacles (shields) 80, 81 on the left and right sides where the vehicle 41 travels, the sensors 21, 22, 23, 24 installed in the vehicle are respectively Monitor the distance to obstacles. Moreover, each camera 11, 12, 13, and 14 image | photographs the vehicle side. An obstacle represents a building, a wall, etc., for example. The sensor determines whether there is an obstacle around the sensor. Based on the determination of these sensors, the video of the camera is displayed. That is, from the driver's seat of the vehicle 41, the front left and right cannot be seen by the obstacles 80 and 81, but can be confirmed by the images of the photographing cameras 11 and 12.

図3に左側に障害物のある場所を走行し、停止位置で停止した場合の車両に搭載されたセンサ等の変化を示す。最上部に示すように、車両41は障害物81の側方を走行し、停止位置(交差点)において停止する。障害物81は、車両41の左側にある。この時、車両前方左側に設置されたセンサAは、障害物がなくなったことを検知し、その信号を発する。一方、車両41の右側には、障害物がないため、車両前方右側に設置されたセンサBの信号は変化しない。車両後方左側に設置されたセンサCは、車両が停止位置において停止しても、側方に障害物があるため、その信号は一定のままである。車両後方右側に設置されたセンサDは、センサCと同様である。また車両41は前進して走行中のため、ギアも前進のままである。さらに車速センサは、車軸の回転を検出してこの回転に応じた車速パルスを発生するため、車両が走行中は、矩形の信号として出力される。また車速信号は、停止位置において停止すると出力(発生)されなくなる。以上の信号から、車両が交差点にさしかかり停止した場合に、表示部の表示は地図表示から前方左側のカメラ画像に切り替わる。なお障害物が左右両側にある場合には、左右両側のカメラ映像が表示される。   FIG. 3 shows changes in sensors and the like mounted on the vehicle when the vehicle travels on the left side with an obstacle and stops at the stop position. As shown at the top, the vehicle 41 travels on the side of the obstacle 81 and stops at the stop position (intersection). The obstacle 81 is on the left side of the vehicle 41. At this time, the sensor A installed on the left side in front of the vehicle detects that the obstacle has disappeared, and issues a signal. On the other hand, since there is no obstacle on the right side of the vehicle 41, the signal of the sensor B installed on the right side in front of the vehicle does not change. Even if the vehicle stops at the stop position, the sensor C installed on the rear left side of the vehicle has an obstacle on the side, so that the signal remains constant. The sensor D installed on the right rear side of the vehicle is the same as the sensor C. Further, since the vehicle 41 is moving forward and traveling, the gear remains forward. Further, since the vehicle speed sensor detects the rotation of the axle and generates a vehicle speed pulse corresponding to the rotation, the vehicle speed sensor outputs a rectangular signal while the vehicle is traveling. The vehicle speed signal is not output (generated) when the vehicle stops at the stop position. When the vehicle stops at the intersection from the above signals, the display on the display unit is switched from the map display to the left front camera image. If there are obstacles on both the left and right sides, the left and right camera images are displayed.

図4のフローチャートを用いて表示画面の切り替えについて説明する。S1でオートモードになっているかを判定する。オートモードとは、ナビゲーション装置の表示画面に表示された地図情報から、カメラによって撮影された映像へ、所定の条件が満たされるときに、自動的に切り替えるモードである。オートモードがONになっていれば、S2でセンサの信号が入力される。センサの信号により、車両側方に障害物があるかを監視する(S3)。そして障害物があると判定されると、距離カウントを0とする(S4)。障害物がなくなると(S5)、S6に進み距離カウントを開始する。車速から車両が停止したかを判定し(S7)、停止した場合には、S8へ進む。車両が停止しなければ、S1へ戻る。   The switching of the display screen will be described using the flowchart of FIG. In S1, it is determined whether the auto mode is set. The auto mode is a mode that automatically switches from map information displayed on the display screen of the navigation device to video captured by the camera when a predetermined condition is satisfied. If the auto mode is ON, the sensor signal is input in S2. Based on the sensor signal, it is monitored whether there is an obstacle on the side of the vehicle (S3). If it is determined that there is an obstacle, the distance count is set to 0 (S4). When there are no obstacles (S5), the process proceeds to S6 and distance counting is started. It is determined from the vehicle speed whether the vehicle has stopped (S7), and if it has stopped, the process proceeds to S8. If the vehicle does not stop, the process returns to S1.

車が停止すれば、障害物がなくなった地点から車が移動した距離(距離カウント)と、センサと運転手との距離とから、障害物がなくなる地点と運転手との距離を求める(S8)。図5に示すようにセンサ21,22と運転手45との距離をa、障害物がなくなった地点85から車の移動距離(センサの位置の移動距離)をbとして、aとbから運転手45と障害物がなくなる地点85との距離cを計算する。図5(a)に示すように、運転手45の側方にまだ障害物81がある場合、例えばcが1m以下であれば(S9)、S10に進む。また図5(b)に示すように、移動距離bがセンサ21,22と運転手45との距離aよりも大きい場合は、運転手側方に障害物がないためS1に戻る。   If the vehicle stops, the distance between the point where the obstacle disappears and the driver is obtained from the distance (distance count) from which the obstacle has moved and the distance between the sensor and the driver (S8). . As shown in FIG. 5, the distance between the sensors 21 and 22 and the driver 45 is a, and the distance from the point 85 where the obstacle disappears is b (the movement distance of the sensor position) is b. The distance c between 45 and the point 85 where the obstacle disappears is calculated. As shown in FIG. 5A, when the obstacle 81 is still on the side of the driver 45, for example, if c is 1 m or less (S9), the process proceeds to S10. As shown in FIG. 5B, when the moving distance b is larger than the distance a between the sensors 21 and 22 and the driver 45, there is no obstacle on the side of the driver, and the process returns to S1.

図4に戻って、車が停止した地点において、運転手の側方に障害物がある場合には、S10で左右カメラの画像を表示する。S11で再び車が、発進するのを監視し、車が発進すれば、画面を元の地図情報に戻す(S12)。   Returning to FIG. 4, if there is an obstacle on the side of the driver at the point where the vehicle stops, the images of the left and right cameras are displayed in S <b> 10. In S11, the start of the car is monitored again. If the car starts, the screen is returned to the original map information (S12).

なおバックで障害物にある場所を走行している場合には、図5(c)に示すように後方に設置されたセンサ23,24によって障害物の判断を行う。すなわち障害物がなくなった地点86からの移動距離eと、センサ23,24と運転手45との距離dとから、運転手45と障害物がなくなる地点86までの距離fを求め、これにより後方に設置されたカメラ映像を表示することになる。   When the vehicle is traveling in a location behind the obstacle, the obstacle is judged by the sensors 23 and 24 installed at the rear as shown in FIG. That is, the distance f from the point 86 where the obstacle disappears and the distance d between the sensors 23 and 24 and the driver 45 to the driver 86 and the point 86 where the obstacle disappears is obtained. The camera image installed in will be displayed.

図6にピラー42に上センサ26を取り付けた実施例を示す。車両前方に取り付けたセンサ22は、高さ方向の検出範囲が低い位置となる。すなわち高さXの範囲に障害物があるかを検出することになる。よって運転席からは側方が見える場合でも、高さの低い障害物がある場合は、障害物ありと判断することになる。そこで図に示すようにピラー42位置に上センサ26を取り付ければ、高さYの範囲に障害物があるかを判断することが可能となり、より正確な映像表示の切り替えが可能となる。   FIG. 6 shows an embodiment in which the upper sensor 26 is attached to the pillar 42. The sensor 22 attached to the front side of the vehicle has a low detection range in the height direction. That is, it is detected whether there is an obstacle in the range of the height X. Therefore, even when the side is visible from the driver's seat, if there is an obstacle with a low height, it is determined that there is an obstacle. Therefore, if the upper sensor 26 is attached at the position of the pillar 42 as shown in the figure, it is possible to determine whether there is an obstacle in the range of the height Y, and it is possible to switch the video display more accurately.

図7に3車線の道路を走行する車両を示す。この車両41の両側には、大型トラック88,89が走行している。この場合、前方の横断歩道91を歩行者92が横断している場合でも、大型トラック88によって車両の運転手は、視認することができない。しかしながら本発明の車両周辺監視装置によれば、大型トラック88を障害物として判断して、自動的にナビゲーション装置の表示部をカメラ映像に切り替えることができる。これにより安全確保が可能となる。さらに道路が工事中で、大型トラック88,89の代わりに工事用の柵が設置されて、前方左右が確認できない場合も、カメラ映像により、歩行者92の有無を確認することができる。   FIG. 7 shows a vehicle traveling on a three-lane road. Large trucks 88 and 89 are running on both sides of the vehicle 41. In this case, even when the pedestrian 92 crosses the front pedestrian crossing 91, the driver of the vehicle cannot visually recognize the large truck 88. However, according to the vehicle periphery monitoring device of the present invention, it is possible to determine the large truck 88 as an obstacle and automatically switch the display unit of the navigation device to the camera image. This makes it possible to ensure safety. Furthermore, even when the road is under construction and construction fences are installed in place of the large trucks 88 and 89, and the front left and right cannot be confirmed, the presence or absence of the pedestrian 92 can be confirmed from the camera image.

本発明の車両周辺監視装置の全体構成を示すブロック図。The block diagram which shows the whole structure of the vehicle periphery monitoring apparatus of this invention. 撮影用カメラとセンサの位置を示す図。The figure which shows the position of the camera for imaging | photography, and a sensor. 障害物の側方を走行するときのセンサ等の信号の変化を示す図。The figure which shows the change of signals, such as a sensor, when drive | working the side of an obstruction. 表示部切り替えを説明するためのフローチャート。The flowchart for demonstrating display part switching. センサ位置、運転手の位置、障害物の端辺との位置関係を説明する図。The figure explaining the positional relationship with a sensor position, a driver's position, and the edge of an obstacle. センサの高さ範囲について説明する図。The figure explaining the height range of a sensor. 大型トラックの側方を通過する場合を説明する図。The figure explaining the case where it passes along the side of a large sized truck.

符号の説明Explanation of symbols

8 ナビ処理部
10 表示部
11,12,13,14 撮影用カメラ
20 車両周辺検知処理部
21,22,23,24 センサ
41 車両
100 車両用監視装置
DESCRIPTION OF SYMBOLS 8 Navi process part 10 Display part 11, 12, 13, 14 Camera for photography 20 Vehicle periphery detection process part 21, 22, 23, 24 Sensor 41 Vehicle 100 Monitoring device for vehicles

Claims (9)

車両に搭載され、映像または情報を表示する表示部と、
前記車両に搭載され、前記車両の周囲を撮影する撮影用カメラと、
前記車両側方の障害物との距離を測定する距離測定手段と、
前記障害物との距離を監視することにより前記表示部の表示を切り替える切替判定手段とを有し、
前記距離測定手段により、前記車両側方の所定範囲内に障害物があると判定した場合に、前記撮影用カメラによる映像を前記表示部に表示することを特徴とする車両用周辺監視装置。
A display unit mounted on a vehicle and displaying video or information;
A shooting camera mounted on the vehicle and shooting the surroundings of the vehicle;
Distance measuring means for measuring the distance to the obstacle on the side of the vehicle;
Switching determination means for switching the display of the display unit by monitoring the distance to the obstacle,
The vehicle periphery monitoring device, wherein when the distance measuring means determines that an obstacle is within a predetermined range on the side of the vehicle, an image from the photographing camera is displayed on the display unit.
複数の前記距離測定手段と、複数の前記撮影用カメラとを有し、
前記切替判定手段は、各前記距離測定手段からの前記障害物との距離を示す信号と、前記車両の前進または後進を示すギア信号とに基づいて、前記車両進行方向の前記障害物が存在している側の前記撮影用カメラの映像に前記表示部の表示を切り替える請求項1に記載の車両用周辺監視装置。
A plurality of the distance measuring means, and a plurality of the photographing cameras;
The switching determination means includes the obstacle in the vehicle traveling direction based on a signal indicating the distance from the obstacle from each of the distance measuring means and a gear signal indicating forward or reverse of the vehicle. The vehicle periphery monitoring device according to claim 1, wherein the display of the display unit is switched to an image of the shooting camera on the side where the image is taken.
前記車両側方の所定範囲内に障害物があると判定した場合、前記車両が停止した時に、前記撮影用カメラによる映像を前記表示部に表示する請求項1または2に記載の車両用周辺監視装置。   3. The vehicle periphery monitoring according to claim 1, wherein when it is determined that there is an obstacle within a predetermined range on the side of the vehicle, when the vehicle stops, an image by the photographing camera is displayed on the display unit. apparatus. 前記車両が停止し、側方に障害物があることによって前記カメラ映像が前記表示部に表示された後に、前記車両が発進することにより、前記表示部の表示を前記カメラ映像とは異なる映像または情報に切り替える請求項3に記載の車両用周辺監視装置。   After the vehicle stops and the camera image is displayed on the display unit due to an obstacle on the side, the vehicle starts, so that the display on the display unit is different from the camera image. The vehicle periphery monitoring device according to claim 3, wherein the vehicle periphery monitoring device is switched to information. 前記距離測定手段により障害物を検知した後、前記車両が走行したため前記距離測定手段の所定範囲に前記障害物がなくなった場合に、前記距離測定手段の設置位置と運転手との距離を加味して、なお運転手の側方位置に前記障害物があると判定すると、前記撮影用カメラによる映像に前記表示部の表示を切り替える請求項1ないし4のいずれか1項に記載の車両用周辺監視装置。   After the obstacle is detected by the distance measuring means, when the vehicle has traveled and the obstacle disappears in the predetermined range of the distance measuring means, the distance between the installation position of the distance measuring means and the driver is taken into account. The vehicle periphery monitoring according to any one of claims 1 to 4, wherein when it is determined that the obstacle is located at a side position of the driver, the display of the display unit is switched to an image by the photographing camera. apparatus. 前記距離測定手段としてコーナーセンサを使用する請求項1ないし5のいずれか1項に記載の車両用周辺監視装置。   6. The vehicle periphery monitoring device according to claim 1, wherein a corner sensor is used as the distance measuring means. 前記距離測定手段をバンパーコーナーに設置する請求項1ないし6のいずれか1項に記載の車両用周辺監視装置。   The vehicle periphery monitoring device according to claim 1, wherein the distance measuring unit is installed at a bumper corner. 前記距離測定手段を前記車両ピラー部に設置する請求項1ないし7のいずれか1項に記載の車両用周辺監視装置。   The vehicle periphery monitoring device according to claim 1, wherein the distance measuring unit is installed in the vehicle pillar portion. 前記撮影用カメラを前記車両前部左右と、前記車両後部左右とに設置する請求項1ないし8のいずれか1項に記載の車両用周辺監視装置。


The vehicle periphery monitoring device according to any one of claims 1 to 8, wherein the photographing cameras are installed on the front left and right of the vehicle and on the left and right of the rear of the vehicle.


JP2004008903A 2004-01-16 2004-01-16 Vehicle periphery monitoring device Expired - Lifetime JP4251323B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004008903A JP4251323B2 (en) 2004-01-16 2004-01-16 Vehicle periphery monitoring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004008903A JP4251323B2 (en) 2004-01-16 2004-01-16 Vehicle periphery monitoring device

Publications (2)

Publication Number Publication Date
JP2005199892A true JP2005199892A (en) 2005-07-28
JP4251323B2 JP4251323B2 (en) 2009-04-08

Family

ID=34822091

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004008903A Expired - Lifetime JP4251323B2 (en) 2004-01-16 2004-01-16 Vehicle periphery monitoring device

Country Status (1)

Country Link
JP (1) JP4251323B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007210460A (en) * 2006-02-09 2007-08-23 Nissan Motor Co Ltd Display device for vehicle and image display control method for vehicle
JP2007233430A (en) * 2006-02-27 2007-09-13 Aisin Aw Co Ltd Driving support method and driving support device
WO2011136456A1 (en) * 2010-04-30 2011-11-03 Lg Electronics Inc. Video display apparatus and method
GB2528098A (en) * 2014-07-09 2016-01-13 Jaguar Land Rover Ltd Vehicle camera system
US9845010B2 (en) 2013-04-16 2017-12-19 Denso Corporation Vehicular display device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11220726A (en) * 1998-01-30 1999-08-10 Niles Parts Co Ltd Vehicle surrounding monitoring device
JP2001039248A (en) * 1999-07-27 2001-02-13 Honda Access Corp Camera device for vehicle
JP2001043494A (en) * 1999-07-27 2001-02-16 Honda Access Corp Camera device for vehicle
JP2001180374A (en) * 1999-12-24 2001-07-03 Aisin Aw Co Ltd Driving support device and riving support method
JP2002022466A (en) * 2000-07-10 2002-01-23 Auto Network Gijutsu Kenkyusho:Kk Congestion judging apparatus, car-carried surrounding monitor using the same and car-carried congestion information transmitter

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11220726A (en) * 1998-01-30 1999-08-10 Niles Parts Co Ltd Vehicle surrounding monitoring device
JP2001039248A (en) * 1999-07-27 2001-02-13 Honda Access Corp Camera device for vehicle
JP2001043494A (en) * 1999-07-27 2001-02-16 Honda Access Corp Camera device for vehicle
JP2001180374A (en) * 1999-12-24 2001-07-03 Aisin Aw Co Ltd Driving support device and riving support method
JP2002022466A (en) * 2000-07-10 2002-01-23 Auto Network Gijutsu Kenkyusho:Kk Congestion judging apparatus, car-carried surrounding monitor using the same and car-carried congestion information transmitter

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007210460A (en) * 2006-02-09 2007-08-23 Nissan Motor Co Ltd Display device for vehicle and image display control method for vehicle
JP2007233430A (en) * 2006-02-27 2007-09-13 Aisin Aw Co Ltd Driving support method and driving support device
WO2011136456A1 (en) * 2010-04-30 2011-11-03 Lg Electronics Inc. Video display apparatus and method
US8933795B2 (en) 2010-04-30 2015-01-13 Lg Electronics Inc. Video display apparatus and method
US9845010B2 (en) 2013-04-16 2017-12-19 Denso Corporation Vehicular display device
GB2528098A (en) * 2014-07-09 2016-01-13 Jaguar Land Rover Ltd Vehicle camera system
WO2016005453A1 (en) * 2014-07-09 2016-01-14 Jaguar Land Rover Limited Vehicle camera system
GB2529932A (en) * 2014-07-09 2016-03-09 Jaguar Land Rover Ltd Vehicle camera system
GB2529932B (en) * 2014-07-09 2018-11-21 Jaguar Land Rover Ltd Vehicle camera system
GB2528098B (en) * 2014-07-09 2018-11-21 Jaguar Land Rover Ltd Vehicle camera system
US10708504B2 (en) 2014-07-09 2020-07-07 Jaguar Land Rover Limited Vehicle camera system
US11503212B2 (en) 2014-07-09 2022-11-15 Jaguar Land Rover Limited Vehicle camera system

Also Published As

Publication number Publication date
JP4251323B2 (en) 2009-04-08

Similar Documents

Publication Publication Date Title
KR0183299B1 (en) Navigation apparatus notifying surrounding situation of vehicle and control method thereof
US8461976B2 (en) On-vehicle device and recognition support system
JP4702106B2 (en) Blind spot support information notification device and program
EP1072863B1 (en) Image processing apparatus for navigation system
CN111226267B (en) Driving control method and driving control device for driving support vehicle
JP4855158B2 (en) Driving assistance device
JP4665581B2 (en) Direction change support system
JP4719590B2 (en) In-vehicle peripheral status presentation device
US20110128136A1 (en) On-vehicle device and recognition support system
JP4747867B2 (en) VEHICLE DISPLAY DEVICE AND VEHICLE VIDEO DISPLAY CONTROL METHOD
US20110169957A1 (en) Vehicle Image Processing Method
JP2008280026A (en) Driving assistance device
JP2009029203A (en) Driving support device
US10632912B2 (en) Alarm device
JP4832489B2 (en) Lane judgment device
JP2007221200A (en) Vehicle periphery monitoring system
US20120109521A1 (en) System and method of integrating lane position monitoring with locational information systems
JP4948338B2 (en) Inter-vehicle distance measuring device
JP4797849B2 (en) Driving support image display system and in-vehicle device
US11643071B2 (en) Parking assistance device and parking assistance method
JP5012669B2 (en) Parking assistance device, parking assistance method, and computer program
JP2013018406A (en) Recognizing device of parking frame, recognizing method of parking frame and program
JP4251323B2 (en) Vehicle periphery monitoring device
JP4096251B2 (en) Vehicle periphery monitoring device
JP4081548B2 (en) Driving support system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081014

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081226

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090108

R150 Certificate of patent or registration of utility model

Ref document number: 4251323

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120130

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130130

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140130

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term