JP2013151191A - Vehicle surroundings display device - Google Patents

Vehicle surroundings display device Download PDF

Info

Publication number
JP2013151191A
JP2013151191A JP2012012054A JP2012012054A JP2013151191A JP 2013151191 A JP2013151191 A JP 2013151191A JP 2012012054 A JP2012012054 A JP 2012012054A JP 2012012054 A JP2012012054 A JP 2012012054A JP 2013151191 A JP2013151191 A JP 2013151191A
Authority
JP
Japan
Prior art keywords
image
vehicle
illuminance
display device
vehicle speed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012012054A
Other languages
Japanese (ja)
Inventor
Yu Nichiei
悠 日栄
Tatsumichi Okamura
竜路 岡村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2012012054A priority Critical patent/JP2013151191A/en
Publication of JP2013151191A publication Critical patent/JP2013151191A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a vehicle surroundings display device that can determine abnormal conditions of an image even during vehicle stopping.SOLUTION: A vehicle surroundings display device that images vehicle surroundings by an imaging means and displays the image of the vehicle surroundings by a display means, is set so that the direct light or the indirect light of vehicle illumination may enter the range of the imaging of the imaging means. The vehicle surroundings display device determines whether the images of different times change (S3); determines whether the vehicle speed is not more than the prescribed vehicle speed, when the images are not changed (S4); determines whether the vehicle illumination state is changed when the vehicle speed is not more than the predetermined vehicle speed (during vehicle stops) (S5); determines whether the illuminance is not more than the prescribed illuminance when the vehicle illumination state changes (S6); determines that there is the possibility of image frieze when the illuminance is higher than the prescribed illuminance (S7); and determines the status is the image freeze when the illuminance is not more than the prescribed illuminance (S8).

Description

本発明は、撮像手段で車両周辺を撮像し、車両周辺の画像を表示手段で表示する車両周辺表示装置に関する。   The present invention relates to a vehicle periphery display device that images a vehicle periphery with an imaging unit and displays an image of the vehicle periphery with a display unit.

車両周辺表示装置では、常時、カメラで車両周辺を撮像し、車両周辺の画像をディスプレイに表示する。そのため、カメラや画像処理装置等をON/OFFすることがなく(使用中に再起動することがなく)、画像がフリーズしても自然復帰する可能性が低い。そこで、画像がフリーズしているか否かを判定し、画像フリーズと判定した場合には何らかの対処が必要である。特許文献1に記載の画像表示システムでは、カメラから所定時間間隔で出力された連続する画像フレームに差異が検出されない場合に表示画像がフリーズしている可能性があることを報知するが、車速が所定車速以下の場合(車両停止の場合)には差異の検出(画像フリーズの判定)を中止する。   In the vehicle periphery display device, the vehicle periphery is always imaged with a camera, and an image of the vehicle periphery is displayed on the display. Therefore, the camera or the image processing apparatus is not turned ON / OFF (without being restarted during use), and the possibility of spontaneous recovery even when the image freezes is low. Therefore, it is determined whether or not the image is frozen. If it is determined that the image is frozen, some countermeasure is required. In the image display system described in Patent Document 1, when a difference is not detected in successive image frames output from a camera at a predetermined time interval, the display image may be frozen. When the vehicle speed is equal to or lower than the predetermined vehicle speed (when the vehicle is stopped), the difference detection (image freeze determination) is stopped.

特開2004−64440号公報JP 2004-64440 A 特開2001−204012号公報Japanese Patent Laid-Open No. 2001-204012

上記の判定方法は、車両が走行中は背景等が必ず変化するので画像が変化することを前提として画像フリーズを判定する方法なので、車両が停止している場合には判定を行わない。したがって、車両停止中に画像がフリーズしているか否かを判定できない。   Since the above determination method is a method of determining image freeze on the assumption that the image changes because the background and the like always change while the vehicle is traveling, the determination is not performed when the vehicle is stopped. Therefore, it cannot be determined whether the image is frozen while the vehicle is stopped.

そこで、本発明は、車両停止中でも画像の異常を判定できる車両周辺表示装置を提供することを課題とする。   Accordingly, an object of the present invention is to provide a vehicle periphery display device that can determine an image abnormality even when the vehicle is stopped.

本発明に係る車両周辺表示装置は、撮像手段で車両周辺を撮像し、車両周辺の画像を表示手段で表示する車両周辺表示装置であって、異なる時間の画像が変化しているか否かを判定する画像判定手段と、車速を検出する車速検出手段と、車載照明の状態が変化しているか否かを判定する照明判定手段とを備え、撮像手段の撮像範囲内に車載照明の直接光又は間接光が入るように設定され、画像判定手段で画像が変化していないと判定しかつ車速検出手段で検出した車速が所定車速以下のときに、照明判定手段で車載照明の状態が変化していると判定した場合には画像に異常の可能性があると判定することを特徴とする。   A vehicle periphery display device according to the present invention is a vehicle periphery display device that captures an image of a vehicle periphery with an imaging unit and displays an image of the vehicle periphery with a display unit, and determines whether images at different times have changed. Image determining means, vehicle speed detecting means for detecting the vehicle speed, and illumination determining means for determining whether or not the state of the in-vehicle lighting has changed, and direct light or indirect of the in-vehicle lighting within the imaging range of the imaging means When it is determined that the light enters, the image determination unit determines that the image has not changed, and the vehicle speed detected by the vehicle speed detection unit is equal to or lower than the predetermined vehicle speed, the illumination determination unit changes the state of the in-vehicle illumination If it is determined that there is a possibility that the image is abnormal.

この車両周辺表示装置は、撮像手段で車両周辺を撮像し、車両周辺の画像を表示手段に表示する装置である。この車両周辺表示装置では、画像判定手段によって異なる時間の画像が変化しているか否かを判定する。この判定対象の画像としては、撮像手段で撮像した撮像画像でもよいし、あるいは、撮像画像を表示手段で表示するために画像処理した後の表示画像でもよい。車両走行中は背景等が変化するので異なる時間の画像は必ず変化するが、車両停止中は異なる時間の画像は変化しない場合(周辺の移動物体が移動していれば変化する)がある。車両周辺表示装置では、車速検出手段で車速を検出するとともに、照明判定手段によって車載照明の状態が変化(点灯状態(点滅状態)から消灯状態あるいは消灯状態から点灯状態)しているか否かを判定する。車載照明としては、例えば、ブレーキランプ、ウィンカ、テールランプ、フォグランプ、ヘッドライトがある。車両周辺表示装置では、撮像手段の撮像範囲内に車載照明の直接光又は間接光が入るように設定している。このように設定することによって、車両停止中でも(特に、周辺の移動物体が移動していない場合でも)、車載照明の状態が変化すると、正常時には、撮像手段ではその状態の変化を直接光又は間接光の変化として撮像できるので、異なる時間の画像が変化する。そこで、車両周辺表示装置では、画像判定手段で画像が変化していないと判定しかつ車速が所定車速以下(所定車速は車両の停止状態を判定するための閾値)のときに、照明判定手段で車載照明の状態が変化していると判定した場合、撮像手段でその状態の変化を直接光又は間接光の変化として撮像できるにもかかわらず異なる時間の画像が変化していないので、画像に異常の可能性があると判定する。このように、車両周辺表示装置は、撮像手段の撮像範囲に車載照明の直接光や間接光が入るように設定し、車載照明の状態の変化を利用することにより、車両停止中でも画像の異常の可能性を判定することができる。   The vehicle periphery display device is a device that captures an image of the vehicle periphery with an imaging unit and displays an image of the vehicle periphery on the display unit. In this vehicle periphery display device, it is determined by the image determination means whether or not images at different times have changed. The determination target image may be a captured image captured by the imaging unit or a display image after image processing for displaying the captured image on the display unit. Since the background and the like change while the vehicle is running, the images at different times will always change, but when the vehicle is stopped, the images at different times may not change (changes if surrounding moving objects are moving). In the vehicle periphery display device, the vehicle speed detection means detects the vehicle speed, and the illumination determination means determines whether or not the in-vehicle illumination state has changed (from the lighting state (flashing state) to the off state or from the unlit state to the on state). To do. Examples of in-vehicle lighting include a brake lamp, a blinker, a tail lamp, a fog lamp, and a headlight. In the vehicle periphery display device, it is set so that direct light or indirect light of in-vehicle illumination enters the imaging range of the imaging means. By setting in this way, even when the vehicle is stopped (particularly even when surrounding moving objects are not moving), when the state of the vehicle-mounted illumination changes, the imaging means changes the state of the light directly or indirectly during normal operation. Since images can be taken as changes in light, images at different times change. Therefore, in the vehicle periphery display device, when the image determination unit determines that the image has not changed and the vehicle speed is equal to or lower than the predetermined vehicle speed (the predetermined vehicle speed is a threshold value for determining the stop state of the vehicle), the illumination determination unit If it is determined that the state of the in-vehicle lighting has changed, the image at the different time has not changed even though the change in the state can be imaged as a change in direct light or indirect light, so the image is abnormal. It is determined that there is a possibility. In this way, the vehicle periphery display device is set so that direct light or indirect light of the in-vehicle illumination enters the imaging range of the imaging means, and by using the change in the state of the in-vehicle illumination, the abnormality of the image is detected even when the vehicle is stopped. The possibility can be determined.

本発明の上記車両周辺表示装置では、車両周辺の照度を検出する照度検出手段を備え、画像に異常の可能性があると判定したときに、照度検出手段で検出した照度が所定照度以下の場合には画像に異常があると判定すると好適である。   The vehicle periphery display device of the present invention includes illuminance detection means for detecting illuminance around the vehicle, and when the illuminance detected by the illuminance detection means is less than or equal to a predetermined illuminance when it is determined that there is a possibility of an abnormality in the image. It is preferable to determine that there is an abnormality in the image.

この車両周辺表示装置では、照度検出手段によって車両周辺の照度を検出する。車両周辺の照度が低い場合(車両周辺が暗い場合)、車載照明の状態が変化すると異なる時間の画像の変化に必ず表れる。そこで、車両周辺表示装置では、画像に異常の可能性があると判定したときに(画像が変化していないと判定しかつ車速が所定車速以下のときに車載照明の状態が変化していると判定したときに)、照度が所定照度(所定照度は車載照明の状態の変化が画像内に十分に表れる程度の照度を判定するための閾値)以下の場合、画像に異常があると判定する。このように、車両周辺表示装置は、車両周辺の照度も利用することにより、車両停止中でも画像の異常があるか否かを高精度に判定することができる。   In this vehicle periphery display device, the illuminance around the vehicle is detected by the illuminance detection means. When the illuminance around the vehicle is low (when the vehicle periphery is dark), it always appears in the image change at different times when the state of the in-vehicle illumination changes. Therefore, in the vehicle periphery display device, when it is determined that there is a possibility of abnormality in the image (when it is determined that the image is not changed and the vehicle speed is equal to or lower than the predetermined vehicle speed, the state of the in-vehicle illumination is changed. If the illuminance is less than or equal to the predetermined illuminance (the predetermined illuminance is a threshold value for determining the illuminance to such an extent that the change in the state of the in-vehicle illumination sufficiently appears in the image), it is determined that the image is abnormal. Thus, the vehicle periphery display device can determine with high accuracy whether or not there is an image abnormality even when the vehicle is stopped by using the illuminance around the vehicle.

本発明によれば、撮像手段の撮像範囲に車載照明の直接光や間接光が入るように設定し、車載照明の状態の変化を利用することにより、車両停止中でも画像の異常の可能性を判定することができる。   According to the present invention, it is set so that direct light or indirect light of in-vehicle illumination enters the imaging range of the image pickup means, and the possibility of an image abnormality is determined even when the vehicle is stopped by using a change in the state of in-vehicle illumination. can do.

本実施の形態に係る車両周辺表示装置の構成図である。It is a block diagram of the vehicle periphery display apparatus which concerns on this Embodiment. 本実施の形態に係る車両周辺表示装置における画像フリーズ判定の流れを示すフローチャートである。It is a flowchart which shows the flow of the image freeze determination in the vehicle periphery display apparatus which concerns on this Embodiment.

以下、図面を参照して、本発明に係る車両周辺表示装置の実施の形態を説明する。なお、各図において同一又は相当する要素については同一の符号を付し、重複する説明を省略する。   Hereinafter, an embodiment of a vehicle periphery display device according to the present invention will be described with reference to the drawings. In addition, the same code | symbol is attached | subjected about the element which is the same or it corresponds in each figure, and the overlapping description is abbreviate | omitted.

本実施の形態に係る車両周辺表示装置は、自車両周辺の状況を表示する装置であり、車両通電開始時に起動(ON)し、車両通電終了時に停止(OFF)する。したがって、本実施の形態に係る車両周辺表示装置は、車両通電中常時作動し、カメラにより自車両周辺を撮像し、自車両周辺の画像をディスプレイに表示する。   The vehicle periphery display device according to the present embodiment is a device that displays the situation around the host vehicle, and is activated (ON) at the start of vehicle energization and stopped (OFF) at the end of vehicle energization. Therefore, the vehicle periphery display device according to the present embodiment always operates while the vehicle is energized, images the periphery of the host vehicle with the camera, and displays an image of the periphery of the host vehicle on the display.

図1を参照して、本実施の形態に係る車両周辺表示装置1について説明する。図1は、本実施の形態に係る車両周辺表示装置の構成図である。   With reference to FIG. 1, the vehicle periphery display apparatus 1 which concerns on this Embodiment is demonstrated. FIG. 1 is a configuration diagram of a vehicle periphery display device according to the present embodiment.

車両周辺表示装置1は、連続するフレームの画像間のフロー(画像の動き)を検出し、フローと自車両の走行状況に基づいて画像がフリーズしているか否かを判定する。特に、車両周辺表示装置1は、車両停止中でも画像フリーズを判定するために、カメラの撮像範囲内に車載のランプ類の直接光や間接光が入るように設定して、そのランプ類の状態の変化を利用して車両停止中の画像フリーズの可能性を判定する。さらに、車両周辺表示装置1は、車両停止中の画像フリーズをより高精度に判定するために、自車両周辺の照度を利用して車両停止中に画像フリーズしているか否かを判定する。   The vehicle periphery display device 1 detects a flow (image movement) between images of successive frames, and determines whether or not the image is frozen based on the flow and the traveling state of the host vehicle. In particular, the vehicle periphery display device 1 is set so that direct light or indirect light of in-vehicle lamps enters the imaging range of the camera in order to determine image freeze even when the vehicle is stopped. The change is used to determine the possibility of image freeze while the vehicle is stopped. Furthermore, the vehicle periphery display device 1 determines whether or not the image is frozen while the vehicle is stopped by using the illuminance around the own vehicle in order to determine the image freeze while the vehicle is stopped with higher accuracy.

車両周辺表示装置1は、カメラ10、車速センサ11、ブレーキランプ12、ウィンカ13、フォグランプ14、テールランプ15、ヘッドライト16、照度センサ17、画像処理装置20、画像フロー検出器21、走行状況判断器22、ランプ作動状態判定器23、環境判断器24、画像フリーズ判定器25、ディスプレイ30を備えている。画像処理装置20、画像フロー検出器21、走行状況判断器22、ランプ作動状態判定器23、環境判断器24、画像フリーズ判定器25は、車両周辺表示装置1のECU[Electronic Control Unit]内に構成される。なお、本実施の形態では、カメラ10が特許請求の範囲に記載する撮像手段に相当し、車速センサ11が特許請求の範囲に記載する車速検出手段に相当し、ブレーキランプ12、ウィンカ13、フォグランプ14、テールランプ15、ヘッドライト16が特許請求の範囲に記載する車載照明に相当し、照度センサ17が特許請求の範囲に記載する照度検出手段に相当し、画像フロー検出器21及び画像フリーズ判定器25が特許請求の範囲に記載する画像判定手段に相当し、ランプ作動状態判定器23が特許請求の範囲に記載する照明判定手段に相当し、ディスプレイ30が特許請求の範囲に記載する表示手段に相当する。   The vehicle periphery display device 1 includes a camera 10, a vehicle speed sensor 11, a brake lamp 12, a blinker 13, a fog lamp 14, a tail lamp 15, a headlight 16, an illuminance sensor 17, an image processing device 20, an image flow detector 21, and a travel condition determination device. 22, a lamp operating state determination unit 23, an environment determination unit 24, an image freeze determination unit 25, and a display 30. The image processing device 20, the image flow detector 21, the traveling state determination unit 22, the lamp operation state determination unit 23, the environment determination unit 24, and the image freeze determination unit 25 are included in the ECU [Electronic Control Unit] of the vehicle periphery display device 1. Composed. In the present embodiment, the camera 10 corresponds to the imaging means described in the claims, the vehicle speed sensor 11 corresponds to the vehicle speed detection means described in the claims, and the brake lamp 12, the blinker 13, the fog lamp. 14, the tail lamp 15 and the headlight 16 correspond to the in-vehicle illumination described in the claims, the illuminance sensor 17 corresponds to the illuminance detection means described in the claims, and the image flow detector 21 and the image freeze determination device. 25 corresponds to the image determination means described in the claims, the lamp operating state determination device 23 corresponds to the illumination determination means described in the claims, and the display 30 corresponds to the display means described in the claims. Equivalent to.

カメラ10は、自車両周辺の状況を撮像するカメラである。カメラ10は、少なくとも1台であり、複数台でもよい。カメラ10の取り付けられる位置としては、例えば、車両前方の中央部、車両後方の中央部、左右のサイドミラーがある。カメラ10の撮像方向としては、例えば、自車両の前方、後方、後右側方、後左側方がある。各カメラ10では、一定時間毎に、自車両周辺を撮像し、各時間に撮像したフレームの撮像画像情報を出力する。なお、撮像画像情報は、所定時間分、ECU内の画像メモリに時系列で記憶される。   The camera 10 is a camera that images the situation around the host vehicle. There is at least one camera 10 and a plurality of cameras may be used. As a position where the camera 10 is attached, there are, for example, a central portion in front of the vehicle, a central portion in the rear of the vehicle, and left and right side mirrors. Examples of the imaging direction of the camera 10 include the front, rear, rear right side, and rear left side of the host vehicle. Each camera 10 images the periphery of the host vehicle at regular time intervals, and outputs captured image information of frames captured at each time. The captured image information is stored in a time series in an image memory in the ECU for a predetermined time.

特に、カメラ10の取り付け角度は、カメラ10で撮像したときに車載ランプ(ブレーキランプ12、ウィンカ13、フォグランプ14、テールランプ15、ヘッドライト16の何れか)自体あるいは車載ランプによる光がバンパ、ボディ、地面等で反射した反射光が写るように設定される。つまり、カメラ10の撮像範囲内に車載ランプによる直接光又は間接光が入るように、カメラ10が取り付けられる。撮像方向が前方のカメラ10の場合にはフロントのウィンカ13、フォグランプ14、ヘッドライト16が対象となり、撮像方向が後方や後側方のカメラ10の場合にはブレーキランプ12、リヤのウィンカ13、テールランプ15が対象となる。   In particular, the mounting angle of the camera 10 is such that when the image is taken by the camera 10, the vehicle lamp (either the brake lamp 12, the blinker 13, the fog lamp 14, the tail lamp 15, or the headlight 16) itself or the light from the vehicle lamp is used as a bumper, body, It is set so that the reflected light reflected from the ground or the like is reflected. That is, the camera 10 is attached so that direct light or indirect light from the in-vehicle lamp enters the imaging range of the camera 10. When the imaging direction is the front camera 10, the front blinker 13, the fog lamp 14, and the headlight 16 are targeted. When the imaging direction is the rear or rear side camera 10, the brake lamp 12, the rear blinker 13, The tail lamp 15 is a target.

車速センサ11は、自車両の車速を検出するセンサである。車速センサ11では、一定時間毎に、車速を検出し、その車速情報を出力する。   The vehicle speed sensor 11 is a sensor that detects the vehicle speed of the host vehicle. The vehicle speed sensor 11 detects the vehicle speed and outputs the vehicle speed information at regular time intervals.

ブレーキランプ12、ウィンカ13、フォグランプ14、テールランプ15、ヘッドライト16は、自車両の車載のランプである。これらのブレーキランプ12、ウィンカ13、フォグランプ14、テールランプ15、ヘッドライト16についてそれぞれ作動情報(点灯又は点滅/消灯の作動状態を判定できる情報)が取得され、そのランプ作動情報が出力される。このランプ作動情報は、例えば、各ランプのON/OFFスイッチから得られる情報やブレーキランプ12を点灯/消灯させるECUから得られる情報でもよいし、あるいは、各ランプに電力を供給する電線等から得られる電力の供給情報でもよい。   The brake lamp 12, the blinker 13, the fog lamp 14, the tail lamp 15, and the headlight 16 are on-vehicle lamps of the host vehicle. For each of the brake lamp 12, the blinker 13, the fog lamp 14, the tail lamp 15, and the headlight 16, operation information (information that can determine the operation state of lighting, blinking / extinguishing) is acquired, and the lamp operation information is output. This lamp operation information may be, for example, information obtained from an ON / OFF switch of each lamp, information obtained from an ECU that turns on / off the brake lamp 12, or obtained from an electric wire that supplies power to each lamp. It may be supply information of power to be generated.

なお、カメラ10の撮像範囲内に車載ランプの直接光又は間接光が入っているので、その車載ランプの作動状態が変化(点灯(点滅)から消灯あるいは消灯から点灯(点滅))するとその前後フレームの画像間では少なくともその車載ランプの直接光又は間接光が入る部分の画像情報(輝度、色等)が変化する。但し、自車両周辺が暗いと場合(夜間等)にはその画像情報の変化が顕著に表れるが、明るい場合(昼間等)にはその画像情報の変化が表れない場合がある。   In addition, since direct light or indirect light of the in-vehicle lamp is in the imaging range of the camera 10, if the operating state of the in-vehicle lamp changes (turns on (blinks) to off or turns off (blinks)), the frame before and after that The image information (brightness, color, etc.) of at least the portion where the direct or indirect light of the in-vehicle lamp enters varies between the images. However, when the surroundings of the host vehicle are dark (such as at night), the change of the image information appears remarkably, but when it is bright (such as during the day), the change of the image information may not appear.

照度センサ17は、自車両周辺の照度を検出するセンサである。照度センサ17では、一定時間毎に、照度を検出し、その照度情報を出力する。   The illuminance sensor 17 is a sensor that detects the illuminance around the host vehicle. The illuminance sensor 17 detects illuminance and outputs the illuminance information at regular time intervals.

画像処理装置20には、一定時間毎に、各カメラ10の今回フレームの撮像画像情報が入力される。画像処理装置20では、ディスプレイ30に表示するために各カメラ10の撮像画像に対して各種画像処理(拡大/縮小、複数のカメラ10による画像の合成等)を行い、ディスプレイ30に表示するための表示画像を生成し、その表示画像情報を出力する。なお、表示画像情報は、所定時間分、ECU内の画像メモリに時系列で記憶される。   The image processing apparatus 20 receives captured image information of the current frame of each camera 10 at regular time intervals. In the image processing apparatus 20, various image processing (enlargement / reduction, composition of images by a plurality of cameras 10, etc.) is performed on the captured image of each camera 10 for display on the display 30 and display on the display 30. A display image is generated and the display image information is output. The display image information is stored in time series in the image memory in the ECU for a predetermined time.

画像フロー検出器21には、一定時間毎に、画像処理装置20での処理後の画像情報(表示画像情報)が入力される。画像フロー検出器21では、今回フレームの画像と前回フレームの画像との対応する画素毎に、その画素及び周辺の画素の画像情報(輝度、RGB情報等)を用いて連続するフレーム間の画像内のフロー(画像内の動き)を算出する。このフローの算出方法としては、従来の手法が適用され、例えば、勾配法等でオプティカルフローを算出する。   Image information (display image information) after processing in the image processing device 20 is input to the image flow detector 21 at regular intervals. In the image flow detector 21, for each pixel corresponding to the image of the current frame and the image of the previous frame, image information between successive frames using image information (luminance, RGB information, etc.) of that pixel and surrounding pixels is used. The flow (movement in the image) is calculated. As a method for calculating this flow, a conventional method is applied. For example, an optical flow is calculated by a gradient method or the like.

走行状況判断器22には、一定時間毎に、車速センサ11の車速情報が入力される。走行状況判断器22では、車速が所定車速以下か否かを判定し、自車両が走行中(車速が所定車速を超える場合)かあるいは停止中(車速が所定車速以下の場合)かを判断する。所定車速は、車両の停止状態を判定するための閾値であり、実車実験等によって予め設定される。   Vehicle speed information of the vehicle speed sensor 11 is input to the traveling state determination unit 22 at regular time intervals. The traveling state determination unit 22 determines whether the vehicle speed is equal to or lower than a predetermined vehicle speed, and determines whether the host vehicle is traveling (when the vehicle speed exceeds the predetermined vehicle speed) or is stopped (when the vehicle speed is equal to or lower than the predetermined vehicle speed). . The predetermined vehicle speed is a threshold value for determining the stop state of the vehicle, and is set in advance by an actual vehicle experiment or the like.

ランプ作動状態判定器23には、一定時間毎に、上記した各ランプについての作動情報がそれぞれ入力される。ランプ作動状態判定器23では、ブレーキランプ12、ウィンカ13、フォグランプ14、テールランプ15、ヘッドライト16毎に、今回の作動情報と前回の作動情報とを比較し、ランプの状態が変化したか(点灯(点滅)から消灯したか又は消灯から点灯(点滅)したか)否かを判定する。   The lamp operating state determiner 23 receives the above-described operating information for each lamp at regular intervals. The lamp operation state determination unit 23 compares the current operation information with the previous operation information for each of the brake lamp 12, the blinker 13, the fog lamp 14, the tail lamp 15, and the headlight 16, and determines whether the lamp state has changed (lights up). Whether it has been turned off from (blinking) or turned on (blinking) from off.

環境判断器24には、一定時間毎に、照度センサ17の照度情報が入力される。環境判断器24では、照度が所定照度以下か否かを判定し、照度が高い(自車両周辺がある程度明るい、昼間等)かあるいは照度が低い(自車両周辺が暗い、夜間等)かを判断する。所定照度は、車載ランプの状態の変化が画像内の画像情報の変化として十分に表れる程度の照度を判定するための閾値であり、実車実験等によって予め設定される。   The illuminance information of the illuminance sensor 17 is input to the environment determination unit 24 at regular time intervals. The environment determination unit 24 determines whether or not the illuminance is less than or equal to a predetermined illuminance, and determines whether the illuminance is high (the surrounding area of the vehicle is bright to some extent, daytime, etc.) or the illuminance is low (the surrounding area of the vehicle is dark, nighttime, etc.). To do. The predetermined illuminance is a threshold value for determining the illuminance such that a change in the state of the in-vehicle lamp sufficiently appears as a change in the image information in the image, and is set in advance by an actual vehicle experiment or the like.

画像フリーズ判定器25には、一定時間毎に、画像フロー検出器21の検出結果、走行状況判断器22の判断結果、ランプ作動状態判定器23の判定結果、環境判断器24の判断結果が入力される。画像フリーズ判定器25では、画像フロー検出器21での検出結果に基づいて、今回フレームの画像と前回フレームの画像とが同じ画像(画像内の全ての画素について動きがない)か否かを判定する。今回フレームの画像と前回フレームの画像とが同じ画像と判定したときに走行状況判断器22で車両走行中と判断している場合、画像フリーズ判定器25では、カメラ10の撮像範囲内の背景等が変化している(車両走行中なので)にもかかわらず連続するフレーム間の画像が変化していないので、画像がフリーズしていると判定する。この場合、画像フリーズ判定器25では、カメラ10と画像処理装置20を再起動する。   The image freeze determination unit 25 receives the detection result of the image flow detector 21, the determination result of the traveling state determination unit 22, the determination result of the lamp operating state determination unit 23, and the determination result of the environment determination unit 24 at regular intervals. Is done. The image freeze determination unit 25 determines whether or not the current frame image and the previous frame image are the same image (no movement for all pixels in the image) based on the detection result of the image flow detector 21. To do. When it is determined that the vehicle is traveling by the traveling state determination unit 22 when the image of the current frame and the image of the previous frame are determined to be the same image, the image freeze determination unit 25 uses the background in the imaging range of the camera 10 or the like. Is changed (because the vehicle is running), the image between successive frames has not changed, so it is determined that the image is frozen. In this case, the image freeze determination unit 25 restarts the camera 10 and the image processing device 20.

今回フレームの画像と前回フレームの画像とが同じ画像と判定したときに走行状況判断器22で車両停止中と判断している場合、画像フリーズ判定器25では、ランプ作動状態判定器23での判定結果に基づいて、ランプの状態が変化したか否かの情報を得る。ランプの状態が変化していない場合、画像フリーズ判定器25では、連続するフレーム間の画像は同じであるが、カメラ10の撮像範囲内の背景等も変化しておらず(車両停止中なので)かつランプの状態も変化していないので、画像がフリーズしていないと判定する。ランプの状態が変化している場合、画像フリーズ判定器25では、ランプの状態の変化によって撮像範囲内に入るランプの直接光又は間接光の点灯(点滅)/消灯の影響が表れるはずであるが連続するフレーム間の画像は同じであるので、画像がフリーズしている可能性があると判定する。特に、環境判断器24で照度が高いと判定しているときには、画像フリーズ判定器25では、自車両周辺が明るいために、ランプの直接光又は間接光の点灯(点滅)/消灯による影響が画像内に表れないかもしれないので、画像がフリーズしている可能性があるという判定に留める。この場合、画像フリーズ判定器25では、画像フリーズの可能性があることをドライバに知らせるメッセージの重畳表示画像を生成し、その重畳表示画像情報をディスプレイ30に出力する。また、環境判断器24で照度が低いと判定しているときには、画像フリーズ判定器25では、自車両周辺が暗いために、ランプの直接光又は間接光の点灯(点滅)/消灯による影響が画像内に十分に表れるはずであるので、画像がフリーズと判定する。この場合、画像フリーズ判定器25では、カメラ10と画像処理装置20を再起動する。   When it is determined that the vehicle is stopped by the traveling state determination unit 22 when it is determined that the current frame image and the previous frame image are the same image, the image freeze determination unit 25 determines by the lamp operation state determination unit 23. Based on the result, information is obtained as to whether the lamp state has changed. When the lamp state has not changed, the image freeze determination unit 25 has the same image between successive frames, but the background within the imaging range of the camera 10 has not changed (because the vehicle is stopped). Since the lamp state has not changed, it is determined that the image is not frozen. When the lamp state has changed, the image freeze determination unit 25 should show the influence of lighting (flashing) / extinguishing of the direct light or indirect light of the lamp entering the imaging range due to the change of the lamp state. Since the images between successive frames are the same, it is determined that there is a possibility that the images are frozen. In particular, when the environment determination unit 24 determines that the illuminance is high, the image freeze determination unit 25 has a bright surrounding area of the host vehicle. Since it may not appear in the image, it is determined that there is a possibility that the image is frozen. In this case, the image freeze determination unit 25 generates a superimposed display image of a message that informs the driver that there is a possibility of image freezing, and outputs the superimposed display image information to the display 30. Further, when the environment determination unit 24 determines that the illuminance is low, the image freeze determination unit 25 has an effect of lighting (flashing) / turning off the direct light or indirect light of the lamp because the periphery of the host vehicle is dark. The image is determined to be frozen. In this case, the image freeze determination unit 25 restarts the camera 10 and the image processing device 20.

なお、画像フリーズの要因としては、例えば、画像メモリのオーバフロー、画像処理装置20での処理遅延、カメラ10での何らかの異常がある。これらの要因で画像フリーズとなっても、大抵の場合、カメラ10や画像処理装置20を再起動することによって、画像フリーズを解消できる。   The cause of the image freeze includes, for example, an overflow of the image memory, a processing delay in the image processing apparatus 20, and some abnormality in the camera 10. Even if the image freezes due to these factors, in most cases, the image freeze can be resolved by restarting the camera 10 or the image processing apparatus 20.

ディスプレイ30は、車両周辺表示装置1専用のディスプレイである。ディスプレイ30は、自車両のドライバから視認し易い位置かつ視認し易い角度で配置される。ディスプレイ30では、画像処理装置20からの表示画像情報を入力する毎に、その表示画像(自車両周辺画像)を表示する。さらに、ディスプレイ30では、画像フリーズ判定器25からの重畳表示画像情報を入力した場合、表示中の車両周辺画像に重畳して重畳表示画像(画像フリーズの可能性を示すメッセージ)を表示する。   The display 30 is a display dedicated to the vehicle periphery display device 1. The display 30 is disposed at a position that is easily visible from the driver of the host vehicle and at an angle that is easily visible. Every time the display image information from the image processing device 20 is input, the display 30 displays the display image (the vehicle surrounding image). Furthermore, when the superimposed display image information from the image freeze determiner 25 is input, the display 30 displays a superimposed display image (a message indicating the possibility of image freeze) in a superimposed manner on the vehicle periphery image being displayed.

図1を参照して、車両周辺表示装置1における画像フリーズ判定に関する動作を図2のフローチャートに沿って説明する。図2は、本実施の形態に係る車両周辺表示装置における画像フリーズ判定の流れを示すフローチャートである。車両周辺表示装置1では、以下の動作を一定時間毎に繰り返し行う。   With reference to FIG. 1, the operation | movement regarding the image freeze determination in the vehicle periphery display apparatus 1 is demonstrated along the flowchart of FIG. FIG. 2 is a flowchart showing a flow of image freeze determination in the vehicle periphery display device according to the present embodiment. In the vehicle periphery display device 1, the following operation is repeated at regular intervals.

車両周辺表示装置1が起動後、各カメラ10では、一定時間毎に、自車両周辺を撮像し、各時間のフレームの撮像画像を取得する。画像処理装置20では、一定時間毎に、今回のフレームの各画像に対して各種画像処理を行い、ディスプレイ30に表示するための表示画像を生成する。ディスプレイ30では、この表示画像を表示する。なお、画像(各カメラ10の撮像画像、画像処理装置20での処理後の表示画像)の情報は、画像メモリに所定時間分時系列で蓄積される。画像については、起動時(あるいは再起動時)に前回の時間におけるフレームの画像Nが取得され(S1)、一定時間毎に今回の時間におけるフレームの画像N+1が取得され(S2)、今回処理の終了時に前回のフレームの画像Nが今回のフレームの画像N+1で更新されるものとする(S9)。   After the vehicle periphery display device 1 is activated, each camera 10 captures an image of the periphery of the own vehicle and acquires a captured image of each time frame. In the image processing device 20, various image processing is performed on each image of the current frame at regular intervals, and a display image to be displayed on the display 30 is generated. The display 30 displays this display image. Note that information of images (captured images of each camera 10 and display images after processing by the image processing apparatus 20) is accumulated in a time series for a predetermined time in the image memory. For the image, the frame image N at the previous time is acquired at the time of activation (or at the time of restart) (S1), and the frame image N + 1 at the current time is acquired at regular intervals (S2). At the end, the image N of the previous frame is updated with the image N + 1 of the current frame (S9).

また、車速センサ11では、一定時間毎に、自車両の車速を検出し、各時間の車速を取得する。また、ブレーキランプ12、ウィンカ13、フォグランプ14、テールランプ15、ヘッドライト16の各ランプについての作動情報が、一定時間毎に、取得される。また、照度センサ17では、一定時間毎に、自車両周辺の照度を検出し、各時間の照度を取得する。なお、これら車速、ランプの作動、照度についての自車両情報については、起動時(あるいは再起動時)に前回の時間における自車両情報Dが取得され(S1)、一定時間毎に今回の時間における自車両情報D+1が取得され(S2)、今回処理の終了時に前回の自車両情報Dが今回の自車両情報D+1で更新されるものとする(S9)。   In addition, the vehicle speed sensor 11 detects the vehicle speed of the host vehicle at regular time intervals, and acquires the vehicle speed at each time. In addition, operation information about each of the brake lamp 12, the blinker 13, the fog lamp 14, the tail lamp 15, and the headlight 16 is acquired at regular intervals. In addition, the illuminance sensor 17 detects the illuminance around the host vehicle at regular intervals, and acquires the illuminance at each time. As for the vehicle information about the vehicle speed, the lamp operation, and the illuminance, the vehicle information D at the previous time is acquired at the time of start-up (or at the time of restart) (S1), and the current time information is obtained at regular intervals. The own vehicle information D + 1 is acquired (S2), and the previous own vehicle information D is updated with the current own vehicle information D + 1 at the end of the current process (S9).

画像フロー検出器21では、前回フレームの画像N(表示画像)と今回フレームの画像N+1(表示画像)との間の各画素のフローを算出する(S3)。さらに、画像フリーズ判定器25では、前回フレームの画像Nと今回フレームの画像N+1との間の各画素のフローに基づいて、前回フレームの画像Nと今回フレームの画像N+1とが同じ画像か否かを判定する(S3)。S3にて異なる画像と判定した場合、画像フリーズ判定器25では、画像がフリーズしていないと判定する。この後、前回の自車両情報Dが今回の自車両情報D+1で更新されるとともに前回フレームの画像Nが今回フレームの画像N+1で更新され(S9)、今回の処理が終了する。この場合、次回の処理は、S2から始まる。   The image flow detector 21 calculates the flow of each pixel between the image N (display image) of the previous frame and the image N + 1 (display image) of the current frame (S3). Further, the image freeze determination unit 25 determines whether the image N of the previous frame and the image N + 1 of the current frame are the same based on the flow of each pixel between the image N of the previous frame and the image N + 1 of the current frame. Is determined (S3). If it is determined in S3 that the images are different, the image freeze determination unit 25 determines that the image is not frozen. Thereafter, the previous vehicle information D is updated with the current vehicle information D + 1 and the image N of the previous frame is updated with the image N + 1 of the current frame (S9), and the current process ends. In this case, the next process starts from S2.

S3にて同じ画像と判定した場合、走行状況判断器22は、今回の車速情報D+1に基づいて、自車両が走行中か否かを判断する(S4)。S4にて走行中と判断した場合、画像フリーズ判定器25では、画像がフリーズと判定し、カメラ10と画像処理装置20を再起動する。この際、前回フレームの画像Nと今回フレームの画像N+1は、初期化される。この場合、次回の処理は、S1から始まる。   If it is determined in S3 that the images are the same, the traveling state determination unit 22 determines whether or not the host vehicle is traveling based on the current vehicle speed information D + 1 (S4). If it is determined in S4 that the vehicle is traveling, the image freeze determination unit 25 determines that the image is frozen and restarts the camera 10 and the image processing apparatus 20. At this time, the image N of the previous frame and the image N + 1 of the current frame are initialized. In this case, the next process starts from S1.

S4にて停止中と判断した場合、ランプ作動状態判定器23では、前回のランプ作動情報Dと今回のランプ作動情報D+1とを比較し、ランプの状態が変化しているか否かを判定する(S5)。S5にてランプの状態が変化していないと判定した場合、画像フリーズ判定器25では、画像がフリーズしていないと判定する。この後、前回の自車両情報Dが今回の自車両情報D+1で更新されるとともに前回フレームの画像Nが今回フレームの画像N+1で更新され(S9)、今回の処理が終了する。この場合、次回の処理は、S2から始まる。   When it is determined in S4 that the vehicle is stopped, the lamp operation state determination unit 23 compares the previous lamp operation information D with the current lamp operation information D + 1 to determine whether or not the lamp state has changed ( S5). If it is determined in S5 that the lamp state has not changed, the image freeze determination unit 25 determines that the image is not frozen. Thereafter, the previous vehicle information D is updated with the current vehicle information D + 1 and the image N of the previous frame is updated with the image N + 1 of the current frame (S9), and the current process ends. In this case, the next process starts from S2.

S5にてランプの状態が変化していると判定した場合、環境判断器24では、今回の照度情報D+1に基づいて、自車両周辺の照度が低いか否かを判断する(S6)。S6にて照度が低くないと判定した場合、画像フリーズ判定器25では、画像がフリーズしている可能性があると判定し、画像フリーズの可能性があることをドライバに提示するメッセージの重畳表示画像を生成する(S7)。ディスプレイ30では、この画像フリーズの可能性のメッセージを重畳表示する(S7)。この後、前回の自車両情報Dが今回の自車両情報D+1で更新されるとともに前回フレームの画像Nが今回フレームの画像N+1で更新され(S9)、今回の処理が終了する。この場合、次回の処理は、S2から始まる。S6にて照度が低いと判定した場合、画像フリーズ判定器25では、画像がフリーズと判定し、カメラ10と画像処理装置20を再起動する(S8)。この際、前回フレームの画像Nと今回フレームの画像N+1は、初期化される。この場合、次回の処理は、S1から始まる。   If it is determined in S5 that the lamp state has changed, the environment determination unit 24 determines whether or not the illuminance around the host vehicle is low based on the current illuminance information D + 1 (S6). When it is determined in S6 that the illuminance is not low, the image freeze determination unit 25 determines that there is a possibility that the image is frozen, and displays a superimposed message that indicates to the driver that there is a possibility that the image is frozen. An image is generated (S7). The display 30 superimposes and displays this image freeze possibility message (S7). Thereafter, the previous vehicle information D is updated with the current vehicle information D + 1 and the image N of the previous frame is updated with the image N + 1 of the current frame (S9), and the current process ends. In this case, the next process starts from S2. If it is determined in S6 that the illuminance is low, the image freeze determiner 25 determines that the image is frozen, and restarts the camera 10 and the image processing device 20 (S8). At this time, the image N of the previous frame and the image N + 1 of the current frame are initialized. In this case, the next process starts from S1.

この車両周辺表示装置1によれば、カメラ10の撮像範囲にランプの直接光や間接光が入るように設定し、ランプの状態の変化を利用することにより、車両停止中でも画像フリーズの可能性を判定することができる。さらに、車両周辺表示装置1によれば、車両周辺の照度も利用することにより、車両停止中でも画像フリーズを高精度に判定することができる。   According to the vehicle periphery display device 1, by setting the direct light or indirect light of the lamp to enter the imaging range of the camera 10, and utilizing the change in the state of the lamp, the possibility of image freezing even when the vehicle is stopped is achieved. Can be determined. Furthermore, according to the vehicle periphery display device 1, the image freeze can be determined with high accuracy even when the vehicle is stopped by using the illuminance around the vehicle.

また、車両周辺表示装置1によれば、車両停止中に画像フリーズの可能性を判定した場合には画像フリーズの可能性があることをドライバに提示することにより、ディスプレイ30に表示されている動きがない画像の信頼性が低いことをドライバに知らせることができ、ドライバに車両発進時に安全運転(例えば、急発進抑制)を促すことができる。また、車両周辺表示装置1によれば、車両停止中に画像フリーズを判定した場合にはカメラ10と画像処理装置20を再起動することにより、画像フリーズを迅速に解消でき、車両停止中に画像フリーズした場合でも迅速に正常な車両周辺画像をドライバに提供できる。   Further, according to the vehicle periphery display device 1, when the possibility of image freeze is determined while the vehicle is stopped, the movement displayed on the display 30 is presented to the driver that there is a possibility of image freeze. The driver can be informed that the reliability of the image without the image is low, and the driver can be prompted to perform safe driving (for example, sudden start suppression) when starting the vehicle. Further, according to the vehicle periphery display device 1, when the image freeze is determined while the vehicle is stopped, the image freeze can be quickly eliminated by restarting the camera 10 and the image processing device 20, and the image is displayed while the vehicle is stopped. Even when frozen, a normal vehicle periphery image can be quickly provided to the driver.

以上、本発明に係る実施の形態について説明したが、本発明は上記実施の形態に限定されることなく様々な形態で実施される。   As mentioned above, although embodiment which concerns on this invention was described, this invention is implemented in various forms, without being limited to the said embodiment.

例えば、本実施の形態では車両周辺画像の表示のみを行う車両周辺表示装置に適用したが、車両周辺画像を表示する他の装置にも適用でき、例えば、車両周辺画像を表示するとともにその画像中の移動物体(車両、歩行者等)と自車両との関係に応じて注意喚起等を行う装置がある。このような装置の場合、画像内のフローを検出することによって移動物体を検知しているので、このフロー検出を利用して画像フリーズ判定を行える。   For example, in the present embodiment, the present invention is applied to a vehicle periphery display device that only displays a vehicle periphery image. However, the present invention can also be applied to other devices that display a vehicle periphery image. There is a device for calling attention according to the relationship between the moving object (vehicle, pedestrian, etc.) and the own vehicle. In the case of such an apparatus, since a moving object is detected by detecting a flow in an image, image freeze determination can be performed using this flow detection.

また、本実施の形態では連続する2フレームの画像を用いて画像フロー検出や画像フリーズ判定を行う構成としたが、連続する3フレーム以上の画像を用いて画像フロー検出や画像フリーズ判定を行ってもよい。また、本実施の形態では画像処理装置での処理後の表示画像に対して画像フロー検出や画像フリーズ判定を行う構成としたが、各カメラの撮像画像に対して画像フロー検出や画像フリーズ判定を行なってもよい。   In this embodiment, image flow detection and image freeze determination are performed using two consecutive frames of images. However, image flow detection and image freeze determination are performed using three or more consecutive images. Also good. In this embodiment, image flow detection and image freeze determination are performed on the display image after processing by the image processing apparatus. However, image flow detection and image freeze determination are performed on images captured by each camera. You may do it.

また、本実施の形態では画像フリーズを判定するために車載照明としてブレーキランプ、ウィンカ、フォグランプ、テールランプ、ヘッドライトを用いたが、この中の一部の車載照明だけを用いてもよいし、他の車載照明がある場合には他の車載照明も用いてもよい。   In the present embodiment, brake lamps, blinkers, fog lamps, tail lamps, and headlights are used as in-vehicle lighting to determine image freeze. However, only some of the in-vehicle lighting may be used. If there is other in-vehicle illumination, other in-vehicle illumination may be used.

また、本実施の形態ではフレーム間の画像が変化しているか否かを判定するために画像フローを算出する構成としたが、他の方法によってフレーム間の画像が変化しているか否かを判定する。例えば、フレーム間の画像の対応する画素毎に画像情報(輝度等)を比較し、全ての画素について画像情報が一致しているか否かで判定する。   In this embodiment, the image flow is calculated to determine whether or not the image between frames has changed. However, it is determined whether or not the image between frames has been changed by another method. To do. For example, image information (such as luminance) is compared for each corresponding pixel of an image between frames, and determination is made based on whether or not the image information matches for all pixels.

また、本実施の形態では画像フリーズと判定した場合には装置側で再起動を行う構成としが、画像フリーズをドライバに提示し、ドライバに再起動等の対処を促してもよい。再起動だけでは画像フリーズが解消しない場合も考えられるので、ドライバが再起動しても画像フリーズが解消しない場合には修理等の対処もできる。   In the present embodiment, when it is determined that the image is frozen, the apparatus is restarted. However, the image freeze may be presented to the driver and the driver may be prompted to take action such as restart. Since it is possible that the image freeze is not resolved only by restarting, if the image freeze is not resolved even if the driver is restarted, it is possible to take measures such as repair.

1…車両周辺表示装置、10…カメラ、11…車速センサ、12…ブレーキランプ、13…ウィンカ、14…フォグランプ、15…テールランプ、16…ヘッドライト、17…照度センサ、20…画像処理装置、21…画像フロー検出器、22…走行状況判断器、23…ランプ作動状態判定器、24…環境判断器、25…画像フリーズ判定器、30…ディスプレイ。   DESCRIPTION OF SYMBOLS 1 ... Vehicle periphery display apparatus, 10 ... Camera, 11 ... Vehicle speed sensor, 12 ... Brake lamp, 13 ... Winker, 14 ... Fog lamp, 15 ... Tail lamp, 16 ... Headlight, 17 ... Illuminance sensor, 20 ... Image processing apparatus, 21 DESCRIPTION OF SYMBOLS ... Image flow detector, 22 ... Running condition judgment device, 23 ... Lamp operation state judgment device, 24 ... Environment judgment device, 25 ... Image freeze judgment device, 30 ... Display.

Claims (2)

撮像手段で車両周辺を撮像し、車両周辺の画像を表示手段で表示する車両周辺表示装置であって、
異なる時間の画像が変化しているか否かを判定する画像判定手段と、
車速を検出する車速検出手段と、
車載照明の状態が変化しているか否かを判定する照明判定手段と、
を備え、
前記撮像手段の撮像範囲内に前記車載照明の直接光又は間接光が入るように設定され、
前記画像判定手段で画像が変化していないと判定しかつ前記車速検出手段で検出した車速が所定車速以下のときに、前記照明判定手段で車載照明の状態が変化していると判定した場合には画像に異常の可能性があると判定することを特徴とする車両周辺表示装置。
A vehicle periphery display device that images a vehicle periphery with an imaging unit and displays an image of the vehicle periphery with a display unit,
Image determination means for determining whether images at different times have changed,
Vehicle speed detection means for detecting the vehicle speed;
Lighting determination means for determining whether or not the state of in-vehicle lighting has changed,
With
It is set so that direct light or indirect light of the vehicle-mounted illumination enters within the imaging range of the imaging means,
When it is determined that the image is not changed by the image determining means and the vehicle determining state is changed by the illumination determining means when the vehicle speed detected by the vehicle speed detecting means is equal to or lower than a predetermined vehicle speed. Determines that there is a possibility of abnormality in the image.
車両周辺の照度を検出する照度検出手段を備え、
画像に異常の可能性があると判定したときに、前記照度検出手段で検出した照度が所定照度以下の場合には画像に異常があると判定することを特徴とする請求項1に記載の車両周辺表示装置。
Illuminance detection means for detecting the illuminance around the vehicle,
2. The vehicle according to claim 1, wherein when it is determined that there is a possibility of abnormality in the image, it is determined that there is an abnormality in the image when the illuminance detected by the illuminance detection unit is equal to or less than a predetermined illuminance. Peripheral display device.
JP2012012054A 2012-01-24 2012-01-24 Vehicle surroundings display device Pending JP2013151191A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012012054A JP2013151191A (en) 2012-01-24 2012-01-24 Vehicle surroundings display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012012054A JP2013151191A (en) 2012-01-24 2012-01-24 Vehicle surroundings display device

Publications (1)

Publication Number Publication Date
JP2013151191A true JP2013151191A (en) 2013-08-08

Family

ID=49047966

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012012054A Pending JP2013151191A (en) 2012-01-24 2012-01-24 Vehicle surroundings display device

Country Status (1)

Country Link
JP (1) JP2013151191A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017208586A1 (en) * 2016-05-30 2017-12-07 アイシン精機株式会社 Image display system
CN110509873A (en) * 2019-09-27 2019-11-29 京东方科技集团股份有限公司 Reverse image auxiliary device and method, reverse image

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017208586A1 (en) * 2016-05-30 2017-12-07 アイシン精機株式会社 Image display system
JP2017216518A (en) * 2016-05-30 2017-12-07 アイシン精機株式会社 Image display system
CN110509873A (en) * 2019-09-27 2019-11-29 京东方科技集团股份有限公司 Reverse image auxiliary device and method, reverse image

Similar Documents

Publication Publication Date Title
JP5615862B2 (en) Vehicle perimeter monitoring device
JP6091757B2 (en) Vehicle lamp control device
US9758085B2 (en) Vehicle safety illumination arrangement and method
US9317758B2 (en) Vehicle imaging system and method for distinguishing reflective objects from lights of another vehicle
KR101842815B1 (en) Method for operating a rearview camera system of a motor vehicle after detection of a headlight flasher, rearview camera system and motor vehicle
US9514373B2 (en) Imaging system and method for fog detection
JP5077184B2 (en) Vehicle detection device
WO2015118806A1 (en) Image analysis apparatus and image analysis method
US20130088598A1 (en) Obstacle detection system and method, and obstacle detection apparatus
US9619720B2 (en) Vehicle imaging system and method for distinguishing between vehicle tail lights and flashing red stop lights
US20150049198A1 (en) Imaging system and method with ego motion detection
JP2013151191A (en) Vehicle surroundings display device
JP7176447B2 (en) light monitor
KR102155374B1 (en) System and method for forming nighttime images for a motor vehicle
JP2010006249A (en) Vehicle lamp burnout reporting system and program
JP2011059910A (en) Reverse travel detector
JP2010081318A (en) View confirmation device for vehicle
JP6866212B2 (en) Display control device, display control method and camera monitoring system
US20240208418A1 (en) Visualization system for motor vehicle, associated computer method and program
JP2017068768A (en) Vehicle detection alarm device and vehicle detection alarm method
WO2019194233A1 (en) Vehicle-mounted system and display device
CN105564325A (en) Anti-dazzling rearview mirror
JP2016129305A (en) Image processing system
JP2009154618A (en) Periphery monitoring device for vehicle
JP2020136732A (en) Abnormality detection system, mobile object, abnormality detection method, and program