JP2020160846A - Object detection device - Google Patents

Object detection device Download PDF

Info

Publication number
JP2020160846A
JP2020160846A JP2019060248A JP2019060248A JP2020160846A JP 2020160846 A JP2020160846 A JP 2020160846A JP 2019060248 A JP2019060248 A JP 2019060248A JP 2019060248 A JP2019060248 A JP 2019060248A JP 2020160846 A JP2020160846 A JP 2020160846A
Authority
JP
Japan
Prior art keywords
vehicle
region
brightness
image
headlight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019060248A
Other languages
Japanese (ja)
Inventor
聡 齋藤
Satoshi Saito
聡 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daihatsu Motor Co Ltd
Original Assignee
Daihatsu Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daihatsu Motor Co Ltd filed Critical Daihatsu Motor Co Ltd
Priority to JP2019060248A priority Critical patent/JP2020160846A/en
Publication of JP2020160846A publication Critical patent/JP2020160846A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Abstract

To allow for accurate detection of an object existing in the surroundings with an inexpensive and simple configuration.SOLUTION: In a vehicle safety start supporting device 1, an object detection device includes a headlight 51 and 52 that illuminate an image pickup range of a front camera 11 and a rear camera 12. The object detection device acquires a first brightness of each of a plurality of regions detected from a first image obtained by imaging with the headlight 51 and the backlight 52 not operated, and a brightness of each of the plurality of regions detected from a second image obtained by imaging with the headlight 51 and the backlight 52 in operation. The object detection device determines that there is an object at a position corresponding to a target region within an imaging range when the target region with different brightness from the other regions is detected in the first image, and it is detected in the second image that the brightness of a correction region determined based on the position of the target region and the illumination range of the headlight 51 or the backlight 52 is lower than the region adjacent to the correction region.SELECTED DRAWING: Figure 1

Description

本発明は、例えば自動車等の車両の発進を安全に行わせるための安全発進支援に用いることが可能な物体検出装置に関する。 The present invention relates to an object detection device that can be used for safe start support for safely starting a vehicle such as an automobile.

自動車等の車両の走行又は発進を安全に行わせるために、当該車両の周辺に存在する車両や障害物を検知する技術が知られており、そのような技術の例として、特許文献1には、車両や障害物の精度良い検知を目的として、撮影手段とレーダ手段とを備えた装置が開示されている。 A technique for detecting a vehicle or an obstacle existing in the vicinity of the vehicle is known in order to allow the vehicle such as an automobile to run or start safely. As an example of such a technique, Patent Document 1 , A device including a photographing means and a radar means is disclosed for the purpose of accurately detecting a vehicle or an obstacle.

特開2003−217099号公報Japanese Unexamined Patent Publication No. 2003-2170099

しかしながら、上記従来の技術においては、以下の様な課題があった。すなわち、動作原理の異なる複数の手段を用いることは、装置の構成を高コスト化するとともに、複雑化、重量の増加を招くこととなる。 However, the above-mentioned conventional technique has the following problems. That is, the use of a plurality of means having different operating principles increases the cost of the device configuration, complicates the device, and increases the weight.

本発明は、上記の課題に鑑みてなされたものであり、周囲に存在する物体を廉価且つ簡易、軽量な構成にて精度良く検出することが可能な物体検出装置を提供することを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to provide an object detection device capable of accurately detecting an object existing in the surroundings with an inexpensive, simple, and lightweight configuration. ..

上記の目的を達成するために、本発明の側面は、撮像手段と、前記撮像手段による撮像範囲内を照明する照明手段と、前記撮像手段が撮像した画像を複数の領域に分割して各々の領域の輝度を取得する画像解析手段を備え、前記画像解析手段は、前記照明手段を動作させない状態で前記撮像手段が撮像して得た第1の画像から検出した前記複数の領域の各々の第1の輝度と、前記照明手段を動作させた状態で前記撮像手段が撮像した第2の画像から検出した前記複数の領域の各々の輝度とを取得し、前記第1の画像において他の領域と輝度が異なる標的領域が検出され、且つ前記第2の画像において前記標的領域の位置と前記照明手段の照明範囲とに基づき定められる補正領域の輝度が前記補正領域に隣接する領域より減少していることが検出された場合は、撮像範囲内の前記標的領域に対応する位置に物体が存在すると判断する、物体検出装置である。 In order to achieve the above object, aspects of the present invention include an imaging means, an illuminating means for illuminating the imaging range of the imaging means, and an image captured by the imaging means divided into a plurality of regions. An image analysis means for acquiring the brightness of a region is provided, and the image analysis means is a first of the plurality of regions detected from a first image obtained by the imaging means in a state where the lighting means is not operated. The brightness of 1 and the brightness of each of the plurality of regions detected from the second image captured by the imaging means in the state where the lighting means is operated are acquired, and the brightness of each of the plurality of regions is acquired and the other regions are obtained in the first image. Target regions having different brightness are detected, and the brightness of the correction region determined based on the position of the target region and the illumination range of the lighting means in the second image is smaller than that of the region adjacent to the correction region. When this is detected, it is an object detection device that determines that an object exists at a position corresponding to the target area within the imaging range.

なお、本発明は他の側面として、請求項1に記載の物体検出装置を備え、前記照明手段をヘッドライト及びバックライトの少なくともいずれか一方として有する車両の安全発進支援装置であってもよい。 As another aspect, the present invention may be a vehicle safety start support device including the object detection device according to claim 1 and having the lighting means as at least one of a headlight and a backlight.

以上のような本発明は、周囲に存在する物体を廉価且つ簡易、軽量な構成にて精度良く検出することが可能になるという効果を奏する。 The present invention as described above has an effect that it is possible to accurately detect an object existing in the surroundings with an inexpensive, simple, and lightweight configuration.

本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の構成を示すブロック図A block diagram showing a configuration of a safe start support device for a vehicle having an object detection device according to an embodiment of the present invention. 本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の動作のフローチャートを示す図The figure which shows the flowchart of operation of the safe start support device of the vehicle which has the object detection device which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の動作のフローチャートを示す図The figure which shows the flowchart of operation of the safe start support device of the vehicle which has the object detection device which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の動作のフローチャートを示す図The figure which shows the flowchart of operation of the safe start support device of the vehicle which has the object detection device which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の動作のフローチャートを示す図The figure which shows the flowchart of operation of the safe start support device of the vehicle which has the object detection device which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の動作のフローチャートを示す図The figure which shows the flowchart of operation of the safe start support device of the vehicle which has the object detection device which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の動作のフローチャートを示す図The figure which shows the flowchart of operation of the safe start support device of the vehicle which has the object detection device which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の動作を説明するための図The figure for demonstrating the operation of the safety start support device of the vehicle which has the object detection device which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置を有する車両の安全発進支援装置の動作を説明するための図The figure for demonstrating the operation of the safety start support device of the vehicle which has the object detection device which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置の動作に用いられるテーブルを示す図The figure which shows the table used for the operation of the object detection apparatus which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置の動作に用いられるテーブルを示す図The figure which shows the table used for the operation of the object detection apparatus which concerns on embodiment of this invention. 本発明の実施の形態に係る物体検出装置の動作に用いられるテーブルを示す図The figure which shows the table used for the operation of the object detection apparatus which concerns on embodiment of this invention.

図1は、本発明の実施の形態に係る物体検出装置を有する、車両としての四輪自動車に実装される車両の安全発進支援装置の構成を示すブロック図である。 FIG. 1 is a block diagram showing a configuration of a vehicle safety start support device mounted on a four-wheeled vehicle as a vehicle having an object detection device according to an embodiment of the present invention.

図1に示すように、本実施の形態の車両の安全発進支援装置1において、モニタECU10は、CPU、メモリ、通信バス60を介して後述する他のECUと通信する通信装置等を有し、フロントカメラ11及びリアカメラ12の動作を制御するとともに、これらカメラから取得した情報に基づいて、映像表示装置13及び音声出力装置14の動作を制御する手段である。 As shown in FIG. 1, in the vehicle safety start support device 1 of the present embodiment, the monitor ECU 10 includes a communication device that communicates with another ECU described later via a CPU, a memory, and a communication bus 60. It is a means for controlling the operations of the front camera 11 and the rear camera 12 and controlling the operations of the video display device 13 and the audio output device 14 based on the information acquired from these cameras.

フロントカメラ11は車両の安全発進支援装置1が実装される車両(以下、自車両と称す)の、運転者にとって死角となる領域を含む前方所定範囲の光景を動画像として撮像する手段であり、リアカメラ12は自車両の、運転者にとって死角となる領域を含む後方所定範囲の光景を動画像として撮像する手段であって、モニタECU10は、フロントカメラ11及びリアカメラ12がそれぞれ撮像した映像に対しフレーム単位で輝度分布を解析することにより、後述する自車両の周囲における物体の検出を行う。 The front camera 11 is a means for capturing as a moving image a scene of a vehicle (hereinafter referred to as own vehicle) on which the vehicle safety start support device 1 is mounted, in a predetermined range in front including an area that is a blind spot for the driver. The rear camera 12 is a means for capturing a moving image of a scene of the own vehicle in a predetermined rear range including an area that is a blind spot for the driver, and the monitor ECU 10 captures images captured by the front camera 11 and the rear camera 12, respectively. On the other hand, by analyzing the brightness distribution on a frame-by-frame basis, an object around the own vehicle, which will be described later, is detected.

映像表示装置13は、例えば自車両のダッシュボード上に設けられた専用品、カーオーディオ又はカーナビのディスプレイとして実現され、モニタECU10の制御によりフロントカメラ11の映像を表示する手段である。音声出力装置14は、例えば自車両のダッシュボード上に設けられた専用品、カーオーディオ又はカーナビのスピーカーとして実現され、モニタECU10の制御により後述する警告を音声信号として車室内に出力する手段である。 The image display device 13 is realized as, for example, a display of a dedicated product, a car audio or a car navigation system provided on the dashboard of the own vehicle, and is a means for displaying the image of the front camera 11 under the control of the monitor ECU 10. The voice output device 14 is realized as, for example, a speaker for a dedicated product, car audio or car navigation system provided on the dashboard of the own vehicle, and is a means for outputting a warning described later as a voice signal to the vehicle interior under the control of the monitor ECU 10. ..

ボディECU20は、モニタECU10と同様、CPU、メモリ、通信バス60を介して他のECUと通信する通信装置等を有し、車両のドア、ウインカー等の車載電装品の動作状態を管理する手段である。VSCECU30は、モニタECU10と同様、CPU、メモリ、通信バス60を介して他のECUと通信する通信装置等を有し、図示しない自車両の操舵角センサ及びメータECUから情報を取得して自車両のブレーキ制御を実行する手段である。エンジン制御ECU40は、モニタECU10と同様、CPU、メモリ、通信バス60を介して他のECUと通信する通信装置等を有し、自車両のイグニッションスイッチの動作状態を管理するとともに自車両のエンジン制御を実行する手段である。 Like the monitor ECU 10, the body ECU 20 has a communication device and the like that communicate with other ECUs via a CPU, a memory, and a communication bus 60, and is a means for managing the operating state of vehicle-mounted electrical components such as vehicle doors and blinkers. is there. Like the monitor ECU 10, the VSCECU 30 has a communication device that communicates with other ECUs via a CPU, a memory, and a communication bus 60, and acquires information from a steering angle sensor and a meter ECU of the own vehicle (not shown) to obtain information from the own vehicle. It is a means to execute the brake control of. Like the monitor ECU 10, the engine control ECU 40 has a communication device that communicates with other ECUs via a CPU, a memory, and a communication bus 60, manages the operating state of the ignition switch of the own vehicle, and controls the engine of the own vehicle. Is the means to carry out.

ライトECU50は、モニタECU10と同様、CPU、メモリ、通信バス60を介して他のECUと通信する通信装置等を有し、ヘッドライト51及びバックライト52の動作を制御する手段である。 Like the monitor ECU 10, the light ECU 50 has a communication device that communicates with other ECUs via a CPU, a memory, and a communication bus 60, and is a means for controlling the operation of the headlight 51 and the backlight 52.

ヘッドライト51及びバックライト52はそれぞれ自車両の車幅方向左右両端に設けられた一対の光源から構成され、自車両の前方及び後方をそれぞれ照明する手段である。ライトECU50は、モニタECU10によるフロントカメラ11及びリアカメラ12の撮像動作に応じて、ヘッドライト51及びバックライト52を動作させる。また、フロントカメラ11及びリアカメラ12は、それぞれヘッドライト51の一対の光源及びバックライト52の一対の光源の間に配置されることにより、自車両の車幅方向においてヘッドライト51及びバックライト52にそれぞれオフセットしている。 The headlight 51 and the backlight 52 are each composed of a pair of light sources provided at both left and right ends in the vehicle width direction of the own vehicle, and are means for illuminating the front and the rear of the own vehicle, respectively. The light ECU 50 operates the headlight 51 and the backlight 52 according to the imaging operation of the front camera 11 and the rear camera 12 by the monitor ECU 10. Further, the front camera 11 and the rear camera 12 are arranged between the pair of light sources of the headlight 51 and the pair of light sources of the backlight 52, respectively, so that the headlight 51 and the backlight 52 are arranged in the vehicle width direction of the own vehicle. Are offset to each other.

以上の構成において、フロントカメラ11及びリアカメラ12は本発明の撮像手段に相当し、ヘッドライト51及びバックライト52は本発明の照明手段に相当し、モニタECU10及びライトECU50の組み合わせは、本発明の画像解析手段に相当し、これら各手段は本発明の物体検出装置を構成する。 In the above configuration, the front camera 11 and the rear camera 12 correspond to the imaging means of the present invention, the headlight 51 and the backlight 52 correspond to the lighting means of the present invention, and the combination of the monitor ECU 10 and the light ECU 50 is the present invention. Corresponding to the image analysis means of the above, each of these means constitutes the object detection device of the present invention.

本実施の形態の車両の安全発進支援装置1は、上記の構成を備えたことにより、自車両の停車状態及び停車からの再発進時に自車両の周囲の光景を撮像し、物体検出装置によりこれら撮像した画像の輝度を解析することにより自車両周囲の障害物を検出するとともに、障害物を検出した場合は、その旨を音声により運転者に警告する。 Since the vehicle safe start support device 1 of the present embodiment has the above configuration, the vehicle's surroundings are imaged when the vehicle is stopped and when the vehicle restarts from the stop, and these are captured by the object detection device. Obstacles around the vehicle are detected by analyzing the brightness of the captured image, and when an obstacle is detected, the driver is warned by voice to that effect.

以下、図2〜6のフローチャートを参照して、本実施の形態の車両の安全発進支援装置1の動作を詳しく説明する。 Hereinafter, the operation of the vehicle safety start support device 1 of the present embodiment will be described in detail with reference to the flowcharts of FIGS. 2 to 6.

(1.車両停車時処理)
はじめに、自車両が停止するときの動作を説明する。図2に示すように、装置の動作開始後、モニタECU10はエンジン制御ECU40と通信し、車両のイグニッションスイッチがOFFになったかどうかを確認する(S1)。OFFになったことを確認した場合は、モニタECU10は更にボディECU20と通信を行い方向指示器のスイッチの状態を取得するとともに、VSCECU30と通信を行い、車両の操舵角を取得し、これら取得した情報を自車両の操舵状態として自らのメモリに記憶する(S4)。
(1. Processing when the vehicle is stopped)
First, the operation when the own vehicle stops will be described. As shown in FIG. 2, after the operation of the device is started, the monitor ECU 10 communicates with the engine control ECU 40 and confirms whether or not the ignition switch of the vehicle is turned off (S1). When it is confirmed that the vehicle has been turned off, the monitor ECU 10 further communicates with the body ECU 20 to acquire the switch state of the direction indicator, and also communicates with the VSCECU 30 to acquire the steering angle of the vehicle, and these are acquired. The information is stored in the own memory as the steering state of the own vehicle (S4).

次に、モニタECU10は、自車両前方における物体の有無を確認し、その結果を記憶する(S5)。 Next, the monitor ECU 10 confirms the presence or absence of an object in front of the own vehicle and stores the result (S5).

ここで本実施の形態の物体検出装置による画像の輝度解析に基づく物体検出の動作について、図7のフローチャートを参照して説明する。 Here, the operation of object detection based on the brightness analysis of the image by the object detection device of the present embodiment will be described with reference to the flowchart of FIG. 7.

始めに、モニタECU10は、カメラとしてのフロントカメラ11を動作させ、フロントカメラ11の撮像範囲である自車両前方の光景を撮像し、フレーム単位の画像に切り出し、これを第1の画像として取得する(S101)。 First, the monitor ECU 10 operates the front camera 11 as a camera, captures a scene in front of the own vehicle, which is the imaging range of the front camera 11, cuts out an image in frame units, and acquires this as a first image. (S101).

図8の模式図に示すように、路面R及び背景BGを含む自車両前方の光景に対し、フロントカメラ11が撮像する画像は、図中破線により囲まれた撮像範囲A内に含まれるところ、モニタECU10は、撮像範囲Aにおける路面R上の、幅方向W及び奥行き方向Dを有する所定範囲の領域BRを抽出し、更に領域BRをマトリックス状のサブ領域SBRに分割して、第1の輝度として、サブ領域SBR毎の輝度を検出する(S102)。領域BRの例としては幅方向Wを約1.6m、奥行き方向Dを約2m程度として、これらを20cm角のサブ領域SBRの配列として取り扱い、サブ領域SBRの輝度は、各々のサブ領域SBRに含まれる画素のグレースケール平均値(255階調)として求められる。 As shown in the schematic view of FIG. 8, the image captured by the front camera 11 with respect to the scene in front of the own vehicle including the road surface R and the background BG is included in the imaging range A surrounded by the broken line in the figure. The monitor ECU 10 extracts a region BR of a predetermined range having a width direction W and a depth direction D on the road surface R in the imaging range A, further divides the region BR into matrix-shaped sub-regions SBR, and obtains a first luminance. As a result, the brightness of each sub-region SBR is detected (S102). As an example of the region BR, the width direction W is about 1.6 m and the depth direction D is about 2 m, and these are treated as an array of 20 cm square sub-region SBR, and the brightness of the sub-region SBR is set to each sub-region SBR. It is obtained as the gray scale average value (255 gradations) of the included pixels.

モニタECU10は、サブ領域SBR毎の輝度を比較する。具体例としては、平均値又は中央値との比較等に基づき、他のサブ領域と比較して輝度が予め定めた閾値以下のサブ領域SBRが見いだされたか否かにより判断する(S103)。 The monitor ECU 10 compares the brightness of each sub-region SBR. As a specific example, it is determined based on whether or not a sub-region SBR whose brightness is equal to or less than a predetermined threshold value as compared with other sub-regions is found based on a comparison with an average value or a median value (S103).

図8に示す路面R上に障害物Oが存在する場合、フロントカメラ11の撮像範囲A内に含まれる障害物Oの像は、図10に示すように、領域BRにおいて他のサブ領域SBRよりも低輝度のサブ領域SBRとして現われ、モニタECU10はこの低輝度のサブ領域SBRを標的領域Rtとして設定する(S104)。なお、図10においては簡単のため、領域BRにおけるサブ領域SBRの個数は図8に示す例とは違えたものとして示した。 When the obstacle O is present on the road surface R shown in FIG. 8, the image of the obstacle O included in the imaging range A of the front camera 11 is larger than the other sub-region SBR in the region BR as shown in FIG. Also appears as a low-brightness sub-region SBR, and the monitor ECU 10 sets this low-brightness sub-region SBR as a target region Rt (S104). For the sake of simplicity in FIG. 10, the number of sub-regions SBR in the region BR is shown as being different from the example shown in FIG.

更にモニタECU10は、ライトECU50と通信し、ライトECU50にヘッドライト51を動作させてフロントカメラ11の撮像範囲を照明する(S105)。次いでモニタECU10は、S101と同様の動作を繰り返し、フロントカメラ11が撮像した照明中の撮像範囲Aのフレーム単位の画像である第2の画像を取得する(S106)。 Further, the monitor ECU 10 communicates with the light ECU 50 and causes the light ECU 50 to operate the headlight 51 to illuminate the imaging range of the front camera 11 (S105). Next, the monitor ECU 10 repeats the same operation as in S101, and acquires a second image which is a frame-based image of the imaging range A in the illumination imaged by the front camera 11 (S106).

モニタECU10による第2の画像の輝度解析は、第1の画像の場合と同様、複数のサブ領域SBRを有する領域BRにおいて、第2の輝度としてサブ領域SBR毎の輝度を取得するとともに、更に以下の様に行う。 In the luminance analysis of the second image by the monitor ECU 10, the luminance of each sub-region SBR is acquired as the second luminance in the region BR having the plurality of sub-regions SBR as in the case of the first image, and further, the following. Do like this.

図11に示すように、モニタECU10は、領域BRにおいてヘッドライト51の左右光源に対応する位置をサブ領域SBR単位で、自車両左側をWL(L)、自車両右側をWL(R)に設定するとともに、第1の画像に基づき設定された標的領域Rtの最下段を占めるサブ領域SBRの幅WRtを設定する。 As shown in FIG. 11, the monitor ECU 10 sets the position corresponding to the left and right light sources of the headlight 51 in the sub-region SBR unit to WL (L) on the left side of the own vehicle and WL (R) on the right side of the own vehicle in the region BR. At the same time, the width WRt of the sub-region SBR that occupies the lowermost stage of the target region Rt set based on the first image is set.

次いで、モニタECU10は、ヘッドライト51による障害物Oへの直射光による生ずる輝度変化の分布として、左側のヘッドライト51の幅WL(L)と標的領域Rtの幅WRtの左端同士及び右端同士をそれぞれ結ぶ直線により形成される領域BL(L)、及び右側のヘッドライト51の幅WL(R)と標的領域Rtの幅WRtの左端同士及び右端同士をそれぞれ結ぶ直線により形成される領域BL(R)を設定する。 Next, the monitor ECU 10 sets the left end and the right end of the width WL (L) of the left headlight 51 and the width WRt of the target region Rt as the distribution of the brightness change caused by the direct light shining on the obstacle O by the headlight 51. Region BL (L) formed by straight lines connecting each, and region BL (R) formed by straight lines connecting the left and right ends of the width WL (R) of the right headlight 51 and the width WRt of the target region Rt, respectively. ) Is set.

更に、モニタECU10は個々のサブ領域SBRについて、(イ)領域BL(L)又はBL(R)の占める割合が50%以上となり、(ロ)標的領域Rtの最下段のサブ領域SBRよりも上方に位置し、(ハ)標的領域Rtに含まれない、の3条件を満たすものを、補正領域Rcに設定する(S107)。なお、条件(イ)はヘッドライト51の直射光により生じた輝度変化を対象とするための条件、条件(ロ)はヘッドライト51の直射光自体による輝度変化を排除するための条件、条件(ハ)は標的領域Rt自体を排除するための条件、としてそれぞれ定められる。これにより、補正領域Rcは、ヘッドライト51の直射光が標的領域Rtに位置する対象に影響することにより輝度変化が生じたサブ領域SBRとみなすことができ、図11に示す例では、補正領域Rcは、標的領域の左右方向に位置するサブ領域SBRに対して設定される。 Further, in the monitor ECU 10, the ratio of (a) region BL (L) or BL (R) to each sub-region SBR is 50% or more, which is higher than (b) the lowermost sub-region SBR of the target region Rt. The correction region Rc is set to the one that is located in (c) and is not included in the target region Rt and satisfies the three conditions (S107). The condition (a) is a condition for targeting the brightness change caused by the direct light of the headlight 51, and the condition (b) is a condition and a condition (b) for excluding the brightness change caused by the direct light of the headlight 51 itself. C) is defined as a condition for excluding the target region Rt itself. As a result, the correction region Rc can be regarded as a sub-region SBR in which the brightness changes due to the direct light of the headlight 51 affecting the target located in the target region Rt. In the example shown in FIG. 11, the correction region Rc is a correction region. Rc is set for the sub-region SBR located in the left-right direction of the target region.

更にモニタECU10は、補正領域Rcと、補正領域Rcに隣接するサブ領域SBRとの輝度を比較し、補正領域Rcの輝度が比較対象のサブ領域SBRの輝度より減少しているかどうかを判断する(S108)。具体例としては、補正領域Rcに隣接するサブ領域SBRとの輝度の差分を算出し、全ての差分の平均値を求める。 Further, the monitor ECU 10 compares the brightness of the correction region Rc and the sub-region SBR adjacent to the correction region Rc, and determines whether or not the brightness of the correction region Rc is smaller than the brightness of the sub-region SBR to be compared ( S108). As a specific example, the difference in brightness from the sub-region SBR adjacent to the correction region Rc is calculated, and the average value of all the differences is obtained.

当該平均値が予め定められモニタECU10に記憶された閾値以下である場合は、補正領域Rcの輝度は減少しており、補正領域Rcはヘッドライト51の直射光が標的領域Rtを照射されることにより生じた影とみなすことができ、モニタECU10は、標的領域Rtは障害物Oの存在を示すものと判断して(S109)、物体検出の動作を終了する。 When the average value is equal to or less than the threshold value stored in the monitor ECU 10 in advance, the brightness of the correction region Rc is reduced, and the direct light of the headlight 51 irradiates the target region Rt in the correction region Rc. The monitor ECU 10 determines that the target region Rt indicates the presence of the obstacle O (S109), and ends the object detection operation.

一方、当該平均値が閾値以上である場合は、補正領域Rcの輝度は隣接するサブ領域SBR以上となる。この場合、モニタECU10は、標的領域Rtは障害物Oの存在を示すものではないと判断して(S110)、物体検出の動作を終了する。 On the other hand, when the average value is equal to or greater than the threshold value, the brightness of the correction region Rc is equal to or greater than the adjacent sub-region SBR. In this case, the monitor ECU 10 determines that the target region Rt does not indicate the presence of the obstacle O (S110), and ends the object detection operation.

S105〜S108及びS110による判断は、具体例として、図9に示す、路面R上に水溜まりPが存在する場合を想定するものである。すなわち、フロントカメラ11が第1の画像を撮像する際に撮像範囲A内に含まれる水溜まりPの像は、領域BR内の輝度検出においては、障害物Oの場合と同様、図10に示す他のサブ領域SBRよりも低輝度のサブ領域SBRとして現われ、第1の画像のみの輝度解析では障害物Oと区別することができない。 As a specific example, the determination by S105 to S108 and S110 assumes the case where the puddle P exists on the road surface R shown in FIG. That is, the image of the water pool P included in the imaging range A when the front camera 11 captures the first image is shown in FIG. 10 in the luminance detection in the region BR as in the case of the obstacle O. It appears as a sub-region SBR having a lower brightness than the sub-region SBR of the above, and cannot be distinguished from the obstacle O by the brightness analysis of only the first image.

これに対し、S105〜S108の工程による第2の画像の取得及びその輝度検出により、路面R上に高さを持つ立体物として現われる障害物Oと、路面R上の平面的な変化として現われる水溜まりPや路肩の建築物等の影とを切り分けることが可能となる。すなわち、標的領域Rtが高さを持たない路面R上の平面的な変化である場合、第2の画像において新たに生じる輝度変化は、図12に示すように、ヘッドライト51の直射光のみによるものとなる(補正領域Rcの輝度は、領域BL(L)及び領域BL(R)において標的領域Rtの最下段のサブ領域SBRよりも下方に位置するものの輝度Ba1と一致する)ため、S110の判断は、補正領域Rcはヘッドライト51の直射光のみによる輝度変化とみなすことができることに基づき行われる。なお、ヘッドライト51により形成される領域BL(L)及びBL(R)の他のサブ領域SBRの輝度Ba2〜Ba4はいずれも他のサブ領域SBRの輝度より大きくなる。 On the other hand, by acquiring the second image and detecting its brightness by the steps S105 to S108, the obstacle O appearing as a three-dimensional object having a height on the road surface R and the water pool appearing as a planar change on the road surface R. It is possible to separate the shadows of P and buildings on the shoulder of the road. That is, when the target region Rt is a planar change on the road surface R having no height, the luminance change newly generated in the second image is due only to the direct light of the headlight 51 as shown in FIG. (The brightness of the correction region Rc matches the brightness Ba1 of the region BL (L) and the region BL (R) located below the sub-region SBR at the bottom of the target region Rt). The determination is made based on the fact that the correction region Rc can be regarded as a brightness change due only to the direct light of the headlight 51. The brightness Ba2 to Ba4 of the other sub-regions SBR of the regions BL (L) and BL (R) formed by the headlight 51 are both higher than the brightness of the other sub-regions SBR.

一方、S103において、領域BR内に、他のサブ領域と比較して輝度が所定値又は所定値域にて異なるサブ領域が見いだされなかった場合は、モニタECU10は、路面には障害物はないと判断して(S111)、物体検出の動作を終了する。 On the other hand, in S103, when no sub-region whose brightness is different from that of the other sub-regions is found in the region BR, the monitor ECU 10 has no obstacle on the road surface. After determining (S111), the operation of object detection is terminated.

再び図2を参照して、モニタECU10は、更に自車両後方における物体の有無を確認し、その結果を記憶する(S6)。S6の内容は、モニタECU10はフロントカメラ11に変えてリアカメラ12を、ライトECU50はヘッドライト51に変えてバックライト52をそれぞれ制御することで、図7のフローチャートにしたがって上述した各工程と同様の動作を実行する。 With reference to FIG. 2 again, the monitor ECU 10 further confirms the presence or absence of an object behind the own vehicle, and stores the result (S6). The contents of S6 are the same as those described above according to the flowchart of FIG. 7 by controlling the rear camera 12 by changing the monitor ECU 10 to the front camera 11 and the backlight 52 by changing the light ECU 50 to the headlight 51. To perform the operation of.

一方、S1にてイグニッションスイッチがOFFでないことを確認した場合は、モニタECU10は自車両が停車状態にあるかどうかを判断する(S2)。停車状態の例は、自車両の速度が0であることと車両のドアが開放動作を行っていることとの加重要件として定めることができるが、車両又は運転者の特性に応じて、車両の任意の状態又はそれらの組合せを用いて定めるようにしてもよい。 On the other hand, when it is confirmed in S1 that the ignition switch is not OFF, the monitor ECU 10 determines whether or not the own vehicle is in the stopped state (S2). An example of a stopped state can be determined as an additional important matter that the speed of the own vehicle is 0 and that the door of the vehicle is opening, but depending on the characteristics of the vehicle or the driver, the vehicle It may be determined using any state or a combination thereof.

モニタECU10はVSCECU30と通信を行い、VSCECU30を介して速度計の数値を取得し、これが0であること、及び自車両のブレーキがONであることの両方を確認した場合は、自車両が停車状態にあると判断し、更にボディECU20と通信を行い、ハザードランプが点灯状態にあるか、又は自車両のドアの開スイッチが動作したことを検知したかを確認する(S3)。S3にてボディECU20からいずれかの情報を取得した場合は、自車両は停車が完了した状態にあると判断して、S4に移行して、上述したS6までの一連の動作を実行する。一方、S2にて停車状態にないと判断した場合、及びS3にてボディECU20からいずれの情報も取得されなかった場合は、モニタECU10は動作を終了する。 When the monitor ECU 10 communicates with the VSCECU30, acquires the value of the speedometer via the VSCECU30, and confirms that this is 0 and that the brake of the own vehicle is ON, the own vehicle is in the stopped state. Further, it communicates with the body ECU 20 to confirm whether the hazard lamp is in the lit state or whether it is detected that the door open switch of the own vehicle has been operated (S3). When any information is acquired from the body ECU 20 in S3, it is determined that the own vehicle is in the state where the stop is completed, the vehicle shifts to S4, and the series of operations up to S6 described above is executed. On the other hand, if it is determined in S2 that the vehicle is not in the stopped state, or if no information is acquired from the body ECU 20 in S3, the monitor ECU 10 ends the operation.

(2.車両発進時処理)
次に、運転者が自車両を発進させる時の動作を説明する。図3に示すように、装置の動作開始後、モニタECU10はエンジン制御ECU40と通信し、車両のイグニッションスイッチがONになったかどうかを確認する(S7)。ONになったことを確認した場合は、自車両の停車時における自車両前方及び後方における障害物Oの存在の有無が記憶されているかどうかを確認し(S9)、記憶されている場合は後述するS11へ移行する。
(2. Processing when the vehicle starts)
Next, the operation when the driver starts the own vehicle will be described. As shown in FIG. 3, after the operation of the device is started, the monitor ECU 10 communicates with the engine control ECU 40 and confirms whether or not the ignition switch of the vehicle is turned on (S7). When it is confirmed that it is turned on, it is confirmed whether or not the presence or absence of the obstacle O in front of and behind the own vehicle when the own vehicle is stopped is memorized (S9), and if it is memorized, it will be described later. Move to S11.

一方、イグニッションスイッチがONになったことを確認できなかった場合は、モニタECU10は更に発進条件を満たしているかどうかを判断する(S8)。発進条件の例は、自車両のブレーキがOFFであること、ハザードランプが消灯状態にあること、及び車速が0より大であること、のいずれかを満たすこととして定めることができるが、車両又は運転者の特性に応じて、自車両の任意の状態又はそれらの組合せを用いて定めるようにしてもよい。 On the other hand, if it cannot be confirmed that the ignition switch has been turned on, the monitor ECU 10 further determines whether or not the starting condition is satisfied (S8). An example of the starting condition can be defined as satisfying either that the brake of the own vehicle is OFF, that the hazard lamp is off, and that the vehicle speed is greater than 0. Depending on the characteristics of the driver, it may be determined by using an arbitrary state of the own vehicle or a combination thereof.

モニタECU10はボディECU20及びVSCECU30と通信を行い、ボディECU20を介してハザードランプが消灯状態であること、又はVSCECU30から速度計の数値を取得して、これが0より大であること若しくは自車両のブレーキがOFFであることのいずれか一つを確認した場合は、自車両が発進条件を満たしたと判断し、S9に移行する。 The monitor ECU 10 communicates with the body ECU 20 and the VSCECU30, and the hazard lamp is off via the body ECU 20, or the value of the speedometer is acquired from the VSCECU30 and this is greater than 0 or the brake of the own vehicle. If it is confirmed that any one of the above is OFF, it is determined that the own vehicle satisfies the starting condition, and the process proceeds to S9.

一方、S8にて発進条件を満たしていないと判断された場合、又はS9にて自車両の停車時における自車両前方及び後方における障害物Oの存在の有無が記憶されていない場合は、モニタECU10は動作を終了する。 On the other hand, if it is determined in S8 that the starting conditions are not satisfied, or if the presence or absence of obstacles O in front of and behind the own vehicle when the own vehicle is stopped is not remembered in S9, the monitor ECU 10 Ends the operation.

次に、S9にて自車両の停車時における自車両前方及び後方における障害物Oの存在の有無が記憶されている場合は、図4に示すフローチャートを参照して、モニタECU10はフロントカメラ11を動作させ、(1.車両停車時処理)のS5と同様の動作を実行して、現在の自車両前方における物体の有無を確認、記憶し(S11)、更にS11で記憶した状態とS5にて記憶した状態とを比較して、比較結果を、発進直前の障害物Oの有無を示すフラグである差異フラグとして設定する(S12)。 Next, when the presence or absence of obstacles O in front of and behind the own vehicle when the own vehicle is stopped is stored in S9, the monitor ECU 10 uses the front camera 11 with reference to the flowchart shown in FIG. Operate and execute the same operation as S5 in (1. Processing when the vehicle is stopped) to confirm and memorize the presence or absence of an object in front of the current own vehicle (S11), and further, in the state memorized in S11 and in S5. The memorized state is compared, and the comparison result is set as a difference flag which is a flag indicating the presence or absence of the obstacle O immediately before the start (S12).

更に、モニタECU10はリアカメラ12を動作させ、(1.車両停車時処理)のS6と同様の動作を実行して、現在の自車両後方における物体の有無を確認、記憶し(S13)、更にS13で記憶した状態とS6にて記憶した状態とを比較して、比較結果を車両後方における障害物の有無を示す差異フラグとして設定する(S14)。 Further, the monitor ECU 10 operates the rear camera 12 and executes the same operation as S6 in (1. Processing when the vehicle is stopped) to confirm and store the presence or absence of an object behind the current own vehicle (S13), and further. The state stored in S13 and the state stored in S6 are compared, and the comparison result is set as a difference flag indicating the presence or absence of an obstacle behind the vehicle (S14).

次に、モニタECU10は、ボディECU20と通信を行い、情報を取得して自車両のシフトレバーのポジションがDレンジ又はRレンジのいずれにあるかを判断し(S15)、Rレンジである場合は後述するS21へ、Dレンジである場合は後述するS31へそれぞれ移行して、動作を継続する。なお、Pレンジその他Dレンジ及びRレンジのいずれでもない場合は、いずれかの判断がなされるまでS15の動作を繰り返す。 Next, the monitor ECU 10 communicates with the body ECU 20, acquires information, determines whether the position of the shift lever of the own vehicle is in the D range or the R range (S15), and if it is in the R range, The operation is continued by shifting to S21, which will be described later, and to S31, which will be described later in the case of the D range. If it is neither the P range nor the D range or the R range, the operation of S15 is repeated until any determination is made.

上述のように、S15でRレンジであると判断した場合は、図5に示すフローチャートを参照して、モニタECU10はS14にて設定した車両後方の差異フラグを参照して、これがONかOFFかを判断する(S21)。差異フラグがONである場合は、S4で記憶した自車両の操舵状態とS13における障害物Oの有無の判断に利用したリアカメラ12の画像とに基づき、自車両の後進方向にリアカメラ12の撮像範囲が含まれるかどうかを更に判断する(S22)。自車両の後進方向に撮像範囲が含まれる場合は、モニタECU10は、自車両が発進した場合、進路上に障害物Oに存在すると判断して、音声出力装置14を制御して、ビープ音若しくは録音又は合成音声等による警告を出力するとともに、映像表示装置13にリアカメラ12の映像を表示させる制御を実行する(S23)。 As described above, when it is determined in S15 that the vehicle is in the R range, the monitor ECU 10 refers to the difference flag at the rear of the vehicle set in S14 with reference to the flowchart shown in FIG. 5, and whether this is ON or OFF. Is determined (S21). When the difference flag is ON, the rear camera 12 moves backward in the backward direction of the own vehicle based on the steering state of the own vehicle stored in S4 and the image of the rear camera 12 used for determining the presence or absence of the obstacle O in S13. It is further determined whether or not the imaging range is included (S22). When the image pickup range is included in the backward direction of the own vehicle, the monitor ECU 10 determines that the obstacle O exists in the path when the own vehicle starts, and controls the voice output device 14 to make a beep sound or A warning by recording or synthetic voice is output, and a control for displaying the image of the rear camera 12 on the image display device 13 is executed (S23).

一方、S21にて差異フラグがOFFである場合、又はS22にて自車両の後進方向にリアカメラ12の撮像範囲が含まれないと判断した場合は、自車両が発進しても、進路上に障害物は存在していないと判断して、動作を終了する。 On the other hand, if the difference flag is OFF in S21, or if it is determined in S22 that the imaging range of the rear camera 12 is not included in the backward direction of the own vehicle, even if the own vehicle starts, it will be on the path. It judges that there is no obstacle and ends the operation.

次に、S15でDレンジであると判断した場合は、図6に示すフローチャートを参照して、モニタECU10はS12にて設定した車両前方の差異フラグを参照して、これがONかOFFかを判断する(S31)。差異フラグがONである場合は、S4で記憶した自車両の操舵状態とS11における障害物Oの有無の判断に利用した現在のフロントカメラ11の画像とに基づき、自車両の前進方向にフロントカメラ11の撮像範囲が含まれるかどうかを更に判断する(S32)。自車両の前進方向に撮像範囲が含まれる場合は、S23と同様に、モニタECU10は、音声出力装置14を制御して警告を出力するとともに、映像表示装置13にフロントカメラ11の映像を表示させる制御を実行する(S33)。 Next, when it is determined in S15 that the vehicle is in the D range, the monitor ECU 10 refers to the difference flag in front of the vehicle set in S12 with reference to the flowchart shown in FIG. 6, and determines whether this is ON or OFF. (S31). When the difference flag is ON, the front camera is in the forward direction of the own vehicle based on the steering state of the own vehicle stored in S4 and the image of the current front camera 11 used for determining the presence or absence of the obstacle O in S11. It is further determined whether or not the imaging range of 11 is included (S32). When the image pickup range is included in the forward direction of the own vehicle, the monitor ECU 10 controls the audio output device 14 to output a warning, and causes the image display device 13 to display the image of the front camera 11 as in S23. Control is executed (S33).

一方、S31にて差異フラグがOFFである場合、又はS32にて自車両の前進方向にフロントカメラ12の撮像範囲が含まれないと判断した場合は、動作を終了する。 On the other hand, if the difference flag is OFF in S31, or if it is determined in S32 that the imaging range of the front camera 12 is not included in the forward direction of the own vehicle, the operation ends.

このように、本発明の実施の形態の物体検出装置を有する車両の安全発進支援装置によれば、フロントカメラ11又はリアカメラ12が撮像した画像に基づき、自車両周囲の障害物の有無を判別するとともに、障害物の存在を判別した場合は、その旨を音声により車室内の運転者に警告する。これにより、運転者が不注意等により自車両の周囲の確認を看過してしまう恐れを軽減して、安全な発進を促すことが可能となる。 As described above, according to the safety start support device of the vehicle having the object detection device according to the embodiment of the present invention, the presence or absence of obstacles around the own vehicle is determined based on the image captured by the front camera 11 or the rear camera 12. At the same time, if the presence of an obstacle is determined, the driver in the vehicle interior is warned by voice to that effect. As a result, it is possible to reduce the risk that the driver will inadvertently overlook the confirmation of the surroundings of the own vehicle and promote a safe start.

更に、本発明の実施の形態の物体検出装置を有する車両の安全発進支援装置によれば、フロントカメラ11又はリアカメラ12が撮像した画像に基づき、自車両周囲の障害物の有無を、撮像範囲内における路面の状態や影と切り分けて判別するようにしたことで、周囲に存在する物体を廉価且つ簡易、軽量な構成にて精度良く障害物としての物体を検出することが可能となる。特に車両の場合、既存のヘッドライトやフロントカメラを用いることで、更に廉価な構成で精度良く障害物としての物体を検出することが可能となる。 Further, according to the vehicle safety start support device having the object detection device according to the embodiment of the present invention, the presence or absence of obstacles around the own vehicle can be captured in the imaging range based on the images captured by the front camera 11 or the rear camera 12. By distinguishing from the state of the road surface and the shadow inside, it is possible to accurately detect an object as an obstacle with an inexpensive, simple, and lightweight configuration. Especially in the case of a vehicle, by using an existing headlight or front camera, it is possible to accurately detect an object as an obstacle with a more inexpensive configuration.

また、本実施の形態の物体検出装置を有する車両の安全発進支援装置によれば、障害物の存在を判別した場合は、音声による警告に併せて、障害物が存在する車両周囲の光景を映像として出力することにより、運転者に直接的に障害物の確認を促して、更に安全な発進を促すことが可能となる。 Further, according to the safety start support device of the vehicle having the object detection device of the present embodiment, when the presence of an obstacle is determined, the scene around the vehicle in which the obstacle exists is imaged together with the warning by voice. By outputting as, it is possible to directly prompt the driver to confirm the obstacle and further promote a safe start.

更に、本実施の形態の物体検出装置を有する車両の安全発進支援装置によれば、障害物の存在を、画像の局所的な輝度の差異に基づき判別することにより、ECUのソフトウェア上の制御として実現することができ、簡易且つ低コストな構成により、運転者に自車両の安全な発進を促すことが可能となる。 Further, according to the safety start support device of the vehicle having the object detection device of the present embodiment, the presence of an obstacle is determined based on the difference in the local brightness of the image, and as a control on the software of the ECU. This can be realized, and the simple and low-cost configuration makes it possible to encourage the driver to start the vehicle safely.

更に、本実施の形態の物体検出装置を有する安全発進支援装置によれば、停車時における自車両の操舵状態を考慮することにより自車両の進行方向における障害物の存在の可能性をより高精度に判断することが可能となる。 Further, according to the safety start support device having the object detection device of the present embodiment, the possibility of the existence of an obstacle in the traveling direction of the own vehicle is more accurately determined by considering the steering state of the own vehicle when the vehicle is stopped. It becomes possible to judge.

しかしながら、本発明は上記の実施の形態に限定されるものではない。 However, the present invention is not limited to the above-described embodiment.

上記の説明においては、本発明の画像解析手段はフロントカメラ11及びリアカメラ12の制御を行うモニタECU10並びにヘッドライト51及びバックライト52の制御を行うライトECU50との組み合わせとして実現するものとしたが、本発明の画像解析手段は車両の任意のECUとして実現してもよい。更に、本発明の画像解析手段としてのモニタECU10が取得する、撮像手段から取得する情報以外の種々の情報は、上記の実施の形態に具体的に記載されたEUC等の構成を介してのみ基づくもので無く、車両の個別具体的な構成に基づき任意のECU、センサその他のハードウェアから取得されるものであってよい。 In the above description, the image analysis means of the present invention is realized as a combination of the monitor ECU 10 that controls the front camera 11 and the rear camera 12 and the light ECU 50 that controls the headlight 51 and the backlight 52. , The image analysis means of the present invention may be realized as an arbitrary ECU of the vehicle. Further, various information other than the information acquired from the image pickup means acquired by the monitor ECU 10 as the image analysis means of the present invention is based only on the configuration of the EUC or the like specifically described in the above embodiment. It may be obtained from any ECU, sensor or other hardware based on the individual specific configuration of the vehicle.

更に、上記の説明においては、本発明の撮像手段はフロントカメラ11及びリアカメラ12の双方を備えたものとしたが、いずれか一方のみを備えるものとしてもよい。更に、車両の左右側面の両方またはいずれか一方を撮像するカメラを単体又は組み合わせて備える構成としてもよい。 Further, in the above description, the imaging means of the present invention includes both the front camera 11 and the rear camera 12, but it may be provided with only one of them. Further, a camera that captures both or one of the left and right sides of the vehicle may be provided alone or in combination.

更に、上記の説明においては、第2の画像を取得する際にヘッドライト51又はバックライト52はそれぞれ左右一対の光源を同時に照明してフロントカメラ11又はリアカメラ12を撮像するものとしたが、左右いずれか一方を順に照明してその都度撮像するものとしてもよい。この場合、補正領域Rcに隣接するサブ領域SBRとの輝度の変化量をより大きく評価して、検出の精度を高めることが可能となる。 Further, in the above description, when the second image is acquired, the headlight 51 or the backlight 52 illuminates a pair of left and right light sources at the same time to image the front camera 11 or the rear camera 12. Either the left or right side may be illuminated in order and an image may be taken each time. In this case, it is possible to evaluate the amount of change in brightness from the sub-region SBR adjacent to the correction region Rc to a larger extent and improve the detection accuracy.

更に、上記の説明においては、本発明の照明手段はそれぞれ左右一対のヘッドライト51及びバックライト52の双方を備えたものとしたが、ヘッドライト51又はバックライト52のいずれか一方のみを備えるものとしてもよい。更に、ヘッドライト51及びバックライト52のそれぞれについて、単一の光源を有する構成であるとしてもよい。更に、車両のヘッドライト又はバックライトと独立した光源であるとしてもよい。 Further, in the above description, the lighting means of the present invention is provided with both the left and right headlights 51 and the backlight 52, respectively, but is provided with only one of the headlights 51 and the backlight 52. May be. Further, each of the headlight 51 and the backlight 52 may have a single light source. Further, it may be a light source independent of the headlight or backlight of the vehicle.

更に、上記の説明においては、本発明の物体検出装置の画像解析手段としてのモニタECUは、輝度が予め定めた閾値以下のサブ領域SBRが見いだされたか否かの判断により標的領域Rtを設定するものとしたが、閾値以上のサブ領域SBRの有無を対象としてもよい。この場合は、表面に光沢を有し、路上よりも反射率の大きな物体を検知することが可能となる。 Further, in the above description, the monitor ECU as an image analysis means of the object detection device of the present invention sets the target region Rt by determining whether or not a sub-region SBR whose brightness is equal to or less than a predetermined threshold value is found. However, the presence or absence of the sub-region SBR above the threshold value may be targeted. In this case, it is possible to detect an object having a glossy surface and a higher reflectance than on the road.

更に、上記の説明においては、本発明の物体検出装置は、車両の安全発進支援装置に組み込まれて、車両発進時の障害物としての物体を検知するものとしたが、車両以外の乗り物、輸送機器一般に組み込んでもよいし、単体で、異物、侵入者等の物体を検知する、建造物や路上の警備等に用いるものとしてもよい。 Further, in the above description, the object detection device of the present invention is incorporated in the safety start support device of the vehicle to detect an object as an obstacle when the vehicle starts, but a vehicle other than the vehicle and transportation The device may be incorporated in general, or may be used alone for detecting objects such as foreign objects and intruders, and for guarding buildings and roads.

以上のように、本発明は、物体検出装置であって、撮像手段と、前記撮像手段による撮像範囲内を照明する照明手段と、前記撮像手段が撮像した画像を複数の領域に分割して各々の領域の輝度を取得する画像解析手段を備え、前記画像解析手段は、前記照明手段を動作させない状態で前記撮像手段が撮像して得た第1の画像から検出した前記複数の領域の各々の第1の輝度と、前記照明手段を動作させた状態で前記撮像手段が撮像した第2の画像から検出した前記複数の領域の各々の輝度とを取得し、前記第1の画像において他の領域と輝度が異なる標的領域が検出され、且つ前記第2の画像において前記標的領域の位置と前記照明手段の照明範囲とに基づき定められる補正領域の輝度が前記補正領域に隣接する領域より減少していることが検出された場合は、撮像範囲内の前記標的領域に対応する位置に物体が存在すると判断するものであればよく、その他の具体的な目的、用途、構成によって限定されるものではない。 As described above, the present invention is an object detection device, in which an imaging means, an illuminating means that illuminates the imaging range of the imaging means, and an image captured by the imaging means are divided into a plurality of regions, respectively. Each of the plurality of regions detected from the first image obtained by the imaging means in a state where the lighting means is not operated is provided with the image analysis means for acquiring the brightness of the region. The first brightness and the brightness of each of the plurality of regions detected from the second image captured by the imaging means while the lighting means is operated are acquired, and the other regions in the first image are acquired. A target region having a brightness different from that of the correction region is detected, and the brightness of the correction region determined based on the position of the target region and the illumination range of the lighting means in the second image is reduced from the region adjacent to the correction region. When it is detected, it is sufficient as long as it is determined that the object exists at a position corresponding to the target area within the imaging range, and the present invention is not limited to other specific purposes, uses, and configurations. ..

したがって、本発明は、その要旨を逸脱しない範囲内であれば、以上説明したものを含め、上記実施の形態に種々の変更を加えたものとして実施してもよい。 Therefore, the present invention may be carried out as if various modifications were made to the above-described embodiment, including those described above, as long as the invention does not deviate from the gist thereof.

以上のような本発明は、周囲に存在する物体を安価且つ簡易な構成にて精度良く検出することが可能になるという効果を奏し、例えば例えば自動車等の車両の発進を安全に行わせるための安全発進支援への適用において有用である。 The present invention as described above has the effect of enabling accurate detection of surrounding objects with an inexpensive and simple configuration, for example, for safely starting a vehicle such as an automobile. It is useful in application to safe start support.

1 車両の安全発進支援装置
10 モニタECU
11 フロントカメラ
12 リアカメラ
13 映像表示装置
14 音声出力装置
20 ボディECU
30 VSCECU
40 エンジン制御ECU
50 ライトECU
51 ヘッドライト
52 バックライト
60 通信バス
1 Vehicle safety start support device 10 Monitor ECU
11 Front camera 12 Rear camera 13 Video display device 14 Audio output device 20 Body ECU
30 VSCECU
40 Engine control ECU
50 Light ECU
51 Headlight 52 Backlight 60 Communication bus

Claims (1)

撮像手段と、
前記撮像手段による撮像範囲内を照明する照明手段と、
前記撮像手段が撮像した画像を複数の領域に分割して各々の領域の輝度を取得する画像解析手段を備え、
前記画像解析手段は、
前記照明手段を動作させない状態で前記撮像手段が撮像して得た第1の画像から検出した前記複数の領域の各々の第1の輝度と、前記照明手段を動作させた状態で前記撮像手段が撮像した第2の画像から検出した前記複数の領域の各々の輝度とを取得し、
前記第1の画像において他の領域と輝度が異なる標的領域が検出され、且つ前記第2の画像において前記標的領域の位置と前記照明手段の照明範囲とに基づき定められる補正領域の輝度が前記補正領域に隣接する領域より減少していることが検出された場合は、撮像範囲内の前記標的領域に対応する位置に物体が存在すると判断する、
物体検出装置。
Imaging means and
An illumination means that illuminates the inside of the imaging range by the imaging means
An image analysis means for dividing an image captured by the imaging means into a plurality of regions and acquiring the brightness of each region is provided.
The image analysis means
The first brightness of each of the plurality of regions detected from the first image obtained by the imaging means in a state where the lighting means is not operated, and the imaging means in a state where the lighting means is operated. The brightness of each of the plurality of regions detected from the captured second image is acquired.
In the first image, a target region having a brightness different from that of the other regions is detected, and in the second image, the brightness of the correction region determined based on the position of the target region and the illumination range of the lighting means is corrected. When it is detected that the amount is less than the area adjacent to the area, it is determined that the object exists at a position corresponding to the target area within the imaging range.
Object detector.
JP2019060248A 2019-03-27 2019-03-27 Object detection device Pending JP2020160846A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019060248A JP2020160846A (en) 2019-03-27 2019-03-27 Object detection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019060248A JP2020160846A (en) 2019-03-27 2019-03-27 Object detection device

Publications (1)

Publication Number Publication Date
JP2020160846A true JP2020160846A (en) 2020-10-01

Family

ID=72643523

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019060248A Pending JP2020160846A (en) 2019-03-27 2019-03-27 Object detection device

Country Status (1)

Country Link
JP (1) JP2020160846A (en)

Similar Documents

Publication Publication Date Title
US8566017B2 (en) Driving support apparatus for vehicle
EP2150437B1 (en) Rear obstruction detection
KR101816423B1 (en) Displaying apparatus replacing side mirror and method for controlling output brightness thereof
US8310662B2 (en) Method for detecting misalignment of a vehicle headlight using a camera
KR101030211B1 (en) System and method for detecting road and object
WO2014188903A1 (en) Lighting control device
JP2018116516A (en) Vehicle warning device
JP2013147112A (en) Vehicle driving environment recognition apparatus
JP2006522973A (en) Parking assistance device for vehicles
US20150291097A1 (en) Method for detecting an object in an environmental region of a motor vehicle by means of a camera system of the motor vehicle, camera system and motor vehicle
JP3872179B2 (en) Vehicle collision prevention device
US11260794B2 (en) Periphery monitoring device
KR20200013521A (en) Vehicle and controlling method of vehicle
JP4731177B2 (en) Infrared imaging display device and infrared imaging display method for vehicle
JP4730589B2 (en) Vehicle perimeter monitoring system
KR101627500B1 (en) Vehicle assistance apparatus and Method of thereof
US11214197B2 (en) Vehicle surrounding area monitoring device, vehicle surrounding area monitoring method, vehicle, and storage medium storing program for the vehicle surrounding area monitoring device
JP2004349926A (en) Obstacle detection apparatus and method, and program for obstacle detection
JP2010092171A (en) Vehicle location warning method and vehicle location warning device
CN109835258A (en) It is indicated based on communication without illumination vehicle
WO2015190052A1 (en) Preceding condition determination apparatus
JP2020160846A (en) Object detection device
JP2014016962A (en) Vehicle perimeter monitoring system
JP2016074312A (en) Display system for interior of vehicle
JP2022068233A (en) Support system