JP2006185410A - Nighttime mobile object notification device and nighttime mobile object notification method - Google Patents
Nighttime mobile object notification device and nighttime mobile object notification method Download PDFInfo
- Publication number
- JP2006185410A JP2006185410A JP2005157510A JP2005157510A JP2006185410A JP 2006185410 A JP2006185410 A JP 2006185410A JP 2005157510 A JP2005157510 A JP 2005157510A JP 2005157510 A JP2005157510 A JP 2005157510A JP 2006185410 A JP2006185410 A JP 2006185410A
- Authority
- JP
- Japan
- Prior art keywords
- oncoming vehicle
- marking light
- moving body
- vehicle
- detecting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Lighting Device Outwards From Vehicle And Optical Signal (AREA)
Abstract
Description
本発明は、夜間に車両の運転者に対して歩行者などの移動体の存在を知らせる夜間移動体報知装置及びその方法に関する。 The present invention relates to a nighttime moving body notification apparatus and method for informing a vehicle driver of the presence of a moving body such as a pedestrian at night.
従来、防犯を目的として住宅の庭や建造物の中等に不法に侵入した侵入者に対してスポットライトの光を照射して追従し、威嚇または警告する防犯システムがあった。 2. Description of the Related Art Conventionally, there has been a crime prevention system for intimidating or warning by irradiating a spotlight to an intruder who has illegally entered a house garden or building for the purpose of crime prevention.
このような防犯システムでは、不特定の移動体の位置を検出してスポットライトを照射する移動体追従スポットライト制御装置が利用されており、このような移動体追従スポットライト制御装置の従来例としては、例えば特開2002−83383号公報(特許文献1)が開示されている。 In such a crime prevention system, a moving body following spotlight control device that detects the position of an unspecified moving body and irradiates a spotlight is used. As a conventional example of such a moving body following spotlight control device, JP-A-2002-83383 (Patent Document 1) is disclosed, for example.
この従来例では、非接触センサにより移動体の位置を検出し、この検出結果に基づいて演算処理を行ってスポットライトを照射する位置を決定し、スポットライトを移動体に向けて照射するというものであった。
しかしながら、上述した特許文献1に開示された従来例では、防犯システムのために開発された装置であるために、車両に適用すると以下のような課題を生じることになる。
However, since the conventional example disclosed in
まず、対向車の近傍に歩行者などの移動体が存在した場合には、歩行者だけでなく対向車にもスポットライトを照射してしまうので、対向車の運転者を眩惑してしまう。 First, when a moving body such as a pedestrian exists in the vicinity of an oncoming vehicle, not only the pedestrian but also the oncoming vehicle is irradiated with a spotlight, which dazzles the driver of the oncoming vehicle.
そこで、対向車への眩惑を防止するために、対向車を検知したときにスポットライトの照射を停止することも考えられるが、対向車の周辺に歩行者が存在しているにも関わらず、その存在を自車の運転者に報知できないことになる。 Therefore, in order to prevent dazzling oncoming vehicles, it may be possible to stop spotlight irradiation when an oncoming vehicle is detected, but despite the presence of pedestrians around oncoming vehicles, That presence cannot be notified to the driver of the vehicle.
したがって、対向車の運転者に眩惑を与えずに対向車周辺にいる歩行者の存在を自車の運転者に報知することは困難であった。 Therefore, it has been difficult to notify the driver of the own vehicle of the presence of a pedestrian in the vicinity of the oncoming vehicle without dazzling the driver of the oncoming vehicle.
一方、装置を搭載した車両の運転者は前方の道路状況を監視するだけではなく、後方、側方、車内等さまざまな確認行動を常時行う必要があるために、単に歩行者などの移動体にスポットライトを照射しただけでは、気づかない場合がある。 On the other hand, the driver of the vehicle equipped with the device not only monitors the road conditions ahead, but also needs to constantly perform various confirmation actions such as backward, sideways, in the car, etc. It may not be noticed only by irradiating with a spotlight.
さらに、対向車のヘッドライトによって中央分離帯付近の歩行者の存在が消失してしまうこともある。 Furthermore, the presence of pedestrians near the median strip may be lost by the headlights of oncoming vehicles.
したがって、スポットライトを照射するだけではなく、歩行者などの存在を知らせるために、何か別の手段によって知らせることも必要となっていた。 Therefore, it is necessary not only to irradiate the spotlight but also to notify by some other means in order to notify the presence of a pedestrian or the like.
上述した課題を解決するために、本発明の夜間移動体報知装置は、自車の周囲を移動する移動体の存在を運転者に報知する夜間移動体報知装置であって、自車周辺の移動体を検出する移動体検出手段と、前記移動体検出手段の検出結果に基づいて、前記運転者への報知対象となる報知対象移動体を検出して位置を求める報知対象位置検出手段と、前記報知対象位置検出手段により検出された前記報知対象移動体の位置にマーキング光を照射するマーキング光照射手段と、前記移動体検出手段の検出結果に基づいて、対向車の有無を検出して位置を求める対向車位置検出手段と、前記対向車位置検出手段により対向車が検出されたときには、前記対向車の位置に基づいて前記マーキング光の照射位置を決定するマーキング光制御手段とを備えることを特徴とする。 In order to solve the above-described problem, a nighttime mobile body alarm device according to the present invention is a nighttime mobile body alarm device that notifies a driver of the presence of a mobile body that moves around the host vehicle, and is configured to move around the host vehicle. A moving body detecting means for detecting a body; a notification target position detecting means for detecting a position by detecting a notification target moving body that is a notification target to the driver based on a detection result of the moving body detecting means; Based on the detection result of the moving body detecting means, the marking light irradiating means for irradiating marking light to the position of the informing target moving body detected by the informing target position detecting means, and detecting the position of the oncoming vehicle Oncoming vehicle position detection means to be obtained, and marking light control means for determining an irradiation position of the marking light based on the position of the oncoming vehicle when an oncoming vehicle is detected by the oncoming vehicle position detection means. And wherein the door.
また、本発明の夜間移動体報知方法は、自車の周囲を移動する移動体の存在を運転者に報知する夜間移動体報知方法であって、自車周辺の移動体を検出する移動体検出ステップと、前記移動体検出ステップの検出結果に基づいて、前記運転者への報知対象となる報知対象移動体を検出して位置を求める報知対象位置検出ステップと、前記報知対象位置検出ステップにより検出された前記報知対象移動体の位置にマーキング光を照射するマーキング光照射ステップと、前記移動体検出ステップの検出結果に基づいて、対向車の有無を検出して位置を求める対向車位置検出ステップと、前記対向車位置検出ステップにより対向車が検出されたときには、前記対向車の位置に基づいて前記マーキング光の照射位置を決定するマーキング光制御ステップとを含むことを特徴とする。 Further, the nighttime moving body notification method of the present invention is a nighttime moving body notification method for notifying the driver of the presence of a moving body that moves around the own vehicle, and detecting the moving body around the own vehicle. Detected by a notification target position detection step for detecting a position by detecting a notification target mobile body to be notified to the driver based on a detection result of the step, and a detection target position detection step. Marking light irradiating step for irradiating marking light to the position of the notified moving body, and an oncoming vehicle position detecting step for detecting the presence of an oncoming vehicle based on the detection result of the moving body detecting step When the oncoming vehicle is detected by the oncoming vehicle position detecting step, a marking light control step for determining an irradiation position of the marking light based on the position of the oncoming vehicle. Characterized in that it comprises and.
本発明に係る夜間移動体報知装置及びその方法では、対向車の位置に基づいてマーキング光の照射位置を決定するので、対向車の運転者に眩惑を与えることなく歩行者などの移動体にマーキング光を照射して自車の運転者に移動体の存在を報知することができる。 In the nighttime moving body notification device and method according to the present invention, the irradiation position of the marking light is determined based on the position of the oncoming vehicle, so that marking is performed on a moving body such as a pedestrian without dazzling the driver of the oncoming vehicle. The presence of the moving body can be notified to the driver of the own vehicle by irradiating light.
以下、本発明に係わる夜間移動体報知装置及び夜間移動体報知方法を実施するための最良の形態となる実施例について説明する。 DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiments that are the best mode for carrying out a nighttime mobile body notification device and a nighttime mobile body notification method according to the present invention will be described below.
以下、本発明の実施例1を図面に基づいて説明する。図1は実施例1に係る夜間移動体報知装置の構成を示すブロック図である。図1に示すように、本実施例の夜間移動体報知装置1は、当該装置が搭載された自車周辺の歩行者や対向車などの移動体15を検出する赤外線カメラ(移動体検出手段)2と、赤外線カメラ2の検出結果に基づいて、運転者への報知対象となる報知対象移動体、例えば歩行者を検出して、その位置を求める報知対象位置検出部(報知対象位置検出手段)3と、赤外線カメラ2の検出結果に基づいて、対向車の有無を検出して位置を求める対向車位置検出部(対向車位置検出手段)4と、対向車位置検出部4により対向車が検出されたときには、検出された対向車の位置に基づいてマーキング光の照射位置を決定するマーキング光制御部(マーキング光制御手段)5と、報知対象位置検出部3により検出された歩行者の位置にマーキング光を照射するランプユニット(マーキング光照射手段)6と、ランプユニット6を水平方向に回転させる回転モータ7と、ランプユニット6から照射されるマーキング光を遮断して制限する赤外フィルタ8(マーキング光制限手段)と、この赤外フィルタ8を上下方向に移動させてマーキング光の遮蔽量を制御する遮蔽モータ9と、報知対象位置検出部3によって歩行者が検出されると、歩行者の画像を表示して警報を発するモニタ(報知警報手段)10とを備えている。
そして、対向車位置検出部4は自車の車速センサ11と舵角センサ12と接続されている。
The oncoming vehicle position detection unit 4 is connected to the
ここで、赤外線カメラ2は、1秒間に10枚程度自車周辺を撮影して所定温度の物体を所定の輝度値で表示した画像として検出し、自車周辺に存在する移動体、例えば歩行者や対向車を検出する。ただし、ここでは赤外線カメラを一例として説明するが、移動体を検出できるものであれば、近赤外領域に感度を有する可視カメラやレーザレーダ、超音波や電磁波による障害物検出手段であってもよい。さらに、歩行者や対向車までの距離を正確に測定する必要がある場合には、ミリ波レーダを用いて距離を測定することにより性能を向上させることができる。 Here, the infrared camera 2 captures around 10 vehicles per second, detects an object having a predetermined temperature as an image displayed with a predetermined luminance value, and detects a moving object such as a pedestrian existing around the vehicle. Or oncoming vehicles. However, although an infrared camera is described here as an example, a visible camera or laser radar having sensitivity in the near-infrared region, or an obstacle detection means using ultrasonic waves or electromagnetic waves can be used as long as it can detect a moving body. Good. Furthermore, when it is necessary to accurately measure the distance to a pedestrian or an oncoming vehicle, the performance can be improved by measuring the distance using a millimeter wave radar.
報知対象位置検出部3は、赤外線カメラ2で撮影された画像に基づいて、運転者への報知対象となる移動体を検出する。例えば、歩行者を検出する場合には、歩行者に相当する大きさの遠赤外線を発する物体が存在するか否かにより判断する。ただし、本実施例では報知対象移動体として歩行者の場合を例にして説明するが、歩行者以外でも自転車やバイク、車両などを報知対象移動体として検出してもよい。 The notification target position detection unit 3 detects a moving body that is a notification target to the driver based on the image captured by the infrared camera 2. For example, when detecting a pedestrian, the determination is made based on whether or not there is an object emitting far-infrared rays having a size corresponding to the pedestrian. However, in the present embodiment, the case of a pedestrian is described as an example of the notification target moving body, but a bicycle, a motorcycle, a vehicle, or the like may be detected as the notification target moving body other than the pedestrian.
対向車位置検出部4は、赤外線カメラ2で撮影された画像の中から対向車の画像と考えられる領域を対向車候補領域として検出し、自車の舵角と車速との関係から幾何学計算を行って対向車か、あるいは先行車であるのかを判別し、さらに距離を算出して位置を求める。また、赤外線カメラ2で撮影された画像に基づいて対向車の車体やタイヤなど各部の検出を行う。特に、赤外線カメラ2で撮影された画像において所定温度以上の領域が所定の間隔で存在するときには、その領域を対向車のヘッドライトとして認識し、所定温度以下の領域があるときには、その領域を対向車のフロントガラスとして認識する。 The oncoming vehicle position detection unit 4 detects a region that is considered to be an oncoming vehicle image from the image captured by the infrared camera 2 as an oncoming vehicle candidate region, and calculates a geometric calculation from the relationship between the steering angle of the own vehicle and the vehicle speed. To determine whether the vehicle is an oncoming vehicle or a preceding vehicle, and further calculate the distance to obtain the position. Moreover, each part, such as a vehicle body and a tire of an oncoming vehicle, is detected based on the image image | photographed with the infrared camera 2. FIG. In particular, when an area photographed by the infrared camera 2 has a region of a predetermined temperature or higher at a predetermined interval, the region is recognized as a headlight of an oncoming vehicle. Recognize as a car windshield.
マーキング光制御部5は、報知対象位置検出部3で検出された歩行者の位置に基づいて回転モータ7を制御してランプユニット6を水平方向に回転させて、歩行者にマーキング光が照射されるように制御する。さらに、対向車位置検出部4で検出された対向車の位置と対向車の運転者の位置とに基づいて、遮蔽モータ9を制御して赤外フィルタ8を上下に移動させてマーキング光の遮蔽量を制御する。特に、マーキング光の照射位置が対向車の位置と重なるときには、対向車の運転者の位置以外の領域をマーキング光の照射領域として設定する。また、対向車位置検出部4でヘッドライトの位置が検出されたときには、検出されたヘッドライトの位置以下にマーキング光を照射するように制御する。さらに、対向車位置検出部4によりフロントガラスの位置が検出されたときには、フロントガラス以外の領域をマーキング光の照射領域として設定する。
The marking
また、自車の走行速度に応じてマーキング光の照射光量を制御する。例えば、車速が高いときにはマーキング光の照射光量を増大させる。さらに、夜間、夕暮れ、昼間など自車の周囲の光量に応じて、マーキング光の照射光量を変化させても良いし、雨や霧、雪など天候に応じて変化させても良い。 Moreover, the irradiation light quantity of marking light is controlled according to the traveling speed of the own vehicle. For example, when the vehicle speed is high, the amount of marking light applied is increased. Further, the amount of marking light emitted may be changed according to the amount of light around the vehicle such as at night, dusk, and daytime, or may be changed according to the weather such as rain, fog, and snow.
ランプユニット6は、ハロゲンランプ等の光源、光源を点灯させるための回路、光源から発せられる光の照射範囲を絞る光学係、これらを収納する本体等から構成され、マーキング光制御部5からの指令に基づいてマーキング光を歩行者に向かって照射する。
The lamp unit 6 includes a light source such as a halogen lamp, a circuit for turning on the light source, an optical unit that narrows an irradiation range of light emitted from the light source, a main body that stores these, and the like, and a command from the marking
回転モータ7は、マーキング光制御部5の制御に基づいてランプユニット6を水平方向に回転させて、マーキング光が歩行者に照射されるようにする。
The
赤外フィルタ8は、ランプユニット6の前面に配置され、ランプユニット6からのマーキング光のうち所定領域の可視光を遮断して赤外光のみを透過させる。
The
遮蔽モータ9は、マーキング光制御部5の制御に基づいて赤外フィルタ8を図中の矢印A方向に所定量だけ移動させることによって、赤外フィルタ8によるマーキング光の遮蔽量を制御する。
The
モニタ10は、車室内に設置されており、報知対象位置検出部3によって歩行者が検出されると、赤外線カメラ2で撮影された歩行者の画像を表示するとともに、所定の警報を発して運転者に歩行者の存在を報知する。また、白線を検出する可視カメラを別に設置して自車線を特定し、自車線の内と外で歩行者に対する警報を変化させても良い。
The
次に、本実施例に係る夜間移動体報知装置1による夜間移動体報知処理を図2のフローチャートに基づいて説明する。
Next, the nighttime mobile body notification process by the nighttime mobile
まず、自車の運転者によって夜間移動体報知装置1のシステムのスイッチがONされると(S201)、夜間移動体報知装置1は動作を開始して車速センサ11及び舵角センサ12から自車の舵角と車速を取得する(S202)。
First, when the driver of the own vehicle turns on the system switch of the nighttime mobile body alarm device 1 (S201), the nighttime mobile
次に、夜間移動体報知装置1は赤外線カメラ2で撮影された画像を1フレーム取り込む(S203)。ここで、自車前方の状況を図3に基づいて説明する。
Next, the nighttime moving
図3に示すように、自車は車線30を走行中であり、その右側にはセンターライン31を挟んで反対車線32が位置し、反対車線32上を対向車33が前方から自車方向に向かって走行してきている。そこに、歩行者34が反対車線32側から自車線30へと横断してきたところであり、ちょうどセンターライン31付近に位置している。
As shown in FIG. 3, the own vehicle is traveling in the
次に、この状況において、対向車33の前部を撮影した赤外線カメラ2の画像を図4に示す。図4では一例として対向車が大型トラックである場合について説明する。図4に示すように、対向車33の車体41にはバンパ42、タイヤ43、2つのヘッドライト44、フロントガラス45が配置されている。車体41の下部の路面にはエンジン熱の路面からの反射46が撮影されている。
Next, in this situation, an image of the infrared camera 2 that images the front part of the oncoming
このように撮影された赤外線カメラ2の画像では、温度の最も低い10℃の物体の検出輝度値を0、温度の最も高い35℃の物体の検出輝度値を255とし、10℃から35℃までの間を256段階で検出している。また、温度が10℃より低い物体については検出輝度値0、温度が35℃を超える物体については検出輝度値255で固定して出力している。 In the image of the infrared camera 2 photographed in this way, the detected luminance value of the object having the lowest temperature of 10 ° C. is set to 0, and the detected luminance value of the object having the highest temperature of 35 ° C. is set to 255, from 10 ° C. to 35 ° C. Is detected in 256 stages. Further, an object whose temperature is lower than 10 ° C. is output with a detection luminance value of 0, and an object whose temperature exceeds 35 ° C. is output with a detection luminance value of 255 fixed.
そして、図4で示した車体各部の検出輝度値は、季節や時間帯による相違はあるものの走行実験の結果により、およそ次のように出力される。車体41の検出輝度値は128、バンパ42は128、タイヤ43は40、ヘッドライト44は255、フロントガラス45は40、エンジン熱の路面からの反射46は200の輝度値でそれぞれ検出される。
The detected luminance value of each part of the vehicle body shown in FIG. 4 is output as follows according to the result of the running experiment, although there are differences depending on the season and time zone. The detected luminance value of the
次に、対向車候補領域の有無を判定する(S204)。この判定では、対向車候補領域の抽出と、抽出された領域が先行車であるのか、対向車であるのかの判別の2つのステップから判定される。 Next, the presence / absence of an oncoming vehicle candidate area is determined (S204). In this determination, determination is made from two steps: extraction of an oncoming vehicle candidate region and determination of whether the extracted region is a preceding vehicle or an oncoming vehicle.
まず、赤外線カメラ2で撮影した画像を輝度値60以上で抽出するという条件で2値化を行い、対向車候補領域の抽出を行う。ただし、この輝度値は季節や時間帯により異なるので、各条件下において最適な輝度しきい値を決める必要がある。 First, binarization is performed on the condition that an image captured by the infrared camera 2 is extracted with a luminance value of 60 or more, and an oncoming vehicle candidate area is extracted. However, since this luminance value varies depending on the season and time zone, it is necessary to determine an optimal luminance threshold value under each condition.
図5に輝度値60以上で抽出するという条件で2値化を行った場合の2値化後の画像を示す。図5に示すように、対向車33の各部の中でタイヤ43とフロントガラス45は輝度値が低いので抽出されず、その他の車体41、バンパ42、ヘッドライト44、エンジン熱の路面からの反射46の各部は抽出されて図5では黒く表示されている。
FIG. 5 shows an image after binarization when binarization is performed under the condition of extracting with a luminance value of 60 or more. As shown in FIG. 5, the
これら抽出された部分の中で車体41、バンパ42、ヘッドライト44は連続しているので対向車候補領域として抽出されてグルーピング処理が行われ、一方エンジン熱の路面からの反射46は対向車候補領域とは不連続であること、尚且つ対向車候補領域の下部に位置することからエンジン熱の路面からの反射としての標識が付与される。ここで、標識を付与するとは、対象となる領域の画像データと、標識となる情報とを関連付けて記憶することをいう。
Since the
次に、対向車候補領域に対してステップS202で取得した自車の舵角と車速とを利用して幾何学計算を行い、自車の進行方向とのずれ量に基づいて対向車候補領域が自車に先行する車両であるのか、あるいは対向車であるのかを判定する。対向車候補領域が対向車であると判定されたときには、対向車候補領域に対向車の標識を付与する(S205)。 Next, geometric calculation is performed on the oncoming vehicle candidate region using the steering angle and the vehicle speed of the own vehicle acquired in step S202, and the oncoming vehicle candidate region is determined based on the amount of deviation from the traveling direction of the own vehicle. It is determined whether the vehicle precedes the host vehicle or an oncoming vehicle. When it is determined that the oncoming vehicle candidate region is an oncoming vehicle, a sign of an oncoming vehicle is assigned to the oncoming vehicle candidate region (S205).
次に、赤外線カメラ2で撮影した画像を輝度値170以上で抽出するという条件で2値化を行ってヘッドライトの有無を識別する(S206)。 Next, binarization is performed under the condition that an image captured by the infrared camera 2 is extracted with a luminance value of 170 or more, and the presence or absence of the headlight is identified (S206).
ここで、図6に輝度値170以上で抽出して2値化を行った場合の2値化後の画像を示す。図6に示すように、撮影した画像の中で輝度値が170以上となるのはヘッドライト44の領域とエンジン熱の路面からの反射46の領域であるが、これらの領域うち対向車候補領域の中にあるヘッドライト44の領域が抽出され、さらに2つのヘッドライト領域の面積重心間距離Bを計測して、この距離が1.4m±0.3mの範囲内の値であれば、ヘッドライトの標識を付与する(S207)。面積重心間距離Bの計測方法としては、車両直下の路面の、画像上の上下位置を計算する。路面が平面であることから、この紙面において、上に存在する路面上の物体は遠方に位置し、下に存在する路面上の物体は近傍に位置する。このことを利用して、車両直下に存在する、エンジン熱の路面からの反射46の画像の紙面での上下位置を計算することで車両までの距離が算出される。車両までの距離と、画像上のヘッドライト44の領域間の画素間隔とにより距離Bを算出する。
Here, FIG. 6 shows an image after binarization when binarization is performed by extracting with a luminance value of 170 or more. As shown in FIG. 6, in the captured image, the luminance value of 170 or more is the area of the
次に、赤外線カメラ2で撮影した画像を輝度値60以下で抽出するという条件で2値化を行ってフロントガラスの有無を識別する(S208)。 Next, binarization is performed under the condition that an image captured by the infrared camera 2 is extracted with a luminance value of 60 or less, and the presence or absence of the windshield is identified (S208).
ここで、図7に輝度値60以下で抽出して2値化を行った場合の2値化後の画像を示す。図7に示すように、撮影した画像の中で輝度値が60以下となるのはフロントガラス45の領域とタイヤ43の領域であるが、これらの領域うち横幅が対向車候補領域の95%±5%となるフロントガラス45の領域にフロントガラスの標識を付与する(S209)。
Here, FIG. 7 shows an image after binarization when binarization is performed by extracting with a luminance value of 60 or less. As shown in FIG. 7, in the captured image, the luminance value of 60 or less is the area of the
こうして各標識の付与が完了すると、次に対向車を特定するための条件として以下の4つの条件をすべて満たすか否かを判定する(S210)。 When the application of each sign is completed in this way, it is determined whether or not all of the following four conditions are satisfied as conditions for specifying the next oncoming vehicle (S210).
(1)対向車候補領域が存在する。
(2)対向車候補領域の中にヘッドライトの標識が付与された領域が存在する。
(3)対向車候補領域の中にフロントガラスの標識が付与された領域が存在する。
(4)対向車候補領域の下にエンジン熱の路面からの反射部が存在する。
(1) An oncoming vehicle candidate area exists.
(2) There is a region to which a headlight sign is assigned in the oncoming vehicle candidate region.
(3) There is a region with a windshield sign in the oncoming vehicle candidate region.
(4) A reflection part from the road surface of engine heat exists under the oncoming vehicle candidate region.
これらの条件をアンド論理式により判断し、満たさないものがある場合にはステップS202に戻って再び上述した処理を行い、すべてを満たす場合にはフロントガラスの標識が付与された領域をフロントガラスとして認識して、この領域の位置を計算する(S211)。 If these conditions are judged by AND logic, and there is something that does not satisfy, the process returns to step S202 and the above-described processing is performed again. If all the conditions are satisfied, the region to which the windshield mark is given is used as the windshield. Recognize and calculate the position of this area (S211).
このように4つの条件をすべて満たすときにフロントガラス領域の認識を行うことにより、実際の赤外線カメラ2の画像に多くあるノイズによって誤検出してしまうことを防止することができる。ただし、設定する条件の数については必ずしも4つに設定する必要はなく、状況によっては3つ以下でもよいし、逆に5つ以上設定してもよい。例えば、条件(3)のみを満たすときにフロントガラスとして認識するようにしてもよい。 By thus recognizing the windshield region when all four conditions are satisfied, it is possible to prevent erroneous detection due to noise that is often present in the image of the actual infrared camera 2. However, the number of conditions to be set is not necessarily set to four, and may be set to three or less depending on the situation, or conversely, may be set to five or more. For example, it may be recognized as a windshield when only condition (3) is satisfied.
次に、赤外線カメラ2で撮影された画像に基づいて、報知対象位置検出部3が歩行者に相当する大きさの遠赤外線を発する物体が存在するか否かを判断し(S212)、存在しない場合にはステップS202に戻って再び上述した処理を行い、物体が存在する場合には歩行者領域の算出を行う。 Next, based on the image photographed by the infrared camera 2, the notification target position detection unit 3 determines whether or not there is an object that emits far infrared rays having a size corresponding to a pedestrian (S212). In this case, the process returns to step S202 and the above-described processing is performed again. If an object exists, the pedestrian area is calculated.
そして、算出された歩行者領域とステップS211で算出したフロントガラス領域が重複するか否かを判定する(S213)。 And it is determined whether the calculated pedestrian area | region and the windshield area | region calculated by step S211 overlap (S213).
ここで、歩行者領域とフロントガラス領域が重複する場合の状況を図8に示す。図8に示すように、フロントガラス領域81の下端の座標P0を計算し、この座標P0と歩行者領域82が重複するか否かによってフロントガラス領域81と歩行者領域82とが重複するか否かを判定する。
Here, FIG. 8 shows a situation where the pedestrian area and the windshield area overlap. As shown in FIG. 8, the coordinate P0 of the lower end of the
そして、重複する場合には、図9に示すように歩行者領域82の面積重心の位置P1にランプユニット6からのマーキング光が照射されるように回転モータ7を制御するとともに、フロントガラス領域の下端P0よりも上の領域にマーキング光が照射されないように遮蔽モータ9を制御して赤外フィルタ8を移動させて照射範囲を制限する(S214)。
And when it overlaps, while controlling the
これにより、図9に示す照射範囲91が図10に示す照射範囲101に制限されるので、対向車の運転者への眩惑を防止するとともに、歩行者にマーキング光を照射して自車の運転者に歩行者の存在を報知することができる。
As a result, the
また、このときマーキング光を照射するだけではなく、車室内のモニタ10に歩行者の映像を表示するとともに所定の警報を発するようにしても良い。これにより、対向車のフロントガラス領域と歩行者領域との重複する範囲が大き過ぎてマーキング光が制限され、マーキング光による報知が効果的でない場合でも、モニタ10に歩行者を強調して表示することによって運転者に歩行者の存在を確実に報知することができる。さらに、対向車のヘッドライトにより自車の運転者が眩惑を受けて中央分離帯付近の歩行者を消失した場合であっても、モニタ10に歩行者が表示されるので、自車の運転者は確実に歩行者を認知することができる。
At this time, not only the marking light is irradiated, but also a pedestrian image may be displayed on the
また、上述した実施例では赤外フィルタ8によってマーキング光の照射を制限するような構成としたが、フロントガラス領域を避けるように照射位置を低く決定してマーキング光を照射するようにしても良い。
In the embodiment described above, the irradiation of the marking light is limited by the
さらに、マーキング光の照射を制限する領域については、対向車のフロントガラス領域ではなく、対向車候補領域をすべてマーキング光の照射制限領域とすることもできる。これにより画像処理を簡略化することができる。 Further, as for the region where the irradiation of the marking light is restricted, the oncoming vehicle candidate region can be all the marking light irradiation restricted region, not the windshield region of the oncoming vehicle. Thereby, the image processing can be simplified.
一方、ステップS213においてフロントガラス領域81と歩行者領域82とが重複しないと判定されたときには、歩行者領域82の面積重心の位置P1にランプユニット6からマーキング光が照射されるように回転モータ7を制御する(S215)。このときの状況を図11に示す。図11に示すように面積重心の位置P1にランプユニット6からのマーキング光が照射され、これによって照射範囲111がマーキング光により照らされている。
On the other hand, when it is determined in step S213 that the
こうしてステップS214、あるいはステップS215においてマーキング光が歩行者に照射されて歩行者の報知が行われると、運転者がシステムのスイッチをOFFしたか否かを判別し(S216)、OFFされていないときにはステップS202に戻って上述した処理を繰り返して行い、OFFされたときには本実施例の夜間移動体報知装置1による夜間移動体報知処理を終了する。
Thus, when the marking light is irradiated to the pedestrian in step S214 or step S215 and the pedestrian is notified, it is determined whether or not the driver has switched off the system (S216). Returning to step S202, the above-described processing is repeated, and when it is turned off, the night-time moving body notification processing by the night-time moving
このように、本実施例に係る夜間移動体報知装置1では、対向車の位置に基づいてマーキング光の照射位置を決定するので、対向車の運転者に眩惑を与えることなく歩行者などの移動体にマーキング光を照射して自車の運転者に移動体の存在を報知することができる(請求項1、16の効果)。同様に、対向車の位置に基づいてマーキング光の照射範囲を赤外フィルタ8で制限することによって、対向車の運転者に対する眩惑防止と自車の運転者に対する歩行者の存在報知とを両立させることができる(請求項2、17の効果)。
As described above, in the nighttime moving
また、本実施例に係る夜間移動体報知装置1では、対向車の運転者の位置以外の領域をマーキング光の照射領域として設定することによって、より確実に対向車の運転者への眩惑を防止することができる(請求項3、18の効果)。
Moreover, in the nighttime mobile
さらに、本実施例に係る夜間移動体報知装置1では、対向車位置検出部4が対向車のヘッドライト位置を検出し、このヘッドライト位置以下にマーキング光を照射するので、対向車の運転者にマーキング光を照射してしまうことを確実に防止することができ、これにより対向車の運転者への眩惑を防止することができる(請求項4、19の効果)。
Furthermore, in the nighttime moving
また、本実施例に係る夜間移動体報知装置1では、赤外線カメラ2を移動体検出手段として利用し、この赤外線カメラ2で撮影された画像において所定温度以上の領域が所定の間隔で存在するときに、その領域を対向車のヘッドライトとして認識するので、確実に対向車のヘッドライト位置を検出することができ、これによって対向車の運転者への眩惑を確実に防止することができる(請求項5、20の効果)。
Moreover, in the nighttime mobile
さらに、本実施例に係る夜間移動体報知装置1では、対向車位置検出部4が対向車のフロントガラス位置を検出し、このフロントガラス位置以外の領域をマーキング光の照射領域として設定するので、対向車の運転者にマーキング光を照射してしまうことを確実に防止することができ、これにより対向車の運転者への眩惑を防止することができる(請求項6、21の効果)。
Furthermore, in the nighttime moving
また、本実施例に係る夜間移動体報知装置1では、赤外線カメラ2を移動体検出手段として利用し、この赤外線カメラ2で撮影された画像において所定温度以下の領域を対向車のフロントガラスとして認識するので、確実に対向車のフロントガラス位置を検出することができ、これによって対向車の運転者への眩惑を防止することができる(請求項7、22の効果)。
Further, in the nighttime mobile
さらに、本実施例に係る夜間移動体報知装置1では、対向車の存在を特定するための条件を設定し、この条件を所定の判別式に従って演算した演算結果に基づいて対向車の存在を認識するので、赤外線カメラ2の画像に多くあるノイズによって誤検出してしまうことを防止することができる(請求項8、23の効果)。
Furthermore, in the nighttime mobile
また、本実施例に係る夜間移動体報知装置1では、対向車の存在を特定するための条件として、対向車候補領域を検出していること、ヘッドライト領域を検出していること、フロントガラス領域を検出していること、エンジン熱の路面からの反射領域を検出していることを設定しているので、赤外線カメラ2の画像に多くあるノイズによって誤検出してしまうことをより確実に防止することができる(請求項9、24の効果)。
Moreover, in the nighttime mobile
さらに、本実施例に係る夜間移動体報知装置1では、モニタ10によって歩行者の画像を表示して警報を発するので、対向車のヘッドライトによる眩惑で中央分離帯付近にいる歩行者が消失してしまった場合でも、モニタ10に表示した歩行者の画像と警報とによって、自車の運転者は確実に歩行者の存在を認識することができる。さらに、対向車と歩行者とが自車から見て至近距離に位置するために照射制限領域が拡大し、マーキング光の照射によって十分に歩行者の存在を報知できない場合にも効果的である(請求項10、25の効果)。
Furthermore, in the nighttime moving
次に、本発明の実施例2を図面に基づいて説明する。図12は実施例2に係る夜間移動体報知装置の構成を示すブロック図である。図12に示すように、本実施例の夜間移動体報知装置101は、当該装置が搭載された自車周辺の歩行者や対向車などの移動体15を検出する遠赤外線カメラ(移動体検出手段)102と、自車前方の画像を撮影する近赤外線カメラ103と、遠赤外線カメラ102の検出結果に基づいて、運転者への報知対象となる報知対象移動体、例えば歩行者を検出して、その位置を求める報知対象位置検出部(報知対象位置検出手段)3と、遠赤外線カメラ102の検出結果に基づいて、対向車の有無を検出して位置を求める対向車位置検出部(対向車位置検出手段)4と、対向車位置検出部4により対向車が検出されたときには、検出された対向車の位置に基づいてマーキング光の照射位置を決定するマーキング光制御部(マーキング光制御手段)5と、可視レーザダイオード106及び近赤外レーザダイオード107により報知対象位置検出部3で検出された歩行者にマーキング光を照射するレーザダイオード(マーキング光照射手段)108と、レーザダイオード108で発光されたレーザ光を水平及び垂直方向に走査する二次元スキャナ109と、報知対象位置検出部3によって歩行者が検出されると、近赤外線カメラ103で撮影された歩行者の画像を表示して警報を発する報知警報部(報知警報手段)110とを備えている。そして、対向車位置検出部4は自車の車速センサ11と舵角センサ12と接続されている。
Next, a second embodiment of the present invention will be described with reference to the drawings. FIG. 12 is a block diagram illustrating the configuration of the nighttime mobile body alarm device according to the second embodiment. As shown in FIG. 12, the nighttime moving
ここで、遠赤外線カメラ102は、1秒間に10枚程度自車周辺を撮影して所定温度の物体を所定の輝度値で表示した画像として検出し、自車周辺に存在する移動体、例えば歩行者や対向車を検出する。ただし、ここでは遠赤外線カメラを一例として説明するが、移動体を検出できるものであれば、近赤外領域に感度を有する可視カメラやレーザレーダ、超音波や電磁波による障害物検出手段であってもよい。さらに、歩行者や対向車までの距離を正確に測定する必要がある場合には、ミリ波レーダを用いて距離を測定することにより性能を向上させることができる。
Here, the far-
近赤外線カメラ103は、報知対象位置検出部3によって歩行者が検出されると、検出された歩行者の画像を撮影して報知警報部110へ出力し、報知警報部110に歩行者の画像を表示させる。
When a pedestrian is detected by the notification target position detection unit 3, the near-
報知対象位置検出部3は、遠赤外線カメラ102で撮影された画像に基づいて、運転者への報知対象となる移動体を検出する。例えば、歩行者を検出する場合には、歩行者に相当する大きさの遠赤外線を発する物体が存在するか否かにより判断する。ただし、本実施例では報知対象移動体として歩行者の場合を例にして説明するが、歩行者以外でも自転車やバイク、車両などを報知対象移動体として検出してもよい。
The notification target position detection unit 3 detects a moving body that is a notification target to the driver based on an image captured by the far-
対向車位置検出部4は、遠赤外線カメラ102で撮影された画像の中から対向車の画像と考えられる領域を対向車候補領域として検出し、自車の舵角と車速との関係から幾何学計算を行って対向車か、あるいは先行車であるのかを判別し、さらに距離を算出して位置を求める。また、遠赤外線カメラ102で撮影された画像に基づいて対向車の車体やタイヤなど各部の検出を行う。特に、遠赤外線カメラ102で撮影された画像において所定温度以上の領域が所定の間隔で存在するときには、その領域を対向車のヘッドライトとして認識し、所定温度以下の領域があるときには、その領域を対向車のフロントガラスとして認識する。
The oncoming vehicle position detection unit 4 detects, as an oncoming vehicle candidate region, an area that is considered to be an oncoming vehicle image from an image captured by the far-
マーキング光制御部5は、報知対象位置検出部3で検出された歩行者の位置に基づいて二次元スキャナ109を制御してレーザダイオード108から出力されるレーザ光をマーキング光として歩行者に照射されるように制御する。さらに、対向車位置検出部4で検出された対向車の位置と対向車の運転者の位置とに基づいて、可視レーザダイオード106の照射位置と近赤外レーザダイオード107の照射位置とを制御する。特に、マーキング光の照射位置が対向車の位置と重なるときには、対向車の運転者の位置には近赤外レーザダイオード107のレーザ光を照射し、運転者の位置以外の領域には可視レーザダイオード106のレーザ光を照射する。また、対向車位置検出部4でヘッドライトの位置が検出されたときには、検出されたヘッドライトの位置以下にマーキング光を照射するように制御する。さらに、対向車位置検出部4によりフロントガラスの位置が検出されたときには、フロントガラス以外の領域をマーキング光の照射領域として設定する。
The marking
また、自車の走行速度に応じてマーキング光の照射光量を制御する。例えば、車速が高いときにはマーキング光の照射光量を増大させる。さらに、夜間、夕暮れ、昼間など自車の周囲の光量に応じて、マーキング光の照射光量を変化させても良いし、雨や霧、雪など天候に応じて変化させても良い。 Moreover, the irradiation light quantity of marking light is controlled according to the traveling speed of the own vehicle. For example, when the vehicle speed is high, the amount of marking light applied is increased. Further, the amount of marking light emitted may be changed according to the amount of light around the vehicle such as at night, dusk, and daytime, or may be changed according to the weather such as rain, fog, and snow.
レーザダイオード108は、可視レーザダイオード106と近赤外レーザダイオード107とから構成され、マーキング光制御部5からの指令に基づいてマーキング光としてのレーザ光を歩行者などの報知対象移動体に照射する。
The
二次元スキャナ109は、走査位置検出回路111とスキャナ駆動部112と反射ミラー113と固定ミラー114とから構成され、マーキング光制御部5からの指令に基づいて、スキャナ駆動部112が反射ミラー113を水平方向及び垂直方向に駆動してレーザダイオード108から出力されたレーザ光を水平及び垂直方向に走査している。そして、反射ミラー113で反射されたレーザ光は、固定ミラー114でさらに反射されて自車前方にある歩行者などの報知対象移動体に照射される。一方、走査位置検出回路111は二次元スキャナ109による水平及び垂直方向の走査位置を検出し、デジタル信号に変換した後マーキング光制御部5に信号を出力している。
The two-
報知警報部110は、車室内のセンターコンソールに配置されたナビゲーション画面120とフロントガラスに配置されたヘッドアップディスプレイ121とから構成され、報知対象位置検出部3によって歩行者が検出されると、近赤外線カメラ103で撮影された歩行者の画像を表示するとともに、所定の警報を発して運転者に歩行者の存在を報知する。また、白線を検出する可視カメラを別に設置して自車線を特定し、自車線の内と外で歩行者に対する警報を変化させても良い。
The
次に、本実施例に係る夜間移動体報知装置101による夜間移動体報知処理を図13のフローチャートに基づいて説明する。
Next, night-time moving body notification processing by the night-time moving
まず、自車の運転者によって夜間移動体報知装置101のシステムのスイッチがONされると(S1301)、夜間移動体報知装置101は動作を開始して車速センサ11及び舵角センサ12から自車の舵角と車速を取得する(S1302)。
First, when the driver of the own vehicle turns on the system switch of the nighttime mobile body alarm device 101 (S1301), the nighttime mobile
次に、夜間移動体報知装置101は遠赤外線カメラ102で撮影された画像を1フレーム取り込み(S1303)、近赤外線カメラ103で撮影された画像をナビゲーション画面120及びヘッドアップディスプレイ121に投影する(S1304)。
Next, the night moving
ここで、自車前方の状況は、実施例1の図3で説明した状況と同様であるとする。すなわち、自車は車線30を走行中であり、その右側にはセンターライン31を挟んで反対車線32が位置し、反対車線32上を対向車33が前方から自車方向に向かって走行してきている。そこに、歩行者34が反対車線32側から自車線30へと横断してきたところであり、ちょうどセンターライン31付近に位置している。
Here, it is assumed that the situation ahead of the host vehicle is the same as the situation described in FIG. That is, the host vehicle is traveling in the
次に、この状況において、対向車33の前部を撮影した遠赤外線カメラ102の画像を図4に示す。図4では一例として対向車が大型トラックである場合について説明する。図4に示すように、対向車33の車体41にはバンパ42、タイヤ43、2つのヘッドライト44、フロントガラス45が配置されている。車体41の下部の路面にはエンジン熱の路面からの反射46が撮影されている。
Next, FIG. 4 shows an image of the far-
このように撮影された遠赤外線カメラ102の画像では、温度の最も低い10℃の物体の検出輝度値を0、温度の最も高い35℃の物体の検出輝度値を255とし、10℃から35℃までの間を256段階で検出している。また、温度が10℃より低い物体については検出輝度値0、温度が35℃を超える物体については検出輝度値255で固定して出力している。
In the image of the far-
そして、図4で示した車体各部の検出輝度値は、季節や時間帯による相違はあるものの走行実験の結果により、およそ次のように出力される。車体41の検出輝度値は128、バンパ42は128、タイヤ43は40、ヘッドライト44は255、フロントガラス45は40、エンジン熱の路面からの反射46は200の輝度値でそれぞれ検出される。
The detected luminance value of each part of the vehicle body shown in FIG. 4 is output as follows according to the result of the running experiment, although there are differences depending on the season and time zone. The detected luminance value of the
次に、対向車候補領域の有無を判定する(S1305)。この判定では、対向車候補領域の抽出と、抽出された領域が先行車であるのか、対向車であるのかの判別の2つのステップから判定される。 Next, the presence / absence of an oncoming vehicle candidate area is determined (S1305). In this determination, determination is made from two steps: extraction of an oncoming vehicle candidate region and determination of whether the extracted region is a preceding vehicle or an oncoming vehicle.
まず、遠赤外線カメラ102で撮影した画像を輝度値60以上で抽出するという条件で2値化を行い、対向車候補領域の抽出を行う。ただし、この輝度値は季節や時間帯により異なるので、各条件下において最適な輝度しきい値を決める必要がある。図5に輝度値60以上で抽出するという条件で2値化を行った場合の2値化後の画像を示す。図5に示すように、対向車33の各部の中でタイヤ43とフロントガラス45は輝度値が低いので抽出されず、その他の車体41、バンパ42、ヘッドライト44、エンジン熱の路面からの反射46の各部は抽出されて図5では黒く表示されている。
First, binarization is performed under the condition that an image captured by the far-
これら抽出された部分の中で車体41、バンパ42、ヘッドライト44は連続しているので対向車候補領域として抽出されてグルーピング処理が行われ、一方エンジン熱の路面からの反射46は対向車候補領域とは不連続であること、尚且つ対向車候補領域の下部に位置することからエンジン熱の路面からの反射としての標識が付与される。ここで、標識を付与するとは、対象となる領域の画像データと、標識となる情報とを関連付けて記憶することをいう。
Since the
次に、対向車候補領域に対してステップS1302で取得した自車の舵角と車速とを利用して幾何学計算を行い、自車の進行方向とのずれ量に基づいて対向車候補領域が自車に先行する車両であるのか、あるいは対向車であるのかを判定する。対向車候補領域が対向車であると判定されたときには、対向車候補領域に対向車の標識を付与する(S1306)。 Next, geometric calculation is performed on the oncoming vehicle candidate area using the steering angle and vehicle speed of the own vehicle acquired in step S1302, and the oncoming vehicle candidate area is determined based on the amount of deviation from the traveling direction of the own vehicle. It is determined whether the vehicle precedes the host vehicle or an oncoming vehicle. When it is determined that the oncoming vehicle candidate area is an oncoming vehicle, a sign of an oncoming vehicle is assigned to the oncoming vehicle candidate area (S1306).
次に、遠赤外線カメラ102で撮影した画像を輝度値170以上で抽出するという条件で2値化を行ってヘッドライトの有無を識別する(S1307)。
Next, binarization is performed under the condition that an image captured by the far-
ここで、図6に輝度値170以上で抽出して2値化を行った場合の2値化後の画像を示す。図6に示すように、撮影した画像の中で輝度値が170以上となるのはヘッドライト44の領域とエンジン熱の路面からの反射46の領域であるが、これらの領域うち対向車候補領域の中にあるヘッドライト44の領域が抽出され、さらに2つのヘッドライト領域の面積重心間距離Bを計測して、この距離が1.4m±0.3mの範囲内の値であれば、ヘッドライトの標識を付与する(S1308)。面積重心間距離Bの計測方法としては、車両直下の路面の、画像上の上下位置を計算する。路面が平面であることから、この紙面において、上に存在する路面上の物体は遠方に位置し、下に存在する路面上の物体は近傍に位置する。このことを利用して、車両直下に存在する、エンジン熱の路面からの反射46の画像の紙面での上下位置を計算することで車両までの距離が算出される。車両までの距離と、画像上のヘッドライト44の領域間の画素間隔とにより距離Bを算出する。
Here, FIG. 6 shows an image after binarization when binarization is performed by extracting with a luminance value of 170 or more. As shown in FIG. 6, in the captured image, the luminance value of 170 or more is the area of the
次に、遠赤外線カメラ102で撮影した画像を輝度値60以下で抽出するという条件で2値化を行ってフロントガラスの有無を識別する(S1309)。
Next, binarization is performed under the condition that an image captured by the far-
ここで、図7に輝度値60以下で抽出して2値化を行った場合の2値化後の画像を示す。図7に示すように、撮影した画像の中で輝度値が60以下となるのはフロントガラス45の領域とタイヤ43の領域であるが、これらの領域のうち横幅が対向車候補領域の95%±5%となるフロントガラス45の領域にフロントガラスの標識を付与する(S1310)。
Here, FIG. 7 shows an image after binarization when binarization is performed by extracting with a luminance value of 60 or less. As shown in FIG. 7, in the captured image, the luminance value of 60 or less is the area of the
こうして各標識の付与が完了すると、次に対向車を特定するための条件として以下の4つの条件をすべて満たすか否かを判定する(S1311)。 When the assignment of each sign is completed in this way, it is determined whether or not all of the following four conditions are satisfied as conditions for specifying the next oncoming vehicle (S1311).
(1)対向車候補領域が存在する。
(2)対向車候補領域の中にヘッドライトの標識が付与された領域が存在する。
(3)対向車候補領域の中にフロントガラスの標識が付与された領域が存在する。
(4)対向車候補領域の下にエンジン熱の路面からの反射部が存在する。
(1) An oncoming vehicle candidate area exists.
(2) There is a region to which a headlight sign is assigned in the oncoming vehicle candidate region.
(3) There is a region with a windshield sign in the oncoming vehicle candidate region.
(4) A reflection part from the road surface of engine heat exists under the oncoming vehicle candidate region.
これらの条件をアンド論理式により判断し、満たさないものがある場合にはステップS1302に戻って再び上述した処理を行い、すべてを満たす場合にはフロントガラスの標識が付与された領域をフロントガラスとして認識して、この領域の位置を計算する(S1312)。 If these conditions are determined by AND logic, and there is something that does not satisfy, the process returns to step S1302, and the above-described processing is performed again. Recognize and calculate the position of this area (S1312).
このように4つの条件をすべて満たすときにフロントガラス領域の認識を行うことにより、実際の遠赤外線カメラ102の画像に多くあるノイズによって誤検出してしまうことを防止することができる。ただし、設定する条件の数については必ずしも4つに設定する必要はなく、状況によっては3つ以下でもよいし、逆に5つ以上設定してもよい。例えば、条件(3)のみを満たすときにフロントガラスとして認識するようにしてもよい。
Thus, by recognizing the windshield region when all four conditions are satisfied, it is possible to prevent erroneous detection due to noise that is abundant in the actual far-
次に、遠赤外線カメラ102で撮影された画像に基づいて、報知対象位置検出部3が歩行者に相当する大きさの遠赤外線を発する物体が存在するか否かを判断し(S1313)、存在しない場合にはステップS1302に戻って再び上述した処理を行い、物体が存在する場合には歩行者領域の算出を行う。
Next, based on the image captured by the far-
そして、算出された歩行者領域とステップS1312で算出したフロントガラス領域が重複するか否かを判定する(S1314)。ここで、歩行者領域とフロントガラス領域が重複する場合の状況を図8に示す。図8に示すように、フロントガラス領域81の下端の座標P0を計算し、この座標P0と歩行者領域82が重複するか否かによってフロントガラス領域81と歩行者領域82とが重複するか否かを判定する。
And it is determined whether the calculated pedestrian area | region and the windshield area | region calculated by step S1312 overlap (S1314). Here, FIG. 8 shows a situation where the pedestrian area and the windshield area overlap. As shown in FIG. 8, the coordinate P0 of the lower end of the
そして、重複する場合には、図9に示すように歩行者領域82の面積重心の位置P1にレーザダイオード108からのマーキング光が照射されるようにスキャナ駆動部112を制御するとともに照射制限領域を計算してマーキング光の照射を制限する(S1315)。すなわち、フロントガラス領域の下端P0よりも下の領域には可視レーザダイオード106からのレーザ光が照射されるように反射ミラー113の位置を制御し、可視レーザダイオード106をON/OFF制御する。その一方でフロントガラス領域の下端P0よりも上の領域には近赤外レーザダイオード107からのレーザ光が照射されるように反射ミラー113の位置を制御し、近赤外レーザダイオード107をON/OFF制御する。これにより、図9に示す照射範囲91は、図14に示すように上下の照射範囲141、142に分割され、フロントガラス領域と重複する照射範囲141には、人間の目には見えない近赤外レーザダイオード107からのレーザ光が照射され、これによって対向車の運転者への眩惑を防止することができる。一方、フロントガラス領域と重複しない照射範囲142には、可視レーザダイオード106からのレーザ光によって歩行者にマーキング光を照射するので、自車の運転者には歩行者の存在を報知することができる。
In the case of overlapping, as shown in FIG. 9, the
また、このときマーキング光を照射するだけではなく、車室内のナビゲーション画面120及びヘッドアップディスプレイ121に近赤外線カメラ103で撮影された歩行者の映像を表示する。ここで、画面に表示される映像を図15に示す。近赤外線カメラ103は可視光及び近赤外光の両方に感度を有するので、図15に示すように、表示される映像には可視レーザダイオード106による照射範囲と近赤外レーザダイオード107による照射範囲の両方が映し出される。
At this time, not only the marking light is emitted, but also a pedestrian image captured by the near-
さらに、フロントガラス領域と歩行者領域が重複する場合には、車室内のナビゲーション画面120及びヘッドアップディスプレイ121に歩行者の映像とともに所定の警報を発するようにしても良い。ここで、警報の一例を図16に示す。図16では、ナビゲーション画面120あるいはヘッドアップディスプレイ121に表示される映像を示しており、この画面上において歩行者領域161の水平方向の座標を検出して歩行者領域161の下部に警報マーカ162を表示している。さらに、音声により歩行者の存在を運転者に知らせている。
Furthermore, when a windshield area | region and a pedestrian area overlap, you may make it issue a predetermined | prescribed warning with the image | video of a pedestrian on the
これにより、対向車のフロントガラス領域と歩行者領域との重複する範囲が大き過ぎて可視レーザダイオード106による照射が制限され、マーキング光による報知が効果的でない場合でも、近赤外線カメラ103で撮影された画像をナビゲーション画面120及びヘッドアップディスプレイ121に表示することによって運転者に歩行者の存在を確実に報知することができる。さらに、対向車のヘッドライトにより自車の運転者が眩惑を受けて中央分離帯付近の歩行者を消失した場合であっても、ナビゲーション画面120及びヘッドアップディスプレイ121に歩行者が表示されるので、自車の運転者は確実に歩行者を認知することができる。
As a result, even if the overlapping range between the windshield area and the pedestrian area of the oncoming vehicle is too large and the irradiation by the
一方、ステップS1314において図8のフロントガラス領域81と歩行者領域82とが重複しないと判定されたときには、歩行者領域82の面積重心の位置P1にレーザダイオード108からマーキング光が照射されるように二次元スキャナ109を制御する(S1316)。このときの状況を図11に示す。図11に示すように面積重心の位置P1にレーザダイオード108からのマーキング光が照射され、これによって照射範囲111がマーキング光により照らされている。
On the other hand, when it is determined in step S1314 that the
こうしてステップS1315、あるいはステップS1316においてマーキング光が歩行者に照射されて歩行者の報知が行われると、運転者がシステムのスイッチをOFFしたか否かを判別し(S1317)、OFFされていないときにはステップS1302に戻って上述した処理を繰り返して行い、OFFされたときには本実施例の夜間移動体報知装置101による夜間移動体報知処理を終了する。
In this way, when marking light is emitted to the pedestrian in step S1315 or step S1316 and the pedestrian is notified, it is determined whether or not the driver has switched off the system (S1317). Returning to step S1302, the above-described processing is repeated, and when it is turned off, the night-time moving body notification processing by the night-time moving
このように、本実施例に係る夜間移動体報知装置101では、可視レーザダイオード106と近赤外レーザダイオード107によってマーキング光を照射するので、極めて細い光ビームのマーキング光を照射することができ、複雑な照射パターンであっても正確にマーキング光を照射することができる。これによって、より確実に自車の運転者に対して移動体の存在を報知することができる(請求項11、26の効果)。
Thus, in the night-time moving
また、本実施例に係る夜間移動体報知装置101では、マーキング光の照射位置が対向車の位置と重なるときには、対向車の運転者の位置には近赤外レーザダイオード107によるマーキング光を照射し、対向車の運転者の位置以外の領域には可視レーザダイオード106によるマーキング光を照射するので、近赤外レーザ光が人間の目には見えないことを利用して対向車の運転者に対する眩惑防止と自車の運転者に対する歩行者の存在報知とを両立させることができる(請求項12、27の効果)。
Further, in the nighttime moving
さらに、本実施例に係る夜間移動体報知装置101では、近赤外線カメラ103で撮影した画像を報知警報部110に表示するので、近赤外線カメラ103が可視レーザ光と近赤外レーザ光の両方に撮影感度を有することを利用して歩行者の画像をより鮮明に表示することができ、これによってより確実に自車の運転者に対して歩行者の存在を報知することができる(請求項15、30の効果)。
Furthermore, since the night moving
次に、本発明の実施例3を図面に基づいて説明する。図17は実施例3に係る夜間移動体報知装置の構成を示すブロック図である。図17に示すように、本実施例の夜間移動体報知装置201は、実施例2におけるレーザダイオード108と二次元スキャナ109に代えてLEDアレイ202を設置したことが異なっているだけで、その他の構成は実施例2と同一なので詳しい説明は省略する。
Next, Embodiment 3 of the present invention will be described with reference to the drawings. FIG. 17 is a block diagram illustrating the configuration of the nighttime mobile body alarm device according to the third embodiment. As shown in FIG. 17, the nighttime moving
ここで、LEDアレイ202の構成を図18及び図19に示す。図18はLEDアレイ202におけるLEDの配置を示す平面図、図19はLEDアレイ202を横から見た図である。図18に示すように、LEDアレイ202では、可視LED203と近赤外LED204とがLEDアレイ202の前面に交互に配置されている。また、図19に示すように、LEDアレイ202は、基板205の上にLED層206が形成され、その上にマイクロレンズ207が配置された構造をしている。このマイクロレンズ207は、LED層206で発光した光を平行光に絞り、自車前方に向けて照射している。また、各LEDは、それぞれが自車前方の異なる領域を照射できるように細いビーム状の光を出力しており、自車前方の同一の位置には可視LED203からの光と近赤外LED204からの光が照射されるように、マイクロレンズ207の光軸が設定されている。そして、全てのLEDを発光させたときには、自車前方の水平方向に60°、垂直方向に20°の範囲を照射することができ、この範囲内であれば可視光及び近赤外光のいずれの光であっても任意の照射パターンで照射することができる。
Here, the configuration of the
このように構成された本実施例の夜間移動体報知装置201において、自車前方に歩行者を検出したときには、マーキング光制御部5が歩行者の位置を照射することのできる可視LED203あるいは近赤外LED204を選択し、選択された可視LED203あるいは近赤外LED204が発光して歩行者領域を照射する。
In the nighttime moving
そして、歩行者領域と対向車のフロントガラス領域が重複するときには、重複する領域には近赤外LED204を選択して発光させ、重複しない領域には可視LED203を選択して発光させるようにマーキング光制御部5が制御する。
When the pedestrian area and the windshield area of the oncoming vehicle overlap, marking light is selected so that the near-
このように、本実施例に係る夜間移動体報知装置201では、可視LED203と近赤外LED204とを平面的に並べて構成したLEDアレイ202によってマーキング光を照射するように構成したので、安価のLEDアレイで装置を構成することができ、これによってコストを低減することができる(請求項13、28の効果)。
As described above, in the nighttime mobile
また、本実施例に係る夜間移動体報知装置201では、マーキング光の照射位置が対向車の位置と重なるときには、対向車の運転者の位置には近赤外LED204によるマーキング光を照射し、対向車の運転者の位置以外の領域には可視LED203によるマーキング光を照射するので、近赤外光が人間の目には見えないことを利用して対向車の運転者に対する眩惑防止と自車の運転者に対する歩行者の存在報知とを両立させることができる(請求項14、29の効果)。
Further, in the nighttime moving
以上、本発明の夜間移動体報知装置について、図示した実施例に基づいて説明したが、本発明はこれに限定されるものではなく、各部の構成は同様の機能を有する任意の構成のものに置き換えることができる。 As mentioned above, although the nighttime moving body alarm device of the present invention has been described based on the illustrated embodiment, the present invention is not limited to this, and the configuration of each part is of an arbitrary configuration having the same function. Can be replaced.
夜間に車両の運転者に対して歩行者などの移動体の存在を知らせるための夜間移動体報知装置に関し、特に対向車の運転者に眩惑を与えることなく移動体にマーキング光を照射して自車の運転者に報知するための技術として極めて有用である。 The present invention relates to a night-time moving body alarm device for informing the vehicle driver of the presence of a moving body such as a pedestrian at night, and in particular, irradiates the moving body with marking light without causing dazzling to the driver of the oncoming vehicle. This is extremely useful as a technique for notifying a driver of a car.
1、101、201 夜間移動体報知装置
2 赤外線カメラ(移動体検出手段)
3 報知対象位置検出部(報知対象位置検出手段)
4 対向車位置検出部(対向車位置検出手段)
5 マーキング光制御部(マーキング光制御手段)
6 ランプユニット(マーキング光照射手段)
7 回転モータ
8 赤外フィルタ(マーキング光制限手段)
9 遮蔽モータ
10 モニタ(報知警報手段)
11 車速センサ
12 舵角センサ
15 移動体
30 車線
31 センターライン
32 反対車線
33 対向車
34 歩行者
41 車体
42 バンパ
43 タイヤ
44 ヘッドライト
45 フロントガラス
46 エンジン熱の路面からの反射
81 フロントガラス領域
82、161 歩行者領域
102 遠赤外線カメラ(移動体検出手段)
103 近赤外線カメラ
106 可視レーザダイオード
107 近赤外レーザダイオード
108 レーザダイオード(マーキング光照射手段)
109 二次元スキャナ
110 報知警報部(報知警報手段)
111 走査位置検出回路
112 スキャナ駆動部
113 反射ミラー
114 固定ミラー
120 ナビゲーション画面
121 ヘッドアップディスプレイ
141、142 照射範囲
162 警報マーカ
202 LEDアレイ
203 可視LED
204 近赤外LED
205 基板
206 LED層
207 マイクロレンズ
1, 101, 201 Night moving body alarm device 2 Infrared camera (moving body detection means)
3 Notification target position detection unit (notification target position detection means)
4 Oncoming vehicle position detection unit (oncoming vehicle position detection means)
5 Marking light controller (marking light control means)
6 Lamp unit (marking light irradiation means)
7 Rotating
9 Shielding
11
103 near
109 Two-
111 Scanning
204 Near-infrared LED
205
Claims (30)
自車周辺の移動体を検出する移動体検出手段と、
前記移動体検出手段の検出結果に基づいて、前記運転者への報知対象となる報知対象移動体を検出して位置を求める報知対象位置検出手段と、
前記報知対象位置検出手段により検出された前記報知対象移動体の位置にマーキング光を照射するマーキング光照射手段と、
前記移動体検出手段の検出結果に基づいて、対向車の有無を検出して位置を求める対向車位置検出手段と、
前記対向車位置検出手段により対向車が検出されたときには、前記対向車の位置に基づいて前記マーキング光の照射位置を決定するマーキング光制御手段と
を備えることを特徴とする夜間移動体報知装置。 A nighttime moving body notification device that notifies a driver of the presence of a moving body that moves around the vehicle,
Moving body detecting means for detecting a moving body around the own vehicle;
Based on the detection result of the mobile body detection means, notification target position detection means for detecting the position of the notification target mobile body that is a notification target to the driver and obtaining the position;
Marking light irradiation means for irradiating marking light to the position of the notification target moving body detected by the notification target position detection means;
Oncoming vehicle position detection means for detecting the presence of an oncoming vehicle based on the detection result of the moving body detection means and obtaining the position;
A night moving object notification device comprising: marking light control means for determining an irradiation position of the marking light based on a position of the oncoming vehicle when an oncoming vehicle is detected by the oncoming vehicle position detecting means.
自車周辺の移動体を検出する移動体検出ステップと、
前記移動体検出ステップの検出結果に基づいて、前記運転者への報知対象となる報知対象移動体を検出して位置を求める報知対象位置検出ステップと、
前記報知対象位置検出ステップにより検出された前記報知対象移動体の位置にマーキング光を照射するマーキング光照射ステップと、
前記移動体検出ステップの検出結果に基づいて、対向車の有無を検出して位置を求める対向車位置検出ステップと、
前記対向車位置検出ステップにより対向車が検出されたときには、前記対向車の位置に基づいて前記マーキング光の照射位置を決定するマーキング光制御ステップと
を含むことを特徴とする夜間移動体報知方法。 A night moving body notification method for notifying the driver of the presence of a moving body that moves around the vehicle,
A moving body detection step for detecting a moving body around the vehicle;
Based on the detection result of the mobile body detection step, a notification target position detection step for detecting a notification target mobile body that is a notification target to the driver and obtaining a position;
A marking light irradiation step of irradiating marking light to the position of the notification target moving body detected by the notification target position detection step;
Based on the detection result of the moving object detection step, an oncoming vehicle position detection step for detecting the presence of an oncoming vehicle and obtaining a position;
And a marking light control step of determining an irradiation position of the marking light based on the position of the oncoming vehicle when an oncoming vehicle is detected by the oncoming vehicle position detecting step.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005157510A JP2006185410A (en) | 2004-12-02 | 2005-05-30 | Nighttime mobile object notification device and nighttime mobile object notification method |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004349705 | 2004-12-02 | ||
JP2005157510A JP2006185410A (en) | 2004-12-02 | 2005-05-30 | Nighttime mobile object notification device and nighttime mobile object notification method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006185410A true JP2006185410A (en) | 2006-07-13 |
Family
ID=36738448
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005157510A Pending JP2006185410A (en) | 2004-12-02 | 2005-05-30 | Nighttime mobile object notification device and nighttime mobile object notification method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006185410A (en) |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008110687A (en) * | 2006-10-31 | 2008-05-15 | Denso Corp | Headlamp swivel controller |
JP2008183933A (en) * | 2007-01-26 | 2008-08-14 | Toyota Motor Corp | Noctovision equipment |
JP2008230364A (en) * | 2007-03-19 | 2008-10-02 | Denso Corp | Head lamp control device |
JP2009244985A (en) * | 2008-03-28 | 2009-10-22 | Toyota Central R&D Labs Inc | Driving support device and pedestrian detecting device |
JP2009292316A (en) * | 2008-06-05 | 2009-12-17 | Toyota Central R&D Labs Inc | Object detection system |
JP2010176591A (en) * | 2009-01-30 | 2010-08-12 | Mazda Motor Corp | Display device for vehicle |
JP2012155376A (en) * | 2011-01-24 | 2012-08-16 | Sanyo Electric Co Ltd | Mobile communication device and control determination method |
EP2568413A1 (en) * | 2011-09-07 | 2013-03-13 | Autoliv Development AB | Driver assisting system and method for a motor vehicle |
JP2014058173A (en) * | 2012-08-23 | 2014-04-03 | Stanley Electric Co Ltd | Lighting control unit of vehicular headlamps and vehicular headlamp system |
JP2015182659A (en) * | 2014-03-25 | 2015-10-22 | スタンレー電気株式会社 | Radiation device |
US9977974B2 (en) | 2012-05-09 | 2018-05-22 | Denso Corporation | Method and apparatus for detecting light source of vehicle |
JPWO2019087337A1 (en) * | 2017-11-01 | 2020-04-02 | 三菱電機株式会社 | Driving support device, driving support system, and driving support method |
CN111476785A (en) * | 2020-04-20 | 2020-07-31 | 四创科技有限公司 | Night infrared light-reflecting water gauge detection method based on position recording |
CN111902315A (en) * | 2018-03-29 | 2020-11-06 | 三菱电机株式会社 | Vehicle illumination control device, vehicle illumination control method, and vehicle illumination control program |
CN112770938A (en) * | 2018-09-28 | 2021-05-07 | 株式会社小糸制作所 | Vehicle headlamp |
WO2022209125A1 (en) * | 2021-03-31 | 2022-10-06 | 富士フイルム株式会社 | Image capture control device, image capture device, image capture control method, and program |
CN117841838A (en) * | 2022-12-20 | 2024-04-09 | 南通红森微视光电科技有限公司 | Night vision device and system for vehicle |
-
2005
- 2005-05-30 JP JP2005157510A patent/JP2006185410A/en active Pending
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4548405B2 (en) * | 2006-10-31 | 2010-09-22 | 株式会社デンソー | Headlight swivel control device |
JP2008110687A (en) * | 2006-10-31 | 2008-05-15 | Denso Corp | Headlamp swivel controller |
JP2008183933A (en) * | 2007-01-26 | 2008-08-14 | Toyota Motor Corp | Noctovision equipment |
JP2008230364A (en) * | 2007-03-19 | 2008-10-02 | Denso Corp | Head lamp control device |
JP2009244985A (en) * | 2008-03-28 | 2009-10-22 | Toyota Central R&D Labs Inc | Driving support device and pedestrian detecting device |
JP2009292316A (en) * | 2008-06-05 | 2009-12-17 | Toyota Central R&D Labs Inc | Object detection system |
JP2010176591A (en) * | 2009-01-30 | 2010-08-12 | Mazda Motor Corp | Display device for vehicle |
JP2012155376A (en) * | 2011-01-24 | 2012-08-16 | Sanyo Electric Co Ltd | Mobile communication device and control determination method |
EP2568413A1 (en) * | 2011-09-07 | 2013-03-13 | Autoliv Development AB | Driver assisting system and method for a motor vehicle |
EP2698743A1 (en) * | 2011-09-07 | 2014-02-19 | Autoliv Development AB | Driver assisting system and method for a motor vehicle |
US9977974B2 (en) | 2012-05-09 | 2018-05-22 | Denso Corporation | Method and apparatus for detecting light source of vehicle |
US10839235B2 (en) | 2012-05-09 | 2020-11-17 | Denso Corporation | Method and apparatus for detecting light source of vehicle |
JP2014058173A (en) * | 2012-08-23 | 2014-04-03 | Stanley Electric Co Ltd | Lighting control unit of vehicular headlamps and vehicular headlamp system |
JP2015182659A (en) * | 2014-03-25 | 2015-10-22 | スタンレー電気株式会社 | Radiation device |
JPWO2019087337A1 (en) * | 2017-11-01 | 2020-04-02 | 三菱電機株式会社 | Driving support device, driving support system, and driving support method |
CN111902315A (en) * | 2018-03-29 | 2020-11-06 | 三菱电机株式会社 | Vehicle illumination control device, vehicle illumination control method, and vehicle illumination control program |
CN111902315B (en) * | 2018-03-29 | 2023-04-28 | 三菱电机株式会社 | Vehicle illumination control device, vehicle illumination control method, and computer-readable storage medium |
CN112770938A (en) * | 2018-09-28 | 2021-05-07 | 株式会社小糸制作所 | Vehicle headlamp |
CN111476785A (en) * | 2020-04-20 | 2020-07-31 | 四创科技有限公司 | Night infrared light-reflecting water gauge detection method based on position recording |
CN111476785B (en) * | 2020-04-20 | 2023-04-07 | 四创科技有限公司 | Night infrared light-reflecting water gauge detection method based on position recording |
WO2022209125A1 (en) * | 2021-03-31 | 2022-10-06 | 富士フイルム株式会社 | Image capture control device, image capture device, image capture control method, and program |
CN117841838A (en) * | 2022-12-20 | 2024-04-09 | 南通红森微视光电科技有限公司 | Night vision device and system for vehicle |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2006185410A (en) | Nighttime mobile object notification device and nighttime mobile object notification method | |
US12005845B2 (en) | Vehicular control system | |
JP5761002B2 (en) | Lighting control device | |
US8004425B2 (en) | Blind spot detection system and method using preexisting vehicular imaging devices | |
RU2724935C1 (en) | METHOD AND SYSTEM OF NOTIFICATION OF A LOAD CAR DRIVER | |
US7696903B2 (en) | Imaging system for detecting vehicle and human movement | |
WO2015190299A1 (en) | Vehicular lighting device | |
CN107914634B (en) | Lighting device for vehicle | |
JP2000339589A (en) | Traffic safety auxiliary system for vehicle and recording medium | |
JP5313638B2 (en) | Vehicle headlamp device | |
JP2006519427A (en) | Danger detection system for motor vehicles having at least one lateral and rear ambient condition capture device | |
JPH06124340A (en) | Image processor for vehicle | |
JP5361901B2 (en) | Headlight control device | |
JP5082923B2 (en) | Vehicle obstacle detection device | |
JP2006176020A (en) | Pedestrian informing device and method | |
JP4063142B2 (en) | Obstacle notification device at night | |
ES2259543B1 (en) | SYSTEM FOR THE DETECTION OF OBJECTS IN A FRONT EXTERNAL AREA OF A VEHICLE, APPLICABLE TO INDUSTRIAL VEHICLES. | |
JP2009116394A (en) | Alarm device for vehicle | |
JP2013025568A (en) | Approaching obstacle detecting device and program | |
JP5029508B2 (en) | Imaging illumination device for vehicle | |
JP3988657B2 (en) | Object detection device | |
JP5643877B2 (en) | Vehicle headlamp device | |
RU2706757C1 (en) | Control method and unit for rear view | |
KR20130136107A (en) | An automobile | |
JP3823944B2 (en) | Moving object notification device |