JPH06230132A - Obstacle detector for vehicle - Google Patents

Obstacle detector for vehicle

Info

Publication number
JPH06230132A
JPH06230132A JP3955993A JP3955993A JPH06230132A JP H06230132 A JPH06230132 A JP H06230132A JP 3955993 A JP3955993 A JP 3955993A JP 3955993 A JP3955993 A JP 3955993A JP H06230132 A JPH06230132 A JP H06230132A
Authority
JP
Japan
Prior art keywords
obstacle
line
driver
detected
infrared
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP3955993A
Other languages
Japanese (ja)
Inventor
Junichi Fukano
純一 深野
Hiroshi Saito
浩 斎藤
Masao Sakata
雅男 坂田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP3955993A priority Critical patent/JPH06230132A/en
Publication of JPH06230132A publication Critical patent/JPH06230132A/en
Withdrawn legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/191Highlight information

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Geophysics And Detection Of Objects (AREA)
  • Traffic Control Systems (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

PURPOSE:To indicate the position and direction of an obstacle without requiring the substantial shift of line of sight of a driver. CONSTITUTION:The driver's eye ball irradiated with infrared illumination light is imaged by an infrared camera 14, and based on the picture, line of sight is detected, and then on a front windshield 14, driver's observation area V is set. Using an infrared radar head, the position and direction of an obstacle B around a car is detected, and between the position/direction of the obstacle B and the center C of the observance area, a warning mark M is displayed by a head-up display. Since the warning mark M is displayed near the line of sight of the driver, the appearance of the obstacle is surely known. As the direction of the obstacle is also indicated by the direction toward which the warning mark M is displayed, from the center C of the observance area, the obstacle is easily confirmed.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、車両用の障害物検出装
置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an obstacle detecting device for a vehicle.

【0002】[0002]

【従来の技術】従来の車両用障害物検出装置としては、
例えば実開平3−71950号公報に記載されたような
ものがある。この装置では、車両周囲の任意の位置、例
えば車体側面に赤外線検出器を取り付け、車体に人間が
接近したときに警告を発してこれを車内外の人に知らせ
るようにしている。警告の手段としては、音、あるいは
図、文字、色などが用いられる。
2. Description of the Related Art As a conventional vehicle obstacle detection device,
For example, there is one as described in Japanese Utility Model Laid-Open No. 3-71950. In this device, an infrared detector is attached at an arbitrary position around the vehicle, for example, on the side surface of the vehicle body, and when a person approaches the vehicle body, a warning is issued to notify the person inside or outside the vehicle of this. Sounds, figures, characters, colors, etc. are used as warning means.

【0003】[0003]

【発明が解決しようとする課題】しかしながら、このよ
うな従来の車両用障害物検出装置にあっては、とくに警
告が音のみによるときには、環境騒音の大きい場合に聞
き落とす可能性もある。また、図、文字、色などによる
警告が例えばCRTなどでの画面表示で行なわれるとき
には、その画面表示を見るために、本来注意を集中して
観測を継続しておかなければならない車両前方路上から
大幅にかけ離れた方向に視線を移動させなければならな
いという不都合を招くおそれがある。
However, in such a conventional vehicle obstacle detecting device, there is a possibility that the warning may be overlooked when the environmental noise is large, especially when the warning is only sound. Also, when warnings such as figures, characters, colors, etc. are given on the screen display of, for example, a CRT or the like, from the front of the vehicle where attention should be focused and observation must be continued in order to see the screen display. This may lead to the inconvenience of having to move the line of sight in a direction far apart.

【0004】そして、車両に設置される赤外線検出器の
検出領域が固定されているうえ、障害物が赤外線検出器
の検出領域内のどこにあっても同一の検出出力を発する
ようになっている。そのため、障害物が検出領域内に入
ればその存在は認識できるが、障害物の具体的な位置の
特定はできないという問題がある。同じく、障害物が赤
外線検出器の検出領域内のどこにあっても、その位置に
かかわらず一様な警告が発せられるので、当該障害物に
よる障害のレベルが認識できないという問題もある。
The detection area of the infrared detector installed in the vehicle is fixed, and the same detection output is emitted regardless of where the obstacle is in the detection area of the infrared detector. Therefore, if an obstacle enters the detection area, its existence can be recognized, but there is a problem that the specific position of the obstacle cannot be specified. Similarly, no matter where the obstacle is in the detection area of the infrared detector, a uniform warning is issued regardless of the position of the obstacle, so that there is a problem that the level of the obstacle caused by the obstacle cannot be recognized.

【0005】したがって本発明は、上記従来の問題点に
鑑み、ドライバの視線の大幅な移動を要することなくド
ライバに障害物の存在を示すことができる車両用障害物
検出装置を提供することを目的とする。そしてさらに
は、障害物がドライバの視線方向にあるのか他の方向に
あるのかが識別でき、容易に障害物を確認することがで
きる車両用障害物検出装置を提供することを目的とす
る。
Therefore, in view of the above conventional problems, it is an object of the present invention to provide an obstacle detection device for a vehicle capable of indicating the presence of an obstacle to a driver without requiring the driver's line of sight to be significantly moved. And A further object of the present invention is to provide an obstacle detection device for a vehicle, which can identify whether the obstacle is in the driver's line-of-sight direction or in another direction and can easily confirm the obstacle.

【0006】[0006]

【課題を解決するための手段】このため、請求項1に記
載の本発明は、車両周囲の障害物を検出する障害物検出
手段と、ドライバの視線方向を検出する視線方向検出手
段と、該視線方向検出手段によって検出されたドライバ
の視線方向の近傍に前記障害物検出手段により検出され
た障害物の存在を示す表示を行なう表示手段とを備える
ものとした。
Therefore, the present invention according to claim 1 is an obstacle detecting means for detecting an obstacle around a vehicle, a line-of-sight direction detecting means for detecting a line-of-sight direction of a driver, and A display means is provided near the driver's line-of-sight direction detected by the line-of-sight direction detection means to display the presence of the obstacle detected by the obstacle detection means.

【0007】また請求項2に記載の発明は、車両周囲の
障害物の位置方向を検出する障害物検出手段と、ドライ
バの視線方向を検出する視線方向検出手段と、前記障害
物検出手段によって検出された障害物の位置方向と前記
視線方向検出手段によって検出されたドライバの視線方
向との間に、障害物の存在を示す表示を行う表示手段と
を備えるものとした。
According to a second aspect of the present invention, the obstacle detecting means for detecting the position direction of the obstacle around the vehicle, the line-of-sight direction detecting means for detecting the line-of-sight direction of the driver, and the obstacle detecting means for detecting are detected. Display means for displaying the presence of the obstacle is provided between the position direction of the obstacle and the line-of-sight direction of the driver detected by the line-of-sight direction detecting means.

【0008】さらに、請求項3に記載の発明は、車両周
囲の障害物の位置方向を検出する障害物検出手段と、ド
ライバの視線方向を検出する視線方向検出手段と、前記
障害物検出手段によって障害物が検出されたとき警報を
発する警報手段と、前記障害物検出手段によって検出さ
れた障害物の位置方向が前記視線方向検出手段によって
検出されたドライバの視線方向と所定量離間していると
き、前記警報を強調して出力させる警報調整手段とを備
えるものとした。
Further, according to the invention of claim 3, the obstacle detecting means for detecting the position direction of the obstacle around the vehicle, the visual line direction detecting means for detecting the visual line direction of the driver, and the obstacle detecting means are provided. Alarm means for issuing an alarm when an obstacle is detected, and a position direction of the obstacle detected by the obstacle detecting means is separated from the driver's line-of-sight direction detected by the line-of-sight direction detecting means by a predetermined amount. And an alarm adjusting means for emphasizing and outputting the alarm.

【0009】[0009]

【作用】請求項1の発明では、ドライバの視線方向を検
出する視線方向検出手段を備え、障害物の存在を示す表
示をドライバの視線方向の近傍に表示する表示手段を設
けたから、ドライバは車両の運転に必要な方向に視線を
向けていても、障害物が出現したときはドライバの視線
近くにその旨が表示され、確実に警報を受けることがで
きる。
According to the first aspect of the present invention, the line-of-sight direction detecting means for detecting the line-of-sight direction of the driver is provided, and the display means for displaying the presence of the obstacle in the vicinity of the line-of-sight direction of the driver is provided. Even if the line of sight is directed to the direction required for driving, when an obstacle appears, that fact is displayed near the line of sight of the driver, and the alarm can be surely received.

【0010】請求項2の発明では、障害物検出手段が障
害物の位置方向を検出し、表示手段は障害物の存在を示
す表示を障害物の位置方向とドライバの視線方向との間
に表示するようにしたから、障害物の存在が報知される
とともに、障害物が存在する方向が示される。
According to the second aspect of the invention, the obstacle detecting means detects the position direction of the obstacle, and the display means displays a display indicating the existence of the obstacle between the position direction of the obstacle and the line-of-sight direction of the driver. As a result, the presence of the obstacle is notified and the direction in which the obstacle is present is indicated.

【0011】また請求項3のものでは、障害物が検出さ
れたとき警報を発する警報手段を有し、障害物の位置方
向がドライバの視線方向と所定量離間しているときに前
記警報を強調して出力させる警報調整手段を設けたか
ら、ドライバの視線から外れた領域に障害物が検出され
たときにはとくに強調された警報が発せられ、ドライバ
の注意が喚起される。
According to a third aspect of the present invention, there is provided alarm means for issuing an alarm when an obstacle is detected, and the alarm is emphasized when the position direction of the obstacle is separated from the driver's line-of-sight direction by a predetermined amount. Since the alarm adjusting means for outputting the signal is provided, a particularly emphasized alarm is issued when an obstacle is detected in a region outside the line of sight of the driver, and the driver's attention is called.

【0012】[0012]

【実施例】以下、この発明の実施例を図面に基づいて説
明する。図1は第1の実施例を示すブロック図である。
所定方向からの赤外線を集光する光学系1aとその赤外
線量を検知する赤外線検出素子1bからなる赤外線レー
ダヘッド1が車両前方に向けて設けられている。赤外線
検出素子1bとしては、InSbやHgCdTeなどが
用いられる。赤外線検出素子1bは、エリアアレイとさ
れて、集光された赤外線の結像位置が特定される2次元
画像としての赤外線情報を出力する。赤外線レーダヘッ
ド1の出力がA/D変換器2を経て、障害物検出部3に
入力され、ここで障害物の検出処理が行なわれる。
Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram showing a first embodiment.
An infrared radar head 1 including an optical system 1a that collects infrared rays from a predetermined direction and an infrared detection element 1b that detects the amount of the infrared rays is provided toward the front of the vehicle. InSb, HgCdTe, or the like is used as the infrared detection element 1b. The infrared detection element 1b is formed as an area array and outputs infrared information as a two-dimensional image in which the image formation position of the collected infrared rays is specified. The output of the infrared radar head 1 is input to the obstacle detection unit 3 via the A / D converter 2, and the obstacle detection processing is performed here.

【0013】車室内においてはドライバの顔近傍を照明
する可視域外の赤外光を発する赤外線照明ライト4が設
けられるとともに、ドライバの顔面を観測する赤外線カ
メラ5が設置されている。 赤外線照明ライト4と赤外
線カメラ5はコントローラ6で制御され、所定のタイミ
ングで撮影された赤外線カメラ5の出力信号は、A/D
変換器7を経て、ドライバの視線方向を検出する視線方
向検出部8に入力される。
In the vehicle compartment, an infrared illumination light 4 for emitting infrared light outside the visible range for illuminating the vicinity of the driver's face is provided, and an infrared camera 5 for observing the driver's face is also provided. The infrared illumination light 4 and the infrared camera 5 are controlled by the controller 6, and the output signal of the infrared camera 5 taken at a predetermined timing is A / D.
It is input through the converter 7 to the line-of-sight direction detection unit 8 which detects the line-of-sight direction of the driver.

【0014】また、車室の天井に超音波あるいは赤外線
などを用いた頭部位置センサ9が取り付けられており、
ドライバの頭部の位置情報が観測エリア設定部10に入
力する。このドライバの頭部位置と視線方向検出部8で
検出された視線方向とを基に、観測エリア設定部10が
ドライバの観測エリアを特定し、その出力が表示位置設
定部11に入力される。
A head position sensor 9 using ultrasonic waves or infrared rays is attached to the ceiling of the passenger compartment,
The position information of the driver's head is input to the observation area setting unit 10. Based on the head position of the driver and the line-of-sight direction detected by the line-of-sight direction detection unit 8, the observation area setting unit 10 identifies the observation area of the driver, and the output thereof is input to the display position setting unit 11.

【0015】表示位置設定部11では、障害物検出部3
からの障害物情報と、観測エリア設定部10からの観測
エリア情報を基に、ヘッドアップディスプレイ(HU
D)の表示位置を決定し、制御信号をフロントウインド
シールドの近傍に設置されたヘッドアップディスプレイ
部12に出力する。
In the display position setting section 11, the obstacle detecting section 3
Based on the obstacle information from the observation area setting unit 10 and the observation area information from the observation area setting unit 10.
The display position of D) is determined, and a control signal is output to the head-up display unit 12 installed near the front windshield.

【0016】そして、ヘッドアップディスプレイ部12
により、フロントウインドシールドにHUDの警報マー
クが表示される。このHUDは虚像表示となる。ヘッド
アップディスプレイ部12は複数個の表示ユニットを含
み、図2に示すように、表示ユニット13aがインスト
ルメントパネル15の車両中央に、13b、13cが中
央から左右に35cm程度離間して、さらに表示ユニッ
ト13d、13eが中央から左右に70cm程度離間し
て配置されている。これらの表示ユニットはそれぞれイ
ンストルメントパネル上面に形成された開口部15aか
らフロントウインドシールド14に向けて投影するよう
になっている。
The head-up display section 12
The HUD warning mark is displayed on the front windshield. This HUD is a virtual image display. The head-up display unit 12 includes a plurality of display units. As shown in FIG. 2, the display unit 13a is displayed in the vehicle center of the instrument panel 15, and the display units 13b and 13c are spaced about 35 cm from the center to the left and right for further display. The units 13d and 13e are arranged at a distance of 70 cm from the center to the left and right. Each of these display units projects from an opening 15a formed on the upper surface of the instrument panel toward the front windshield 14.

【0017】本実施例では、赤外線照明ライト4と赤外
線カメラ5は、図3のドライバから見たレイアウト図に
示されるように、車両のインストルメントパネル15に
設置されて、ドライバの顔面に向いている。図3にはま
た、上述の観測エリアVおよびフロントウインドシール
ド14に表示されるHUDの警報マークMの概念が示さ
れている。
In the present embodiment, the infrared illumination light 4 and the infrared camera 5 are installed on the instrument panel 15 of the vehicle as shown in the layout view of the driver of FIG. 3 so as to face the driver's face. There is. FIG. 3 also shows the concept of the HUD alarm mark M displayed on the observation area V and the front windshield 14 described above.

【0018】視線方向の計測については、その原理が図
4に示されるプルキンエ像から視線方向を検出する手法
が一般的に知られており、該手法は、とくに「非接触視
線検出のための特徴点抽出法」(伴野他、電子通信学会
技術報告88−73)に詳しい。
Regarding the measurement of the line-of-sight direction, a method of detecting the line-of-sight direction from the Purkinje image whose principle is shown in FIG. 4 is generally known, and this method is particularly "characteristic for non-contact line-of-sight detection". Point extraction method "(Bano, et al., IEICE Technical Report 88-73).

【0019】次に本実施例における作動について、図5
のフローチャートにより説明する。まず、ステップ10
1において、ドライバの眼球部の撮影が行なわれる。こ
こでは、コントローラ6に制御されて、赤外線照明ライ
ト4が、ドライバの車両運転の間、可視外の赤外光をド
ライバの顔面に向けて発しており、赤外線カメラ5が、
ドライバの眼球部を撮影する。画像信号はA/D変換器
7を経て視線方向検出部8に送られる。
Next, the operation in this embodiment will be described with reference to FIG.
The flowchart will be described. First, step 10
At 1, the driver's eyeball is photographed. Here, under the control of the controller 6, the infrared illumination light 4 emits invisible infrared light toward the driver's face while the driver is driving the vehicle.
Take a picture of the driver's eye. The image signal is sent to the line-of-sight direction detection unit 8 via the A / D converter 7.

【0020】ステップ102では、視線方向検出部8に
おいて、赤外線カメラ5からの画像信号から角膜反射像
が検出される。これは、赤外線照明ライト4からの赤外
光が眼球の角膜に反射して観察されるプルキンエ像で、
図6の(a)、(b)に示されるように、眼球部画像の
明部分を抽出することにより検出される。
In step 102, the line-of-sight direction detecting section 8 detects a corneal reflection image from the image signal from the infrared camera 5. This is a Purkinje image in which infrared light from the infrared illumination light 4 is reflected on the cornea of the eyeball and observed.
As shown in FIGS. 6A and 6B, it is detected by extracting the bright portion of the eyeball image.

【0021】続いてステップ103において、同じく視
線方向検出部8で、瞳孔が検出される。ここでは、図6
の(a)、(c)に示されるように、眼球部画像の暗部
分を抽出することにより瞳孔が検出される。そして、ス
テップ104で、これら角膜反射像と瞳孔の重心位置が
コンピュータ演算されて、同図の(d)のようにプロッ
トされた位置関係からドライバの視線方向が検出され
る。
Subsequently, in step 103, the pupil is similarly detected by the line-of-sight direction detecting section 8. Here, FIG.
As shown in (a) and (c), the pupil is detected by extracting the dark portion of the eyeball image. Then, in step 104, the corneal reflection image and the position of the center of gravity of the pupil are computer-calculated, and the driver's line-of-sight direction is detected from the positional relationship plotted as shown in FIG.

【0022】ステップ105では、頭部位置センサ9に
より、ドライバの頭部の位置が検出される。そして、ス
テップ106において、観測エリア設定部10で、ステ
ップ104で検出されたドライバの視線方向と、前ステ
ップで検出された頭部位置を基に、ドライバがどこを見
ているかその絶対視線が確定され、車両のフロントウイ
ンドシールド上でこの絶対視線が交差する部分がドライ
バの観測エリアV(図3参照)として特定される。上記
計測確定された絶対視線の視線方向を(a,b,c)と
する。
In step 105, the head position sensor 9 detects the position of the driver's head. In step 106, the observation area setting unit 10 determines the absolute line of sight of the driver based on the driver's line-of-sight direction detected in step 104 and the head position detected in the previous step. Then, the portion where the absolute line of sight intersects on the front windshield of the vehicle is specified as the driver's observation area V (see FIG. 3). The line-of-sight direction of the absolute line-of-sight whose measurement is confirmed is (a, b, c).

【0023】上記ドライバの観測エリア特定に際して
は、観測エリア設定部10において、視線方向(a,
b,c)が、赤外線検出素子1b上に対応させた障害物
検出領域内のどの位置になるかが判別される。これは、
視線方向(a,b,c)と赤外線検出素子上の障害物検
出領域の対応表が予め設定されており、計測された視線
方向(a,b,c)でその対応表を参照して行なわれ
る。対応表には、例えばL(x,y)の(i,j)点に
は視線方向(ai,bi,ci)が対応することが示さ
れている。なお、この対応表はシステムのレイアウトが
わかれば作成可能である。このようにして、障害物検出
領域内に特定された視線方向の点を含む所定範囲が観測
エリアVとされ、後述する警報マークM表示の際、この
観測エリアVにもっとも近いヘッドアップディスプレイ
の表示ユニット13が選択される。
When the driver's observation area is specified, the observation area setting unit 10 sets the line-of-sight direction (a,
b, c) is determined in which position in the obstacle detection area corresponding to the infrared detecting element 1b. this is,
A correspondence table of the line-of-sight direction (a, b, c) and the obstacle detection area on the infrared detection element is set in advance, and the correspondence table is referred to in the measured line-of-sight direction (a, b, c). Be done. The correspondence table shows that the line-of-sight direction (ai, bi, ci) corresponds to the (i, j) point of L (x, y), for example. The correspondence table can be created if the layout of the system is known. In this way, the predetermined range including the point in the line-of-sight direction specified within the obstacle detection area is set as the observation area V, and when the alarm mark M described later is displayed, the display of the head-up display closest to this observation area V is displayed. Unit 13 is selected.

【0024】他方、ステップ107においては、赤外線
レーダヘッド1から車両前方周囲の赤外線情報がA/D
変換器2を介して障害物検出部3に入力される。赤外線
レーダヘッド1では、入射する赤外線が集光されて赤外
線検出素子1b上に結像し、赤外線情報として2次元の
画像信号が出力される。すなわち、赤外線検出素子1b
からの信号はA/D変換器2によってA/D変換され、
ディジタル画像信号L(x,y)として障害物検出部3
に入力される。ここでは、x=0,1,…,m、y=
0,1,…nとして障害物検出領域がカバーされる。
On the other hand, in step 107, the infrared information from the infrared radar head 1 around the front of the vehicle is A / D.
It is input to the obstacle detection unit 3 via the converter 2. In the infrared radar head 1, the incident infrared rays are collected and focused on the infrared detection element 1b, and a two-dimensional image signal is output as infrared information. That is, the infrared detection element 1b
The signal from is A / D converted by the A / D converter 2,
Obstacle detecting unit 3 as digital image signal L (x, y)
Entered in. Here, x = 0, 1, ..., M, y =
The obstacle detection area is covered as 0, 1, ... N.

【0025】ステップ108では、障害物検出部3にお
いて、ディジタル画像信号L(x,y)として入力され
た赤外線情報を処理して、障害物の検出が行なわれる。
ここでは、画像信号L(x,y)から検出対象物に特有
の所定の温度付近に対応した領域のみを抽出することに
より、その対象物が識別される。そして、これがある一
定面積以上の固まりとして抽出されると、前方に障害物
が存在するものと判断される。
In step 108, the obstacle detecting section 3 processes the infrared information inputted as the digital image signal L (x, y) to detect the obstacle.
Here, the target object is identified by extracting from the image signal L (x, y) only a region corresponding to the vicinity of a predetermined temperature peculiar to the detection target object. Then, when this is extracted as a lump having a certain area or more, it is determined that an obstacle exists ahead.

【0026】すなわち、検出対象物に特有の温度データ
が、L(x,y)上でThなる値に対応しているとする
と、この場合、 Th−p<L(x,y)<Th+p のゾーン内にある領域が抽出される。ただし、pは定数
である。なお、Thは一般に温度が高いほど大きな値と
なる。L(x,y)が上記ゾーン内にあるときは、障害
物検出結果J(x,y)=1とされる。その結果、J
(x,y)=1の点が、ある一定面積以上の固まりとし
て検出されたら、前方に障害物が存在するものと判断さ
れる。
That is, assuming that the temperature data peculiar to the object to be detected corresponds to a value Th on L (x, y), in this case, Th-p <L (x, y) <Th + p. Areas within the zone are extracted. However, p is a constant. Note that Th generally has a larger value as the temperature rises. When L (x, y) is in the zone, the obstacle detection result J (x, y) = 1. As a result, J
When the point of (x, y) = 1 is detected as a lump having a certain area or more, it is determined that an obstacle exists in front.

【0027】ステップ109において障害物の検出結果
のチェックがなされ、障害物が検出された場合には、ス
テップ110に進む。ステップ110では、表示位置設
定部11において、ステップ106で特定されたドライ
バの観測エリアVをもとに、ヘッドアップディスプレイ
12の表示ユニット13a〜13eのうちその観測エリ
アにもっとも近い表示ユニットが選択され、該表示ユニ
ットに制御信号が出力される。
In step 109, the detection result of the obstacle is checked, and if the obstacle is detected, the process proceeds to step 110. In step 110, the display position setting unit 11 selects the display unit closest to the observation area among the display units 13a to 13e of the head-up display 12 based on the observation area V of the driver identified in step 106. A control signal is output to the display unit.

【0028】そして、ステップ111において、上記選
択されたヘッドアップディスプレイ表示ユニット13に
より、図7に例示されるように、ドライバの観測エリア
Vの中心Cから下方に3°〜5°離れた位置に、警報マ
ークMのヘッドアップディスプレイによる虚像表示が行
なわれる。この例では歩行者BP を障害物として検出し
た場合が示されている。ステップ109のチェックで障
害物が検出されていない場合には、ステップ101に戻
って上記のフローが繰り返される。
Then, in step 111, by the selected head-up display display unit 13, as shown in FIG. 7, the head-up display display unit 13 is positioned at a position 3 ° to 5 ° downward from the center C of the driver's observation area V. , The virtual image of the alarm mark M is displayed on the head-up display. In this example, the case where the pedestrian BP is detected as an obstacle is shown. If no obstacle is detected in the check in step 109, the process returns to step 101 and the above flow is repeated.

【0029】この実施例は以上のように構成され、ドラ
イバの視線方向を画像処理によって検出して、フロント
ウインドシールド14上にドライバの観測エリアVを求
め、障害物を検知したときにその観測エリアVの近傍に
警報マークMがヘッドアップディスプレイの虚像表示で
示されるものとしたから、ドライバは視線の大幅な移動
を要することなく運転に専念でき、障害物が出現したと
きはドライバの視線近くにその旨が表示され、確実に警
報を受けることができる。
This embodiment is constructed as described above, and the driver's line-of-sight direction is detected by image processing to obtain the driver's observation area V on the front windshield 14, and when an obstacle is detected, the observation area is detected. Since the alarm mark M is shown in the virtual image display of the head-up display in the vicinity of V, the driver can concentrate on driving without requiring a large movement of the line of sight, and when an obstacle appears, the driver can be near the line of sight of the driver. A message to that effect is displayed, and the alarm can be reliably received.

【0030】そして、ヘッドアップディスプレイ12の
表示ユニットはインストルメントパネル15の幅方向略
全域にわたって複数個設置してあるから、ドライバの観
測エリアすなわち視線がどの方向にあっても、これに対
応してその近傍に警報マークが表示され、常に安定した
警報が確保される。
Since a plurality of display units of the head-up display 12 are installed over substantially the entire widthwise direction of the instrument panel 15, no matter which direction the driver's observation area, that is, the line of sight, is, it corresponds to this. A warning mark is displayed near it, and a stable warning is always secured.

【0031】なお、上記実施例における赤外線検出素子
1bはエリアアレイとしたが、このほか赤外線検出素子
には単一素子あるいはリニアアレイも用いることがで
き、これらの場合には、光学系に平面ミラーとポリゴン
ミラーなどを組み合わせたスキャナ機構と併用すること
により、2次元画像情報を得ることができる。
Although the infrared detecting element 1b in the above embodiment is an area array, a single element or a linear array can be used as the infrared detecting element. In these cases, a plane mirror is used for the optical system. Two-dimensional image information can be obtained by using this together with a scanner mechanism that combines a polygon mirror and the like.

【0032】さらに、赤外線レーダヘッドを首振り掃引
させたりあるいは複数台設置するなどしたときには、障
害物検出部において障害物の位置方向を特定することが
できる。この場合における警報マークの表示例が第2の
実施例として図8に示される。前実施例では警報マーク
Mがドライバの観測エリアVの下方に表示されるのに対
して、ここでは、観測エリア設定部で特定された観測エ
リアVの中心Cと障害物検出部で検出された障害物Bの
位置方向とを結ぶ線上で、ドライバの観測エリアVの中
心Cから3°〜5°離間した点付近に、HUDの警報マ
ークMが表示される。
Further, when the infrared radar head is swept or swung, or a plurality of infrared radar heads are installed, the position direction of the obstacle can be specified in the obstacle detecting section. A display example of the alarm mark in this case is shown in FIG. 8 as a second embodiment. In the previous embodiment, the warning mark M is displayed below the driver's observation area V, whereas here the center C of the observation area V specified by the observation area setting unit and the obstacle detection unit are detected. On the line connecting the position direction of the obstacle B, the HUD warning mark M is displayed near a point 3 ° to 5 ° apart from the center C of the driver's observation area V.

【0033】これによれば、単に障害物の存在が報知さ
れるのみでなく、警報マークMが観測エリアの中心Cか
らどちらの方向に表示されているかによって障害物Bが
存在する方向まで示されるから、容易にその障害物を確
認することができるという効果がある。
According to this, not only the presence of the obstacle is informed, but also the direction in which the obstacle B exists is displayed depending on which direction the alarm mark M is displayed from the center C of the observation area. Therefore, there is an effect that the obstacle can be easily confirmed.

【0034】図9はさらに第3の実施例を示す。 ここ
では、第1の実施例と同じく警報マークM’はドライバ
の観測エリアVの中心Cの下方に表示されるが、警報マ
ークM’が障害物検出部で検出された障害物Bの位置方
向を示す矢印として表示される。この実施例によって
も、ドライバは視線の大幅な移動を要することなく運転
に専念でき、障害物が出現したときはドライバの視線近
くに障害物の存在する方向が表示されるから、確実に警
報を受けることができるとともに、容易にその障害物を
確認することができる。
FIG. 9 shows a third embodiment. Here, the warning mark M ′ is displayed below the center C of the driver's observation area V as in the first embodiment, but the warning mark M ′ is in the position direction of the obstacle B detected by the obstacle detection unit. Is displayed as an arrow. Also in this embodiment, the driver can concentrate on driving without requiring a large movement of his or her line of sight, and when an obstacle appears, the direction in which the obstacle is present is displayed near the driver's line of sight. The obstacle can be received and the obstacle can be easily confirmed.

【0035】図10は、本考案の第4の実施例を示すブ
ロック図である。図1と同様の構成に、障害物照射装置
20が付加されている。 障害物検出部3’からは表示
位置設定部11へ障害物情報が送出されるとともに、障
害物照射装置20へ制御信号が出力される。障害物照射
装置20は障害物検出部3’からの制御信号を受け、障
害物検出部3’で検出された障害物方向に照射を行な
う。障害物照射装置20は、互いに照射方向を異ならせ
て車両外周に設置された複数の照射ランプが選択されて
点灯されるか、あるいは補助灯やヘッドライトで光軸が
可変とされたものを兼用することができる。その他の構
成は第1の実施例と同じである。
FIG. 10 is a block diagram showing a fourth embodiment of the present invention. An obstacle irradiation device 20 is added to the same configuration as in FIG. The obstacle detection unit 3 ′ sends obstacle information to the display position setting unit 11 and outputs a control signal to the obstacle irradiation device 20. The obstacle irradiation device 20 receives the control signal from the obstacle detection unit 3 ′ and irradiates the obstacle detection unit 3 ′ in the direction of the obstacle detected. As the obstacle irradiation device 20, a plurality of irradiation lamps installed on the outer periphery of the vehicle with different irradiation directions are selected and turned on, or an obstacle lamp or headlight whose optical axis is variable is also used. can do. The other structure is the same as that of the first embodiment.

【0036】この実施例によれば、ドライバの視線近く
に警報マークが表示され確実に警報が行なわれるととも
に、その障害物が照射されるから、より一層障害物の確
認が容易となる。もちろん、ヘッドアップディスプレイ
による表示が第2あるいは第3の実施例による場合にも
有効に適用でき、同様の効果が得られる。
According to this embodiment, an alarm mark is displayed near the driver's line of sight to give a reliable alarm, and the obstacle is illuminated, so that the obstacle can be more easily confirmed. Of course, the display by the head-up display can be effectively applied to the case of the second or third embodiment, and the same effect can be obtained.

【0037】上記各実施例では、赤外線カメラ1台を用
いたが、これに限らず、赤外線カメラを複数台設置し
て、ドライバの眼が最も大きく検出された画像の信号を
用いて視線検出の精度を上げることもでき、あるいはま
た、赤外線カメラの撮影方向を可変として、ドライバの
眼球部に常に追従させたりすることができる。
In each of the above embodiments, one infrared camera is used, but the present invention is not limited to this, and a plurality of infrared cameras are installed, and the line of sight detection is performed using the signal of the image in which the driver's eye is detected most greatly. The accuracy can be increased, or the shooting direction of the infrared camera can be changed so as to always follow the eyeball portion of the driver.

【0038】また、ヘッドアップディスプレイの表示方
法としては、特開昭62−5288号公報に開示されて
いるように、フロントウインドシールド内に挟み込まれ
たホログラム記録部にスキャニングしたレーザビームを
照射することにより任意の画像を警報マークとして表示
することもできる。
As a display method of the head-up display, as disclosed in Japanese Patent Laid-Open No. 62-5288, a hologram recording section sandwiched in the front windshield is irradiated with a scanned laser beam. Thus, any image can be displayed as an alarm mark.

【0039】図11は、第5の実施例を示すブロック図
である。赤外線レーダヘッド1が車両前方に向けて設け
られ、集光された赤外線の結像位置が特定される2次元
画像としての赤外線情報が赤外線レーダヘッド1からA
/D変換器2を経て、障害物検出部3”に入力される。
車室内にはドライバの顔近傍を照明する赤外線照明ライ
ト4と赤外線カメラ5、およびこれらを制御するコント
ローラ6が設置されている。 赤外線カメラ5の出力信
号は、A/D変換器7を経て、ドライバの視線方向を検
出する視線方向検出部8に入力される。
FIG. 11 is a block diagram showing the fifth embodiment. The infrared radar head 1 is provided toward the front of the vehicle, and infrared information as a two-dimensional image that identifies the image formation position of the collected infrared light is transmitted from the infrared radar head 1 to A
It is input to the obstacle detection unit 3 ″ via the / D converter 2.
An infrared illumination light 4 that illuminates the vicinity of the driver's face, an infrared camera 5, and a controller 6 that controls these are installed in the vehicle compartment. The output signal of the infrared camera 5 is input to the line-of-sight direction detection unit 8 that detects the line-of-sight direction of the driver via the A / D converter 7.

【0040】また、頭部位置センサ9が設けられ、ドラ
イバの頭部の位置情報が観測エリア設定部10に入力す
る。 このドライバの頭部位置と視線方向検出部8で検
出された視線方向とを基に、観測エリア設定部10がド
ライバの観測エリアを特定する。 以上の構成は第1
の実施例と同じである。観測エリア設定部10の出力
は、障害物検出部3”に入力される。そして、障害物検
出部3”にはこれから制御信号を受ける警報出力部25
が接続されている。
Further, a head position sensor 9 is provided, and position information of the driver's head is input to the observation area setting unit 10. The observation area setting unit 10 specifies the observation area of the driver based on the head position of the driver and the line-of-sight direction detected by the line-of-sight direction detection unit 8. The above configuration is the first
Is the same as the embodiment described above. The output of the observation area setting unit 10 is input to the obstacle detection unit 3 ″. Then, the obstacle detection unit 3 ″ receives the control signal from the alarm output unit 25.
Are connected.

【0041】車両前方から入射する赤外線は、光学系1
aで集光されて、赤外線検出素子1b上に結像し、赤外
線レーダヘッド1から2次元の画像信号が出力される。
この出力はA/D変換器2でA/D変換され、ディジタ
ル画像信号L(x,y)からなる赤外線情報として障害
物検出部3”に入力される。
Infrared rays entering from the front of the vehicle are transmitted by the optical system 1.
The light is focused by a, forms an image on the infrared detecting element 1b, and the infrared radar head 1 outputs a two-dimensional image signal.
This output is A / D converted by the A / D converter 2 and input to the obstacle detection unit 3 ″ as infrared information consisting of the digital image signal L (x, y).

【0042】観測エリア設定部10においては、第1の
実施例で説明したと同様に、赤外線カメラ5の画像およ
び頭部位置センサ9からのドライバの頭部位置情報から
得られる絶対視線の視線方向と赤外線レーダヘッド1の
画像による障害物検出領域の対応表によるマッチングが
行なわれ、視線方向(a,b,c)が、赤外線レーダヘ
ッドの赤外線検出素子上に対応させた障害物検出領域内
のどの位置になるかが判別される。
In the observation area setting section 10, as in the first embodiment, the visual line direction of the absolute line of sight obtained from the image of the infrared camera 5 and the head position information of the driver from the head position sensor 9. And the matching table of the obstacle detection area by the image of the infrared radar head 1 is performed, and the line-of-sight direction (a, b, c) is within the obstacle detection area corresponding to the infrared detection element of the infrared radar head. Which position is to be determined.

【0043】障害物検出部3”では、赤外線レーダヘッ
ド1からの赤外線情報と観測エリア設定部10からの出
力を基に障害物が検出されるとともに、検出された障害
物と観測エリアとの関係が算出され、これに基づいて警
報出力部25に対して制御信号が出力される。
The obstacle detection unit 3 "detects an obstacle based on the infrared information from the infrared radar head 1 and the output from the observation area setting unit 10, and the relationship between the detected obstacle and the observation area. Is calculated, and a control signal is output to the alarm output unit 25 based on this.

【0044】図12には障害物検出部3”における算出
処理の流れが示される。ここでは、視線方向(a,b,
c)から求められた障害物検出領域内の点(x,y)を
中心とする所定半径rの領域データR(x,y)が設定
される。そして、図13のように、ドライバの視線方向
に対応した領域、すなわち観測エリアにはR(x,y)
=0、それ以外の領域にはR(x,y)=1がセットさ
れるものとする。
12 shows the flow of calculation processing in the obstacle detection unit 3 ". Here, the line-of-sight direction (a, b,
Area data R (x, y) having a predetermined radius r centered on the point (x, y) in the obstacle detection area obtained from c) is set. Then, as shown in FIG. 13, R (x, y) is set in an area corresponding to the line-of-sight direction of the driver, that is, in the observation area.
= 0, and R (x, y) = 1 is set in the other areas.

【0045】まず、ステップ201において、画像デー
タ走査の初期位置がセットされたあと、ステップ202
で、L(x,y)が所定範囲内にあるかどうかがチェッ
クされる。 すなわち、検出対象物に特有の温度データ
が、L(x,y)上でThなる値に対応しているものと
して、所定範囲は、 Th−p<L(x,y)<Th+p とされる。 pは定数である。
First, in step 201, after the initial position of image data scanning is set, step 202
Then, it is checked whether L (x, y) is within a predetermined range. That is, assuming that the temperature data specific to the detection target corresponds to the value Th on L (x, y), the predetermined range is Th-p <L (x, y) <Th + p. . p is a constant.

【0046】L(x,y)が上記所定範囲内にあるとき
は、ステップ203に進んで、障害物検出結果J(x,
y)=1とされる。このあと、ステップ204で、J
(x,y)=1と判定された点はさらにR(x,y)と
比較される。ここで、R(x,y)=1であれば、ドラ
イバの視線を外れた位置にある障害物と判断されて、ス
テップ205に進み、J(x,y)=10に変更され
る。J(x,y)=10が発生すると、ステップ206
において「警報レベル強調」の制御信号が警報出力部2
5に対して出力されたあと、ステップ208に進む。一
方、ステップ204でのチェックにおいてR(x,y)
=0であるときには、ドライバの視線上すなわち観測エ
リアにある障害物であると判断されて、J(x,y)の
値は1に保持され、ステップ207で、「警報レベル通
常」の制御信号が警報出力部25に対して出力されたあ
と、ステップ208に進む。
When L (x, y) is within the above predetermined range, the routine proceeds to step 203, where the obstacle detection result J (x, y).
y) = 1. After this, in step 204, J
The point determined to be (x, y) = 1 is further compared with R (x, y). Here, if R (x, y) = 1, it is determined that the obstacle is out of the line of sight of the driver, the process proceeds to step 205, and J (x, y) = 10 is changed. When J (x, y) = 10 occurs, step 206
In the alarm output unit 2, the control signal of "alarm level enhancement" is displayed.
After being output for 5, the process proceeds to step 208. On the other hand, in the check at step 204, R (x, y)
When = 0, it is determined that the obstacle is on the line of sight of the driver, that is, in the observation area, and the value of J (x, y) is held at 1, and in step 207, the control signal of "alarm level normal" is set. Is output to the alarm output unit 25, the process proceeds to step 208.

【0047】このあと、ステップ208では、すべての
障害物検出領域のチェックが終わっているかどうかがチ
ェックされ、完了していない間はステップ202に戻っ
て次のL(x,y)のチェックに進む。ステップ202
のチェックでL(x,y)が上記所定範囲内にないとき
には、ステップ209でJ(x,y)=0とされて同じ
くステップ208に進み、次のL(x,y)のチェック
に移る。
After that, in step 208, it is checked whether or not all the obstacle detection areas have been checked, and if not checked, the flow returns to step 202 to proceed to the next L (x, y) check. . Step 202
If L (x, y) is not within the above-mentioned predetermined range in the check of No., J (x, y) = 0 is set in step 209, and the process similarly proceeds to step 208 to move to the next check of L (x, y). .

【0048】上記フローによる障害物検出領域内での各
L(x,y)のチェックの結果、J(x,y)=1また
はJ(x,y)=10の点が、所定の一定面積以上の固
まりとして検出されると、前方に障害物が存在するもの
と判断される。
As a result of checking each L (x, y) in the obstacle detection area by the above flow, the point of J (x, y) = 1 or J (x, y) = 10 is a predetermined constant area. When detected as the above lumps, it is determined that an obstacle exists ahead.

【0049】なお、上記検出対象として、例えば人間を
対象とする場合には、その皮膚の表面温度は、気温21
°Cのもとで、32°C程度であると言われている。し
たがって、画像信号L(x,y)から32°C付近に対
応した領域のみを抽出すれば、人間が識別されて検出さ
れることになる。したがって、前述のフローのステップ
202における所定範囲に用いられるThは32°Cの
温度に対応する値とすればよい。Thの値は、一般に温
度が高いほど大きな値とされる。そして、J(x,y)
=1またはJ(x,y)=10の点が、ある一定面積以
上の固まりとして検出されたら、前方に人間がいるもの
と判断されることになる。
When the detection target is a human being, for example, the surface temperature of the skin is the ambient temperature 21
It is said to be about 32 ° C under ° C. Therefore, if only the region corresponding to the vicinity of 32 ° C. is extracted from the image signal L (x, y), the person is identified and detected. Therefore, Th used in the predetermined range in step 202 of the above-mentioned flow may be a value corresponding to the temperature of 32 ° C. Generally, the value of Th becomes larger as the temperature becomes higher. And J (x, y)
If a point of = 1 or J (x, y) = 10 is detected as a lump having a certain area or more, it is determined that a person is ahead.

【0050】以上により、障害物検出部3”では、上記
J(x,y)=1の固まりだけ検出されたときは、通常
の警報を発するように警報出力部25に対して制御信号
を出力する。またもし、J(x,y)=10の固まりが
1つでも検出された場合には、通常よりもレベルが強調
された警報を発するように警報出力部25に対して制御
信号を出力する。
As described above, the obstacle detection unit 3 "outputs a control signal to the alarm output unit 25 so as to issue a normal alarm when only the cluster of J (x, y) = 1 is detected. If even one lump of J (x, y) = 10 is detected, a control signal is output to the alarm output unit 25 so as to issue an alarm with a higher level than usual. To do.

【0051】ここでの警報としては、前述の各実施例と
同様、ヘッドアップディスプレイによる警報マークでも
よく、あるいは音声によるものでもよい。警報マークを
用いる場合には、その表示の大きさを大きくしたりある
いは表示色を変えて強調する。また音声によるときはそ
の音量や音程を変えて強調することができる。
The alarm here may be an alarm mark by a head-up display or a voice as in the above-mentioned embodiments. When the warning mark is used, the size of the display is enlarged or the display color is changed to emphasize. When using voice, the volume and pitch can be changed to emphasize the sound.

【0052】この実施例は以上のように構成され、ドラ
イバの視線を外れた領域を設定し、その領域に障害物が
検出されたときにはとくに警報レベルを強めるものとし
たから、検出された障害物を確認させるためにドライバ
の注意を効果的に喚起することができる。
This embodiment is constructed as described above, and an area outside the line of sight of the driver is set, and when an obstacle is detected in that area, the alarm level is particularly strengthened. Therefore, the detected obstacle is detected. The driver's attention can be effectively called to confirm.

【0053】上記各実施例では、赤外線レーダヘッドが
車両前方に向けて設けられ、前方の障害物を検出する例
を示したが、本考案はこれに限定されることなく、レー
ダヘッドを車両後方に向けて設け、あるいは側方に向け
て設けて、車両後方や側方の障害物を検出するものにも
適用される。この場合、ヘッドアップディスプレイの表
示はリアウインドガラスなどに表示される。さらに、障
害物検知のためのレーダヘッドも赤外線を用いるものの
ほか、電磁波や超音波を用いるレーダヘッドなど適宜選
択される。
In each of the above embodiments, the infrared radar head is provided toward the front of the vehicle to detect an obstacle in front of the vehicle. However, the present invention is not limited to this, and the radar head may be installed at the rear of the vehicle. The present invention is also applied to a device that is provided toward the vehicle or toward the side to detect an obstacle behind or on the side of the vehicle. In this case, the display on the head-up display is displayed on the rear window glass or the like. Further, as the radar head for detecting the obstacle, besides the one using infrared rays, a radar head using electromagnetic waves or ultrasonic waves is appropriately selected.

【0054】[0054]

【発明の効果】以上のとおり、本発明は、車両周囲の障
害物を検出する障害物検出手段と、ドライバの視線方向
を検出する視線方向検出手段と、検出された障害物の存
在を示す表示を視線方向検出手段によって検出されたド
ライバの視線方向の近傍に表示する表示手段とを備える
ものとしたから、ドライバは視線の大幅な移動を要する
ことなく運転に専念でき、障害物が出現したときはドラ
イバの視線近くにその旨が表示され、確実に警報を受け
ることができるという効果を有する。
As described above, according to the present invention, the obstacle detecting means for detecting obstacles around the vehicle, the visual line direction detecting means for detecting the visual line direction of the driver, and the display showing the presence of the detected obstacle. The display means for displaying in the vicinity of the driver's line-of-sight direction detected by the line-of-sight direction detection means is provided, so that the driver can concentrate on driving without requiring a large movement of the line-of-sight and when an obstacle appears. Is displayed near the driver's line of sight, and has an effect that a warning can be surely received.

【0055】さらに、障害物検出手段が障害物の位置方
向を検出し、表示手段が障害物の存在を示す表示を障害
物の位置方向とドライバの視線方向との間に表示するよ
うにしたときには、障害物の存在する方向までわかるか
ら、容易にその障害物を確認することができるという効
果がある。さらにまた、障害物の位置方向がドライバの
視線方向と所定量離間しているときには警報を強調して
出力させる警報レベル調整手段を設けたときには、検出
された障害物を確認させるためにドライバの注意を効果
的に喚起することができるという効果がある。
Further, when the obstacle detecting means detects the position direction of the obstacle and the display means displays a display indicating the existence of the obstacle between the position direction of the obstacle and the line-of-sight direction of the driver. Since the direction in which the obstacle exists can be known, there is an effect that the obstacle can be easily confirmed. Furthermore, when an alarm level adjusting means for emphasizing and outputting an alarm is provided when the position direction of the obstacle is separated from the driver's line-of-sight direction by a predetermined amount, the driver's attention should be paid to confirm the detected obstacle. There is an effect that can be effectively called.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の第1の実施例を示すブロック図であ
る。
FIG. 1 is a block diagram showing a first embodiment of the present invention.

【図2】ヘッドアップディスプレイの表示ユニットの配
置を示すレイアウト図である。
FIG. 2 is a layout diagram showing an arrangement of display units of a head-up display.

【図3】赤外線照明ライトと赤外線カメラの配置を示す
レイアウト図である。
FIG. 3 is a layout diagram showing an arrangement of an infrared illumination light and an infrared camera.

【図4】視線方向計測の原理を示す説明図である。FIG. 4 is an explanatory diagram showing the principle of gaze direction measurement.

【図5】実施例における作動の流れを示すフローチャー
トである。
FIG. 5 is a flowchart showing a flow of operations in the embodiment.

【図6】視線方向計測における特徴点抽出の要領を示す
説明図である。
FIG. 6 is an explanatory diagram showing the outline of feature point extraction in gaze direction measurement.

【図7】警報マークのヘッドアップディスプレイ表示例
を示す図である。
FIG. 7 is a diagram showing a head-up display display example of an alarm mark.

【図8】第2の実施例としてのヘッドアップディスプレ
イ表示例を示す図である。
FIG. 8 is a diagram showing a display example of a head-up display as a second embodiment.

【図9】第3の実施例としてのヘッドアップディスプレ
イ表示例を示す図である。
FIG. 9 is a diagram showing a display example of a head-up display as a third embodiment.

【図10】第4の実施例を示すブロック図である。FIG. 10 is a block diagram showing a fourth embodiment.

【図11】第5の実施例を示すブロック図である。FIG. 11 is a block diagram showing a fifth embodiment.

【図12】第5の実施例における障害物検出部の処理を
示すフローチャートである。
FIG. 12 is a flowchart showing processing of an obstacle detection unit in the fifth embodiment.

【図13】障害物検出領域におけるエリアの設定要領を
示す説明図である。
FIG. 13 is an explanatory diagram showing a setting procedure of an area in the obstacle detection area.

【符号の説明】 1 赤外線レーダヘッド 1a 光学系 1b 赤外線検出素子 2、7 A/D変換器 3、3’、3” 障害物検出部 4 赤外線照明ライト 5 赤外線カメラ 6 コントローラ 8 視線方向検出部 9 頭部位置センサ 10 観測エリア設定部 11 表示位置設定部 12 ヘッドアップディスプレイ部 13、13a、…、13e 表示ユニット 14 フロントウインドシールド 15 インストルメントパネル 20 障害物照射装置 25 警報出力部 B 障害物 BP 歩行者 C 観測エリアの中心 V 観測エリア M、M’ 警報マーク[Explanation of Codes] 1 infrared radar head 1a optical system 1b infrared detection element 2, 7 A / D converter 3, 3 ', 3 "obstacle detection section 4 infrared illumination light 5 infrared camera 6 controller 8 line-of-sight direction detection section 9 Head position sensor 10 Observation area setting unit 11 Display position setting unit 12 Head-up display unit 13, 13a, ..., 13e Display unit 14 Front windshield 15 Instrument panel 20 Obstacle irradiation device 25 Alarm output unit B Obstacle BP Walking Person C Center of observation area V Observation area M, M'warning mark

Claims (3)

【特許請求の範囲】[Claims] 【請求項1】 車両周囲の障害物を検出する障害物検出
手段と、ドライバの視線方向を検出する視線方向検出手
段と、該視線方向検出手段によって検出されたドライバ
の視線方向の近傍に前記障害物検出手段により検出され
た障害物の存在を示す表示を行なう表示手段とを備えた
車両用障害物検出装置。
1. An obstacle detecting means for detecting an obstacle around a vehicle, a line-of-sight direction detecting means for detecting a line-of-sight direction of a driver, and the obstacle near the line-of-sight direction of the driver detected by the line-of-sight direction detecting means. An obstacle detection device for a vehicle, comprising: a display unit for displaying the presence of the obstacle detected by the object detection unit.
【請求項2】 車両周囲の障害物の位置方向を検出する
障害物検出手段と、ドライバの視線方向を検出する視線
方向検出手段と、前記障害物検出手段によって検出され
た障害物の位置方向と前記視線方向検出手段によって検
出されたドライバの視線方向との間に、障害物の存在を
示す表示を行う表示手段とを備えた車両用障害物検出装
置。
2. An obstacle detecting means for detecting a position direction of an obstacle around the vehicle, a line-of-sight direction detecting means for detecting a line-of-sight direction of the driver, and a position direction of the obstacle detected by the obstacle detecting means. An obstacle detection device for a vehicle, comprising: a display unit that displays the presence of an obstacle between the line-of-sight direction of the driver detected by the line-of-sight direction detection unit.
【請求項3】 車両周囲の障害物の位置方向を検出する
障害物検出手段と、ドライバの視線方向を検出する視線
方向検出手段と、前記障害物検出手段によって障害物が
検出されたとき警報を発する警報手段と、前記障害物検
出手段によって検出された障害物の位置方向が前記視線
方向検出手段によって検出されたドライバの視線方向と
所定量離間しているとき、前記警報を強調して出力させ
る警報調整手段とを備えた車両用障害物検出装置。
3. An obstacle detecting means for detecting a position direction of an obstacle around the vehicle, a line-of-sight direction detecting means for detecting a line-of-sight direction of a driver, and an alarm when an obstacle is detected by the obstacle detecting means. When the alarm means to be issued and the position direction of the obstacle detected by the obstacle detecting means are separated from the driver's line-of-sight direction detected by the line-of-sight direction detecting means by a predetermined amount, the alarm is emphasized and output. An obstacle detection device for a vehicle, comprising an alarm adjusting means.
JP3955993A 1993-02-03 1993-02-03 Obstacle detector for vehicle Withdrawn JPH06230132A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP3955993A JPH06230132A (en) 1993-02-03 1993-02-03 Obstacle detector for vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3955993A JPH06230132A (en) 1993-02-03 1993-02-03 Obstacle detector for vehicle

Publications (1)

Publication Number Publication Date
JPH06230132A true JPH06230132A (en) 1994-08-19

Family

ID=12556433

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3955993A Withdrawn JPH06230132A (en) 1993-02-03 1993-02-03 Obstacle detector for vehicle

Country Status (1)

Country Link
JP (1) JPH06230132A (en)

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0883397A (en) * 1994-09-12 1996-03-26 Nissan Motor Co Ltd Route guidance device for vehicle
JPH10246640A (en) * 1997-03-03 1998-09-14 Honda Motor Co Ltd Information display device for vehicle
JP2002019491A (en) * 2000-07-11 2002-01-23 Mazda Motor Corp Display device of vehicle
JP2004030212A (en) * 2002-06-25 2004-01-29 Toyota Central Res & Dev Lab Inc Information providing apparatus for vehicle
JP2004505258A (en) * 2000-08-02 2004-02-19 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング Car navigation method
JPWO2002096718A1 (en) * 2001-05-28 2004-09-09 三菱電機株式会社 Driving support device
JP2005098912A (en) * 2003-09-26 2005-04-14 Mazda Motor Corp On-vehicle information providing apparatus
JP2005134971A (en) * 2003-10-28 2005-05-26 Fujitsu Ten Ltd Driving support apparatus
JP2005148973A (en) * 2003-11-13 2005-06-09 Nissan Motor Co Ltd Information presenting device
JP2005207781A (en) * 2004-01-20 2005-08-04 Mazda Motor Corp Image display apparatus, method, and program for vehicle
JP2006224700A (en) * 2005-02-15 2006-08-31 Denso Corp Dead angle monitoring device for vehicle, and operation assisting system for vehicle
JP2006231962A (en) * 2005-02-22 2006-09-07 Toyota Motor Corp Driving supporting device for vehicle
JP2007094716A (en) * 2005-09-28 2007-04-12 Fuji Heavy Ind Ltd Vehicle driving support device
JP2007173884A (en) * 2005-12-19 2007-07-05 Alpine Electronics Inc On-vehicle detector of other vehicles
JP2009023651A (en) * 2008-08-25 2009-02-05 Denso Corp Vehicular information display system
JP2010126135A (en) * 2008-12-01 2010-06-10 Toyota Motor Corp Sight line guiding device
EP2357626A1 (en) * 2010-02-17 2011-08-17 Honeywell International Inc. Near-to-eye tracking for adaptive operation
JP2011242769A (en) * 2003-12-01 2011-12-01 Volvo Technology Corp Method and system for presenting information
JP2012099085A (en) * 2010-10-29 2012-05-24 National Taiwan Univ Of Science & Technology Real-time warning system on windshield glass for vehicle, and operating method thereof
JP2013078964A (en) * 2011-09-30 2013-05-02 Toshiba Corp Display device and display method
US20150360565A1 (en) * 2014-06-11 2015-12-17 Denso Corporation Safety confirmation support system for vehicle driver and method for supporting safety confirmation of vehicle driver
DE10131720B4 (en) * 2001-06-30 2017-02-23 Robert Bosch Gmbh Head-Up Display System and Procedures
FR3049072A1 (en) * 2016-03-21 2017-09-22 Airbus Operations Sas HIGH HEAD DISPLAY SYSTEM OF AN AIRCRAFT
JP2020067979A (en) * 2018-10-26 2020-04-30 トヨタ自動車株式会社 Obstacle notification device for vehicle
WO2022024814A1 (en) 2020-07-28 2022-02-03 京セラ株式会社 Camera system and driving assistance system
DE102021202527A1 (en) 2021-03-16 2022-09-22 Psa Automobiles Sa Display device and method for displaying an object on a lighting device
WO2023223427A1 (en) * 2022-05-17 2023-11-23 三菱電機株式会社 Road irregularity estimation system, road irregularity estimation method, and probe vehicle

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0883397A (en) * 1994-09-12 1996-03-26 Nissan Motor Co Ltd Route guidance device for vehicle
JPH10246640A (en) * 1997-03-03 1998-09-14 Honda Motor Co Ltd Information display device for vehicle
JP2002019491A (en) * 2000-07-11 2002-01-23 Mazda Motor Corp Display device of vehicle
JP2004505258A (en) * 2000-08-02 2004-02-19 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング Car navigation method
JPWO2002096718A1 (en) * 2001-05-28 2004-09-09 三菱電機株式会社 Driving support device
DE10131720B4 (en) * 2001-06-30 2017-02-23 Robert Bosch Gmbh Head-Up Display System and Procedures
JP2004030212A (en) * 2002-06-25 2004-01-29 Toyota Central Res & Dev Lab Inc Information providing apparatus for vehicle
JP2005098912A (en) * 2003-09-26 2005-04-14 Mazda Motor Corp On-vehicle information providing apparatus
JP2005134971A (en) * 2003-10-28 2005-05-26 Fujitsu Ten Ltd Driving support apparatus
JP2005148973A (en) * 2003-11-13 2005-06-09 Nissan Motor Co Ltd Information presenting device
JP2011242769A (en) * 2003-12-01 2011-12-01 Volvo Technology Corp Method and system for presenting information
JP2005207781A (en) * 2004-01-20 2005-08-04 Mazda Motor Corp Image display apparatus, method, and program for vehicle
JP2006224700A (en) * 2005-02-15 2006-08-31 Denso Corp Dead angle monitoring device for vehicle, and operation assisting system for vehicle
JP4683192B2 (en) * 2005-02-15 2011-05-11 株式会社デンソー Vehicle blind spot monitoring device and vehicle driving support system
JP4534788B2 (en) * 2005-02-22 2010-09-01 トヨタ自動車株式会社 Vehicle driving support device
JP2006231962A (en) * 2005-02-22 2006-09-07 Toyota Motor Corp Driving supporting device for vehicle
JP2007094716A (en) * 2005-09-28 2007-04-12 Fuji Heavy Ind Ltd Vehicle driving support device
JP4571071B2 (en) * 2005-12-19 2010-10-27 アルパイン株式会社 On-vehicle other vehicle detection device
JP2007173884A (en) * 2005-12-19 2007-07-05 Alpine Electronics Inc On-vehicle detector of other vehicles
JP4692595B2 (en) * 2008-08-25 2011-06-01 株式会社デンソー Information display system for vehicles
JP2009023651A (en) * 2008-08-25 2009-02-05 Denso Corp Vehicular information display system
JP2010126135A (en) * 2008-12-01 2010-06-10 Toyota Motor Corp Sight line guiding device
EP2357626A1 (en) * 2010-02-17 2011-08-17 Honeywell International Inc. Near-to-eye tracking for adaptive operation
US8552850B2 (en) 2010-02-17 2013-10-08 Honeywell International Inc. Near-to-eye tracking for adaptive operation
JP2012099085A (en) * 2010-10-29 2012-05-24 National Taiwan Univ Of Science & Technology Real-time warning system on windshield glass for vehicle, and operating method thereof
JP2013078964A (en) * 2011-09-30 2013-05-02 Toshiba Corp Display device and display method
US9493072B2 (en) * 2014-06-11 2016-11-15 Denso Corporation Safety confirmation support system for vehicle driver and method for supporting safety confirmation of vehicle driver
US20150360565A1 (en) * 2014-06-11 2015-12-17 Denso Corporation Safety confirmation support system for vehicle driver and method for supporting safety confirmation of vehicle driver
FR3049072A1 (en) * 2016-03-21 2017-09-22 Airbus Operations Sas HIGH HEAD DISPLAY SYSTEM OF AN AIRCRAFT
JP2020067979A (en) * 2018-10-26 2020-04-30 トヨタ自動車株式会社 Obstacle notification device for vehicle
CN111098783A (en) * 2018-10-26 2020-05-05 丰田自动车株式会社 Vehicle obstacle notification device
WO2022024814A1 (en) 2020-07-28 2022-02-03 京セラ株式会社 Camera system and driving assistance system
DE102021202527A1 (en) 2021-03-16 2022-09-22 Psa Automobiles Sa Display device and method for displaying an object on a lighting device
WO2023223427A1 (en) * 2022-05-17 2023-11-23 三菱電機株式会社 Road irregularity estimation system, road irregularity estimation method, and probe vehicle

Similar Documents

Publication Publication Date Title
JPH06230132A (en) Obstacle detector for vehicle
JPH0761257A (en) Display device for vehicle
US5414439A (en) Head up display with night vision enhancement
JP3855439B2 (en) Night driving visibility support device
JP2988178B2 (en) Gaze direction measuring device
US6304187B1 (en) Method and device for detecting drowsiness and preventing a driver of a motor vehicle from falling asleep
US20150238087A1 (en) Biological information measurement device and input device utilizing same
NL2018281B1 (en) Method and system for alerting a truck driver
US20050111698A1 (en) Apparatus for vehicle surroundings monitoring and method thereof
CN108621794A (en) The control method of the display system of vehicle and the display system of vehicle
CN108621940A (en) The control method of the display system of vehicle and the display system of vehicle
JP2004102889A (en) Vehicle detection device
TWI522257B (en) Vehicle safety system and operating method thereof
JPH09238905A (en) Apparatus for measurement of direction of visual axis
CN104627074A (en) Optical reproduction and detection system in a vehicle
US20090153662A1 (en) Night vision system for recording and displaying a surrounding area
KR20170135573A (en) Apparatus for detecting of driver gaze direction
JPH0755941A (en) Vehicle-to-vehicle distance measuring system
CN111417885B (en) System and method for determining pose of augmented reality glasses
JP4701961B2 (en) Pedestrian detection device
JP3369237B2 (en) Driver viewpoint judgment device and inattentive judgment device
CN111380697A (en) Device and method for directly measuring rear view natural light of automobile
JP2006273002A (en) Monitoring device for vehicle
JP3185522B2 (en) Gaze direction measuring device for vehicles
JP2988235B2 (en) Gaze direction detection device for vehicles

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20000404