JP2015199364A - Head-up display device and vehicle mounting the same - Google Patents

Head-up display device and vehicle mounting the same Download PDF

Info

Publication number
JP2015199364A
JP2015199364A JP2014077494A JP2014077494A JP2015199364A JP 2015199364 A JP2015199364 A JP 2015199364A JP 2014077494 A JP2014077494 A JP 2014077494A JP 2014077494 A JP2014077494 A JP 2014077494A JP 2015199364 A JP2015199364 A JP 2015199364A
Authority
JP
Japan
Prior art keywords
obstacle
driving
driver
windshield
driving obstacle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014077494A
Other languages
Japanese (ja)
Inventor
春享 浦島
Haruyuki Urashima
春享 浦島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2014077494A priority Critical patent/JP2015199364A/en
Publication of JP2015199364A publication Critical patent/JP2015199364A/en
Pending legal-status Critical Current

Links

Landscapes

  • Instrument Panels (AREA)
  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To enhance safety regarding a head-up display device and a vehicle mounting the same.SOLUTION: A driving obstacle on left and right outer peripheral outside of a windshield 22 of a vehicle 1 is detected by cameras 3, 6, 9, 13, and sonars 4, 14 (one example in a driving obstacle detection sensor). When the driving obstacle on the left and right outer peripheral outside is detected on the windshield 22 of the vehicle 1, the driving obstacle direction is displayed at a front portion of a driver on the windshield 22 by a display 19. It is detected by a camera 16a that a line of sight of the driver has moved in the operation obstacle direction. In the case where the camera 16a detects that the line of sight of the driver has moved in the operation obstacle direction, and also, an obstacle avoidance operation detection signal is via an input signal part 18 from the vehicle 1, the operation obstacle direction displayed on the windshield 22 by the display 19 is deleted.

Description

本発明は、ヘッドアップディスプレイ装置と、それを搭載した自動車に関するものである。   The present invention relates to a head-up display device and an automobile equipped with the head-up display device.

ヘッドアップディスプレイ装置は、すでに自動車や航空機などに搭載されており、フロントガラスに、運転支援情報を表示させることで、運転者やパイロットの運転支援を行っている。   The head-up display device is already mounted on automobiles, airplanes, and the like, and driving assistance information for drivers and pilots is provided by displaying driving assistance information on the windshield.

この内、自動車に搭載され、運転障害物情報を提供するヘッドアップディスプレイ装置としては、以下のようなものが提案されている。   Among these, the following devices have been proposed as head-up display devices that are mounted on automobiles and provide driving obstacle information.

すなわち、自動車のフロントガラスの前方に存在する運転障害物を検出する運転障害物検出センサーと、この運転障害物検出センサーに接続された制御部と、この制御部に接続されるとともに、前記運転障害物検出センサーで検出した運転障害物方向を、前記自動車のフロントガラスで、運転手の前方部分に表示させる表示器と、前記制御部に接続されるとともに、運転者の視線方向を検出する視線検出センサーと、を備えた構成となっている。   That is, a driving obstacle detection sensor for detecting a driving obstacle present in front of a windshield of a car, a control unit connected to the driving obstacle detection sensor, and the control unit connected to the control unit. A display that displays the direction of the driving obstacle detected by the object detection sensor in the front part of the driver on the windshield of the automobile, and a gaze detection that is connected to the control unit and detects the gaze direction of the driver And a sensor.

つまり、運転障害物検出センサーによって運転障害物を検出した場合には、前記表示器によって、前記フロントガラスの運転手の前方部分に、運転障害物が存在する方向を表示させ、また、この表示は、視線検出センサーによって運転者の視線が、前記運転障害物方向に移動したことを検出するまで行わせるようにしている(これに類似する先行文献としては下記特許文献1が存在する)。   That is, when a driving obstacle is detected by the driving obstacle detection sensor, the indicator displays the direction in which the driving obstacle exists on the front portion of the windshield driver, and this display The gaze detection sensor is used until it is detected that the driver's line of sight has moved in the direction of the driving obstacle (the following patent document 1 exists as a similar prior document).

特開2010−126135号公報JP 2010-126135 A

上記従来例では、自動車のフロントガラスの前方に存在する運転障害物を、運転障害物検出センサーによって検出しているが、実際の運転時には、フロントガラスの左右外周部分からの運転障害物が突然現れることも多く、このときには、避けにくい状況になることもある。   In the above conventional example, the driving obstacle existing in front of the windshield of the automobile is detected by the driving obstacle detection sensor, but during actual driving, the driving obstacle from the left and right outer peripheral portions of the windshield suddenly appears. There are many cases, and at this time, it may be difficult to avoid.

そこで、本発明は、安全性を高めることを目的とするものである。   Therefore, the present invention aims to improve safety.

そしてこの目的を達成するために本発明は、自動車のフロントガラスの左右外周外の運転障害物を検出する運転障害物検出センサーと、この運転障害物検出センサーに接続された制御部と、この制御部に接続されるとともに、前記運転障害物検出センサーで検出した運転障害物方向を、前記自動車のフロントガラスで、運転手の前方部分に表示させる表示器と、前記制御部に接続されるとともに、運転者の視線方向を検出する視線検出センサーと、前記制御部に接続されるとともに、自動車からの障害物回避動作検出信号が入力される入力信号部と、を備え、前記制御部は、前記運転障害物検出センサーによって運転障害物を検出した場合に、前記表示器によって、前記フロントガラスの運転手の前方部分に、
運転障害物方向を表示させ、次に、視線検出センサーによって運転者の視線が、前記運転障害物方向に移動したことを検出し、かつ、自動車から障害物回避動作検出信号を、入力信号部を介して受信した場合に、前記表示器によって前記フロントガラスに表示させていた運転障害物方向を消去する構成とし、これにより所期の目的を達成するものである。
In order to achieve this object, the present invention provides a driving obstacle detection sensor for detecting a driving obstacle outside the left and right outer circumferences of a windshield of an automobile, a control unit connected to the driving obstacle detection sensor, and the control Connected to the control unit, a display for displaying the direction of the driving obstacle detected by the driving obstacle detection sensor on the windshield of the automobile on the front part of the driver, and the control unit, A line-of-sight detection sensor that detects the direction of the line of sight of the driver, and an input signal unit that is connected to the control unit and that receives an obstacle avoidance operation detection signal from an automobile, and the control unit includes the driving When a driving obstacle is detected by the obstacle detection sensor, the indicator displays the front portion of the windshield driver.
The direction of the driving obstacle is displayed, and then the gaze detection sensor detects that the driver's line of sight has moved in the direction of the driving obstacle, and the obstacle avoidance operation detection signal from the vehicle is input to the input signal section. In this case, the direction of the driving obstacle displayed on the windshield by the display device is erased by the display device, thereby achieving the intended purpose.

以上のように本発明は、自動車のフロントガラスの左右外周外の運転障害物を検出する運転障害物検出センサーと、この運転障害物検出センサーに接続された制御部と、この制御部に接続されるとともに、前記運転障害物検出センサーで検出した運転障害物方向を、前記自動車のフロントガラスで、運転手の前方部分に表示させる表示器と、前記制御部に接続されるとともに、運転者の視線方向を検出する視線検出センサーと、前記制御部に接続されるとともに、自動車からの障害物回避動作検出信号が入力される入力信号部と、を備え、前記制御部は、前記運転障害物検出センサーによって運転障害物を検出した場合に、前記表示器によって、前記フロントガラスの運転手の前方部分に、運転障害物方向を表示させ、次に、視線検出センサーによって運転者の視線が、前記運転障害物方向に移動したことを検出し、かつ、自動車から障害物回避動作検出信号を、入力信号部を介して受信した場合に、前記表示器によって前記フロントガラスに表示させていた運転障害物方向を消去する構成としたものであるので、安全性を高めることが出来る。   As described above, the present invention provides a driving obstacle detection sensor for detecting a driving obstacle outside the left and right outer circumferences of a windshield of an automobile, a control unit connected to the driving obstacle detection sensor, and a control unit connected to the control unit. And a display for displaying the direction of the driving obstacle detected by the driving obstacle detection sensor on the front part of the driver on the windshield of the automobile, and the line of sight of the driver. A line-of-sight detection sensor that detects a direction, and an input signal unit that is connected to the control unit and receives an obstacle avoidance operation detection signal from an automobile, and the control unit includes the driving obstacle detection sensor. When the driving obstacle is detected by the indicator, the indicator displays the direction of the driving obstacle on the front portion of the windshield driver, and then the line-of-sight detection sensor. When the driver's line of sight detects that the driver's line of sight has moved in the direction of the driving obstacle, and an obstacle avoidance operation detection signal is received from the automobile via the input signal unit, the windshield is displayed by the indicator. Since it is the structure which erases the driving | running | working obstacle direction currently displayed on (1), safety | security can be improved.

すなわち、本発明では、自動車のフロントガラスの左右外周外の運転障害物を、運転障害物検出センサーによって検出することができる。   That is, in the present invention, a driving obstacle outside the left and right outer periphery of the windshield of the automobile can be detected by the driving obstacle detection sensor.

また、この運転障害物検出センサーによって、自動車のフロントガラスの左右外周外の運転障害物を検出した場合には、前記表示器によって、前記フロントガラスの運転手の前方部分に、運転障害物方向を表示させることができるので、通常運転時では気が付きにくいフロントガラスの左右外周外の運転障害物を、この表示によって早期に確認しやすいものとなる。   Further, when a driving obstacle outside the left and right outer periphery of the windshield of the automobile is detected by the driving obstacle detection sensor, the driving obstacle direction is indicated on the front part of the windshield driver by the indicator. Since it can be displayed, it becomes easy to confirm the driving obstacle outside the left and right outer periphery of the windshield which is difficult to notice during normal operation at an early stage.

さらに、運転者の視線が、前記運転障害物方向に移動したことを視線検出センサーによって検出する構成としているので、運転者が障害物に気が付いたか、否かが判別しやすいものとなる。   Furthermore, since the driver's line of sight has been configured to detect that the driver's line of sight has moved in the direction of the driving obstacle using the line-of-sight detection sensor, it is easy to determine whether or not the driver has noticed the obstacle.

さらにまた、上述のように、視線検出センサーによって運転者の視線が、前記運転障害物方向に移動したことを検出し、かつ、自動車から障害物回避動作検出信号を、入力信号部を介して受信した場合に、前記表示器によって前記フロントガラスに表示させていた運転障害物方向を消去する構成としたものであるので、安全確認、回避動作の実行が確認でき、安全性の高いものとすることが出来る。   Furthermore, as described above, the line-of-sight detection sensor detects that the driver's line of sight has moved in the direction of the driving obstacle, and receives an obstacle avoidance operation detection signal from the vehicle via the input signal unit. In this case, since the driving obstacle direction displayed on the windshield by the indicator is erased, the safety confirmation and the execution of the avoidance operation can be confirmed, and the safety should be high. I can do it.

本発明の一実施形態のヘッドアップディスプレイ装置を搭載した自動車を示す平面図The top view which shows the motor vehicle carrying the head up display apparatus of one Embodiment of this invention 同、ヘッドアップディスプレイ装置の制御ブロック図Same as above, head-up display device control block diagram 同、ヘッドアップディスプレイ装置を搭載した自動車の運転席側から前方を見た状態を示す図The figure which shows the state which looked ahead from the driver's seat side of the motor vehicle carrying a head-up display apparatus similarly 同、ヘッドアップディスプレイ装置を搭載した自動車の運転席側から前方を見た状態を示す図The figure which shows the state which looked ahead from the driver's seat side of the motor vehicle carrying a head-up display apparatus similarly 同、ヘッドアップディスプレイ装置を搭載した自動車の運転席側から前方を見た状態を示す図The figure which shows the state which looked ahead from the driver's seat side of the motor vehicle carrying a head-up display apparatus similarly 同、ヘッドアップディスプレイ装置の構成を示す図The figure which shows the structure of a head-up display apparatus similarly 同、ヘッドアップディスプレイ装置の動作フローチャートSame as above, head-up display device operation flowchart 同、ヘッドアップディスプレイ装置の動作を説明する図The figure explaining the operation of the head-up display device

以下、本発明の一実施形態にかかるヘッドアップディスプレイ装置を自動車に搭載した例を、添付図面を用いて説明する。   Hereinafter, an example in which a head-up display device according to an embodiment of the present invention is mounted on an automobile will be described with reference to the accompanying drawings.

(実施の形態1)
図1において、自動車1において、その車外の前方バンパー2上方にはカメラ3(運転障害物検出センサーの一例)とソナー4(運転障害物検出センサーの一例)が配置されている。
(Embodiment 1)
In FIG. 1, in a car 1, a camera 3 (an example of a driving obstacle detection sensor) and a sonar 4 (an example of a driving obstacle detection sensor) are disposed above a front bumper 2 outside the car.

この内、カメラ3は自動車1前方と、前方左右の監視ゾーン5における運転障害物を検出するものである。   Among these, the camera 3 detects a driving obstacle in the front of the automobile 1 and in the monitoring zone 5 on the front left and right.

また、ソナー4は超音波を用いて監視ゾーン5(図1では紙面の都合で、この監視ゾーン5を自動車1よりも小さく記載しているが、実際のエリアとしては自動車1よりもはるかに大きなエリアとなっている)よりも前方の運転障害物をも検出するものである。   Also, the sonar 4 uses ultrasonic waves to monitor a zone 5 (in FIG. 1, this zone 5 is shown smaller than the vehicle 1 due to space limitations, but the actual area is much larger than the vehicle 1. It also detects driving obstacles ahead of the area.

自動車1の左側サイドミラー7に取り付けられたカメラ6(運転障害物検出センサーの一例)は、自動車1の左側前後方向の監視ゾーン8(図1では紙面の都合で、この監視ゾーン8を自動車1よりも小さく記載しているが、実際のエリアとしては自動車1よりも、遥かに大きなエリアとなっている)における運転障害物を検出するものである。   A camera 6 (an example of a driving obstacle detection sensor) attached to the left side mirror 7 of the automobile 1 is provided with a monitoring zone 8 in the front-rear direction of the left side of the automobile 1 (in FIG. Although it is described smaller than that, the actual area is a much larger area than the automobile 1).

また、自動車1の右側サイドミラー10に取り付けられたカメラ9(運転障害物検出センサーの一例)は、自動車1の右側前後方向の監視ゾーン11(図1では紙面の都合で、この監視ゾーン11を自動車1よりも小さく記載しているが、実際のエリアとしては自動車1よりもはるかに大きなエリアとなっている)における運転障害物を検出するものである。   Further, a camera 9 (an example of a driving obstacle detection sensor) attached to the right side mirror 10 of the automobile 1 is provided with a monitoring zone 11 in the front-rear direction of the right side of the automobile 1 (in FIG. Although it is described as being smaller than the automobile 1, the actual area is a much larger area than the automobile 1).

さらに、車外の後方バンパー12上方にはカメラ13(運転障害物検出センサーの一例)とソナー14(運転障害物検出センサーの一例)が配置されている。   Further, a camera 13 (an example of a driving obstacle detection sensor) and a sonar 14 (an example of a driving obstacle detection sensor) are disposed above the rear bumper 12 outside the vehicle.

この内、カメラ13は後方と、後方左右の監視ゾーン15(図1では紙面の都合で、この監視ゾーン15を自動車1よりも小さく記載しているが、実際のエリアとしては自動車1よりも遥かに大きなエリアとなっている)における運転障害物を検出するものである。   Among these, the camera 13 has a monitoring zone 15 on the rear side, and on the left and right of the rear side (in FIG. 1, this monitoring zone 15 is shown smaller than the vehicle 1 for the sake of space, but the actual area is farther than the vehicle 1. In a large area).

また、ソナー14は監視ゾーン15の後方の運転障害物をも検出することが出来るものである。   The sonar 14 can also detect driving obstacles behind the monitoring zone 15.

一方、自動車1の車内で、運転席の前方には、カメラ16a(視線検出センサーの一例)が配置されている。   On the other hand, a camera 16a (an example of a line-of-sight detection sensor) is disposed in front of the driver's seat in the vehicle 1.

前記カメラ3、6、9、13、ソナー4、14、およびカメラ16aは、図2に示すように、制御部16に接続されている。   The cameras 3, 6, 9, 13, sonar 4, 14, and camera 16 a are connected to the control unit 16 as shown in FIG. 2.

この制御部16には、さらに、自動車1の車両制御部17が接続される入力信号部18が接続され、ハンドル操作やブレーキ動作などの障害物回避動作を行った場合、車両制御部17、入力信号部18を介して、障害物回避動作検出信号が、制御部16に入力されるようになっている。   The control unit 16 is further connected to an input signal unit 18 to which the vehicle control unit 17 of the automobile 1 is connected. When an obstacle avoiding operation such as a steering wheel operation or a brake operation is performed, the vehicle control unit 17 is input. An obstacle avoidance operation detection signal is input to the control unit 16 via the signal unit 18.

また、この制御部16には、表示器19とスピーカ20とメモリ21が接続されている。   In addition, a display 19, a speaker 20, and a memory 21 are connected to the control unit 16.

表示器19は、前記カメラ3、6、9、13、ソナー4、14(運転障害物検出センサー)で検出した運転障害物方向(一例として、左から障害物)を、図4のごとく、前記自動車1のフロントガラス22で、運転手の前方部分に表示させるもので、具体的には、図6のような構成となっている。   As shown in FIG. 4, the display 19 displays the driving obstacle direction (as an example, the obstacle from the left) detected by the cameras 3, 6, 9, 13, sonar 4, 14 (driving obstacle detection sensor) as shown in FIG. The windshield 22 of the automobile 1 is displayed on the front part of the driver. Specifically, the construction is as shown in FIG.

つまり、カメラ3、6、9、13、ソナー4、14の何れかで、運転障害物を検出した場合に、その運転障害物方向を表示部23からレンズ24、25、26、反射鏡27を介してフロントガラス22に表示させる構成となっている。   That is, when a driving obstacle is detected by any of the cameras 3, 6, 9, 13 and sonar 4, 14, the direction of the driving obstacle is displayed from the display unit 23 to the lenses 24, 25, 26, and the reflecting mirror 27. Via the windshield 22.

また、反射鏡27を回動させれば、フロントガラス22への運転障害物方向の表示位置を変更させることができる。   Moreover, if the reflecting mirror 27 is rotated, the display position of the driving obstacle direction on the windshield 22 can be changed.

なお、ヘッドアップディスプレイ装置と言われる表示器19は、良く知られているように運転者からすると、擬似的に、自分の注視しているエリア(距離も含めて)に運転障害物方向が表示された状態となる。   The display 19 called a head-up display device, as is well known, displays the direction of the driving obstacle in a pseudo manner in the area (including the distance) in which the driver is gazing. It will be in the state.

なお、図4に示す「左側から障害物」などの運転障害物方向の表示については、メモリ21に記憶させられているので、カメラ3、6、9、13、ソナー4、14の何れかで、運転障害物を検出した場合に、各場面に対応する表示内容が、メモリ21から読み出され、表示されるようになっている。   In addition, since the display of the driving obstacle direction such as “obstacle from the left side” shown in FIG. 4 is stored in the memory 21, any of the cameras 3, 6, 9, 13 and sonar 4, 14 is used. When a driving obstacle is detected, the display content corresponding to each scene is read from the memory 21 and displayed.

また、メモリ21には、動作プログラムも記憶させられている。   The memory 21 also stores an operation program.

以上の構成において、図3は、運転時に運転者から確認できている前方視界である。   In the above configuration, FIG. 3 is a front view that can be confirmed by the driver during driving.

このときに、運転者が前方の図3のA部分に視点が向いている事は、上記先行文献と同様にカメラ16aにて確認することができる。   At this time, it can be confirmed by the camera 16a that the driver is looking toward the front portion A of FIG.

例えば、カメラ16aで取得される運転者の顔を画像認識することで、この運転者が前方を向いている事は容易に判定することができる。   For example, by recognizing the driver's face acquired by the camera 16a, it can be easily determined that the driver is facing forward.

また、例えば、図8のように、プルキンエ像を用いて、運転者がどの方向を向いているかを判定することも出来る。   Further, for example, as shown in FIG. 8, it is also possible to determine which direction the driver is facing using the Purkinje image.

これは、良く知られたものであるが、カメラ16aから運転者の角膜に光をあてると、光は角膜前面、角膜後面、水晶体前面、水晶体後面の各屈折面で反射され、それぞれ第1、2、3、4プルキンエ像と呼ばれる反射像がつくられる。   As is well known, when light is applied from the camera 16a to the driver's cornea, the light is reflected by the refractive surfaces of the front surface of the cornea, the back surface of the cornea, the front surface of the lens, and the back surface of the lens. A reflection image called a 2, 3, 4 Purkinje image is created.

この中で最も明るい第1プルキンエ像をカメラ16aで捉えれば、眼球運動の検出をすることができ、これにより運転者がどの方向を向いているかを判定することも出来るのである。   By capturing the brightest first Purkinje image with the camera 16a, it is possible to detect the eye movement and thereby determine which direction the driver is facing.

ちなみに、図8(a)は、カメラ16a側から見た図としているので、左側側を向いているように感ずるが、実際は、運転者が右側を向いているときである。   Incidentally, since FIG. 8A is a view seen from the camera 16a side, it feels as if it is facing the left side, but it is actually when the driver is facing the right side.

また、(b)は正面を向いているときである。   Further, (b) is when facing the front.

さらに、図8(c)は、カメラ16a側から見た図としているので、右側側を向いているように感ずるが、実際は、運転者が左側を向いているときである。   Furthermore, since FIG. 8C is a view seen from the camera 16a side, it feels as if it is facing the right side, but it is actually when the driver is facing the left side.

さて、図3では、運転者の視界では、図4に示す左側からの運転障害物(例えば自転車)は確認できていない、または気がついていない状態である。   Now, in FIG. 3, in the driver's field of view, a driving obstacle (for example, a bicycle) from the left side shown in FIG. 4 cannot be confirmed or is not noticed.

したがって、このままの状態(回避行動をせず)で運転を継続すると、図4のごとく、前方に運転障害物(例えば自転車)が突然現、回避行動が間に合わないことになる可能性もある。   Therefore, if driving is continued in this state (without avoiding action), as shown in FIG. 4, a driving obstacle (for example, a bicycle) suddenly appears ahead, and the avoiding action may not be in time.

そこで、本実施形態では、このような運転障害物(例えば自転車)が、フロントガラス22の左右外周外から接近してくるのをカメラ3、6、9、13、ソナー4、14で検出することとした。   Therefore, in this embodiment, such a driving obstacle (for example, a bicycle) is detected by the cameras 3, 6, 9, 13 and sonars 4, 14 when approaching from outside the left and right outer periphery of the windshield 22. It was.

具体的には、図3の状態では、先ず、ソナー4で前方に運転障害物(例えば自転車)が存在するか否かを予測し、次に、カメラ3、6にて、運転障害物(例えば自転車)が実際に運転障害物であるか、否かを判定する。   Specifically, in the state of FIG. 3, first, the sonar 4 predicts whether or not a driving obstacle (for example, a bicycle) is present, and then the driving obstacle (for example, the camera 3 or 6). It is determined whether or not the bicycle is actually a driving obstacle.

具体的な運転状態において、説明を続けると、エンジンが駆動されると、自動車1の車両制御部17から入力信号部18を介して制御部16に、起動信号が伝達される(図7のS1)。   In a specific driving state, the description will be continued. When the engine is driven, an activation signal is transmitted from the vehicle control unit 17 of the automobile 1 to the control unit 16 via the input signal unit 18 (S1 in FIG. 7). ).

すると、制御部16は、カメラ3、6、9、13、ソナー4、14によって、自動車1の運転に対して障害となる運転障害物の有無を検出することになる(図7のS2)。   Then, the control part 16 will detect the presence or absence of the driving | operation obstacle which becomes an obstacle with respect to the driving | operation of the motor vehicle 1 with the cameras 3, 6, 9, 13, and the sonars 4 and 14 (S2 of FIG. 7).

例えば、図3の状態では、ソナー4、カメラ3、6によって、自動車1の左側から接近する運転障害物(例えば自転車)を検出しているが、このとき、制御部16は運転者が左側前方を注視しているかを、カメラ16aからの映像によって検出する。   For example, in the state of FIG. 3, a driving obstacle (for example, a bicycle) approaching from the left side of the automobile 1 is detected by the sonar 4 and the cameras 3, 6. Is detected from the video from the camera 16a.

そして、運転者が左側に注視していないと判断すると、制御部16は表示器19によって図4のごとく、前記フロントガラス22の運転手の前方部分(運転者の現在の注視部分)に、運転障害物方向を「左から障害物」と表示させ(図7のS3、S4)、またスピーカ20から警告音(例えば左障害物)を発する(図7のS3、S6)。   Then, if it is determined that the driver is not gazing to the left side, the control unit 16 causes the display 19 to drive the front portion of the driver of the windshield 22 (the driver's current gazing portion) as shown in FIG. The obstacle direction is displayed as “obstacle from the left” (S3, S4 in FIG. 7), and a warning sound (for example, left obstacle) is emitted from the speaker 20 (S3, S6 in FIG. 7).

このため、運転者としては、この時点で「左側からの障害物」の存在を確認することが出来るのであるが、制御部16としては引き続き、カメラ16aによって運転者が左側に注視したか、否かを監視している(図7のS5)。   For this reason, the driver can confirm the presence of the “obstacle from the left side” at this point, but the controller 16 continues to check whether the driver has gazed at the left side by the camera 16a. Is monitored (S5 in FIG. 7).

そして、運転者が左側を注視していないと判断すると、スピーカ20から、再び、警告音(例えば左障害物)を発する(図7のS6)。   When it is determined that the driver is not gazing at the left side, a warning sound (for example, a left obstacle) is emitted again from the speaker 20 (S6 in FIG. 7).

また、(図7のS5)において、カメラ16a映像によって運転者が「左側の障害物」に注視していると制御部16が判断すると、次に、制御部16は、ハンドル操作やブレーキ動作などの障害物回避動作を行ったか、否かを判定する(図7のS7)。   Further, in (S5 in FIG. 7), when the control unit 16 determines that the driver is gazing at the “left obstacle” from the camera 16a image, the control unit 16 then performs a steering operation, a brake operation, or the like. It is determined whether or not the obstacle avoiding operation has been performed (S7 in FIG. 7).

ここで、ハンドル操作やブレーキ動作などの障害物回避動作が行われない場合には、車両制御部17に安全喚起信号を、入力信号部18から出力する(図7のS8)。   Here, when an obstacle avoiding operation such as a steering operation or a brake operation is not performed, a safety alert signal is output from the input signal unit 18 to the vehicle control unit 17 (S8 in FIG. 7).

また、(図7のS7)において、障害物回避動作を行ったと制御部16が判断すると、次に、制御部16は、カメラ3、6、9、13、ソナー4、14によって、自動車1の運
転に対して障害となる運転障害物の有無を検出する(図7のS9)。
In addition, when the control unit 16 determines that the obstacle avoidance operation has been performed in (S7 in FIG. 7), the control unit 16 then uses the cameras 3, 6, 9, 13, and the sonars 4 and 14 to The presence or absence of a driving obstacle that becomes an obstacle to driving is detected (S9 in FIG. 7).

そして、この(図7のS9)において、自動車1の運転に対して障害となる運転障害物がまだ存在していると判断されると、再び、スピーカ20による警告音(例えば左障害物)を発する(図7のS6)。   Then, in this (S9 in FIG. 7), if it is determined that there is still a driving obstacle that becomes an obstacle to the driving of the automobile 1, a warning sound (for example, a left obstacle) from the speaker 20 is again generated. (S6 in FIG. 7).

また、この(図7のS9)において、自動車1の運転に対して障害となる運転障害物が存在していないと判断されると、図5のごとく、前記表示器19によるフロントガラス22への「左から障害物」の表示や、スピーカ20による警告音を停止する(図7のS10)。   Further, in this (S9 in FIG. 7), when it is determined that there is no driving obstacle that becomes an obstacle to the driving of the automobile 1, as shown in FIG. The display of “obstacle from the left” and the warning sound from the speaker 20 are stopped (S10 in FIG. 7).

つまり、図5では、フロントガラス22に自転車は見えている状態ではあるが、すでにブレーキなどの障害物回避動作を行ったので、このときには、もう運転障害物ではない状態となっているので、前記表示器19によるフロントガラス22への「左から障害物」の表示や、スピーカ20による警告音を停止しているのである。   That is, in FIG. 5, although the bicycle is visible on the windshield 22, since the obstacle avoiding operation such as the brake has already been performed, at this time, it is no longer a driving obstacle. The display 19 stops the “obstacle from the left” display on the windshield 22 and the warning sound from the speaker 20.

尚、前記左側サイドミラー7、前記右側サイドミラー10、及びバックミラーやバックモニター(図示せず)を運転者が注視していることを制御部16が判断し、且つ、ハンドル操作やブレーキ動作等による自動車の制動を検出した場合についても前記表示器19によるフロントガラス22への注意表示やスピーカ20による警告音を停止することが可能となる。   The control unit 16 determines that the driver is gazing at the left side mirror 7, the right side mirror 10, and a rearview mirror or rear monitor (not shown). In the case where the braking of the automobile due to is detected, it is possible to stop the caution display on the windshield 22 by the indicator 19 and the warning sound from the speaker 20.

以上のごとく、本実施形態によれば、自動車1のフロントガラス22の左右外周外の運転障害物を、カメラ3、6、9、13、ソナー4、14(運転障害物検出センサーに一例)によって検出することができる。   As described above, according to the present embodiment, driving obstacles outside the left and right outer periphery of the windshield 22 of the automobile 1 are detected by the cameras 3, 6, 9, 13, sonars 4 and 14 (an example of a driving obstacle detection sensor). Can be detected.

また、このカメラ3、6、9、13、ソナー4、14によって、自動車1のフロントガラス22の左右外周外の運転障害物を検出した場合には、表示器19によって、前記フロントガラス22の運転手の前方部分に、運転障害物方向を表示させることができるので、通常運転時では気が付きにくいフロントガラス22の左右外周外の運転障害物を早期に確認しやすいものとなる。   When a driving obstacle outside the left and right outer periphery of the windshield 22 of the automobile 1 is detected by the cameras 3, 6, 9, 13 and sonars 4, 14, the display 19 operates the windshield 22. Since the direction of the driving obstacle can be displayed on the front part of the hand, it becomes easy to check the driving obstacle outside the left and right outer periphery of the windshield 22 which is difficult to notice during normal driving at an early stage.

さらに、運転者の視線が、前記運転障害物方向に移動したことをカメラ16a(視線検出センサーの一例)によって検出する構成としているので、運転者が障害物に気が付いたか否かが判別しやすいものとなる。   Further, since the camera 16a (an example of a line-of-sight detection sensor) detects that the driver's line of sight has moved in the direction of the driving obstacle, it is easy to determine whether the driver has noticed the obstacle. It becomes.

さらにまた、上述のように、カメラ16aによって運転者の視線が、前記運転障害物方向に移動したことを検出し、かつ、自動車1から障害物回避動作検出信号を、入力信号部18を介して受信した場合に、前記表示器19によって前記フロントガラス22に表示させていた運転障害物方向を消去する構成としたものであるので、安全確認、回避動作の実行が確認でき、安全性の高いものとすることが出来る。   Furthermore, as described above, it is detected by the camera 16a that the driver's line of sight has moved in the direction of the driving obstacle, and an obstacle avoidance operation detection signal is sent from the automobile 1 via the input signal unit 18. When receiving, since it is configured to delete the direction of the driving obstacle displayed on the windshield 22 by the indicator 19, the safety confirmation and the execution of the avoidance operation can be confirmed, and the safety is high It can be.

以上のごとく本発明では、自動車のフロントガラスの左右外周外の運転障害物を、運転障害物検出センサーによって検出することができる。   As described above, according to the present invention, a driving obstacle outside the left and right outer periphery of the windshield of an automobile can be detected by the driving obstacle detection sensor.

また、この運転障害物検出センサーによって、自動車のフロントガラスの左右外周外の運転障害物を検出した場合には、前記表示器によって、前記フロントガラスの運転手の前方部分に、運転障害物方向を表示させることができるので、通常運転時では気が付きにくいフロントガラスの左右外周外の運転障害物を、この表示によって早期に確認しやすいも
のとなる。
Further, when a driving obstacle outside the left and right outer periphery of the windshield of the automobile is detected by the driving obstacle detection sensor, the driving obstacle direction is indicated on the front part of the windshield driver by the indicator. Since it can be displayed, it becomes easy to confirm the driving obstacle outside the left and right outer periphery of the windshield which is difficult to notice during normal operation at an early stage.

さらに、運転者の視線が、前記運転障害物方向に移動したことを視線検出センサーによって検出する構成としているので、運転者が障害物に気が付いたか、否かが判別しやすいものとなる。   Furthermore, since the driver's line of sight has been configured to detect that the driver's line of sight has moved in the direction of the driving obstacle using the line-of-sight detection sensor, it is easy to determine whether or not the driver has noticed the obstacle.

さらにまた、上述のように、視線検出センサーによって運転者の視線が、前記運転障害物方向に移動したことを検出し、かつ、自動車から障害物回避動作検出信号を、入力信号部を介して受信した場合に、前記表示器によって前記フロントガラスに表示させていた運転障害物方向を消去する構成としたものであるので、安全確認、回避動作の実行が確認でき、安全性の高いものとすることが出来る。   Furthermore, as described above, the line-of-sight detection sensor detects that the driver's line of sight has moved in the direction of the driving obstacle, and receives an obstacle avoidance operation detection signal from the vehicle via the input signal unit. In this case, since the driving obstacle direction displayed on the windshield by the indicator is erased, the safety confirmation and the execution of the avoidance operation can be confirmed, and the safety should be high. I can do it.

したがって、ヘッドアップディスプレイ装置と、それを搭載した自動車としての活用が期待される。   Therefore, utilization as a head-up display device and an automobile equipped with the head-up display device is expected.

1 自動車
2 前方バンパー
3 カメラ
4 ソナー
5 監視ゾーン
6 カメラ
7 左側サイドミラー
8 監視ゾーン
9 カメラ
10 右側サイドミラー
11 監視ゾーン
12 後方バンパー
13 カメラ
14 ソナー
15 監視ゾーン
16 制御部
16a カメラ
17 車両制御部
18 入力信号部
19 表示器
20 スピーカ
21 メモリ
22 フロントガラス
23 表示部
24 レンズ
25 レンズ
26 レンズ
27 反射鏡
DESCRIPTION OF SYMBOLS 1 Car 2 Front bumper 3 Camera 4 Sonar 5 Monitoring zone 6 Camera 7 Left side mirror 8 Monitoring zone 9 Camera 10 Right side mirror 11 Monitoring zone 12 Rear bumper 13 Camera 14 Sonar 15 Monitoring zone 16 Control part 16a Camera 17 Vehicle control part 18 Input signal unit 19 Display unit 20 Speaker 21 Memory 22 Windshield 23 Display unit 24 Lens 25 Lens 26 Lens 27 Reflective mirror

Claims (4)

自動車のフロントガラスの左右外周外の運転障害物を検出する運転障害物検出センサーと、この運転障害物検出センサーに接続された制御部と、この制御部に接続されるとともに、前記運転障害物検出センサーで検出した運転障害物方向を、前記自動車のフロントガラスで、運転手の前方部分に表示させる表示器と、前記制御部に接続されるとともに、運転者の視線方向を検出する視線検出センサーと、前記制御部に接続されるとともに、自動車からの障害物回避動作検出信号が入力される入力信号部と、を備え、前記制御部は、前記運転障害物検出センサーによって運転障害物を検出した場合に、前記表示器によって、前記フロントガラスの運転手の前方部分に、運転障害物方向を表示させ、次に、視線検出センサーによって運転者の視線が、前記運転障害物方向に移動したことを検出し、かつ、自動車から障害物回避動作検出信号を、入力信号部を介して受信した場合に、前記表示器によって前記フロントガラスに表示させていた運転障害物方向を消去する構成としたヘッドアップディスプレイ装置。 A driving obstacle detection sensor for detecting a driving obstacle outside the left and right outer periphery of the windshield of the automobile, a control unit connected to the driving obstacle detection sensor, and the driving obstacle detection connected to the control unit A display that displays the direction of the driving obstacle detected by the sensor on the windshield of the automobile on the front part of the driver, and a gaze detection sensor that is connected to the control unit and detects the gaze direction of the driver An input signal unit that is connected to the control unit and receives an obstacle avoidance operation detection signal from an automobile, and the control unit detects a driving obstacle by the driving obstacle detection sensor. The direction of the driving obstacle is displayed on the front portion of the windshield driver by the indicator, and then the driver's line of sight is detected by the line of sight detection sensor. When the vehicle has detected that the vehicle has moved in the direction of the driving obstacle and has received an obstacle avoiding operation detection signal from the vehicle via the input signal unit, the driving displayed on the windshield by the display unit A head-up display device configured to erase an obstacle direction. 前記制御部は、入力信号部から、ハンドル操作信号、またはブレーキ信号が供給される構成とした請求項1に記載のヘッドアップディスプレイ装置。 The head-up display device according to claim 1, wherein the control unit is configured to be supplied with a handle operation signal or a brake signal from an input signal unit. 前記制御部は、前記運転障害物検出センサーによって運転障害物を検出した場合に、前記表示器によって、前記フロントガラスの運転手の前方部分に、運転障害物方向を表示させ、次に、視線検出センサーによって運転者の視線が、前記運転障害物方向に移動したことを検出し、かつ、自動車から障害物回避動作検出信号を受信し、その後、前記運転障害物検出センサーによって運転障害物を非検出となった場合に、前記表示器によって前記フロントガラスに表示させていた運転障害物方向を消去する構成とした請求項1または2に記載のヘッドアップディスプレイ装置。 When the driving obstacle is detected by the driving obstacle detection sensor, the control unit displays a driving obstacle direction on the front portion of the windshield driver by the display, and then detects a line of sight. A sensor detects that the driver's line of sight has moved in the direction of the driving obstacle, and receives an obstacle avoidance operation detection signal from the vehicle, and then the driving obstacle detection sensor detects no driving obstacle. 3. The head-up display device according to claim 1, wherein the driving obstacle direction displayed on the windshield by the display device is erased when it becomes. 請求項1〜3のいずれか一つに記載のヘッドアップディスプレイ装置を搭載した自動車。 An automobile equipped with the head-up display device according to claim 1.
JP2014077494A 2014-04-04 2014-04-04 Head-up display device and vehicle mounting the same Pending JP2015199364A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014077494A JP2015199364A (en) 2014-04-04 2014-04-04 Head-up display device and vehicle mounting the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014077494A JP2015199364A (en) 2014-04-04 2014-04-04 Head-up display device and vehicle mounting the same

Publications (1)

Publication Number Publication Date
JP2015199364A true JP2015199364A (en) 2015-11-12

Family

ID=54551079

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014077494A Pending JP2015199364A (en) 2014-04-04 2014-04-04 Head-up display device and vehicle mounting the same

Country Status (1)

Country Link
JP (1) JP2015199364A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019159917A (en) * 2018-03-14 2019-09-19 株式会社リコー Driving support device, vehicle, system and method
WO2021010219A1 (en) * 2019-07-16 2021-01-21 Agc株式会社 Transparent sensing device, laminated glass, and method for producing transparent sensing device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019159917A (en) * 2018-03-14 2019-09-19 株式会社リコー Driving support device, vehicle, system and method
JP7183549B2 (en) 2018-03-14 2022-12-06 株式会社リコー DRIVING ASSIST DEVICE, VEHICLE, SYSTEM AND METHOD
WO2021010219A1 (en) * 2019-07-16 2021-01-21 Agc株式会社 Transparent sensing device, laminated glass, and method for producing transparent sensing device
CN114096860A (en) * 2019-07-16 2022-02-25 Agc株式会社 Transparent sensing detection device, laminated glass and manufacturing method of transparent sensing detection device
CN114096860B (en) * 2019-07-16 2024-06-11 Agc株式会社 Transparent sensor inspection device, laminated glass, and method for manufacturing transparent sensor inspection device

Similar Documents

Publication Publication Date Title
US10629106B2 (en) Projection display device, projection display method, and projection display program
US10144408B2 (en) System and method for assisting navigation of vehicle through traffic
JP4683192B2 (en) Vehicle blind spot monitoring device and vehicle driving support system
JP4946661B2 (en) Warning display device for vehicles
JP6241235B2 (en) Vehicle driving support device
US7788033B2 (en) Collision possibility determining device
JP6453929B2 (en) Vehicle display system and method for controlling vehicle display system
US11279371B2 (en) Method, system and vehicle for use of an object displaying device in a vehicle
GB2547765A (en) Vehicle notification system including transparent and mirrored displays
JP6373820B2 (en) Obstacle warning system and operation method thereof
CN111461096A (en) Display device for vehicle
JP2012221116A (en) Danger prediction system for vehicle
JPWO2017145546A1 (en) Projection display device, projection display method, and projection display program
US20200238911A1 (en) Ar assist glasses for driing
JP6471575B2 (en) Vehicle display control device and vehicle display unit
CN105323539B (en) Vehicle safety system and operation method thereof
JP2012162122A (en) Vehicle traveling control system
CN108082045B (en) Vehicle-mounted HUD control system
JP2015199364A (en) Head-up display device and vehicle mounting the same
JP6428376B2 (en) Information display device
WO2019087662A1 (en) Driving assistance device, driving situation information acquisition system, driving assistance method, and program
JP5289920B2 (en) Vehicle alarm device
JP7268314B2 (en) Display device
JP2020006743A (en) Vehicular projection control device, head-up display device, vehicular projection control method, and program
KR20190069643A (en) Method and apparatus for video output control of a vehicle

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20160519