JP2022104965A - Head-up display device - Google Patents

Head-up display device Download PDF

Info

Publication number
JP2022104965A
JP2022104965A JP2022059318A JP2022059318A JP2022104965A JP 2022104965 A JP2022104965 A JP 2022104965A JP 2022059318 A JP2022059318 A JP 2022059318A JP 2022059318 A JP2022059318 A JP 2022059318A JP 2022104965 A JP2022104965 A JP 2022104965A
Authority
JP
Japan
Prior art keywords
display device
driver
head
viewpoint
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022059318A
Other languages
Japanese (ja)
Other versions
JP7280995B2 (en
Inventor
昭央 三沢
Akio Misawa
裕司 藤田
Yuji Fujita
映治 高塚
Eiji Takatsuka
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maxell Ltd filed Critical Maxell Ltd
Publication of JP2022104965A publication Critical patent/JP2022104965A/en
Application granted granted Critical
Publication of JP7280995B2 publication Critical patent/JP7280995B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0149Head-up displays characterised by mechanical features
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/176Camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/23Optical features of instruments using reflectors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0181Adaptation to the pilot/driver
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Instrument Panels (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a head-up display device which can suitably control a virtual image projection video by surely confirming a viewpoint position of a driver even under an environment where sufficient visible light cannot be obtained and is practically excellent.
SOLUTION: A head-up display device includes: a video display device which has a light source and a display element and forms a video; video projection means which displays a virtual image in front of a vehicle by projecting and reflecting video light emitted from the video display device on a windshield; and viewpoint detection means which detects a viewpoint of a driver. The video light emitted from the video display device is used as illumination light for detecting the viewpoint of the driver in a prescribed state of the vehicle, and the illumination light is unicolor as a whole.
SELECTED DRAWING: Figure 8
COPYRIGHT: (C)2022,JPO&INPIT

Description

本発明は、ヘッドアップディスプレイ装置の技術に関し、特に、透明なガラス等に映像を投影するヘッドアップディスプレイ装置に適用して有効な技術に関するものである。 The present invention relates to a technique of a head-up display device, and more particularly to a technique effective for being applied to a head-up display device that projects an image onto transparent glass or the like.

例えば、自動車等の車両において、通常、車速やエンジン回転数等の情報は、ダッシュボード内の計器盤(インパネ)に表示される。また、カーナビゲーション等の画面は、ダッシュボードに組み込まれもしくはダッシュボード上に設置されたディスプレイに表示される。運転者がこれらの情報を視認する場合に視線を大きく移動させることが必要となることから、視線の移動量を低減させる技術として、車速等の情報やカーナビゲーションに係る指示等の情報をフロントガラス(ウィンドシールド)等に投射して表示するヘッドアップディスプレイ(Head Up Display、以下では「HUD」と記載する場合がある)装置が知られている。 For example, in a vehicle such as an automobile, information such as vehicle speed and engine speed is usually displayed on an instrument panel in a dashboard. In addition, screens such as car navigation are displayed on a display built into the dashboard or installed on the dashboard. Since it is necessary for the driver to move the line of sight significantly when visually recognizing this information, as a technique for reducing the amount of movement of the line of sight, information such as vehicle speed and information such as instructions related to car navigation are used on the windshield. A head-up display (Head Up Display, hereinafter may be referred to as "HUD") device that projects and displays on (windshield) or the like is known.

このようなHUDに関連する技術として、例えば、以下の特許文献1~3には、HUDと視点検出カメラを組み合わせた技術が開示されている。 As a technique related to such a HUD, for example, the following Patent Documents 1 to 3 disclose a technique in which a HUD and a viewpoint detection camera are combined.

また、以下の特許文献4には、簡易な構成により、観察者の視点の位置に対応して虚像である投射映像の表示位置を変更するための技術が記載されている。 Further, Patent Document 4 below describes a technique for changing the display position of a projected image which is a virtual image according to the position of the viewpoint of the observer by a simple configuration.

特開2016-068577号公報Japanese Unexamined Patent Publication No. 2016-068577 特開2015-219631号公報JP-A-2015-219631 特開2014-199385号公報Japanese Unexamined Patent Publication No. 2014-199385 特開2016-014861号公報Japanese Unexamined Patent Publication No. 2016-014861

上述した従来技術、特に、特許文献4に記載されたような従来技術では、観察者に対して映像光を効率よく向けるため、赤外線カメラ等の視点位置検出手段により運転者の視点位置を検出し、当該検出された視点位置に従って投射映像の表示位置を移動する旨が記載されている。しかしながら、その場合、当該視点位置検出手段として、運転中のドライバの姿勢や視線などを検知して安全運転をサポートするための通常のドライバモニタリングシステムに加えて、さらに、赤外線の発生装置と赤外線カメラ等を運転席近傍の狭小な空間内に取り付ける必要が生じるため、装置のコスト上昇にも繋がってしまい、必ずしも最適なものではなかった。 In the above-mentioned conventional technique, particularly the conventional technique as described in Patent Document 4, in order to efficiently direct the image light to the observer, the viewpoint position of the driver is detected by the viewpoint position detecting means such as an infrared camera. , It is described that the display position of the projected image is moved according to the detected viewpoint position. However, in that case, as the viewpoint position detecting means, in addition to the normal driver monitoring system for detecting the posture and line of sight of the driver while driving to support safe driving, an infrared generator and an infrared camera are further used. Since it is necessary to install the infrared rays in a narrow space near the driver's seat, it leads to an increase in the cost of the device, which is not always optimal.

そこで、本発明の目的は、通常の可視光で作動して運転者の位置を確認するドライバモニタリングシステム(DMS)等を利用することにより、虚像投射映像の観察者である運転者の視点位置を検出して、より好適な虚像投射映像の制御を行うことが可能で実用的にも優れたヘッドアップディスプレイ装置を提供することにある。 Therefore, an object of the present invention is to obtain the viewpoint position of the driver who is an observer of the virtual image projection image by using a driver monitoring system (DMS) or the like that operates with normal visible light to confirm the position of the driver. It is an object of the present invention to provide a practically excellent head-up display device capable of detecting and controlling a more suitable virtual image projection image.

本発明のうち、代表的なものの概要を簡単に説明すれば、以下の請求項にも記載されるとおりであり、本発明によれば、一例として、光源および表示素子を有して映像を形成する映像表示装置と、映像表示装置から出射された映像光をウィンドシールド上に投射して反射させることで虚像を乗り物の前方に表示する映像投射手段と、運転者の視点を検知する視点検知手段と、を備え、乗り物の所定の状態において、映像表示装置から出射された映像光を運転者の視点を検知するための照明光として利用して、照明光は、全体が単一色である、ヘッドアップディスプレイ装置が提供される。 A brief description of the representative of the present invention is as described in the following claims. According to the present invention, an image is formed by having a light source and a display element as an example. An image display device that displays an imaginary image in front of a vehicle by projecting and reflecting the image light emitted from the image display device on a windshield, and a viewpoint detection means that detects the driver's viewpoint. And, in a predetermined state of the vehicle, the image light emitted from the image display device is used as an illumination light for detecting the driver's viewpoint, and the illumination light is a single color as a whole. An up-display device is provided.

本発明のうち、代表的なものによって得られる効果を簡単に説明すれば以下のとおりである。すなわち、本発明の代表的な実施の形態によれば、夜間などの十分な可視光が得られない環境下においても運転者の視点位置を確実に確認して良好な虚像投射映像の制御が可能な実用的にも優れたヘッドアップディスプレイ装置を経済的に提供することが可能となる。 The following is a brief description of the effects obtained by the representative of the present invention. That is, according to a typical embodiment of the present invention, it is possible to reliably confirm the viewpoint position of the driver and control a good virtual image projection image even in an environment where sufficient visible light cannot be obtained such as at night. It is possible to economically provide a practically excellent head-up display device.

本発明の実施の形態に係るヘッドアップディスプレイ装置の全体構成の一例を示した図である。It is a figure which showed an example of the whole structure of the head-up display apparatus which concerns on embodiment of this invention. ヘッドアップディスプレイ装置の実装形態の詳細構成を示した図である。It is a figure which showed the detailed structure of the mounting form of a head-up display device. ヘッドアップディスプレイ装置のミラー駆動部の構成の例を示した図である。It is a figure which showed the example of the structure of the mirror drive part of the head-up display device. ヘッドアップディスプレイ装置のミラー駆動部の動作の例を示した図である。It is a figure which showed the example of the operation of the mirror drive part of a head-up display device. ヘッドアップディスプレイ装置におけるHUD制御システムの一例を示すブロック図である。It is a block diagram which shows an example of the HUD control system in a head-up display apparatus. ヘッドアップディスプレイ装置のHUD制御システムを構成する情報取得部(デバイス)の一例を示すブロック図である。It is a block diagram which shows an example of the information acquisition part (device) which constitutes the HUD control system of a head-up display apparatus. ヘッドアップディスプレイ装置のHUD用視点検出システムにおける視点検出制御部の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the viewpoint detection control unit in the viewpoint detection system for HUD of a head-up display device. ヘッドアップディスプレイ装置による運転者の視点位置検出を説明する全体構成図である。It is an overall block diagram explaining the viewpoint position detection of a driver by a head-up display device. ヘッドアップディスプレイ装置における運転者の視点位置検出動作(位置調整)の詳細を示すフロー図である。It is a flow diagram which shows the detail of the viewpoint position detection operation (position adjustment) of a driver in a head-up display device. ヘッドアップディスプレイ装置における運転者の視点位置検出動作(位置調整)の原理を説明する図である。It is a figure explaining the principle of the viewpoint position detection operation (position adjustment) of a driver in a head-up display device. ヘッドアップディスプレイ装置の他の応用例である奥行方向の距離の検出について説明する図である。It is a figure explaining the detection of the distance in the depth direction which is another application example of a head-up display device. 上記奥行方向の距離の検出における動作原理ついて説明する図である。It is a figure explaining the operation principle in the detection of the distance in the depth direction.

以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において、同一部には原則として同一の符号を付し、その繰り返しの説明は省略する。一方で、ある図において符号を付して説明した部位について、他の図の説明の際に再度の図示はしないが同一の符号を付して言及する場合がある。また、以下に示す各実施例では、ヘッドアップディスプレイ(HUD)装置が自動車等の車両に設置される場合を例として説明するが、電車や航空機等の他の乗り物にも適用可能である。また、乗り物以外には、例えば、フォークリフト等の荷物運搬車両に用いられるHUD装置にも適用可能である。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In addition, in all the drawings for explaining the embodiment, the same parts are in principle the same reference numerals, and the repeated description thereof will be omitted. On the other hand, the parts described with reference numerals in one figure may be referred to with the same reference numerals in the explanation of other figures, although they are not shown again. Further, in each of the following embodiments, the case where the head-up display (HUD) device is installed in a vehicle such as an automobile will be described as an example, but the present invention can also be applied to other vehicles such as trains and aircraft. In addition to vehicles, it can also be applied to HUD devices used for luggage carrying vehicles such as forklifts.

図1は、本発明の一実施の形態に係るヘッドアップディスプレイ(HUD)装置の構成の一例について概要を示した図である。このHUD装置1は、図示しない筐体内に配置された光源からの光を変調して投射する映像表示装置30の光を、光学素子43を介し、さらには、凹面ミラー52により反射させて、車両2のウィンドシールド3に投射して観察者(運転者)の視点5へ入射することにより、所望の投射映像を観察者の視点の位置に対応して表示するものである。なお、この図では、異なる観察者(運転者)の視点5の位置(A,B,C)に対応した凹面ミラー52の回転位置、投射映像のウィンドシールド3(内面側)への投射位置、さらには、それによって表示される虚像が、それぞれ、A,B,Cにより示されている。また、図1には、上記の映像表示装置30や凹面ミラー52を含むHUD装置1を制御する制御部20が、さらには、運転者の視点等を含めた姿勢を監視するためのドライバモニタリングシステム(DMS)(視点検出システム)6を構成するカメラ(車内)115が示されている。 FIG. 1 is a diagram showing an outline of an example of a configuration of a head-up display (HUD) device according to an embodiment of the present invention. The HUD device 1 reflects the light of the image display device 30 that modulates and projects the light from a light source arranged in a housing (not shown) via the optical element 43 and further by the concave mirror 52, and the vehicle By projecting onto the windshield 3 of 2 and incident on the viewpoint 5 of the observer (driver), a desired projected image is displayed corresponding to the position of the viewpoint of the observer. In this figure, the rotation position of the concave mirror 52 corresponding to the position (A, B, C) of the viewpoint 5 of a different observer (driver), the projection position of the projected image on the windshield 3 (inner surface side), and the projection position. Furthermore, the virtual images displayed thereby are indicated by A, B, and C, respectively. Further, in FIG. 1, a driver monitoring system for monitoring an attitude including a driver's viewpoint and the like by a control unit 20 that controls the HUD device 1 including the video display device 30 and the concave mirror 52. (DMS) The camera (inside the vehicle) 115 constituting the (viewpoint detection system) 6 is shown.

なお、ここで、被投射部材はウィンドシールド3に限られず、映像が投射される部材であれば、コンバイナなど他の部材とすることも可能である。また、映像表示装置30は、例えば、バックライトを有するプロジェクタやLCD(Liquid Crystal Display)等により構成される。自発光型のVFD(Vacuum Fluorescent Display)等であってもよく、あるいは、投射装置によりスクリーンに映像を表示するものであってもよい。このようなスクリーンとしては、例えば、マイクロレンズを2次元状に配置したマイクロレンズアレイにより構成してもよい。 Here, the projected member is not limited to the windshield 3, and any member such as a combiner can be used as long as it is a member on which an image is projected. Further, the image display device 30 is composed of, for example, a projector having a backlight, an LCD (Liquid Crystal Display), or the like. It may be a self-luminous VFD (Vacuum Fluorescent Display) or the like, or it may be one that displays an image on a screen by a projection device. Such a screen may be configured by, for example, a microlens array in which microlenses are arranged two-dimensionally.

凹面ミラー52は、例えば、自由曲面ミラーや光軸非対称の形状を有するミラー等により構成される。より具体的には、凹面ミラー52の形状は、虚像の歪みを低減するために、例えば、その上部の領域(すなわち、ここで反射した光線はウィンドシールド3の下方で反射するため、相対的に運転者の視点5との距離が短くなる)では、拡大率が大きくなるように相対的に曲率半径を小さくする。一方、凹面ミラー52の下部の領域(すなわち、ここで反射した光線はウィンドシールド3の上方で反射するため、相対的に運転者の視点5との距離が長くなる)では、拡大率が小さくなるように相対的に曲率半径を大きくする。映像表示装置30を凹面ミラー52の光軸に対して傾斜させて配置することで、上記のような像倍率の違いを補正して、発生する歪みそのものを低減するようにしてもよい。 The concave mirror 52 is composed of, for example, a free curved mirror, a mirror having an optical axis asymmetric shape, or the like. More specifically, the shape of the concave mirror 52 is relatively such that, in order to reduce the distortion of the virtual image, for example, the region above it (ie, the light rays reflected here are reflected below the windshield 3). (The distance from the driver's viewpoint 5 becomes shorter), the radius of curvature is made relatively small so that the enlargement ratio becomes large. On the other hand, in the lower region of the concave mirror 52 (that is, the light rays reflected here are reflected above the windshield 3, the distance from the driver's viewpoint 5 is relatively long), the magnification becomes small. The radius of curvature is relatively large. By arranging the image display device 30 at an angle with respect to the optical axis of the concave mirror 52, the difference in image magnification as described above may be corrected and the distortion itself generated may be reduced.

運転者は、ウィンドシールド3に投射された映像を見ることで、透明のウィンドシールド3を通してその前方に虚像として上記映像を視認するが、その際、凹面ミラー52の角度を調整することで映像をウィンドシールド3に投射する位置を調整することにより、運転者が見る位置に対して、虚像の表示位置を上下方向に調整可能となっている。なお、虚像として表示する内容は特に限定されず、例えば、車両情報やナビゲーション情報、図示しないカメラ映像(監視カメラやアラウンドビュアー等)で撮影した前方の風景の映像などを適宜表示することができる。 By seeing the image projected on the windshield 3, the driver visually recognizes the above image as a virtual image in front of the transparent windshield 3, but at that time, the image is displayed by adjusting the angle of the concave mirror 52. By adjusting the position of projection on the windshield 3, the display position of the virtual image can be adjusted in the vertical direction with respect to the position seen by the driver. The content to be displayed as a virtual image is not particularly limited, and for example, vehicle information, navigation information, and an image of the landscape in front taken by a camera image (surveillance camera, around viewer, etc.) (not shown) can be appropriately displayed.

また、上記の符号115は、ハンドルの一部に取り付けられ、例えば、通常の可視光下で運転者の視点5や姿勢を検出するカメラである。しかしながら、このカメラは、必ずしも上述したようにハンドルの一部に取り付けられる必要はなく、運転者の視点5等を検出が可能であればよく、例えば、ダッシュボードの一部、または、ウィンドシールド3の一部に取り付けられてもよい。 Further, the reference numeral 115 is a camera attached to a part of the steering wheel, for example, to detect the driver's viewpoint 5 and posture under normal visible light. However, this camera does not necessarily have to be attached to a part of the steering wheel as described above, and it is sufficient if it can detect the driver's viewpoint 5 and the like, for example, a part of the dashboard or the windshield 3. It may be attached to a part of.

図2には、上記HUD装置1の詳細構造の一例が示されており、ここでは上述した筐体が符号61と65で示される。また、映像表示装置30はその内部に上記の凹面ミラー52を含んで構成されている。さらに、ここでは、光学素子としての歪み補正レンズ等が符号43により示されている。 FIG. 2 shows an example of the detailed structure of the HUD device 1, where the above-mentioned housings are indicated by reference numerals 61 and 65. Further, the image display device 30 includes the concave mirror 52 inside thereof. Further, here, a distortion correction lens or the like as an optical element is indicated by reference numeral 43.

また、本例では、図からも明らかなように、筐体61、65の内部には、側面に一対で形成された軸によって、凹面ミラー52が、僅かな角度範囲で回動可能に、配置されている。さらには、下部の筐体65の底部には、制御部等が実装されるメイン基板70と共に、モータやワームギアやホイル等の移動機構からなるミラー駆動部42がネジ等の着脱機構により取り付けられている。すなわち、このミラー駆動部42により、上述した凹面ミラー52の傾斜角度を僅かな角度範囲で変化させることが可能となっている。 Further, in this example, as is clear from the figure, the concave mirror 52 is arranged inside the housings 61 and 65 so as to be rotatable within a slight angle range by a pair of axes formed on the side surfaces. Has been done. Further, on the bottom of the lower housing 65, a mirror drive unit 42 composed of a moving mechanism such as a motor, a worm gear, or a foil is attached by a attachment / detachment mechanism such as a screw together with a main board 70 on which a control unit or the like is mounted. There is. That is, the mirror driving unit 42 makes it possible to change the tilt angle of the concave mirror 52 described above within a slight angle range.

図3は、凹面ミラー52の傾斜角度を変化させるためのミラー駆動部42の実装例について概要を示した図である。ここでは、ミラー駆動部42は、図3(a)にも示すように、ケース421内に、少なくとも、高速回転から低速回転まで広い範囲でその回転速度が制御可能な電動モータ422、ワームギア423、当該モータの出力軸とワームギアの間に組み合わせた複数の歯車424を備えている。このミラー駆動部42は、図3(b)にも示すように、筺体50の外周部、より具体的には、上述した光学部品保持外装ケース55の下端部において、そのワームギア423が、一部の切欠き部を介して、凹面ミラー52の下端部に形成されたワームホイル411と噛み合うように取り付けられる。 FIG. 3 is a diagram showing an outline of a mounting example of a mirror driving unit 42 for changing the tilt angle of the concave mirror 52. Here, as shown in FIG. 3A, the mirror drive unit 42 has an electric motor 422, a worm gear 423, whose rotation speed can be controlled in a wide range from high-speed rotation to low-speed rotation, at least in the case 421. It includes a plurality of gears 424 combined between the output shaft of the motor and the worm gear. As shown in FIG. 3B, the mirror drive unit 42 has a part of the worm gear 423 at the outer peripheral portion of the housing 50, more specifically, at the lower end portion of the optical component holding outer case 55 described above. It is attached so as to mesh with the worm foil 411 formed at the lower end portion of the concave mirror 52 via the notch portion of.

なお、上述したミラー駆動部42の構成によれば、図4にも示すように、低速から高速までの広い範囲で回転制御が可能な電動モータ422の回転が、複数の歯車424を介して所望の回転速度/駆動力に変換されてワームギア423に伝達され、さらに、凹面ミラー52の下端部に形成されたワームホイル411により、凹面ミラー52を、回転軸を中心に回転しながら前後方向に移動して(図の矢印を参照)、凹面ミラー52を所望の傾斜角度に調整することができる。なお、この図では、複数の歯車424は、図示を容易にするため間隔をもって示されているが、実際には、これらは噛み合っていることは、当業者であれば当然であろう。 According to the configuration of the mirror drive unit 42 described above, as shown in FIG. 4, rotation of the electric motor 422 capable of rotation control in a wide range from low speed to high speed is desired via a plurality of gears 424. The concave mirror 52 is moved in the front-rear direction while rotating around the rotation axis by the worm wheel 411 formed at the lower end of the concave mirror 52, which is converted into the rotation speed / driving force of the worm gear 423. (See the arrow in the figure), the concave mirror 52 can be adjusted to the desired tilt angle. In this figure, the plurality of gears 424 are shown at intervals for ease of illustration, but in reality, it is natural for those skilled in the art that they are in mesh with each other.

続いて、HUD制御部20は、HUD装置1の動作を制御する機能を有しており、例えば図5に示すように、CPU(Central Processing Unit)などから構成されるECU21により、ソフトウェア(不揮発性メモリ22やメモリ23に格納)によって機能を実行する。マイコンやFPGA(Field Programmable Gate Array)等のハードウェアにより実装されていてもよい。HUD制御部20は、この図にも示すように、車両情報取得部10から取得した車両情報4等に基づいて、虚像として表示する映像を映像表示装置30を駆動することにより形成し、そして、これをミラー駆動部42により制御する凹面ミラー52によって反射させることでウィンドシールド3に投射する。これと共に、上述したミラー駆動部42により、以下にも示すように、凹面ミラー52の傾斜角度の制御を行う。また、HUD制御部20は、音声信号を出力するための音声出力部24と共に、音声を発生するためのスピーカ60を備えている。 Subsequently, the HUD control unit 20 has a function of controlling the operation of the HUD device 1, and as shown in FIG. 5, for example, the software (nonvolatile) is provided by the ECU 21 composed of a CPU (Central Processing Unit) or the like. The function is executed by (stored in the memory 22 or the memory 23). It may be implemented by hardware such as a microcomputer or FPGA (Field Programmable Gate Array). As shown in this figure, the HUD control unit 20 forms an image to be displayed as a virtual image by driving the image display device 30 based on the vehicle information 4 or the like acquired from the vehicle information acquisition unit 10. This is reflected by the concave mirror 52 controlled by the mirror drive unit 42 and projected onto the windshield 3. At the same time, the mirror drive unit 42 described above controls the tilt angle of the concave mirror 52 as shown below. Further, the HUD control unit 20 includes a speaker 60 for generating voice, as well as a voice output unit 24 for outputting voice signals.

情報取得部(デバイス)としては、例えば、図6にも示すように、車速センサ101、シフトポジションセンサ102、ヘッドライトセンサ104、照度センサ105、色度センサ106、エンジン始動センサ109、加速度センサ110、ジャイロセンサ111、温度センサ112を含んでおり、さらには、路車間通信用無線113、車車間通信用無線114、上述したカメラ(車内)115、カメラ(車外)116、GPS受信機117、VICS(登録商標)受信機118等を有する。しかしながら、これらのデバイスは、必ずしも、全てを備えている必要はなく、あるいは、さらに他の種類のデバイスを備えていてもよい。加えて、これらの備えたデバイスによって取得できる車両情報4は、適宜、用いることができる。このように、HUD制御システムは、車両2の各部に設置された各種のセンサ等の情報取得デバイスからなり、車両2で生じた各種イベントを検知したり、所定の間隔で走行状況に係る各種パラメータの値を検知・取得したりすることで車両情報を取得して出力することができる。 As the information acquisition unit (device), for example, as shown in FIG. 6, the vehicle speed sensor 101, the shift position sensor 102, the headlight sensor 104, the illuminance sensor 105, the chromaticity sensor 106, the engine start sensor 109, and the acceleration sensor 110 , Gyro sensor 111, temperature sensor 112, and further, road-to-vehicle communication radio 113, vehicle-to-vehicle communication radio 114, above-mentioned camera (inside vehicle) 115, camera (outside vehicle) 116, GPS receiver 117, VICS. (Registered trademark) Has a receiver 118 and the like. However, these devices do not necessarily have all, or may include yet other types of devices. In addition, the vehicle information 4 that can be acquired by these devices can be used as appropriate. In this way, the HUD control system consists of information acquisition devices such as various sensors installed in each part of the vehicle 2, detects various events occurring in the vehicle 2, and various parameters related to the driving situation at predetermined intervals. Vehicle information can be acquired and output by detecting and acquiring the value of.

なお、車速センサ101は、車速を把握ために設けられており、そして、エンジン始動センサ109は、エンジンの始動を把握するためであり、エンジン始動時にシステムを開始する。 The vehicle speed sensor 101 is provided for grasping the vehicle speed, and the engine start sensor 109 is for grasping the start of the engine, and starts the system when the engine is started.

さらに、図7には、上述したカメラ(車内)115である視点検出用のカメラ(この図7では、符号604で示す)を中心とした視点検出制御部6の構成の一例を示す。本例においても同様に、視点検出制御部6は、演算処理部であるECU600と、不揮発性メモリ611やメモリ612に格納したソフトウェア、上述したカメラ604を制御するカメラ制御部610等によって構成されており、カメラ制御部610を介して視点検出用カメラ604を操作・制御すると同時に、当該視点検出用カメラ604からの映像信号を基にして運転者の視点位置を検出する。なお、その検出信号は、通信部613を介して、上述したHUD制御部20へ送信される。 Further, FIG. 7 shows an example of the configuration of the viewpoint detection control unit 6 centered on the camera for viewpoint detection (indicated by reference numeral 604 in FIG. 7), which is the above-mentioned camera (inside the vehicle) 115. Similarly in this example, the viewpoint detection control unit 6 is composed of an ECU 600 which is an arithmetic processing unit, software stored in the non-volatile memory 611 and the memory 612, a camera control unit 610 which controls the above-mentioned camera 604, and the like. The viewpoint detection camera 604 is operated and controlled via the camera control unit 610, and at the same time, the driver's viewpoint position is detected based on the video signal from the viewpoint detection camera 604. The detection signal is transmitted to the above-mentioned HUD control unit 20 via the communication unit 613.

なお、以上に述べたHUD装置では、基本的には、ハンドルの一部に取り付けられ運転者の視点を検出する手段である視点位置検出用カメラ604により、運転者の視点の位置に対応して凹面ミラー52の傾斜角度を制御し、もって、車両2のウィンドシールド3に投射する虚像の位置を調整/制御することは言うまでもない。 In the HUD device described above, basically, the viewpoint position detection camera 604, which is attached to a part of the steering wheel and is a means for detecting the driver's viewpoint, corresponds to the position of the driver's viewpoint. Needless to say, the tilt angle of the concave mirror 52 is controlled, and the position of the virtual image projected on the windshield 3 of the vehicle 2 is adjusted / controlled.

<運転者の視点位置検出>
続いて、上記にその詳細な構成を説明したHUD装置1における運転者51の視点位置検出について説明する。なお、本発明では、運転者の視点位置検出を、別途、赤外線LED等の光源を設けることなしに、すなわち、本来HUD装置1を構成する主要な要素である映像表示装置30の照射光を利用することにより、夜間や屋内駐車場のような暗い環境下においても検出を可能とするものであり、その全体構成を図8に示す。
<Driver's viewpoint position detection>
Subsequently, the viewpoint position detection of the driver 51 in the HUD device 1 whose detailed configuration has been described above will be described. In the present invention, the driver's viewpoint position is detected without separately providing a light source such as an infrared LED, that is, by using the irradiation light of the image display device 30, which is a main element originally constituting the HUD device 1. By doing so, it is possible to detect even in a dark environment such as at night or in an indoor parking lot, and the overall configuration thereof is shown in FIG.

この図からも明らかなように、本発明では、HUD装置1により白色光(全白)を発生し、当該白色光を運転者51の視点位置検出のための照明光として利用する。すなわち、虚像を運転者51に対して表示するHUD装置1からの光(映像光)は、本来、運転者の視点に向けられており、そのため、当該HUD装置1からの白色光は、運転者51の眼を中心としてその近傍に向けて照射される。そこで、この照射される白色光を照明光として利用することによれば、別途、赤外線LED等の光源を使用することなしに、上述したドライバモニタリングシステム(DMS)を構成する車内カメラ115を利用して運転者51の視点位置を検知することが可能となる。これによれば、別途、赤外線LED等の光源を必要としないことから、その構成部品の増大を抑制してより安価な装置を実現することが可能となる。 As is clear from this figure, in the present invention, the HUD device 1 generates white light (all white), and the white light is used as illumination light for detecting the viewpoint position of the driver 51. That is, the light (image light) from the HUD device 1 that displays a virtual image to the driver 51 is originally directed to the driver's viewpoint, and therefore, the white light from the HUD device 1 is the driver. It is irradiated toward the vicinity of the 51 eye as the center. Therefore, by using the illuminated white light as the illumination light, the in-vehicle camera 115 constituting the driver monitoring system (DMS) described above is used without using a light source such as an infrared LED separately. It is possible to detect the viewpoint position of the driver 51. According to this, since a light source such as an infrared LED is not separately required, it is possible to suppress an increase in the number of components thereof and realize a cheaper device.

また、照明光としてHUD装置1による白色光を照射することから、後にも詳述するが、運転者51が運転席に着座して運転を開始するタイミング(例えば、エンジンキーを挿入した場合等)で行うことが好ましい。また、夜間に限らず、昼間でも暗めの環境(屋内駐車場のような場所)であれば利用が可能である。他方、昼間の明るい環境下では、HUD装置1による白色光を利用することなく、車内カメラ115により運転者51の視点位置を検知してもよく、さらには、車外の明るさを検知するために設けられた照度センサ(図6の符号105を参照)からの検知信号に基づき、適宜、HUD装置1による白色光を、その必要に応じて、点灯するようにしてもよい。 Further, since the white light from the HUD device 1 is emitted as the illumination light, the timing when the driver 51 sits in the driver's seat and starts the operation (for example, when the engine key is inserted), which will be described in detail later. It is preferable to do it in. In addition, it can be used not only at night but also in the daytime in a dark environment (a place like an indoor parking lot). On the other hand, in a bright daytime environment, the viewpoint position of the driver 51 may be detected by the in-vehicle camera 115 without using the white light by the HUD device 1, and further, in order to detect the brightness outside the vehicle. Based on the detection signal from the provided illuminance sensor (see reference numeral 105 in FIG. 6), the white light by the HUD device 1 may be appropriately turned on as necessary.

<運転者の視点位置検出動作(位置調整)>
次に、上述したHUD装置1における運転者51の視点位置検出動作(位置調整)の詳細について、図9のフローチャートを参照しながら以下に説明する。なお、上述からも明らかなように、本発明になるHUD装置では、HUD装置1により白色光(全白)を照射する(以下、「全白表示」や「HUD光」とも言う)ことにより運転者51の視点位置を検出し、その結果、ミラー駆動部42(図3または4を参照)によって虚像を表示する映像光の視点位置に対する方向を調整する。このことから、基本的には、車両が走行していないことを前提としており、例えば、車速センサ101(図6参照)からの車両の走行速度を監視しており、例えば、走行速度が所定の値に達したと判定された場合には、直ちに調整を中断してHUD装置の通常表示を行い、または、HUD装置による表示はしないようにすることが好ましい。
<Driver's viewpoint position detection operation (position adjustment)>
Next, the details of the viewpoint position detection operation (position adjustment) of the driver 51 in the above-mentioned HUD device 1 will be described below with reference to the flowchart of FIG. As is clear from the above, the HUD device according to the present invention is operated by irradiating white light (all white) with the HUD device 1 (hereinafter, also referred to as "all white display" or "HUD light"). The viewpoint position of the person 51 is detected, and as a result, the direction of the image light displaying the virtual image with respect to the viewpoint position is adjusted by the mirror driving unit 42 (see FIG. 3 or 4). From this, it is basically assumed that the vehicle is not traveling, for example, the traveling speed of the vehicle is monitored from the vehicle speed sensor 101 (see FIG. 6), and the traveling speed is predetermined, for example. When it is determined that the value has been reached, it is preferable to immediately interrupt the adjustment and display the normal display of the HUD device, or do not display by the HUD device.

まず、図9において、HUD装置1による運転者51の視点位置検出動作(位置調整)を開始すると、車両が始動状態であることを確認するため、例えば、エンジンキーの挿入に対応して、電源(イグニッション)がONであるか否かを判定する(S901)。その結果、「Yes」と判定された場合には、HUD装置1による表示を全白表示(「全面ホワイト表示」とも言う)にする(S902)。具体的には、演算処理部であるECU21によって映像表示装置30へ入力される映像信号を制御することにより、上記プロジェクタやLCD(Liquid Crystal Display)等から投射されるHUD光を、全体が単一色で横長矩形状の、すなわち、運転者である人間の顔の横幅に対応した表示光である、例えば、全白表示光に変更する。他方、上記の判定S901で「No」と判定された場合には、所定期間の経過後、再び、同じ判定を繰り返すこととなる。 First, in FIG. 9, when the viewpoint position detection operation (position adjustment) of the driver 51 by the HUD device 1 is started, in order to confirm that the vehicle is in the starting state, for example, in response to the insertion of the engine key, the power supply is supplied. It is determined whether or not (ignition) is ON (S901). As a result, when it is determined as "Yes", the display by the HUD device 1 is changed to full white display (also referred to as "full white display") (S902). Specifically, by controlling the video signal input to the video display device 30 by the ECU 21 which is an arithmetic processing unit, the entire HUD light projected from the projector, LCD (Liquid Crystal Display), or the like is produced in a single color. The display light is changed to a horizontally long rectangular shape, that is, an display light corresponding to the width of the human face as a driver, for example, an all-white display light. On the other hand, if it is determined as "No" in the above determination S901, the same determination is repeated again after the lapse of a predetermined period.

次に、上記の全面ホワイト表示の状態で、HUD装置1のミラー駆動部42(図5)を駆動することにより、凹面ミラー52を回転移動する(S903)。なお、この回転移動は、運転者51の顔面上の一定範囲を往復運動しながら、その後、運転者51の視点を検出するまで行う(S904)。すなわち、HUD装置1からの全面ホワイト表示は、図10(a)にも示すように、通常、運転者51の顔面上の眼球近傍において行うように設定されている。そのため、凹面ミラー52を一定範囲で往復して移動することによれば、図10(b)~(c)に示すように、HUD装置1の全面ホワイト表示を運転者51の顔面上を移動しながら、最終的には、図10(d)に示すように、運転者51眼球の近傍に、確実に、照射することが可能となる。この時、DMS6により、運転者51に当るHUD光を確認しながら、HUD光が目の中心に来るように凹面ミラー52を調整する(図9(d)の位置)ことが好ましいであろう。 Next, the concave mirror 52 is rotationally moved by driving the mirror drive unit 42 (FIG. 5) of the HUD device 1 in the state of the above-mentioned white display on the entire surface (S903). This rotational movement is performed while reciprocating in a certain range on the face of the driver 51 until the viewpoint of the driver 51 is detected (S904). That is, as shown in FIG. 10A, the entire white display from the HUD device 1 is usually set to be performed in the vicinity of the eyeball on the face of the driver 51. Therefore, by moving the concave mirror 52 back and forth within a certain range, as shown in FIGS. 10 (b) to 10 (c), the entire white display of the HUD device 1 is moved on the face of the driver 51. However, in the end, as shown in FIG. 10D, it is possible to reliably irradiate the vicinity of the driver 51 eyeball. At this time, it is preferable to adjust the concave mirror 52 so that the HUD light comes to the center of the eye while checking the HUD light hitting the driver 51 by the DMS 6 (position in FIG. 9D).

このことによれば、上述したDMS6を構成する車内カメラ115を利用して運転者51の視点位置の検出を確実に実行することが可能となる。他方、上記の判定(運転者51の視点を検出:S904)の結果、「No」が所定の時間継続した場合、より具体的には、視点未検出時間が10秒以上経過したか否かを判定し(S905)、その結果「No」の場合には、処理は、再度、上記凹面ミラー52の移動(S903)へ戻り、他方、「Yes」の場合、すなわち、運転者51の検出に失敗した場合には、上記凹面ミラー52をデフォルト位置に戻し(S906)、一連の処理を終了(位置調整終了)する。そして、その後、HUDの通常表示へ移行する。なお、車内カメラ115を利用しての運転者51の視点位置の検出は、得られた運転者51の顔面映像を映像分析により抽出することにより実現可能であることは、当業者であれば容易に理解されるであろう。 According to this, it is possible to reliably detect the viewpoint position of the driver 51 by using the in-vehicle camera 115 constituting the DMS 6 described above. On the other hand, as a result of the above determination (detection of the viewpoint of the driver 51: S904), when "No" continues for a predetermined time, more specifically, whether or not the viewpoint undetected time has elapsed for 10 seconds or more. The determination (S905) is performed, and if the result is "No", the process returns to the movement of the concave mirror 52 (S903) again, while in the case of "Yes", that is, the detection of the driver 51 fails. If so, the concave mirror 52 is returned to the default position (S906), and a series of processes is completed (position adjustment is completed). Then, the process shifts to the normal display of the HUD. It is easy for those skilled in the art to be able to detect the viewpoint position of the driver 51 using the in-vehicle camera 115 by extracting the obtained facial image of the driver 51 by video analysis. Will be understood.

また、上記判定(運転者51の視点を検出:S904)の結果が「Yes」の場合には、上述した実施例では、さらに、車内カメラ115により撮像された映像の映像分析により、運転席での運転者51の着座状態を検知または判定して、その結果を表示する。すなわち、本例では、まず、上記で検出した運転者51の視点がHUD装置1からの全面白色光の中心にあるか否かを判定する(S907)。さらに、運転者51の視点の奥行方向の位置が、ヘッドレストの近くにあるか、すなわち、正しい位置に着席しているか否かを判定する(S908)。 Further, when the result of the above determination (detecting the viewpoint of the driver 51: S904) is "Yes", in the above-described embodiment, further, by video analysis of the video captured by the in-vehicle camera 115, in the driver's seat. The seated state of the driver 51 is detected or determined, and the result is displayed. That is, in this example, first, it is determined whether or not the viewpoint of the driver 51 detected above is at the center of the entire white light from the HUD device 1 (S907). Further, it is determined whether or not the position in the depth direction of the viewpoint of the driver 51 is near the headrest, that is, whether or not the driver is seated in the correct position (S908).

その後、上記の判定S907およびS908において、いずれも「Yes」と判定された場合には、上述した凹面ミラー52の移動を停止し(S909)、一連の処理を終了する。この時、HUD装置1による全面ホワイト表示も、同時に、停止する。他方、判定S907において「No」と判定された場合には、凹面ミラー52の移動(S903)へ戻り、さらに、上記の判定(運転者51の視点の検出:S904)と(視点がHUD光の中心かの判定:S907)を繰り返す。 After that, when both of the determinations S907 and S908 are determined to be "Yes", the movement of the concave mirror 52 described above is stopped (S909), and a series of processes is terminated. At this time, the entire white display by the HUD device 1 is also stopped at the same time. On the other hand, when the determination is "No" in the determination S907, the process returns to the movement of the concave mirror 52 (S903), and further, the above determination (detection of the viewpoint of the driver 51: S904) and (the viewpoint is the HUD light). Determining whether it is the center: Repeat S907).

一方、判定S908において「No」と判定された場合には、運転者51が正しい位置に着席していないことを意味しており、HUD装置1の表示を「正しい位置に着席して下さい」等、正しい位置に着席することを促す警告表示に、例えば、3秒間のような所定の期間だけ変更する(S910)。なお、この状態では、たとえHUD装置1により警告を表示しても、見てもらえない可能性が高いことから、かかる場合には、HUD装置1による表示に替えて、または、それに加えて、例えば、上記図5のスピーカ60により、音声出力による警告をも行うことがより有効であろう。 On the other hand, if it is determined as "No" in the determination S908, it means that the driver 51 is not seated in the correct position, and the display of the HUD device 1 "Please sit in the correct position" or the like. , The warning display prompting the user to sit in the correct position is changed for a predetermined period such as 3 seconds (S910). In this state, even if the warning is displayed by the HUD device 1, there is a high possibility that the warning will not be seen. Therefore, in such a case, the display may be replaced with the display by the HUD device 1, or in addition to the display, for example. It would be more effective to give a warning by voice output by the speaker 60 of FIG.

その後、さらに、上記した警告の表示が最初の警告(初回)であるか否かを判定し(S911)、その結果、初回(「Yes」)と判定された場合には、上述した凹面ミラー52の移動(S903)へ戻って上記のステップを繰り返す。なお、その際には、警告表示を全面ホワイト表示に戻す。他方、最初の警告(初回)ではなく、警告は既に行われている(「No」)と判断された場合には、運転者の位置が不正であるとして、凹面ミラー52をデフォルト位置に戻し(S912)、一連の処理を終了し(位置調整終了)、その後、HUD装置1の通常表示へと移行する。 After that, it is further determined whether or not the above-mentioned warning display is the first warning (first time) (S911), and as a result, if it is determined to be the first time (“Yes”), the above-mentioned concave mirror 52 is further determined. Return to the movement (S903) and repeat the above steps. In that case, the warning display is returned to the white display. On the other hand, if it is determined that the warning has already been issued (“No”) instead of the first warning (first time), the driver's position is regarded as incorrect and the concave mirror 52 is returned to the default position ("No"). S912), a series of processes are completed (position adjustment is completed), and then the normal display of the HUD device 1 is started.

<その他の応用例>
なお、上述のように、車内カメラ115からのカメラ映像のみで運転者51の視点5の位置を検知する場合、特に、その奥行方向の距離が不明(または、不正確)となり、十分な精度を得ることができない場合が生じる。そこで、運転者51の視点5の位置に加えて、当該視点までの距離(奥行)をも正確に測ることが好ましく、そのための応用例について、以下に詳細に述べる。
<Other application examples>
As described above, when the position of the viewpoint 5 of the driver 51 is detected only by the camera image from the in-vehicle camera 115, the distance in the depth direction is unknown (or inaccurate), and sufficient accuracy is obtained. Sometimes it cannot be obtained. Therefore, it is preferable to accurately measure the distance (depth) to the viewpoint in addition to the position of the viewpoint 5 of the driver 51, and an application example for that purpose will be described in detail below.

上述した実施例においては、HUD装置1から投射される全体が単一色で横長矩形状(さらに、垂直方向の幅をも一定にすることが好ましい)のHUD光を、運転者51の顔面上で上下に移動することについて述べた。すなわち、凹面ミラー52を一定速度で移動させることによれば、HUD装置1から投射されるHUD光は、図11にも示すように、運転者51の顔が座席の手前(ハンドル側)にある程、光源から顔までの距離が小さく、これとは反対に、顔が奥(ヘッドレスト側)にある程、光源から顔までの距離が大きくなる。このことから、凹面ミラー52を一定速度で移動した場合には、顔が奥にある程、HUD光の移動量が小さく、一方、奥にある程、HUD光の移動量も大きくなる(図11の矢印を参照)。 In the above-described embodiment, the HUD light projected from the HUD device 1 in a single color and a horizontally long rectangular shape (preferably, the width in the vertical direction is also constant) is emitted on the face of the driver 51. I mentioned moving up and down. That is, according to moving the concave mirror 52 at a constant speed, the HUD light projected from the HUD device 1 has the face of the driver 51 in front of the seat (handle side) as shown in FIG. The distance from the light source to the face is small, and on the contrary, the farther the face is (headrest side), the larger the distance from the light source to the face. From this, when the concave mirror 52 is moved at a constant speed, the amount of movement of the HUD light is smaller as the face is deeper, while the amount of movement of the HUD light is larger as the face is deeper (FIG. 11). See the arrow).

このことを利用すれば、単位時間あたりの、HUD光境界の移動量(ピクセル数)を求めることにより距離に換算でき、運転者51の奥行方向の距離が把握できる。これを図12に示しており、運転者51の顔が手前(ハンドル側)にある場合(図12(a)参照)の、時刻t=t、t、tでの運転者51の顔面上でのHUD光の垂直方向の幅、あるいは、その移動量L、Lは、図からも明らかなように、運転者51の顔が奥(ヘッドレスト側)にある場合(図12(b)参照)の時刻t=t、t、tでの運転者の顔面上でのHUD光の垂直方向の幅、あるいは、その移動量L’、L’より小さい(L<L’、L<L’)。なお、上述した運転者51の奥行方向での距離の換算は、上記のECU600によって簡単に実現できることは自明であろう。 By utilizing this, the distance can be converted into a distance by obtaining the movement amount (number of pixels) of the HUD optical boundary per unit time, and the distance in the depth direction of the driver 51 can be grasped. This is shown in FIG. 12, and when the face of the driver 51 is in front (handle side) (see FIG. 12 (a)), the driver 51 at time t = t 0 , t 1 , t 2 . As is clear from the figure, the vertical width of the HUD light on the face, or the amount of movement L 1 and L 2 , is when the face of the driver 51 is in the back (headrest side) (FIG. 12 (FIG. 12). b) Refer to) the vertical width of the HUD light on the driver's face at time t = t 0 , t 1 , t 2 or its movement amount smaller than L 1 ', L 2 '(L 1 ). <L 1 ', L 2 <L 2 '). It should be obvious that the above-mentioned conversion of the distance of the driver 51 in the depth direction can be easily realized by the above-mentioned ECU 600.

なお、以上の説明では、運転者の視点位置検出動作(位置調整)を行うためにHUD装置1によって発生するHUD光については、これを白色光(全白)であるとして説明したが、これは、車内カメラ115から運転者の視点までの距離をより正確に測るために選択されたものである。しかしながら、本発明では、これに限定されることなく、白色光に代えて、例えば、人間の眼にとって優しい黄緑等の他の色の全体単一色光を採用することも可能である。また、HUD光を、全体が単一色の横長矩形状だけではなく、さらに、車内カメラ115からの映像の分析(例えば、移動量の分析)等を考慮して、矩形形状の光内において、さらに、縦横に横切る格子状のグリッド表示を加えることも可能であろう。 In the above description, the HUD light generated by the HUD device 1 for performing the driver's viewpoint position detection operation (position adjustment) has been described as white light (all white). , It was selected to measure the distance from the in-vehicle camera 115 to the driver's viewpoint more accurately. However, in the present invention, the present invention is not limited to this, and instead of the white light, it is also possible to adopt a whole single color light of another color such as yellowish green which is gentle to the human eye. Further, the HUD light is not only in the shape of a horizontally long rectangle having a single color as a whole, but also in the light having a rectangular shape in consideration of the analysis of the image from the in-vehicle camera 115 (for example, the analysis of the amount of movement). It would also be possible to add a grid-like grid display that crosses vertically and horizontally.

以上に詳細に述べたように、本発明の実施例になるHUD装置1によれば、当該装置において通常に搭載される、可視光で作動して運転者の位置を確認するドライバモニタリングシステム(DMS)等を利用することによって、虚像投射映像の観察者である運転者の視線位置を確実に検出することが可能となる。このことにより、より好適に虚像投射映像の制御を行うことが可能で、実用的にも、かつ、経済的にも優れたヘッドアップディスプレイ装置が実現される。 As described in detail above, according to the HUD device 1 which is an embodiment of the present invention, a driver monitoring system (DMS) which is normally mounted in the device and operates with visible light to confirm the position of the driver. ) Etc. makes it possible to reliably detect the line-of-sight position of the driver who is the observer of the virtual image projection image. As a result, it is possible to control the virtual image projection image more preferably, and a practically and economically excellent head-up display device is realized.

以上、本発明者によってなされた発明を実施例に基づき具体的に説明したが、本発明は上記の実施例に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることは言うまでもない。例えば、上記の実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。 Although the invention made by the present inventor has been specifically described above based on the examples, the present invention is not limited to the above examples, and various changes can be made without departing from the gist thereof. Needless to say. For example, the above-mentioned embodiment has been described in detail in order to explain the present invention in an easy-to-understand manner, and is not necessarily limited to the one including all the configurations described. Further, it is possible to replace a part of the configuration of one embodiment with the configuration of another embodiment, and it is also possible to add the configuration of another embodiment to the configuration of one embodiment. Further, it is possible to add / delete / replace a part of the configuration of each embodiment with another configuration.

本発明は、透明なガラス板等に映像を投影するヘッドアップディスプレイ装置に利用可能である。 The present invention can be used for a head-up display device that projects an image onto a transparent glass plate or the like.

1…HUD装置、2…車両、3…ウィンドシールド、4…車両情報、5…運転者の視点、6…視点検出システム(視点検出制御部)、20…制御部、21…ECU、22…不揮発性メモリ、23…メモリ、30…映像表示装置、42…ミラー駆動部、51…運転者、101…車速センサ、109…エンジン始動センサ。 1 ... HUD device, 2 ... vehicle, 3 ... windshield, 4 ... vehicle information, 5 ... driver's viewpoint, 6 ... viewpoint detection system (viewpoint detection control unit), 20 ... control unit, 21 ... ECU, 22 ... non-volatile Sex memory, 23 ... memory, 30 ... video display device, 42 ... mirror drive unit, 51 ... driver, 101 ... vehicle speed sensor, 109 ... engine start sensor.

Claims (10)

光源および表示素子を有して映像を形成する映像表示装置と、
前記映像表示装置から出射された映像光をウィンドシールド上に投射して反射させることで虚像を乗り物の前方に表示する映像投射手段と、
運転者の視点を検知する視点検知手段と、を備え、
前記乗り物の所定の状態において、前記映像表示装置から出射された映像光を前記運転者の視点を検知するための照明光として利用して、前記照明光は、全体が単一色である、ヘッドアップディスプレイ装置。
An image display device that has a light source and a display element to form an image,
An image projection means for displaying a virtual image in front of a vehicle by projecting the image light emitted from the image display device onto a windshield and reflecting it.
Equipped with a viewpoint detection means to detect the driver's viewpoint,
In a predetermined state of the vehicle, the image light emitted from the image display device is used as an illumination light for detecting the viewpoint of the driver, and the illumination light has a single color as a whole, head-up. Display device.
請求項1に記載のヘッドアップディスプレイ装置において、
前記映像投射手段は、前記照明光を前記運転者の顔に沿って上下に移動する手段を備えている、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 1,
The image projection means is a head-up display device including means for moving the illumination light up and down along the driver's face.
請求項2に記載のヘッドアップディスプレイ装置において、
前記運転者視点検知手段は、さらに、前記運転者の視点の奥行方向の位置を検出する、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 2,
The driver viewpoint detecting means is a head-up display device that further detects a position in the depth direction of the driver's viewpoint.
請求項1に記載のヘッドアップディスプレイ装置において、
前記照明光は、前記運転者の顔の横幅に対応した横幅を有する形状の光である、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 1,
The illumination light is a head-up display device having a width corresponding to the width of the driver's face.
請求項1に記載のヘッドアップディスプレイ装置において、
前記照明光は、矩形形状であり、さらに、グリッド表示を加えている、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 1,
The illumination light has a rectangular shape, and a grid display is added to the head-up display device.
請求項1に記載のヘッドアップディスプレイ装置において、
前記照明光は、白色光である、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 1,
The illumination light is a white light, a head-up display device.
請求項1に記載のヘッドアップディスプレイ装置において、
前記運転者視点検知手段は、さらに、その検出結果を音声により警告する手段を備えている、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 1,
The driver's viewpoint detecting means is a head-up display device further comprising means for warning the detection result by voice.
請求項1に記載のヘッドアップディスプレイ装置において、
前記乗り物の所定の状態は、前記乗り物の走行速度が所定の値に達していない状態である、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 1,
A predetermined state of the vehicle is a head-up display device in which the traveling speed of the vehicle does not reach a predetermined value.
請求項1に記載のヘッドアップディスプレイ装置において、
前記乗り物の所定の状態は、前記運転者が運転席に着座した状態を含む、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 1,
A predetermined state of the vehicle is a head-up display device including a state in which the driver is seated in the driver's seat.
請求項1に記載のヘッドアップディスプレイ装置において、
前記乗り物は車両であり、
前記乗り物の所定の状態は、前記運転者が前記乗り物を始動した状態を含む、ヘッドアップディスプレイ装置。
In the head-up display device according to claim 1,
The vehicle is a vehicle
A predetermined state of the vehicle includes a head-up display device including a state in which the driver has started the vehicle.
JP2022059318A 2017-11-24 2022-03-31 head-up display device Active JP7280995B2 (en)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2017225549 2017-11-24
JP2017225549 2017-11-24
JP2019556127A JP7053664B2 (en) 2017-11-24 2018-10-10 Head-up display device
PCT/JP2018/037687 WO2019102731A1 (en) 2017-11-24 2018-10-10 Head-up display device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019556127A Division JP7053664B2 (en) 2017-11-24 2018-10-10 Head-up display device

Publications (2)

Publication Number Publication Date
JP2022104965A true JP2022104965A (en) 2022-07-12
JP7280995B2 JP7280995B2 (en) 2023-05-24

Family

ID=66631561

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019556127A Active JP7053664B2 (en) 2017-11-24 2018-10-10 Head-up display device
JP2022059318A Active JP7280995B2 (en) 2017-11-24 2022-03-31 head-up display device

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2019556127A Active JP7053664B2 (en) 2017-11-24 2018-10-10 Head-up display device

Country Status (5)

Country Link
US (1) US11709369B2 (en)
JP (2) JP7053664B2 (en)
CN (1) CN111344184B (en)
DE (1) DE112018005630B4 (en)
WO (1) WO2019102731A1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6726674B2 (en) * 2015-10-15 2020-07-22 マクセル株式会社 Information display device
KR101912648B1 (en) * 2017-06-02 2018-10-29 콘티넨탈 오토모티브 게엠베하 Operating device foe head up display
JP6928570B2 (en) * 2018-03-22 2021-09-01 マクセル株式会社 Information display device

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08156646A (en) * 1994-12-02 1996-06-18 Fujitsu Ltd Display device
JP2008151992A (en) * 2006-12-18 2008-07-03 Nippon Seiki Co Ltd Headup display

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6774869B2 (en) * 2000-12-22 2004-08-10 Board Of Trustees Operating Michigan State University Teleportal face-to-face system
JP4841815B2 (en) 2004-07-23 2011-12-21 株式会社村上開明堂 Display device
JP2006248322A (en) * 2005-03-09 2006-09-21 Yazaki Corp Display device for vehicle
JP4640404B2 (en) * 2007-11-22 2011-03-02 トヨタ自動車株式会社 Vehicle driver state detection device
KR20090076242A (en) * 2008-01-08 2009-07-13 엘지전자 주식회사 Head up display device in vehicle and method for controlling an operation in thereof
JP2009229752A (en) * 2008-03-21 2009-10-08 Toshiba Corp Display device, display method and headup display
JP4472766B2 (en) * 2008-07-31 2010-06-02 本田技研工業株式会社 Vehicle information reporting device
JP4686586B2 (en) * 2008-09-19 2011-05-25 株式会社東芝 In-vehicle display device and display method
JP5234063B2 (en) 2010-08-16 2013-07-10 トヨタ自動車株式会社 Viewpoint position calculation device
DE102010040694A1 (en) * 2010-09-14 2012-03-15 Robert Bosch Gmbh Head-Up Display
JP5821179B2 (en) 2010-12-08 2015-11-24 トヨタ自動車株式会社 Vehicle information transmission device
JP2012141502A (en) 2011-01-05 2012-07-26 Nippon Seiki Co Ltd Viewpoint position detecting device, method for detecting viewpoint position, and stereographic display device
JP5842419B2 (en) * 2011-07-06 2016-01-13 日本精機株式会社 Head-up display device
US8502445B2 (en) 2011-07-18 2013-08-06 Universal Display Corporation RGBW OLED display for extended lifetime and reduced power consumption
JP2014199385A (en) 2013-03-15 2014-10-23 日本精機株式会社 Display device and display method thereof
DE102014208973A1 (en) 2014-05-13 2015-11-19 Volkswagen Aktiengesellschaft Device for a driver assistance system, method and computer program
JP6550690B2 (en) 2014-05-15 2019-07-31 株式会社リコー Display device, vehicle
JP6540988B2 (en) 2014-06-09 2019-07-10 日本精機株式会社 Head-up display device
JP6085275B2 (en) 2014-09-26 2017-02-22 矢崎総業株式会社 Head-up display device
JP6516151B2 (en) * 2015-04-24 2019-05-22 株式会社リコー INFORMATION PROVIDING DEVICE, INFORMATION PROVIDING METHOD, AND INFORMATION PROVIDING CONTROL PROGRAM
KR20170051013A (en) * 2015-11-02 2017-05-11 엘지전자 주식회사 Tethering type head mounted display and method for controlling the same
JP2017171146A (en) 2016-03-24 2017-09-28 カルソニックカンセイ株式会社 Head-up display device
JP6493361B2 (en) 2016-04-01 2019-04-03 株式会社デンソー Vehicle device, vehicle program, filter design program
US20190096359A1 (en) * 2016-06-09 2019-03-28 Mitsubishi Electric Corporation Display control device, display device, in-vehicle display system, and display control method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08156646A (en) * 1994-12-02 1996-06-18 Fujitsu Ltd Display device
JP2008151992A (en) * 2006-12-18 2008-07-03 Nippon Seiki Co Ltd Headup display

Also Published As

Publication number Publication date
WO2019102731A1 (en) 2019-05-31
JP7280995B2 (en) 2023-05-24
CN111344184A (en) 2020-06-26
DE112018005630T5 (en) 2020-07-23
US11709369B2 (en) 2023-07-25
US20210041707A1 (en) 2021-02-11
JP7053664B2 (en) 2022-04-12
JPWO2019102731A1 (en) 2020-12-17
DE112018005630B4 (en) 2021-11-25
CN111344184B (en) 2023-04-04

Similar Documents

Publication Publication Date Title
US11181743B2 (en) Head up display apparatus and display control method thereof
JP2022104965A (en) Head-up display device
JP6221942B2 (en) Head-up display device
KR20120011228A (en) A head-up display device for vehicle moving the projecting position of virtual images by the vehicle velocity
JP2011098634A (en) Head-up display device
JP2010128794A (en) Surrounding recognition assisting device for vehicle
JP2013112269A (en) In-vehicle display device
JP2021015166A (en) Head-up display and calibration method therefor
JP6023421B2 (en) Vehicle display system
EP3590752B1 (en) Head-up display device and onboard display system
JP2006047546A (en) Display device
JP7149192B2 (en) head-up display device
JP2019026198A (en) Head-up display device, and driver viewpoint detection method therefor
JP2018202920A (en) Head Up Display Device
JP2019015936A (en) Head-up display device
CN219266667U (en) Head-up display device
JP7099239B2 (en) Display device and display control device
JP2011188218A (en) Display device
WO2024105899A1 (en) Head-up display device and vehicle
KR20170103708A (en) Night vision device for vehicle with windshield glass embedded or coated with nanoparticles that selectively scatter light at the projected wavelength
JP2024073084A (en) Head-up display device and vehicle
KR20220038484A (en) Systems and methods for displaying an image on a windscreen
KR101298037B1 (en) Apparatus and method for head up display
JP2015001621A (en) Vehicle display device
JP2020158019A (en) Display control device, display control method and display control program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220331

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230331

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230418

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230512

R150 Certificate of patent or registration of utility model

Ref document number: 7280995

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150