JP6717856B2 - ヘッドアップディスプレイ装置 - Google Patents

ヘッドアップディスプレイ装置 Download PDF

Info

Publication number
JP6717856B2
JP6717856B2 JP2017565393A JP2017565393A JP6717856B2 JP 6717856 B2 JP6717856 B2 JP 6717856B2 JP 2017565393 A JP2017565393 A JP 2017565393A JP 2017565393 A JP2017565393 A JP 2017565393A JP 6717856 B2 JP6717856 B2 JP 6717856B2
Authority
JP
Japan
Prior art keywords
display
image
mirror
vehicle
virtual image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017565393A
Other languages
English (en)
Other versions
JPWO2017134865A1 (ja
Inventor
裕己 永野
裕己 永野
卓見 中田
卓見 中田
真希 花田
真希 花田
昭央 三沢
昭央 三沢
壮太 佐藤
壮太 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Maxell Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maxell Ltd filed Critical Maxell Ltd
Publication of JPWO2017134865A1 publication Critical patent/JPWO2017134865A1/ja
Application granted granted Critical
Publication of JP6717856B2 publication Critical patent/JP6717856B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • B60K35/23
    • B60K35/81
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/365Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0149Head-up displays characterised by mechanical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/50Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels
    • G02B30/52Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels the 3D volume being constructed from a stack or sequence of 2D planes, e.g. depth sampling systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3185Geometric adjustment, e.g. keystone or convergence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191Testing thereof
    • H04N9/3194Testing thereof including sensor feedback
    • B60K2360/23
    • B60K2360/334
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
    • B60R2300/308Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene by overlaying the real scene, e.g. through a head-up display on the windscreen
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0123Head-up displays characterised by optical features comprising devices increasing the field of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0149Head-up displays characterised by mechanical features
    • G02B2027/0154Head-up displays characterised by mechanical features with movable elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/64Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0464Positioning
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0464Positioning
    • G09G2340/0471Vertical positioning
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications

Description

本発明は、ヘッドアップディスプレイ装置の技術に関し、特に、AR(Augmented Reality:拡張現実)を利用したヘッドアップディスプレイ装置に適用して有効な技術に関するものである。
例えば、自動車等の車両において、通常は、車速やエンジン回転数等の情報は、ダッシュボード内の計器盤(インパネ)に表示される。また、カーナビゲーション等の画面は、ダッシュボードに組み込まれもしくはダッシュボード上に設置されたディスプレイに表示される。運転者がこれらの情報を視認する場合に視線を大きく移動させることが必要となることから、視線の移動量を低減させる技術として、車速等の情報やカーナビゲーションに係る指示等の情報をフロントガラス(ウィンドシールド)に投射して表示するヘッドアップディスプレイ(Head Up Display、以下では「HUD」と記載する場合がある)が知られている。
HUDも含む車載の表示装置では、車両が走行状況に応じて振動したり傾いたりする場合があるため、表示映像の視認性に問題が生じる場合や、適切な内容を表示できない場合等が生じ得る。
HUDにおける表示映像の視認性の改善等に関連する技術として、例えば、特開2013−237320号公報(特許文献1)には、車体に生じる回転成分を当該車体の傾きとして取得して、これに基づいて映像を3次元的に回転補正し、回転補正した映像を表示するための位置と傾きを決定して投影表示することが記載されている。
また、特開2007−55365号公報(特許文献2)には、HUDに距離スケールを表示する際に、ナビゲーション装置の地図データから、自車両が現在走行している走行地点情報と、自車両が走行するであろう走行予定地点情報とを取得し、これに基づいて自車両が走行する道路の傾斜角度を取得して、傾斜角度に応じた補正係数を用いて距離スケールの地面からの表示高さを補正して表示することが記載されている。
また、特開2006−7867号公報(特許文献3)には、検出した右左折、加減速等の走行状況に応じて、生成した映像の表示位置を、例えば、左折を検出した場合には左の方向にシフトし、右折を検出した場合には右の方向にシフトする、等のように制御することが記載されている。
また、特開2015−202842号公報(特許文献4)には、車両状態に従って運転者の視界が確保される方向に、映像情報の表示位置を移動させることが記載されている。
特開2013−237320号公報 特開2007−55365号公報 特開2006−7867号公報 特開2015−202842号公報
HUDは、映像をウィンドシールドに投射することで、当該映像を車外における虚像として運転者に認識させるものである。これに対し、ウィンドシールド越しに見える車外の実際の風景に虚像を重畳させるように表示することで、対象物等に係る情報を運転者に示すことを可能とするいわゆるAR機能を実現するHUD(以下では「AR−HUD」と記載する場合がある)が知られている。このようなAR−HUDにおいても、車両の走行状況等に応じて表示映像の視認性や適切性等を維持するための調整を行う必要がある。
この点、例えば、上記の特許文献1〜3に記載されたような技術を用いることで、車両が走行状況に応じて振動したり傾いたりする場合でも、表示映像(虚像)の視認性や適切性に与える影響を低減・解消させることが可能である。一方で、これらの技術では、HUDにおける虚像の表示領域内に表示される映像を対象として、その表示位置や表示内容等を走行状況に応じて調整するものである。しかしながら、HUDの場合は、運転者の視線の移動量を低減させるという効果を車両の走行状況に関わらず得られるようにすることも考慮して、表示領域内の映像の調整だけでなく表示領域自体についても位置を移動させる等の調整を行うのが望ましい。
この点、特許文献4に記載された技術では、車両状態に応じてHUDにおける表示領域自体を移動させることが可能である。しかしながら、特許文献4に記載された技術は、車両状態に変化が生じた場合でも運転者の視界を確保することを目的としたものであり、HUDにおける表示領域を運転者の障害とならないような位置に移動させるものである。このような技術をAR−HUDに適用すると、運転者の視界に含まれる実際の風景に虚像を重畳させることができなくなる場合が生じ、AR機能が実効性を有さないことになる。
そこで本発明の目的は、車両の走行状況に応じて虚像を実際の風景に適切に重畳させるよう表示することを可能とするヘッドアップディスプレイ装置を提供することにある。
本発明の前記ならびにその他の目的と新規な特徴は、本明細書の記述および添付図面から明らかになるであろう。
本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、以下のとおりである。
本発明の代表的な実施の形態によるヘッドアップディスプレイ装置は、車両のウィンドシールドに映像を投射することで、運転者に対して前記車両の前方の風景に重畳させて虚像を表示するヘッドアップディスプレイ装置であって、前記車両が検知することができる各種の車両情報を取得する車両情報取得部と、前記車両情報取得部が取得した前記車両情報に基づいて、前記映像の表示を制御する制御部と、前記制御部からの指示に基づいて前記映像を形成する映像表示装置と、前記映像表示装置が形成した前記映像を反射して前記ウィンドシールドに投射するミラーと、前記制御部からの指示に基づいて前記ミラーの角度を変化させるミラー駆動部と、前記運転者に対する前記虚像の表示距離を調整する表示距離調整機構と、を有するものである。
そして、前記制御部は、前記車両情報に基づいて、前記運転者に対して前記風景に前記虚像を重畳させて表示することが可能となるよう、前記ミラー駆動部を介して前記ミラーの角度を調整する。
本願において開示される発明のうち、代表的なものによって得られる効果を簡単に説明すれば以下のとおりである。
すなわち、本発明の代表的な実施の形態によれば、AR−HUDにおいて車両の走行状況に応じて虚像を実際の風景に適切に重畳させるよう表示することが可能となる。
本発明の一実施の形態であるヘッドアップディスプレイ装置の全体の構成例について概要を示した機能ブロック図である。 本発明の一実施の形態におけるヘッドアップディスプレイ装置の動作概念の例について概要を示した図である。 本発明の一実施の形態における車両情報の取得に係るハードウェア構成の例について概要を示した図である。 本発明の一実施の形態におけるヘッドアップディスプレイ装置の構成例について詳細を示した機能ブロック図である。 本発明の一実施の形態における表示距離調整に係る構成の例について詳細を示した図である。 本発明の一実施の形態における初期動作の例について概要を示したフローチャートである。 本発明の一実施の形態における通常動作の例について概要を示したフローチャートである。 本発明の一実施の形態における明るさレベル調整処理の例について概要を示したフローチャートである。 本発明の一実施の形態における虚像の表示領域の位置を上下に調整する例について概要を示した図である。 本発明の一実施の形態におけるミラー調整処理の例について概要を示したフローチャートである。 本発明の一実施の形態における振動補正処理の例について概要を示したフローチャートである。 (a)、(b)は、本発明の一実施の形態における機能性液晶フィルムを用いた表示距離調整の例について概要を示した図である。 本発明の一実施の形態における機能性液晶フィルムによる拡散板の構成例について概要を示した図である。 本発明の一実施の形態における複数枚のミラーを用いた表示距離調整の例について概要を示した図である。 本発明の一実施の形態における可動式レンズを用いた表示距離調整の例について概要を示した図である。 (a)、(b)は、本発明の一実施の形態における調光ミラーを用いた表示距離調整の例について概要を示した図である。 本発明の一実施の形態における調光ミラーの構成例について概要を示した図である。 本発明の一実施の形態における可動式拡散板を用いた表示距離調整の例について概要を示した図である。 (a)、(b)は、本発明の一実施の形態における可動式光学フィルタを用いた表示距離調整の例について概要を示した図である。 本発明の一実施の形態におけるくし状光学フィルタを用いた表示距離調整の例について概要を示した図である。 (a)、(b)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 (a)、(b)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 (a)、(b)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 (a)、(b)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 (a)、(b)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 (a)、(b)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 (a)、(b)、(c)、(d)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 (a)、(b)、(c)、(d)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 (a)、(b)、(c)、(d)は、本発明の他の一実施の形態におけるナビゲーション表示の形態の一例を示した図である。 上記のナビゲーション表示の形態を実施するための処理の一例を示すフローチャートである。 本発明の他の一実施の形態におけるナビゲーション情報表示の単眼視/両眼視制御を実現する構成例の概要を示した図である。 (a)、(b)、(c)は、上記ナビゲーション情報表示の単眼視/両眼視制御を実現するアイボックスの動作を説明する図である。 上記ナビゲーション情報表示の単眼視/両眼視制御を実現するための処理の一例を示すフローチャートである。 上記図35に示すフローにおける単眼視/両眼視好適判定処理(S260)の詳細内容を示すフローチャートである。
以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において、同一部には原則として同一の符号を付し、その繰り返しの説明は省略する。一方で、ある図において符号を付して説明した部位について、他の図の説明の際に再度の図示はしないが同一の符号を付して言及する場合がある。
<装置構成>
図2は、本発明の一実施の形態であるヘッドアップディスプレイ装置の動作概念の例について概要を示した図である。本実施の形態のAR−HUD1では、プロジェクタやLCD(Liquid Crystal Display)等からなる映像表示装置30に表示された映像を、ミラー51やミラー52(例えば、自由曲面ミラーや光軸非対称の形状を有するミラー等)により反射させて、車両2のウィンドシールド3に投射する。
運転者5は、ウィンドシールド3に投射された映像を見ることで、透明のウィンドシールド3を通してその前方に虚像として上記映像を視認する。本実施の形態では、後述するように、ミラー52の角度を調整することで、映像をウィンドシールド3に投射する位置を調整することにより、運転者5が見る虚像の表示位置を上下方向に調整することが可能である。また、後述する各種の手法を用いることで、虚像を近方(例えば2〜3m先)に表示したり、遠方(例えば30〜40m先)に表示したり等、表示距離を調整することも可能である。そして、虚像を車外の風景(道路や建物、人等)に重畳させるようにその表示位置や表示距離を調整することで、AR機能を実現する。
図1は、本発明の一実施の形態であるヘッドアップディスプレイ装置の全体の構成例について概要を示した機能ブロック図である。車両2に搭載されたAR−HUD1は、例えば、車両情報取得部10、制御部20、映像表示装置30、表示距離調整機構40、ミラー駆動部50、ミラー52、およびスピーカ60からなる。なお、図1の例では、車両2の形状を乗用車のように表示しているが、特にこれに限られず、車両一般に適宜適用することができる。
車両情報取得部10は、車両2の各部に設置された後述するような各種のセンサ等の情報取得デバイスからなり、車両2で生じた各種イベントを検知したり、所定の間隔で走行状況に係る各種パラメータの値を検知・取得したりすることで車両情報4を取得して出力する。車両情報4には、図示するように、例えば、車両2の速度情報やギア情報、ハンドル操舵角情報、ランプ点灯情報、外光情報、距離情報、赤外線情報、エンジンON/OFF情報、カメラ映像情報(車内/車外)、加速度ジャイロ情報、GPS(Global Positioning System)情報、ナビゲーション情報、車車間通信情報、および路車間通信情報等が含まれ得る。
制御部20は、AR−HUD1の動作を制御する機能を有し、例えば、CPU(Central Processing Unit)とこれにより実行されるソフトウェアにより実装される。マイコンやFPGA(Field Programmable Gate Array)等のハードウェアにより実装されていてもよい。制御部20は、図2にも示したように、車両情報取得部10から取得した車両情報4等に基づいて、虚像として表示する映像を映像表示装置30を駆動して形成し、これをミラー52等によって適宜反射させることでウィンドシールド3に投射する。そして、後述するような手法により、虚像の表示領域の表示位置を調整したり、虚像の表示距離を調整したり等の制御を行う。
映像表示装置30は、上述したように、例えば、プロジェクタやLCDにより構成されるデバイスであり、制御部20からの指示に基づいて虚像を表示するための映像を形成してこれを投射したり表示したりする。表示距離調整機構40は、制御部20からの指示に基づいて、表示される虚像の運転者5からの距離を調整するための機構であり、例えば、後述するような各種の表示距離調整手法のいずれか1つ以上を実装したものである。
ミラー駆動部50は、制御部20からの指示に基づいてミラー52の角度を調整し、虚像の表示領域の位置を上下方向に調整する。虚像の表示領域の位置の調整については後述する。スピーカ60は、AR−HUD1に係る音声出力を行う。例えば、ナビゲーションシステムの音声案内や、AR機能によって運転者5に警告等を通知する際の音声出力等を行うことができる。
図3は、本実施の形態のヘッドアップディスプレイ装置における車両情報4の取得に係るハードウェア構成の例について概要を示した図である。ここでは主に車両情報取得部10および制御部20の一部のハードウェア構成について示す。車両情報4の取得は、例えば、ECU(Electronic Control Unit)21の制御の下、ECU21に接続された各種のセンサ等の情報取得デバイスにより行われる。
これらの情報取得デバイスとして、例えば、車速センサ101、シフトポジションセンサ102、ハンドル操舵角センサ103、ヘッドライトセンサ104、照度センサ105、色度センサ106、測距センサ107、赤外線センサ108、エンジン始動センサ109、加速度センサ110、ジャイロセンサ111、温度センサ112、路車間通信用無線受信機113、車車間通信用無線受信機114、カメラ(車内)115、カメラ(車外)116、GPS受信機117、およびVICS(Vehicle Information and Communication System:道路交通情報通信システム、登録商標(以下同様))受信機118等の各デバイスを有する。必ずしもこれら全てのデバイスを備えている必要はなく、また、他の種類のデバイスを備えていてもよい。備えているデバイスによって取得できる車両情報4を適宜用いることができる。
車速センサ101は、車両2の速度情報を取得する。シフトポジションセンサ102は、車両2の現在のギア情報を取得する。ハンドル操舵角センサ103は、ハンドル操舵角情報を取得する。ヘッドライトセンサ104は、ヘッドライトのON/OFFに係るランプ点灯情報を取得する。照度センサ105および色度センサ106は、外光情報を取得する。測距センサ107は、車両2と外部の物体との間の距離情報を取得する。赤外線センサ108は、車両2の近距離における物体の有無や距離等に係る赤外線情報を取得する。エンジン始動センサ109は、エンジンON/OFF情報を検知する。
加速度センサ110およびジャイロセンサ111は、車両2の姿勢や挙動の情報として、加速度や角速度からなる加速度ジャイロ情報を取得する。温度センサ112は車内外の温度情報を取得する。路車間通信用無線受信機113および車車間通信用無線受信機114は、それぞれ、車両2と道路や標識、信号等との間の路車間通信により受信した路車間通信情報、および車両2と周辺の他の車両との間の車車間通信により受信した車車間通信情報を取得する。
カメラ(車内)115およびカメラ(車外)116は、それぞれ、車内および車外の状況の動画像を撮影してカメラ映像情報(車内/車外)を取得する。カメラ(車内)115では、例えば、運転者5の姿勢や、眼の位置、動き等を撮影する。得られた動画像を解析することにより、例えば、運転者5の疲労状況や視線の位置等を把握することが可能である。また、カメラ(車外)116では、車両2の前方や後方等の周囲の状況を撮影する。得られた動画像を解析することにより、例えば、周辺の他の車両や人等の移動物の有無、建物や地形、路面状況(雨や積雪、凍結、凹凸等)等を把握することが可能である。
GPS受信機117およびVICS受信機118は、それぞれ、GPS信号を受信して得られるGPS情報およびVICS信号を受信して得られるVICS情報を取得する。これらの情報を取得して利用するカーナビゲーションシステムの一部として実装されていてもよい。
図4は、本実施の形態のヘッドアップディスプレイ装置の構成例について詳細を示した機能ブロック図である。図4の例では、映像表示装置30がプロジェクタである場合を示しており、映像表示装置30は、例えば、光源31、照明光学系32、および表示素子33等の各部を有する。光源31は、投射用の照明光を発生する部材であり、例えば、高圧水銀ランプやキセノンランプ、LED(Light Emitting Diode)光源、レーザー光源等を用いることができる。照明光学系32は、光源31で発生した照明光を集光し、より均一化して表示素子33に照射する光学系である。表示素子33は、投射する映像を生成する素子であり、例えば、透過型液晶パネル、反射型液晶パネル、DMD(Digital Micromirror Device)(登録商標)パネル等を用いることができる。
制御部20は、より詳細には、ECU21、音声出力部22、不揮発性メモリ23、メモリ24、光源調整部25、歪み補正部26、表示素子駆動部27、表示距離調整部28、およびミラー調整部29等の各部を有する。ECU21は、図3に示したように、車両情報取得部10を介して車両情報4を取得するとともに、取得した情報を必要に応じて不揮発性メモリ23やメモリ24に記録、格納したり読み出したりする。不揮発性メモリ23には、各種制御のための設定値やパラメータ等の設定情報が格納されていてもよい。また、ECU21は、専用のプログラムを実行させる等により、AR−HUD1として表示する虚像に係る映像データを生成する。
音声出力部22は、必要に応じてスピーカ60を介して音声情報を出力する。光源調整部25は、映像表示装置30の光源31の発光量を調整する。光源31が複数ある場合にはそれぞれ個別に制御するようにしてもよい。歪み補正部26は、ECU21が生成した映像について、映像表示装置30によって車両2のウィンドシールド3に投射した場合に、ウィンドシールド3の曲率によって生じる映像の歪みを画像処理により補正する。表示素子駆動部27は、歪み補正部26による補正後の映像データに応じた駆動信号を表示素子33に対して送り、投射する映像を生成させる。
表示距離調整部28は、虚像の表示距離を調整する必要がある場合に、表示距離調整機構40を駆動して、映像表示装置30から投射される映像の表示距離を調整する。虚像の表示距離を調整する各種手法については後述する。ミラー調整部29は、虚像の表示領域自体の位置を調整する必要がある場合に、ミラー駆動部50を介してミラー52の角度を変更し、虚像の表示領域を上下に移動させる。虚像の表示領域の位置調整についても後述する。
図5は、本実施の形態のヘッドアップディスプレイ装置における表示距離調整に係る構成の例について詳細を示した図である。制御部20の表示距離調整部28は、さらに、ECU21により個別に制御される各部として、例えば、機能性液晶フィルムON/OFF制御部281、レンズ可動部282、調光ミラーON/OFF制御部283、拡散板可動部284、および光学フィルタ可動部285等を有する。また、これら各部により制御・駆動されるハードウェアやデバイス等として、表示距離調整機構40は、さらに、機能性液晶フィルム401、レンズ可動機構402、調光ミラー403、拡散板可動機構404、および光学フィルタ可動機構405等を有する。これら各部による虚像の表示距離の調整手法については後述する。
なお、AR−HUD1としてはこれら各部やデバイス等を全て備えている必要はなく、後述する虚像の表示距離の調整手法の中から適用するものを実装するために必要な各部を適宜備えていればよい。
<処理内容>
図6は、本実施の形態のヘッドアップディスプレイ装置の初期動作の例について概要を示したフローチャートである。停止中の車両2においてイグニッションスイッチがONされることでAR−HUD1の電源がONされると(S01)、AR−HUD1は、制御部20からの指示に基づいて、まず、車両情報取得部10により車両情報を取得する(S02)。そして、制御部20は、車両情報4のうち、照度センサ105や色度センサ106等により取得した外光情報に基づいて好適な明るさレベルを算出し(S03)、光源調整部25により光源31の発光量を制御して、算出した明るさレベルとなるように設定する(S04)。例えば、外光が明るい場合には明るさレベルを高くし、暗い場合には明るさレベルを低く設定する。
その後、ECU21により、虚像として表示する映像(例えば、初期画像)を決定、生成し(S05)、生成した映像に対して歪み補正部26により歪みを補正する処理を実施した後(S06)、表示素子駆動部27により表示素子33を駆動・制御して、投射する映像を形成させる(S07)。これにより、映像がウィンドシールド3に投射され、運転者5は虚像を視認することができるようになる。その後、ECU21もしくは表示距離調整部28により虚像の表示距離を算出・決定し(S08)、表示距離調整部28により表示距離調整機構40を駆動して、映像表示装置30から投射される映像の表示距離を制御する(S09)。
AR−HUD1全体で、上述した一連の初期動作も含む各部の起動・始動が完了すると、HUD−ON信号が出力されるが、制御部20ではこの信号を受けたか否かを判定する(S11)。受けていなければ、さらにHUD−ON信号を一定時間待ち受け(S12)、ステップS11でHUD−ON信号を受けたと判定されるまで、HUD−ON信号の待ち受け処理(S12)を繰り返す。ステップS11でHUD−ON信号を受けたと判定された場合は、後述するAR−HUD1の通常動作を開始し(S13)、一連の初期動作を終了する。
図7は、本実施の形態のヘッドアップディスプレイ装置の通常動作の例について概要を示したフローチャートである。通常動作においても、基本的な処理の流れは上述の図6に示した初期動作と概ね同様である。まず、AR−HUD1は、制御部20からの指示に基づいて、車両情報取得部10により車両情報を取得する(S21)。そして、制御部20は、車両情報4のうち、照度センサ105や色度センサ106等により取得した外光情報に基づいて明るさレベル調整処理を行う(S22)。
図8は、本実施の形態のヘッドアップディスプレイ装置の明るさレベル調整処理の例について概要を示したフローチャートである。明るさレベル調整処理を開始すると、まず、取得した外光情報に基づいて好適な明るさレベルを算出する(S221)。そして、現状設定されている明るさレベルと比較することにより、明るさレベルの変更の要否を判定する(S222)。変更が不要である場合にはそのまま明るさレベル調整処理を終了する。一方、変更が必要である場合には、光源調整部25により光源31の発光量を制御して、変更後の明るさレベルとなるように設定し(S223)、明るさレベル調整処理を終了する。なお、ステップS222において、ステップS221で算出した好適な明るさレベルと、現状設定されている明るさレベルとの間に差分がある場合でも、差分が所定の閾値以上である場合にのみ明るさレベルの変更が必要であると判定するようにしてもよい。
図7に戻り、その後、ECU21により、ステップS21で取得した最新の車両情報4に基づいて、虚像として表示する映像を現状のものから必要に応じて変更し、変更後の映像を決定、生成する(S23)。なお、車両情報4に基づいて表示内容を変更するパターンは、取得した車両情報4の内容やそれらの組み合わせ等に応じて多数のものがあり得る。例えば、速度情報が変化したことにより、常時表示されている速度表示の数値を変更する場合や、ナビゲーション情報に基づいて案内の矢印図形を表示/消去したり、矢印の形状や表示位置等を変更したりする場合等、様々なパターンがあり得る。
その後、本実施の形態では、車両2の走行状況に応じて視認性や表示内容の適切性等を維持するための調整・補正処理を行う。まず、虚像の表示領域自体の位置を調整する必要がある場合に、ミラー駆動部50を介してミラー52の角度を変更し、虚像の表示領域を上下に移動させるミラー調整処理を行う(S24)。その後さらに、車両2の振動に対して表示領域内における映像の表示位置を補正する振動補正処理を行う(S25)。ステップS24およびS25の調整・補正処理の詳細な内容については後述する。
その後、調整・補正した映像に対して歪み補正部26により歪みを補正する処理を実施した後(S26)、表示素子駆動部27により表示素子33を駆動・制御して投射する映像を形成させる(S27)。そして、ECU21もしくは表示距離調整部28により虚像の表示距離を算出・決定し(S28)、表示距離調整部28により表示距離調整機構40を駆動して、映像表示装置30から投射される映像の表示距離を制御する(S29)。
上述した一連の通常動作を実行している際に、車両2の停止等に伴って電源OFF等がなされると、AR−HUD1に対してHUD−OFF信号が出力されるが、制御部20ではこの信号を受けたか否かを判定する(S30)。HUD−OFF信号を受けていなければ、ステップS21に戻って、HUD−OFF信号を受けるまで一連の通常動作を繰り返す。HUD−OFF信号を受けたと判定された場合は、一連の通常動作を終了する。
<ミラー調整処理>
図9は、本実施の形態のヘッドアップディスプレイ装置における虚像の表示領域の位置を上下に調整する例について概要を示した図である。例えば、左、中央、右の各図において、上段には車両2が走行中の道路の勾配の状況と、運転者5の視野の状況を側面から見た状態を模式的に示している。また、下段には、それぞれの状態において、運転者5が見る車外の前方の風景と、これに重畳して表示される虚像の表示領域6(破線枠の矩形)の位置の状況を模式的に示している。
左側の図では、上段の図に示すように、車両2の現在地の道路の勾配(上り方向)と前方の道路の勾配(上り方向)とが略同一である場合、すなわち概ね平坦な道路を走行している場合を示している。この場合は、下段の図に示すように、車外の前方の風景(図9の例では道路上を走行する前方の車両)にAR機能により虚像(図9の例では感嘆符のマークもしくは画像)を重畳させて表示するには、虚像の表示領域6の上下方向の位置は通常のままでよい。すなわち、左側の下段の図に示す表示領域6の位置が、表示領域6の上下方向での基本の表示位置となる。
一方、中央の図では、車両2の現在地の道路の勾配(上り方向)が、前方の道路の勾配(上り方向)より大きい場合、すなわち前方が下り坂の道路を走行している場合を示している。この場合は、上段の図に示すように、車両2の位置における勾配に基づく運転者5の視野の高さ(図中の実線枠)に対して、前方の道路上を視野に入れるには視野を下方向に移動させる(図中の点線枠)必要がある。そして、この場合、下段の図に示すように、虚像の表示領域6の表示位置が基本の表示位置(点線枠の矩形)のままでは、車外の前方の風景にAR機能により虚像を重畳させることができないため、重畳させて表示するには表示領域6自体を下方向に移動させる必要がある。
同様に、右側の図では、車両2の現在地の道路の勾配(上り方向)が、前方の道路の勾配(上り方向)より小さい場合、すなわち前方が上り坂の道路を走行している場合を示している。この場合は、上段の図に示すように、車両2の位置における勾配に基づく運転者5の視野の高さ(図中の実線枠)に対して、前方の道路上を視野に入れるには視野を上方向に移動させる(図中の点線枠)必要がある。そして、この場合も、下段の図に示すように、虚像の表示領域6の表示位置が基本の表示位置(点線枠の矩形)のままでは、車外の前方の風景にAR機能により虚像を重畳させることができないため、重畳させて表示するには表示領域6自体を上方向に移動させる必要がある。
このように、走行状況に応じて虚像の表示領域6の上下方向の位置を移動させることが必要となる状況は、図9の例に示したような現在位置の勾配と前方の道路の勾配との間に一定量以上の差分があるような場合に限られない。例えば、高速道路等において車両2の速度が大きくなった場合、運転者5の視線は通常時に比べて一般に遠くを見るようになり、視野の高さが上方向に移動することになる。したがって、例えば、通常時に比べてさらに前方に存在する他の車両等を含む車外の風景に対して虚像を重畳させるには、表示領域6を上方向に移動させる必要が生じ得る。車両2の走行中に運転者5の姿勢や体勢が変化する等により、運転者5の眼の高さ位置自体が変化し、これにより視野の高さが上下方向に移動する場合等も同様である。
本実施の形態では、上述した図7のステップS24のミラー調整処理において、車両2の走行状況に応じてミラー駆動部50によりミラー52の角度を制御して、虚像の表示領域の上下方向の位置を図9の例に示したように調整する。
図10は、図7のステップS24のミラー調整処理の例について概要を示したフローチャートである。ミラー調整処理を開始すると、まず、現在のミラー52の角度を取得し(S241)、さらに、車両情報4に基づいて、ミラー52の角度の調整(すなわち虚像の表示領域の表示位置の調整)に関連するパラメータの現在値を取得する(S242)。
必要となるパラメータの種類は、どのような条件で表示領域の表示位置を調整するかにより異なり得る。例えば、図9に示した例では、関連するパラメータ値として、車両2の現在位置の勾配と、前方の道路の勾配との差分(相対的な勾配)を示す値を取得する。例えば、加速度ジャイロ情報により得られる車両2の傾きの情報から現在位置の勾配を把握することができる。また、車外のカメラ映像情報を解析することで前方の道路の勾配を把握することも可能である。また、ナビゲーション情報から得られる3次元の道路・地形情報等に基づいて現在位置および前方の道路の勾配を得ることも可能である。
次に、ステップS242で取得したパラメータ値に基づいて、予め定められた基準・条件等に基づいてミラー52の目標角度を算出する(S243)。どのパラメータに基づいてどのようなロジックで目標角度を算出するかは、どのような条件で表示領域の表示位置を調整するかにより異なり得る。例えば、図9に示した例では、現在地と前方の道路との相対的な勾配の絶対値が所定の閾値以上である場合に、相対的な勾配の符号に応じてミラー52の目標角度を決定する。上記の所定の閾値としては、例えば、虚像の表示領域の上下方向のFOV(Field Of View:視野角)の1/x(xは所定の値)等とすることができる。
なお、本実施の形態では、ステップS242で取得した現在のパラメータ値に基づいてミラー52の目標角度を算出するものとしているが、現在のパラメータ値や過去の値の履歴の情報に基づいて近い将来の状況を予測し、予測結果に基づいて目標角度を算出するようにしてもよい。例えば、パラメータ値の過去の履歴に基づいて値の遷移の傾向を分析し、当該傾向に基づいて近い将来のパラメータ値を予測するようにしてもよい。また、車外の前方のカメラ映像情報を解析することで近い将来における車両2の周辺状況を予測したり、ナビゲーション情報に基づいて車両2の前方の道路状況を把握したりすることも可能である。
次に、ステップS241で取得した現在のミラー52の角度と、ステップS243で取得した目標のミラー52の角度との差分の有無を判定する(S244)。判定に際しては、例えば、差分が所定の閾値以上である場合に差分ありと判定し、閾値以下の場合には差分なしと判定するようにしてもよい。また、差分ありの状態が一定時間以上継続した場合に限り差分ありと判定するようにしてもよい。これにより、例えば、車両2が縁石等の段差に乗り上げた場合等一時的・瞬間的に車両2の傾きが変化したような事象について、ミラー52の調整対象から除外することができる。
ステップS244で角度の差分がないと判定された場合は、そのままミラー調整処理を終了する。すなわち、ミラー52の角度の調整は行わず、現状の角度のままとする。一方、角度の差分があると判定された場合は、目標角度となるように指定方向にミラー52を回転させる(S245)。具体的には、ミラー駆動部50に対してミラー52を回転させる旨のミラー調整信号を出力する。そして、ミラー52が目標角度に達したか否かを判定し(S246)、達していない場合にはステップS245に戻ってミラー52の回転を継続する。すなわち、ミラー駆動部50に対するミラー調整信号の出力を継続する。一方、ミラー52が目標角度に達した場合は、ミラー52の回転を停止する(S247)。すなわち、ミラー駆動部50に対するミラー調整信号の出力を停止する。そして、一連のミラー調整処理を終了する。
<振動補正処理>
図11は、図7のステップS25の振動補正処理の例について概要を示したフローチャートである。振動補正処理を開始すると、まず、車両情報4に基づいて車両2の振動量の情報を取得する(S251)。例えば、加速度ジャイロ情報や車外のカメラ映像情報等に基づいて振動量(車両2における短周期の上下動の量)を把握することができる。なお、本実施の形態では、現在の車両情報4に基づいて振動情報を取得するものとしているが、例えば、車外の前方のカメラ映像情報を解析することで近い将来における車両2の周辺の路面状況を予測し、これに基づいて近い将来における車両2の振動量を予測するようにしてもよい。
その後、ステップS251で取得した振動量が所定の閾値以上であるか否かを判定する(S252)。閾値未満である場合は、振動が微小であるとしてそのまま振動補正処理を終了する。すなわち、振動に伴う表示映像の補正は行わない。一方、振動量が閾値以上である場合は、表示領域における映像の表示ズレ量を算出する(S253)。例えば、車両2の実際の高さと虚像の表示領域の高さとの比に基づいて、車両2の振動量から表示領域における映像の表示ズレ量を算出する。そして、算出した表示ズレ量に基づいて、表示領域内での映像の表示位置を上下にオフセットし(S254)、一連の振動補正処理を終了する。
<虚像の表示距離調整>
制御部20の表示距離調整部28は、虚像の表示距離を調整する必要がある場合に、表示距離調整機構40を駆動して、映像表示装置30から投射される映像の表示距離を調整する。以下では、図5に示した表示距離調整部28および表示距離調整機構40の各部による、虚像の表示距離の調整手法について説明する。
[機能性液晶フィルム]
図12は、本実施の形態のヘッドアップディスプレイ装置における機能性液晶フィルム401を用いた表示距離調整の例について概要を示した図である。図12の例では、複数枚の機能性液晶フィルム401を拡散板(ディフューザ)41aとして使用する。そして、図12(a)および(b)に示すように、各機能性液晶フィルム401のエリア毎に白色状態にする箇所を変化させることで、エリア毎に焦点距離を変えて、虚像の表示距離(運転者5の眼の位置と虚像の表示位置との距離)を変化させる。
図13は、機能性液晶フィルム401による拡散板41aの構成例について概要を示した図である。機能性液晶フィルム401は、電気により透過状態と白色状態とを制御することができるフィルムである。機能性液晶フィルム401の白色状態の部分が拡散板としての機能を果たし、プロジェクタ30aにより投射された映像は、この白色状態の部分で結像する。本実施の形態では、複数枚の機能性液晶フィルム401について、それぞれ複数のエリア毎に個別に白色状態とするよう制御するものとする。
図12に戻り、図示するような構成において、プロジェクタ30aから投射された映像に基づく虚像の表示位置は、各機能性液晶フィルム401の白色状態の部分と、レンズ42aとの距離に応じて決定される。よって、レンズ42aとの距離がそれぞれ異なるように機能性液晶フィルム401を複数枚配置し、プロジェクタ30aから投射される映像について、図5に示した機能性液晶フィルムON/OFF制御部281によりエリア毎に機能性液晶フィルム401のいずれか1つを白色状態とすることで、エリア毎に虚像の表示距離を変化させることができる。
具体的には、例えば、図12(a)に示すように、対象のエリア(例えば最上部)について、レンズ42aに最も近い位置に配置された機能性液晶フィルム401のみを白色状態とし、他を透過状態とすることで、対応する虚像の表示距離を最も近くすることができる。逆に、図12(b)に示すように、対象のエリア(例えば最上部)について、レンズ42aから最も遠い位置に配置された機能性液晶フィルム401のみを白色状態とし、他を透過状態とすることで、対応する虚像の表示距離を最も遠くすることができる。
なお、図12、図13の例では、表示する映像について、上下方向に3つのエリアを設ける場合を例としているが、以下に説明する例も含めて、エリアの数はこれに限定されず、また、上下方向に限らず左右方向にエリアを分けることも当然可能である。また、機能性液晶フィルム401の枚数も図示するような3枚に限定されず、エリアの数に応じて適宜構成することができる。
[ミラーの複数枚配置]
図14は、本実施の形態のヘッドアップディスプレイ装置における複数枚のミラーを用いた表示距離調整の例について概要を示した図である。図14の例では、LCD30bとレンズ42aとの間にミラー51aを図示するように複数配置し、LCD30bからの映像をエリア毎に異なるミラー51aにより反射してレンズ42aに入射させている。これにより、LCD30bからレンズ42aまでの距離をエリア毎に異なるものとし、これに応じて虚像の表示距離を変えることができる。
具体的には、例えば、図14に示すように、LCD30bから最も遠い位置に配置されたミラー51a(レンズ42aからも最も遠い)により反射されるエリアにおいてLCD30bに映像を表示することで、対応する虚像の表示距離を最も遠くすることができる。逆に、LCD30bから最も近い位置に配置されたミラー51a(レンズ42aからも最も近い)により反射されるエリアにおいてLCD30bに映像を表示することで、対応する虚像の表示距離を最も近くすることができる。
なお、図14の例においても、ミラー51aの数は図示するような3枚に限定されず、エリアの数に応じて適宜構成することができる。
[可動式レンズ]
図15は、本実施の形態のヘッドアップディスプレイ装置における可動式レンズを用いた表示距離調整の例について概要を示した図である。図15の例では、プロジェクタ30aから投射された映像は、拡散板(ディフューザ)41bで結像した後、複数のエリアに分けて設けられた可動式レンズ42bを介してミラー52に入射される。
ここで、各可動式レンズ42bは、図5に示したレンズ可動部282およびレンズ可動機構402によって、それぞれ個別に光軸方向に沿って移動させることができる。プロジェクタ30aから投射された映像に基づく虚像の表示位置は、拡散板41bと各可動式レンズ42bとの距離に応じて決定される。よって、可動式レンズ42bを移動させることで、エリア毎に焦点距離を変えて、虚像の表示距離を変化させることができる。
具体的には、例えば、図15に示すように、最上部のエリアのように可動式レンズ42bを拡散板41bに近い位置に移動させることで、対応する虚像の表示距離を近くすることができる。逆に、最下部のエリアのように可動式レンズ42bを拡散板41bから遠い位置に移動させることで、対応する虚像の表示距離を遠くすることができる。
なお、図15の例においても、可動式レンズ42bの数は図示するような3つに限定されず、エリアの数に応じて適宜構成することができる。
[調光ミラー]
図16は、本実施の形態のヘッドアップディスプレイ装置における調光ミラー51bを用いた表示距離調整の例について概要を示した図である。図16の例では、LCD30bとレンズ42aとの間に複数の調光ミラー403を図示するように断面方向から見て行列状となるように配置することで調光ミラー51bを構成する。そして、図16(a)および(b)に示すように、鏡状態とする調光ミラー403の箇所を変化させることで、LCD30bからレンズ42aまでの距離をエリア毎に異なるものとし、これに応じて虚像の表示距離を変えることができる。
図17は、調光ミラー403の構成例について概要を示した図である。調光ミラー403は、電気により透過状態と鏡状態とを制御することができるフィルムやシート、ガラス等の部材である。透過状態となっている調光ミラー403は、LCD30bからの映像を透過し、鏡状態となっている調光ミラー403のみが、映像をレンズ42aの方向に反射させる。本実施の形態では、断面方向から見て行列状に配置された複数の調光ミラー403について、各行、各列(各エリア)につき1つの調光ミラー403のみが鏡状態となるよう、調光ミラーON/OFF制御部283により制御するものとする。
具体的には、例えば、図16(a)に示すように、レンズ42aから最も近い調光ミラー403の列に対応するエリアについて、最下段の行の調光ミラー403のみを鏡状態とし、他を透過状態とすることで、LCD30bからレンズ42aまでの光路長を最も短くすることができ、対応する虚像の表示距離を最も近くすることができる。逆に、レンズ42aから最も遠い調光ミラー403の列に対応するエリアについて、最上段の行の調光ミラー403のみを鏡状態とし、他を透過状態とすることで、LCD30bからレンズ42aまでの光路長を最も長くすることができ、対応する虚像の表示距離を最も遠くすることができる。
また、例えば、図16(b)に示すように、レンズ42aから最も近い調光ミラー403の列に対応するエリアについて、最上段の行の調光ミラー403のみを鏡状態とし、また、レンズ42aから次に近い調光ミラー403の列に対応するエリアについて、最下段の行の調光ミラー403のみを鏡状態とし、他を透過状態とする。これにより、これらのエリアのLCD30bからレンズ42aまでの光路長を比較的短くすることができ、対応する虚像の表示距離を近くすることができる。逆に、レンズ42aから最も遠い調光ミラー403の列に対応するエリアについて、中段の行の調光ミラー403のみを鏡状態とし、他を透過状態とすることで、LCD30bからレンズ42aまでの光路長を他のエリアより比較的長くすることができ、対応する虚像の表示距離を遠くすることができる。
なお、図16、図17の例においても、調光ミラー403の数は図示するような3行3列に限定されず、エリアの数に応じて適宜構成することができる。
[可動式拡散板]
図18は、本実施の形態のヘッドアップディスプレイ装置における可動式拡散板を用いた表示距離調整の例について概要を示した図である。図18の例では、プロジェクタ30aから投射された映像は、可動式拡散板(可動式ディフューザ)41cで結像した後、レンズ42aを介してミラー52に入射される。
ここで、可動式拡散板41cは、図5に示した拡散板可動部284および拡散板可動機構404によって、光軸方向に沿って移動および/または回転させることができる。プロジェクタ30aから投射された映像に基づく虚像の表示位置は、可動式拡散板41cとレンズ42aとの距離および/または傾きに応じて決定される。よって、可動式拡散板41cを移動および/または回転させることで、焦点距離を変えて虚像の表示距離を変化させることができる。
具体的には、可動式拡散板41cをレンズ42aに近い位置に移動および/または回転させることで、虚像の表示距離を近くすることができる。逆に、可動式拡散板41cをレンズ42aから遠い位置に移動および/または回転させることで、虚像の表示距離を遠くすることができる。
[可動式光学フィルタ]
図19は、本実施の形態のヘッドアップディスプレイ装置における可動式光学フィルタを用いた表示距離調整の例について概要を示した図である。図19の例では、レンズ42aと拡散板(ディフューザ)41bとの間に可動式光学フィルタ43aを設置し、図19(a)および(b)に示すように、可動式光学フィルタ43aを光路に対して挿抜することで、エリア毎に焦点距離を変えて、虚像の表示距離を変化させる。
光学フィルタは、レンズ等の光学部品単体もしくは組み合わせにより焦点距離を変える特性を有する部材である。本実施の形態では、それぞれ異なる屈折率を有する複数の光学フィルタを組み合わせて、領域毎に異なる屈折率を有する1つの光学フィルタを形成するとともに、光路に対して挿抜できるような可動式光学フィルタ43aとして構成する。領域毎に光学フィルタの焦点距離が異なることから、図5に示した光学フィルタ可動部285および光学フィルタ可動機構405によって、可動式光学フィルタ43aを光路に対して挿抜することで、エリア毎に虚像の表示距離を変化させることができる。
具体的には、例えば、図19(a)に示すように、可動式光学フィルタ43a全体を光路に対して挿入することで、最下段のエリアに対応する光学フィルタの焦点距離を最も短くし、虚像の表示距離を遠くするとともに、最上段のエリアに対応する光学フィルタの焦点距離を最も長くし、虚像の表示距離を近くすることができる。また、例えば、図19(b)に示すように、可動式光学フィルタ43aを一部抜出して最下段のエリアが光学フィルタを通らないようにすることで、このエリアについては拡散板41bとレンズ42aとの距離で虚像の表示距離が決まるようにし、光学フィルタを通る他のエリアよりも虚像の表示距離を遠くすることができる。
なお、図19の例においても、可動式光学フィルタ43aにおける焦点距離が異なる領域の数は図示するような3つに限定されず、エリアの数に応じて適宜構成することができる。
[くし状光学フィルタ]
図20は、本実施の形態のヘッドアップディスプレイ装置におけるくし状光学フィルタを用いた表示距離調整の例について概要を示した図である。図20の例では、プロジェクタ30aから投射された映像は、拡散板(ディフューザ)41bで結像した後、くし状光学フィルタ43bおよびレンズ42aを介してミラー52に入射される。
くし状光学フィルタ43bは、レンズと同様の機能を有して焦点距離に応じて虚像の表示距離を変えることができる光学フィルタ部分がくし状に設けられた部材である。図20に示すように、例えば、プロジェクタ30aから投射された映像のライン単位(1ライン毎に限らず、任意のライン毎とすることができる)で光学フィルタ部分と光学フィルタがない部分とを対応させることで、ライン単位で虚像の表示距離を変えることができる。
具体的には、光学フィルタ部分に対応するラインの映像に基づく虚像の表示距離を近くし、光学フィルタがない部分に対応するラインの映像に基づく虚像の表示距離を遠くすることができる。
以上に説明したように、本発明の一実施の形態であるヘッドアップディスプレイ装置によれば、車両2の走行状況によって、車両2の前方の風景に虚像を重畳させることができなくなるような場合でも、虚像の表示領域自体の表示位置を上下方向に動的に調整することで、虚像を前方の風景に適切に重畳させてAR機能を実現することが可能となる。さらに、走行状況等に応じて虚像の表示距離を適切に調整することも可能となる。
<ナビゲーション情報の表示>
以上の説明では、例えば、上記の図7〜図10において、ナビゲーション情報の表示について、様々なパターンが可能であり、さらには、その表示位置を変更するためのミラー調整処理等により、道路形状に応じてナビゲーション表示の仰俯角を変えることについて説明した。しかしながら、本発明のヘッドアップディスプレイ装置において、上記のナビゲーション表示を道路上に重畳表示させる場合、道路の形状によっては、当該ナビゲーション表示が見難くなる場合が発生することが分かった。
以下には、本発明の発明者等により検討された道路の形状によってナビゲーション表示が見難くなる場合とその対処案について詳細に述べる。
まず、図21(a)および(b)には、車両2が平坦な道路を走行中(図21(b)を参照)における通常表示の状態を示す。この状態では、図21(a)に示すように、ウィンドシールド3の前方には、その略中央部のHUD表示領域35の内部において、車両の進行方向を示す複数の案内矢印からなるナビゲーション表示351が、運転者から見下げているように、道路上に重畳されて表示される。なお、図では、表示オブジェクトである矢印は、車両2からの距離に応じて大きさを変えて表示されており、本例では、進行方向は、車両の前方において左折している。また、図中の符号34は、ダッシュボードを示している。
続いて、図22(a)および(b)には、車両2が上り坂や上り坂の頂上付近を走行中(例えば図22(b)を参照)における表示の状態を示しており、このような状態では、図22(a)からも明らかなように、ウィンドシールド3内のHUD表示領域35内に表示されるナビゲーション表示351が潰れてしまい、そのため、運転者にとっては見難いものとなってしまう。
また、図23(a)および(b)にも示すように、車両2が下り坂や下り坂の終わり付近を走行中(図23(b)を参照)においては、ウィンドシールド3前方の道路がHUD表示領域35から上方に外れてしまい、ナビゲーション表示351の左折を指示する部分が表示できなくなってしまう。
さらには、車両がカーブに差し掛かった場合には、図24に示すように、ウィンドシールド3前方の道路が、HUD表示領域35を横方向(本例では、右側)に外れてしまい、上記と同様に、ナビゲーション表示351の左折を指示する部分が表示できなくなってしまう。
加えて、車両が上り坂に差し掛かった場合にも、図25にも示すように、上り坂の頂上の反対側の道路の右折または左折の箇所(右左折箇所)は坂によって隠されてしまい、HUD表示領域35内には存在しないことから、当該箇所でのナビゲーション表示351を行うことができない等の種々の問題点が発見された。
そこで、上述した問題点を解決すべく検討された対処案について、以下に図面を参照しながら、詳細に説明する。
まず、図26(a)および(b)には、特に、上記図22に示した問題点を解消するための対策が示されており、ここでは、車両の進行方向を示す複数の案内矢印からなるナビゲーション表示351が、運転者からは見上げているように、道路上に重畳表示される。なお、図26(a)では、左折の場合のナビゲーション表示が、図26(b)には、右折の場合のナビゲーション表示が、それぞれ示されている。換言すれは、HUD表示領域35内において、ナビゲーション表示351を構成する矢印は、車両に近い程、当該HUD表示領域35の上部に位置し、遠い程、坂の頂上付近に位置するように表示されることとなる。そして、左折または右折の曲がり角の表示は、坂の頂上付近に位置するように表示される。
次に、図27(a)および(b)には、上述した上り坂や上り坂の頂上付近での問題点を解消する他の対策案であって、これらの図からも明らかなように、特に、ウィンドシールド3内のHUD表示領域35が坂の頂上よりも上方に位置してしまい、そのため、曲がり角を含めた道路上へのナビゲーション表示351が不可能な場合に有効な対策である。この場合においても、上記と同様に、車両の進行方向を示す複数の案内矢印からなるナビゲーション表示351が、運転者からは見上げているように、道路上に重畳表示される。なお、図27(a)には、左折の場合のナビゲーション表示が、図27(b)には、右折の場合のナビゲーション表示が、それぞれ示されている。そして、この場合には、左折または右折の曲がり角の表示は、HUD表示領域35の下端に位置するように表示されることとなる。
続いて、図28(a)および(b)には、特に、上記図23に示した問題点を解消するための対策が示されており、特に、HUD表示領域35を外れた左折または右折の曲がり角の表示を、HUD表示領域35の上端を利用して行うものである。なお、ここでも、図28(a)は、左折の場合のナビゲーション表示を、図28(b)は、右折の場合のナビゲーション表示を、それぞれ示す。なお、この場合には、上記左折または右折の曲がり角の表示は、車両からの距離に対応した大きさの矢印などによって行う。さらに、これらの曲がり角の表示は、道路に沿った直進を示す矢印351とは異なる形態の矢印352で行うことにより、運転者に対して、補足情報であることを強調して表示することが可能となる。なお、この矢印352の異なる表示形態としては、例えば、異なる色にする、あるいは、点滅表示することなどが含まれる。
加えて、図29(a)〜(d)には、特に、上記図24に示した問題点を解消するための対策が示されている。すなわち、車両がカーブに差し掛かり、道路がHUD表示領域35を横方向に外れてしまう状況下においては、上記と同様に、道路に沿った直進を示す矢印351とは異なる形態の矢印352を利用することにより、左折または右折の曲がり角の表示を行う。なお、異なる形態の矢印352の表示は、HUD表示領域35の左または右の側端部の位置に行う。ここでは、図29(a)は、右カーブにおける左折の場合のナビゲーション表示を、図29(b)は、右カーブにおける右折の場合のナビゲーション表示を、図29(c)は、左カーブにおける左折の場合のナビゲーション表示を、図29(d)は、左カーブにおける右折の場合のナビゲーション表示を、それぞれ示している。また、ここでも、異なる形態の矢印352の表示は、運転者に対して補足情報であることを強調するために、その色を矢印351と異なる色にする、または、点滅表示することなどが可能であろう。
また、上り坂付近でのカーブにおける対策案が、図30(a)〜(d)に示されている。この対策案は、上記図27(または、図26)に示した案と上記図29に示した案とを組み合わせたものであり、道路がHUD表示領域35を下方に外れてしまう状況下において、上述した複数の案内矢印からなるナビゲーション表示351を、運転者からは見上げているように、道路上に重畳して表示すると共に、それとは異なる形態の矢印352を、当該HUD表示領域35の左右上下の四隅に近接して表示するものである。なお、ここでも、図30(a)は、右カーブにおける左折の場合のナビゲーション表示を、図30(b)は、右カーブにおける右折の場合のナビゲーション表示を、図30(c)は、左カーブにおける左折の場合のナビゲーション表示を、図30(d)は、左カーブにおける右折の場合のナビゲーション表示を、それぞれ示している。
なお、図26に示した案と図29に示した案とを組み合わせた場合には、HUD表示領域35内での曲がり角を示す矢印の位置が異なる(すなわち、HUD表示領域の高さ方向の略中央部)のみであり、ここでは、その図示は省略する。
そして、図31(a)〜(d)には、下り坂の終わり付近のカーブにおける対策案が示されている。この対策案においても、同様に、HUD表示領域35内においては、複数の案内矢印からなるナビゲーション表示351を道路上に重畳して表示すると共に、当該HUD表示領域35を外れた折または右折の曲がり角に対しては、それとは異なる形態の矢印352を利用して、当該HUD表示領域35の左右上下の四隅に近接して表示する。なお、ここでも、図31(a)は、右カーブにおける左折の場合のナビゲーション表示を、図31(b)は、右カーブにおける右折の場合のナビゲーション表示を、図31(c)は、左カーブにおける左折の場合のナビゲーション表示を、図31(d)は、左カーブにおける右折の場合のナビゲーション表示を、それぞれ示している。
続いて、以上に詳細に説明したナビゲーション情報の表示、すなわち、道路形状に応じてナビゲーション表示を変える動作を実行するための具体的な一例として、図32に、そのためのソフトウェアであるフローチャートを示す。
なお、このソフトウェアは、例えば、制御部20内のメモリ内に予め格納されて、上記図7における表示映像の変更・決定(S23)の処理において、ECU21(例えば、図3〜5を参照)により実行されるものである。
図32に示すように、まず、ECU21からのHUD通常動作を受信し(S311)、車両が左折または右折する曲がり角(「左右折箇所」と言う)までの距離が、所定の閾値未満であるか否かを判定する(S312)。その結果、「no」の場合には、S311のHUD通常動作へ戻る(S313)。なお、ここで所定の閾値とは、例えば、自車両のから左右折箇所までの距離であり、道路に重畳したナビゲーション表示を行うための距離であり、その一例として、100mに設定されている。換言すれば、左右折箇所までの距離が80mの場合には、当該左右折箇所のナビゲーション表示が行われ、120mの場合には、そのナビゲーション表示は行われないこととなる。
他方、上記S312の判定の結果が「yes」の場合、すなわち、ナビゲーション表示を行う場合には、さらに、左右折箇所の鉛直方向の位置が、上述したHUD表示領域内にあるか否かの判定を行う(S314)。ここで、左右折箇所の鉛直方向の位置とは、上記図21〜31にも図示したように、車両2のウィンドシールド3の略中央部に配置されたHUD表示領域35内における当該左右折箇所の位置を意味しており、いわゆる、縦方向の位置を言う。
このS314での判定の結果、「yes」、すなわち、HUD表示領域内にある(例えば、図21、22を参照)とされた場合には、さらに、左右折箇所が道路の凸形状によって目視できない位置にあるか否かを判定する(S315)。このS315での判定の結果も、「yes」、すなわち、左右折箇所が道路の凸形状によって目視できない位置にある(例えば、図25、30を参照)と判定された場合には、さらに、左右折箇所がHUD表示領域よりも左、もしくは、右にあるか否かを判定する(S316)。そして、その結果も、「yes」、すなわち、左右折箇所がHUD表示領域の外部にあると判定された場合には、例えば、上記図30に示す対策(但し、曲がり角の高さがHUD表示領域の略中央部である点で異なる)を実施する(S317)。他方、当該判定の結果、「no」、すなわち、左右折箇所がHUD表示領域の内部にあると判定された場合には、上記図26の対策を実施する(S318)。
一方、上記S315の判定の結果、「no」、すなわち、道路の凸形状に関わらず、左右折箇所が目視できる場合には、上記S316と同様に、左右折箇所がHUD表示領域よりも左、もしくは、右にあるか否かを判定する(S319)。その結果、「yes」、すなわち、左右折箇所がHUD表示領域の外部にあると判定された場合には、上記図29の対策を実施する(S320)。他方、「no」、すなわち、左右折箇所がHUD表示領域の内部にあると判定された場合には、上記図21に示した通常表示を実施する(S321)。
さらに、上記S314の判定の結果、「no」、すなわち、HUD表示領域内にはない(例えば、図23〜31を参照)とされた場合には、さらに、左右折箇所がHUD表示領域の下端よりも下にあるか否かを判定する(S322)。その結果、「yes」、すなわち、左右折箇所がHUD表示領域の下方にあると判定された場合には、さらに、左右折箇所がHUD表示領域よりも左、もしくは、右にあるか否かを判定する(S323)。その結果、「yes」とされた場合には、上記図30に示した対処表示を実施する(S324)。他方、「no」と判定された場合には、上記図27に示した通常表示を実施する(S325)。
また、上記S322の判定の結果、「no」、すなわち、左右折箇所がHUD表示領域の上方にあると判定された場合には、さらに、左右折箇所がHUD表示領域よりも左、もしくは、右にあるか否かを判定する(S326)。その結果、「yes」とされた場合には、上記図31に示した対処表示を実施する(S327)。他方、「no」と判定された場合には、上記図28に示した通常表示を実施する(S328)。
すなわち、上述したフローチャートの処理によれば、道路形状に応じてナビゲーション表示の形態(HUD表示領域内における水平方向や垂直方向の位置を含む)を変えることにより、車両の走行状況に応じた虚像を、実際の風景に適切に重畳させるよう表示することが可能なヘッドアップディスプレイ装置を実現することができる。
なお、上記の実施例において、ウィンドシールド3内において種々に変化する道路形状については、上述した車両情報4の中で、図1のナビゲーション情報から道路の勾配情報を取り込んだり、図3のカメラ(車外)116から車両前方の映像情報を取り込んだり、さらには、図示しないが、運転者の眼(すなわち、アイポイント)の近傍に車両前方に向けて設けたカメラからの映像情報を取り込んで画像解析する等の手法により実現可能であることは、当業者にとっては当然であろう。
<ナビゲーション情報表示の単眼視/両眼視制御>
続いて、上述した道路形状に応じた変更するナビゲーション表示に加えて、さらに、アイボックスの面積/形状を制御し、両眼視/単眼視の切り替えを行う実施例について、以下に図33〜36を参照しながら、詳細に説明する。
なお、アイボックスとは、HUDの映像表示を視認できる視点の範囲をあらわしており、図34にも示す通り、ダッシュボード上面に配置された機能性液晶フィルム401により左右のエリアに分かれて個別に制御が可能である。例えば、好適の判定により、単眼視が好適で且つ単眼視が右眼に設定されている場合は、図34(a)に示すように機能性液晶フィルムの右側半分を白色状態にする。この映像光の遮断により、結果として、右眼にしか映像光が投射されず、右側の単眼で見ることができることとなる。なお、図33では、このアイボックスを、運転者の両眼5の直前の位置に破線73で示している。
この実施例では、図33にも示すように、運転者は、プロジェクタ30aから投射された映像光は、各種の光学部品41c、42aを通して、ミラー52に反射され、さらには、上述した機能性液晶フィルム401を通り、その後、ウィンドシールド3上で反射されたナビゲーション表示の映像光が運転者の眼に投射される。このことにより、運転者は、当該ナビゲーション表示をウィンドシールド3の前方において虚像として認識することが可能となる。なお、この実施例では、映像光を遮断するために機能性液晶フィルムの半分を白色状態にする例を示したが、不透過となっていればよく、その他、グレーなどの色であってもよい。
ところで、一般に、3D映像を見る(または、鑑賞)する場合には、以下のことが指摘されている。すなわち、(1)部屋を明るくして鑑賞すると、映像酔いが軽減される場合があること。(2)融合限界というものが存在し、視差をある程度以上に大きくすると右眼と左眼の画像が融合せず、2重像がみえてしまい、立体視ができなくなること。(3)両眼が表示面に対して斜めになっていると、左右の眼に映る映像の上下の差異が大きくなり、融合が困難となり、眼精疲労を引き起こすこと。
さらには、(4)VDT(Visual Display Terminals)作業に立体映像を用いる場合の留意点として、特に、以下の事柄が指摘されている。すなわち、(4−1)一連の作業時間は1時間を超えないようにすること。(4−2)連続作業と連続作業との間には、10〜15分程度の作業休止時間を設けること。(4−3)一連の作業時間内において、1〜2回程度の小休止を設けること。
そこで、上記の事柄を考慮して本発明になるヘッドアップディスプレイ装置においては、特に、そのナビゲーション情報の表示において、機能性液晶フィルム401の制御によってアイボックス73のサイズ/形状の切り替え、すなわち、左右いずれかの眼による単眼視(図34(a)または(b)を参照)と左右両眼による両眼視(図34(c)を参照)を切替え制御する(以下では、「単眼視/両眼視制御」と言う)ことにより、ウィンドシールド3の前方のHUD表示領域35内に3D表示される虚像を連続して見続けることとなる運転者への負担を軽減するための対策について検討した。
検討の結果、アイボックスのサイズ/形状を切り替えるシーン(条件)としては、以下の候補が挙げられた。
・虚像距離(≒対象物距離)が遠方(または、近傍)である場合。
・運転者の顔の傾きが所定の閾値を越える場合。
・連続運転時間が所定の閾値を越える場合。
・車室内の明るさが所定の閾値に満たない場合。
・視差映像の品質を保つのが困難な場合(例えば、HUD表示領域35を上下に調整することで、ウィンドシールドの曲率の大きな面で反射した虚像を見る場合など、虚像距離調節が間に合わない等の場合)。
・対象物距離に合わせた距離感での虚像表示が不可能(例えば、調整可能域外である、距離の異なる対象物の数が、独立した虚像距離調整の数を超える等)な場合。
以上に加えて、さらに、
・直線日光を避けるようアイボックスのサイズ/形状を変更する(不使用時は、全域を非透明化し、HUD内部の外光による加熱や表示画面による外光の反射を防止する)。
次に、以上に述べた発明者らによる検討の結果に基づく、上記単眼視/両眼視制御を含むアイボックス制御の具体的な内容について、図35および図36を参照しながら、詳細に説明する。
図35には、アイボックス制御の処理内容であるフローチャートが示されており、まず、アイボックス制御処理が開始すると、以下に詳細を示す単眼視/両眼視好適判定処理の判定結果を取り込む(S260)。
続いて、上記の判定結果に基づいて、単眼視が好適であるか否かを判定する(S261)。この判定の結果、「Yes」の場合には、さらに、単眼視は右眼に設定されているか否かを判定する(S262)。その結果、「Yes」と判定された場合には、左眼がアイボックスから外れるようにアイボックスを変更(S263:図34(a)を参照)して、一連の処理を終了する。他方、S262の判定の結果、「No」の場合には、右眼がアイボックスから外れるようにアイボックスを変更(S264:図34(b)を参照)して、一連の処理を終了する。
一方、上記S261の判定の結果、「No」の場合には、アイボックスサイズが最大になるようアイボックスを変更(S265:図34(c)を参照)して、一連の処理を終了する。
次に、上述した単眼視/両眼視好適判定処理(S260)の詳細内容について、図36を参照しながら詳細に説明する。
単眼視/両眼視好適判定処理が開始すると、まず、実景(すなわち、ウィンドシールド越しに見える風景)と虚像(すなわち、ウィンドシールド越しに見えるナビゲーション表示)の距離の差が規定値以上であるか否かを判定する(S270)。その結果、「Yes」と判定された場合には、好適に単眼を設定して(S271)、一連の処理を終了する。なお、上記の記載からも明らかなように、この設定は、図35においてS260で示した処理において、単眼視/両眼視好適判定処理の判定結果として、取り込まれる。
一方、上記S270の判定処理の結果、「No」と判定された場合には、さらに、運転者の頭の傾きが規定値以上であるか否かを判定する(S272)。その結果、「Yes」の場合には、上記のS271において好適に単眼を設定して(S271)、一連の処理を終了する。
他方、上記S272の判定処理の結果、「No」と判定された場合には、さらに、両眼視の連続時間が規定値以上か否かを判定する(S273)。その結果、「Yes」の場合には、上記S271において好適に単眼を設定して(S271)、一連の処理を終了する。
他方、上記S273の判定処理の結果、「No」と判定された場合には、さらに、車室内の明るさが規定値以上であるか否かを判定する(S274)。その結果、「Yes」の場合には、上記と同様に、好適に単眼を設定して(S271)、一連の処理を終了する。
他方、上記S274の判定処理の結果、「No」と判定された場合には、さらに、虚像反射部分のフロントガラス(ウィンドシールド)の曲率が規定値以上か否かを判定する(S275)。その結果、「Yes」の場合には、好適に単眼を設定して(S271)、一連の処理を終了する。他方、このS275の判定処理の結果、「No」と判定された場合には、好適に両眼を設定して(S276)、一連の処理を終了する。なお、この設定も、図35においてS260で示した処理において、単眼視/両眼視好適判定処理の判定結果として、取り込まれる。
なお、上記の判定処理において、例えば、実景の距離や運転者の頭の傾き、さらには、車室内の明るさについては、上記図3にも示す車両情報の取得デバイスである、例えば、カメラ(車内)115やカメラ(車外)116等を利用することによれば、容易に求めることが可能であることは、当業者にとっては明らかであろう。
以上からも明らかなように、上述したナビゲーション情報表示の単眼視/両眼視制御によれば、長時間の運転においても、運転者への負担を軽減することが可能なナビゲーション情報表示を行うことができるヘッドアップディスプレイ装置を実現することが可能となる。
なお、上述したナビゲーション情報表示の単眼視/両眼視制御を実行するためのソフトウェアも、上記と同様に、例えば、本発明になるヘッドアップディスプレイ装置を構成する制御部20内のメモリ内に予め格納され、ECU21(例えば、図3〜5を参照)により実行されることとなる。
以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は上記の実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることはいうまでもない。例えば、上記の実施の形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、上記の実施の形態の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
本発明は、ARを利用したヘッドアップディスプレイ装置に利用可能である。
1…AR−HUD、2…車両、3…ウィンドシールド、4…車両情報、5…運転者、6…表示領域、
10…車両情報取得部、
20…制御部、21…ECU、22…音声出力部、23…不揮発性メモリ、24…メモリ、25…光源調整部、26…歪み補正部、27…表示素子駆動部、28…表示距離調整部、29…ミラー調整部、
30…映像表示装置、30a…プロジェクタ、30b…LCD、31…光源、32…照明光学系、33…表示素子、35…HUD表示領域、351…ナビゲーション表示(矢印)、352…異なる形態の矢印、
40…表示距離調整機構、41a…拡散板、41b…拡散板、41c…可動式拡散板、42a…レンズ、42b…可動式レンズ、43a…可動式光学フィルタ、43b…くし状光学フィルタ、
50…ミラー駆動部、51…ミラー、51a…ミラー、51b…調光ミラー、52…ミラー、
60…スピーカ、
101…車速センサ、102…シフトポジションセンサ、103…ハンドル操舵角センサ、104…ヘッドライトセンサ、105…照度センサ、106…色度センサ、107…測距センサ、108…赤外線センサ、109…エンジン始動センサ、110…加速度センサ、111…ジャイロセンサ、112…温度センサ、113…路車間通信用無線受信機、114…車車間通信用無線受信機、115…カメラ(車内)、116…カメラ(車外)、117…GPS受信機、118…VICS受信機、
281…機能性液晶フィルムON/OFF制御部、282…レンズ可動部、283…調光ミラーON/OFF制御部、284…拡散板可動部、285…光学フィルタ可動部、
401…機能性液晶フィルム、402…レンズ可動機構、403…調光ミラー、404…拡散板可動機構、405…光学フィルタ可動機構。

Claims (3)

  1. 車両のウィンドシールドに映像を投射することで、運転者に対して前記車両の前方の風景に重畳させて虚像を表示するヘッドアップディスプレイ装置であって、
    前記車両が検知することができる各種の車両情報を取得する車両情報取得部と、
    前記車両情報取得部が取得した前記車両情報に基づいて、前記映像の表示を制御する制御部と、
    前記制御部からの指示に基づいて前記映像を形成する映像表示装置と、
    前記映像表示装置が形成した前記映像を反射して前記ウィンドシールドに投射するミラーと、
    前記制御部からの指示に基づいて前記ミラーの角度を変化させるミラー駆動部と、
    前記運転者に対する前記虚像の表示距離を調整する表示距離調整機構と、を有し、
    前記制御部は、前記車両情報に基づいて、前記運転者に対して前記風景に前記虚像を重畳させて表示することが可能となるよう、前記ミラー駆動部を介して前記ミラーの角度を調整し、
    前記制御部は、前記車両情報のうちの外光情報に基づいて、好適な明るさレベルを算出し、前記好適な明るさレベルになるように光源の発光量を調整
    前記制御部は、前記虚像の表示距離を算出し、前記虚像の表示距離になるように前記表示距離調整機構を駆動し、
    前記虚像の表示距離は、複数の表示距離として、少なくとも、遠、中、近の3種類の表示距離を有し、
    前記表示距離調整機構は、前記映像表示装置と前記ミラーとの間に配置されている光学素子を有し、
    前記制御部は、前記映像表示装置または前記光学素子の制御によって、前記虚像の表示距離を設定し、
    前記光学素子は、透過と反射の状態を切り替えられる複数の調光ミラーを有し、前記複数の調光ミラーは、前記映像表示装置と前記ミラーとを結ぶ光路を含む面において行列状に配置され、
    前記制御部は、前記映像を前記複数の調光ミラーに投射するように制御し、前記複数の調光ミラーの各々の調光ミラーの透過と反射の状態を制御して、エリア毎に前記映像表示装置と前記ミラーとの間の光学的距離を異ならせることで、前記複数の表示距離を構成する、
    ヘッドアップディスプレイ装置。
  2. 車両のウィンドシールドに映像を投射することで、運転者に対して前記車両の前方の風景に重畳させて虚像を表示するヘッドアップディスプレイ装置であって、
    前記車両が検知することができる各種の車両情報を取得する車両情報取得部と、
    前記車両情報取得部が取得した前記車両情報に基づいて、前記映像の表示を制御する制御部と、
    前記制御部からの指示に基づいて前記映像を形成する映像表示装置と、
    前記映像表示装置が形成した前記映像を反射して前記ウィンドシールドに投射するミラーと、
    前記制御部からの指示に基づいて前記ミラーの角度を変化させるミラー駆動部と、
    前記運転者に対する前記虚像の表示距離を調整する表示距離調整機構と、を有し、
    前記制御部は、前記車両情報に基づいて、前記運転者に対して前記風景に前記虚像を重畳させて表示することが可能となるよう、前記ミラー駆動部を介して前記ミラーの角度を調整し、
    前記制御部は、前記車両情報のうちの外光情報に基づいて、好適な明るさレベルを算出し、前記好適な明るさレベルになるように光源の発光量を調整し、
    前記制御部は、前記虚像の表示距離を算出し、前記虚像の表示距離になるように前記表示距離調整機構を駆動し、
    前記虚像の表示距離は、複数の表示距離として、少なくとも、遠、中、近の3種類の表示距離を有し、
    前記表示距離調整機構は、前記映像表示装置と前記ミラーとの間に配置されている光学素子を有し、
    前記制御部は、前記映像表示装置または前記光学素子の制御によって、前記虚像の表示距離を設定し、
    前記光学素子は、前記映像を結像する拡散板と、前記拡散板の出射側に配置された可動式光学フィルタとを有し、前記可動式光学フィルタは、光路に対して挿抜される方向での移動が可能であり、領域毎に異なる屈折率を持ち、
    前記制御部は、前記映像を前記拡散板に投射するように制御し、前記可動式光学フィルタの挿抜の状態を制御して、エリア毎に前記映像表示装置と前記ミラーとの間の光学的距離を異ならせることで、前記複数の表示距離を構成する、
    ヘッドアップディスプレイ装置。
  3. 車両のウィンドシールドに映像を投射することで、運転者に対して前記車両の前方の風景に重畳させて虚像を表示するヘッドアップディスプレイ装置であって、
    前記車両が検知することができる各種の車両情報を取得する車両情報取得部と、
    前記車両情報取得部が取得した前記車両情報に基づいて、前記映像の表示を制御する制御部と、
    前記制御部からの指示に基づいて前記映像を形成する映像表示装置と、
    前記映像表示装置が形成した前記映像を反射して前記ウィンドシールドに投射するミラーと、
    前記制御部からの指示に基づいて前記ミラーの角度を変化させるミラー駆動部と、
    前記運転者に対する前記虚像の表示距離を調整する表示距離調整機構と、を有し、
    前記制御部は、前記車両情報に基づいて、前記運転者に対して前記風景に前記虚像を重畳させて表示することが可能となるよう、前記ミラー駆動部を介して前記ミラーの角度を調整し、
    前記制御部は、前記車両情報のうちの外光情報に基づいて、好適な明るさレベルを算出し、前記好適な明るさレベルになるように光源の発光量を調整し、
    前記制御部は、前記虚像の表示距離を算出し、前記虚像の表示距離になるように前記表示距離調整機構を駆動し、
    前記虚像の表示距離は、複数の表示距離として、少なくとも、遠、中、近の3種類の表示距離を有し、
    前記表示距離調整機構は、前記映像表示装置と前記ミラーとの間に配置されている光学素子を有し、
    前記制御部は、前記映像表示装置または前記光学素子の制御によって、前記虚像の表示距離を設定し、
    前記光学素子は、前記映像を結像する拡散板と、前記拡散板の出射側に配置された、くし状光学フィルタとを有し、前記くし状光学フィルタは、複数の光学フィルタ部がくし状に配置された部材であり、前記映像を構成するライン単位毎に、前記光学フィルタ部の有無が対応付けられ、
    前記制御部は、前記映像を前記拡散板に投射するように制御し、前記くし状光学フィルタの状態を制御して、エリア毎に前記映像表示装置と前記ミラーとの間の光学的距離を異ならせることで、前記複数の表示距離を構成する、
    ヘッドアップディスプレイ装置。
JP2017565393A 2016-02-05 2016-10-20 ヘッドアップディスプレイ装置 Active JP6717856B2 (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
JP2016020471 2016-02-05
JP2016020471 2016-02-05
JP2016053181 2016-03-17
JP2016053181 2016-03-17
JP2016054581 2016-03-18
JP2016054581 2016-03-18
PCT/JP2016/081124 WO2017134865A1 (ja) 2016-02-05 2016-10-20 ヘッドアップディスプレイ装置

Publications (2)

Publication Number Publication Date
JPWO2017134865A1 JPWO2017134865A1 (ja) 2018-12-20
JP6717856B2 true JP6717856B2 (ja) 2020-07-08

Family

ID=59500693

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017565393A Active JP6717856B2 (ja) 2016-02-05 2016-10-20 ヘッドアップディスプレイ装置

Country Status (4)

Country Link
US (1) US10866415B2 (ja)
JP (1) JP6717856B2 (ja)
CN (1) CN108473054B (ja)
WO (1) WO2017134865A1 (ja)

Families Citing this family (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220222805A1 (en) * 2014-09-17 2022-07-14 Gary B. Levin Apparatus and method for onboard stereoscopic inspection of vehicle tires
JP6726674B2 (ja) * 2015-10-15 2020-07-22 マクセル株式会社 情報表示装置
JP6629889B2 (ja) * 2016-02-05 2020-01-15 マクセル株式会社 ヘッドアップディスプレイ装置
EP3264160B1 (en) * 2016-03-24 2019-08-28 Panasonic Intellectual Property Management Co., Ltd. Headup display device and vehicle
JP6695049B2 (ja) * 2017-05-10 2020-05-20 パナソニックIpマネジメント株式会社 表示装置及び表示制御方法
US11106917B2 (en) * 2017-07-04 2021-08-31 Turing Video Surveillance system with human-machine interface
US20190012552A1 (en) * 2017-07-06 2019-01-10 Yves Lambert Hidden driver monitoring
KR20190012068A (ko) * 2017-07-26 2019-02-08 삼성전자주식회사 전방 표시 장치 및 그 동작 방법
KR102397089B1 (ko) * 2017-07-28 2022-05-12 삼성전자주식회사 이미지 처리 방법 및 이미지 처리 장치
JP6839806B2 (ja) * 2017-09-21 2021-03-10 パナソニックIpマネジメント株式会社 ヘッドアップディスプレイ装置、及び車両
JP6870109B2 (ja) * 2017-11-14 2021-05-12 マクセル株式会社 ヘッドアップディスプレイ装置およびその表示制御方法
KR102547823B1 (ko) * 2017-12-13 2023-06-26 삼성전자주식회사 컨텐츠 시각화 장치 및 방법
JP2019121107A (ja) * 2017-12-28 2019-07-22 トヨタ自動車株式会社 車載通信装置及び車両
JP6938367B2 (ja) * 2017-12-28 2021-09-22 アルパイン株式会社 車載システム
CN108152959B (zh) * 2018-01-02 2020-08-07 京东方科技集团股份有限公司 车载抬头显示系统
JP7320736B2 (ja) * 2018-03-02 2023-08-04 パナソニックIpマネジメント株式会社 表示システム
JP2019156153A (ja) * 2018-03-13 2019-09-19 パイオニア株式会社 表示制御装置
CN108896066A (zh) * 2018-03-23 2018-11-27 江苏泽景汽车电子股份有限公司 一种增强现实抬头显示器及其导航实现方法
CN108896067B (zh) * 2018-03-23 2022-09-30 江苏泽景汽车电子股份有限公司 一种用于车载ar导航的动态显示方法及装置
CN108399903B (zh) * 2018-03-27 2020-11-27 京东方科技集团股份有限公司 一种成像位置的调节方法及装置、平视显示系统
JP6726883B2 (ja) 2018-03-30 2020-07-22 パナソニックIpマネジメント株式会社 表示システム、移動体、及び表示システムの制御方法
JP2019220009A (ja) * 2018-06-21 2019-12-26 ルネサスエレクトロニクス株式会社 半導体装置、メッセージ画像出力方法、およびプログラム
WO2020009218A1 (ja) * 2018-07-05 2020-01-09 日本精機株式会社 ヘッドアップディスプレイ装置
WO2020009217A1 (ja) * 2018-07-05 2020-01-09 日本精機株式会社 ヘッドアップディスプレイ装置
JP7338625B2 (ja) * 2018-07-05 2023-09-05 日本精機株式会社 ヘッドアップディスプレイ装置
JP6952899B2 (ja) 2018-07-13 2021-10-27 マクセル株式会社 ヘッドアップディスプレイ
WO2020031915A1 (ja) 2018-08-06 2020-02-13 株式会社小糸製作所 車両用表示システム及び車両
EP3835848A4 (en) * 2018-08-08 2021-10-06 Panasonic Intellectual Property Management Co., Ltd. HEAD-UP DISPLAY
JP1632766S (ja) * 2018-09-10 2019-06-03
KR102116783B1 (ko) * 2018-10-10 2020-05-29 네이버랩스 주식회사 영상을 지면에 위치시켜 운전자의 시점에 증강현실을 구현하는 3차원 증강현실 헤드업 디스플레이
KR20200044212A (ko) * 2018-10-11 2020-04-29 현대자동차주식회사 차량의 표시 제어 장치 및 방법
JP6833790B2 (ja) * 2018-10-19 2021-02-24 本田技研工業株式会社 表示装置、表示制御方法、およびプログラム
KR20200045359A (ko) * 2018-10-22 2020-05-04 삼성전자주식회사 투시형 디스플레이 장치
KR20200072641A (ko) * 2018-12-12 2020-06-23 삼성전자주식회사 3차원 증강 현실을 제공하는 헤드 업 디스플레이 장치
FR3090138B1 (fr) * 2018-12-17 2022-08-05 Psa Automobiles Sa Procédé et dispositif de réglage de la luminance d’un afficheur tête haute embarqué dans un véhicule
CN109584596A (zh) * 2018-12-20 2019-04-05 奇瑞汽车股份有限公司 车辆驾驶提示方法及装置
EP3677961A3 (en) * 2019-01-02 2020-07-22 Visteon Global Technologies, Inc. Curved segmented active dimmable lens for a display system
KR102648818B1 (ko) * 2019-01-29 2024-03-19 현대자동차주식회사 차량용 인포테인먼트 장치 및 그의 제어 방법과 그를 포함하는 차량
JP7079747B2 (ja) * 2019-03-08 2022-06-02 本田技研工業株式会社 表示装置、表示制御方法、およびプログラム
US20220144172A1 (en) * 2019-03-25 2022-05-12 Sony Group Corporation Information processing device, information processing method and information processing program
JPWO2020209298A1 (ja) * 2019-04-11 2020-10-15
CN110161695A (zh) * 2019-05-17 2019-08-23 中国科学院光电技术研究所 一种成像距离可变的汽车平视显示光学结构
JP7417907B2 (ja) * 2019-05-22 2024-01-19 パナソニックIpマネジメント株式会社 表示システム
WO2020241134A1 (ja) 2019-05-29 2020-12-03 パナソニックIpマネジメント株式会社 表示システム
WO2020241094A1 (ja) * 2019-05-31 2020-12-03 パナソニックIpマネジメント株式会社 表示システム
DE102019208649B3 (de) * 2019-06-13 2020-01-02 Volkswagen Aktiengesellschaft Steuerung einer Anzeige einer Augmented-Reality-Head-up-Display-Vorrichtung für ein Kraftfahrzeug
US10908418B1 (en) * 2019-07-29 2021-02-02 E-Lead Electronic Co., Ltd. Naked eye 3D head-up display device with reflective diffuser sheet
JP7287867B2 (ja) * 2019-08-30 2023-06-06 トヨタ自動車株式会社 車載用制御装置
JP7120982B2 (ja) * 2019-11-11 2022-08-17 株式会社Soken 表示制御装置
KR20210087271A (ko) 2020-01-02 2021-07-12 삼성전자주식회사 3d 증강 현실 내비게이션 정보 표시 방법 및 장치
CN113109940A (zh) * 2020-01-10 2021-07-13 未来(北京)黑科技有限公司 一种高亮度的抬头显示系统
CN113103955A (zh) * 2020-01-10 2021-07-13 未来(北京)黑科技有限公司 一种多层次成像系统
CN113109939B (zh) * 2020-01-10 2023-11-14 未来(北京)黑科技有限公司 一种多层次成像系统
CN113109941B (zh) * 2020-01-10 2023-02-10 未来(北京)黑科技有限公司 一种分层成像的抬头显示系统
CN111256704B (zh) * 2020-01-21 2022-06-10 华为技术有限公司 一种折叠屏的导航方法及相关装置
CN113156643B (zh) * 2020-01-22 2023-08-15 未来(北京)黑科技有限公司 基于立体视觉显示的车辆显示系统
CN115087566A (zh) * 2020-02-20 2022-09-20 索尼集团公司 信息处理设备、信息处理方法和程序
DE102020001442B4 (de) * 2020-03-05 2022-02-03 Daimler Ag Verfahren zur Darstellung eines einen Bildbereich überlagernden Navigationshinweises und ein Assistenzsystem eines Fahrzeuges
JP7130689B2 (ja) * 2020-03-27 2022-09-05 矢崎総業株式会社 車両用表示装置
JP2021154988A (ja) * 2020-03-30 2021-10-07 株式会社豊田中央研究所 車載表示装置、車載表示装置を制御する方法、及びコンピュータプログラム
GB2593750B (en) * 2020-04-01 2024-04-03 Envisics Ltd A multi-plane display device
CN111442784B (zh) * 2020-04-03 2022-08-02 北京四维智联科技有限公司 一种基于ar导航的道路引导方法、装置及设备
WO2021251116A1 (ja) * 2020-06-08 2021-12-16 パナソニックIpマネジメント株式会社 表示システム
EP4163156A4 (en) * 2020-06-08 2023-12-06 Panasonic Intellectual Property Management Co., Ltd. DISPLAY SYSTEM
KR20220022340A (ko) 2020-08-18 2022-02-25 삼성전자주식회사 컨텐츠를 시각화하는 장치 및 방법
DE102020211301A1 (de) * 2020-09-09 2022-03-10 Volkswagen Aktiengesellschaft Verfahren zur Darstellung eines virtuellen Elements
CN112255788A (zh) * 2020-09-29 2021-01-22 江苏泽景汽车电子股份有限公司 一种反射镜不翻转的hud图像调节方法
US11833901B2 (en) * 2020-10-12 2023-12-05 GM Global Technology Operations LLC System and method for adjusting a location and distortion of an image projected onto a windshield of a vehicle by a head-up display
DE102021101433A1 (de) * 2021-01-22 2022-07-28 Bayerische Motoren Werke Aktiengesellschaft Head-Up-Display mit einem Spiegelkabinett zur Bauraumreduktion
KR20220134106A (ko) * 2021-03-26 2022-10-05 현대자동차주식회사 차량용 헤드업 디스플레이 장치 및 방법
DE102022107340A1 (de) * 2021-03-29 2022-09-29 Panasonic Intellectual Property Management Co., Ltd. Rendering-system, anzeige-system, anzeigesteuersystem, rendering-verfahren, und programm
JP2022184350A (ja) * 2021-06-01 2022-12-13 マツダ株式会社 ヘッドアップディスプレイ装置
CN113859122A (zh) * 2021-09-30 2021-12-31 重庆长安新能源汽车科技有限公司 一种高度自适应调节的ar-hud显示方法、系统和车辆
CN116413908A (zh) * 2021-12-30 2023-07-11 未来(北京)黑科技有限公司 显示装置、抬头显示器以及交通设备
WO2023176897A1 (ja) * 2022-03-16 2023-09-21 株式会社小糸製作所 画像投影装置、および画像投影方法
CN114779477B (zh) * 2022-06-17 2022-11-04 江苏泽景汽车电子股份有限公司 一种显示画面补偿方法、装置、电子设备及存储介质

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH027533U (ja) 1988-06-29 1990-01-18
JPH0275330U (ja) * 1988-11-30 1990-06-08
JPH04109325U (ja) 1991-03-05 1992-09-22 株式会社カンセイ 車両用計器
JPH08197981A (ja) * 1995-01-23 1996-08-06 Aqueous Res:Kk 車輌用表示装置
JP2001018682A (ja) * 1999-07-09 2001-01-23 Calsonic Kansei Corp 車両用表示装置
JP2004168230A (ja) * 2002-11-21 2004-06-17 Nissan Motor Co Ltd 車両用表示装置
JP2005035384A (ja) * 2003-07-14 2005-02-10 Nissan Motor Co Ltd 車両用自動遮光装置
DE102004016808A1 (de) * 2004-04-06 2005-10-27 Robert Bosch Gmbh Signalisiervorrichtung zur Anzeige von Warn- und/oder Informationshinweisen in Fahrzeugen
JP2006007867A (ja) 2004-06-23 2006-01-12 Matsushita Electric Ind Co Ltd 車載用映像表示装置
JP2007055365A (ja) 2005-08-23 2007-03-08 Denso Corp 車両用表示装置
JP2009113710A (ja) * 2007-11-08 2009-05-28 Denso Corp ヘッドアップディスプレイ装置
JP2009178404A (ja) 2008-01-31 2009-08-13 Carecom Co Ltd ナースコール子機
US8269652B2 (en) * 2009-04-02 2012-09-18 GM Global Technology Operations LLC Vehicle-to-vehicle communicator on full-windshield head-up display
US20100253595A1 (en) * 2009-04-02 2010-10-07 Gm Global Technology Operations, Inc. Virtual controls and displays by laser projection
US7924146B2 (en) * 2009-04-02 2011-04-12 GM Global Technology Operations LLC Daytime pedestrian detection on full-windscreen head-up display
US8817090B2 (en) * 2009-04-02 2014-08-26 GM Global Technology Operations LLC Luminance uniformity compensation of vector projection display
US8704653B2 (en) * 2009-04-02 2014-04-22 GM Global Technology Operations LLC Enhanced road vision on full windshield head-up display
US8564502B2 (en) * 2009-04-02 2013-10-22 GM Global Technology Operations LLC Distortion and perspective correction of vector projection display
US8344894B2 (en) * 2009-04-02 2013-01-01 GM Global Technology Operations LLC Driver drowsy alert on full-windshield head-up display
US8395529B2 (en) * 2009-04-02 2013-03-12 GM Global Technology Operations LLC Traffic infrastructure indicator on head-up display
US8629784B2 (en) * 2009-04-02 2014-01-14 GM Global Technology Operations LLC Peripheral salient feature enhancement on full-windshield head-up display
US8384531B2 (en) * 2009-04-02 2013-02-26 GM Global Technology Operations LLC Recommended following distance on full-windshield head-up display
US8317329B2 (en) * 2009-04-02 2012-11-27 GM Global Technology Operations LLC Infotainment display on full-windshield head-up display
US8830141B2 (en) * 2009-04-02 2014-09-09 GM Global Technology Operations LLC Full-windshield head-up display enhancement: anti-reflective glass hard coat
US8350724B2 (en) * 2009-04-02 2013-01-08 GM Global Technology Operations LLC Rear parking assist on full rear-window head-up display
US8912978B2 (en) * 2009-04-02 2014-12-16 GM Global Technology Operations LLC Dynamic vehicle system information on full windshield head-up display
US8358224B2 (en) * 2009-04-02 2013-01-22 GM Global Technology Operations LLC Point of interest location marking on full windshield head-up display
US8072686B2 (en) * 2009-04-02 2011-12-06 GM Global Technology Operations LLC UV laser beamlett on full-windshield head-up display
US8384532B2 (en) * 2009-04-02 2013-02-26 GM Global Technology Operations LLC Lane of travel on windshield head-up display
US8164543B2 (en) * 2009-05-18 2012-04-24 GM Global Technology Operations LLC Night vision on full windshield head-up display
US8977489B2 (en) * 2009-05-18 2015-03-10 GM Global Technology Operations LLC Turn by turn graphical navigation on full windshield head-up display
JP2011064902A (ja) 2009-09-16 2011-03-31 Toshiba Corp 表示装置及び表示方法
JP5251853B2 (ja) * 2009-12-08 2013-07-31 株式会社デンソー ヘッドアップディスプレイ装置及びヘッドアップディスプレイ装置におけるステッピングモータの駆動方法の決定方法
JP2012179935A (ja) 2011-02-28 2012-09-20 Jvc Kenwood Corp 車両用表示装置
JP4945691B2 (ja) 2011-03-10 2012-06-06 株式会社東芝 表示装置、表示方法及びヘッドアップディスプレイ
CN103048786B (zh) * 2011-10-17 2015-07-01 财团法人车辆研究测试中心 多光路抬头显像装置
JP2013237320A (ja) 2012-05-14 2013-11-28 Toshiba Alpine Automotive Technology Corp 違和感軽減表示装置およびその表示制御方法
JP2014010418A (ja) 2012-07-03 2014-01-20 Yazaki Corp 立体表示装置及び立体表示方法
US9445011B2 (en) * 2012-10-22 2016-09-13 GM Global Technology Operations LLC Dynamic rearview mirror adaptive dimming overlay through scene brightness estimation
CA2907452A1 (en) * 2013-03-15 2014-09-18 Peloton Technology Inc. Vehicle platooning systems and methods
WO2015060193A1 (ja) 2013-10-22 2015-04-30 日本精機株式会社 車両情報投影システム及び投影装置
JP2015080988A (ja) * 2013-10-22 2015-04-27 日本精機株式会社 車両情報投影システム及び投影装置
JP6204793B2 (ja) * 2013-10-30 2017-09-27 アイシン・エィ・ダブリュ株式会社 ヘッドアップディスプレイ装置
JP2015200770A (ja) 2014-04-08 2015-11-12 アイシン・エィ・ダブリュ株式会社 ヘッドアップディスプレイ装置
JP6369106B2 (ja) 2014-04-16 2018-08-08 株式会社デンソー ヘッドアップディスプレイ装置
JP6629889B2 (ja) * 2016-02-05 2020-01-15 マクセル株式会社 ヘッドアップディスプレイ装置

Also Published As

Publication number Publication date
JPWO2017134865A1 (ja) 2018-12-20
CN108473054A (zh) 2018-08-31
CN108473054B (zh) 2021-05-28
US20190025580A1 (en) 2019-01-24
US10866415B2 (en) 2020-12-15
WO2017134865A1 (ja) 2017-08-10

Similar Documents

Publication Publication Date Title
JP6717856B2 (ja) ヘッドアップディスプレイ装置
CN108473055B (zh) 平视显示器装置
JP6588167B2 (ja) ヘッドアップディスプレイ装置
CN111433067B (zh) 平视显示装置及其显示控制方法
JP6707666B2 (ja) ヘッドアップディスプレイ装置
EP3015904B1 (en) Head-up display device
US10250860B2 (en) Electronic apparatus and image display method
JP2019059248A (ja) ヘッドアップディスプレイ装置
WO2017134861A1 (ja) ヘッドアップディスプレイ装置
CN112292630B (zh) 用于运行用于机动车的视野显示设备的方法
JP4692595B2 (ja) 車両用情報表示システム
JP7300112B2 (ja) 制御装置、画像表示方法及びプログラム
JP2016109645A (ja) 情報提供装置、情報提供方法及び情報提供用制御プログラム
JP2019059247A (ja) ヘッドアップディスプレイ装置
WO2018167844A1 (ja) ヘッドアップディスプレイ装置とその画像表示方法
JP2016107947A (ja) 情報提供装置、情報提供方法及び情報提供用制御プログラム
WO2019208365A1 (ja) 情報表示装置
JP2018058521A (ja) 仮想表示ミラー装置
CN110816407A (zh) 显示装置、显示控制方法及存储介质
CN110816269B (zh) 显示装置、显示控制方法及存储介质
JP7344635B2 (ja) ヘッドアップディスプレイ装置
JP2020073365A (ja) 情報提供装置、情報提供方法及び情報提供用制御プログラム
JP2021056358A (ja) ヘッドアップディスプレイ装置
JPWO2019130860A1 (ja) ヘッドアップディスプレイ装置、および制御プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180713

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190625

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190820

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191218

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200519

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200611

R150 Certificate of patent or registration of utility model

Ref document number: 6717856

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250