JP2021534464A - 画像を地面に位置させて運転手の視点に拡張現実を実現する3次元拡張現実ヘッドアップディスプレイ - Google Patents

画像を地面に位置させて運転手の視点に拡張現実を実現する3次元拡張現実ヘッドアップディスプレイ Download PDF

Info

Publication number
JP2021534464A
JP2021534464A JP2021510058A JP2021510058A JP2021534464A JP 2021534464 A JP2021534464 A JP 2021534464A JP 2021510058 A JP2021510058 A JP 2021510058A JP 2021510058 A JP2021510058 A JP 2021510058A JP 2021534464 A JP2021534464 A JP 2021534464A
Authority
JP
Japan
Prior art keywords
display
virtual image
combiner
head
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021510058A
Other languages
English (en)
Other versions
JP7183393B2 (ja
Inventor
ウニョン ジョン
ジェウォン チャ
Original Assignee
ネイバーラボス コーポレーション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ネイバーラボス コーポレーション filed Critical ネイバーラボス コーポレーション
Priority claimed from PCT/KR2018/015307 external-priority patent/WO2020075911A1/ko
Publication of JP2021534464A publication Critical patent/JP2021534464A/ja
Priority to JP2022186200A priority Critical patent/JP7397152B2/ja
Application granted granted Critical
Publication of JP7183393B2 publication Critical patent/JP7183393B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/211Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays producing three-dimensional [3D] effects, e.g. stereoscopic images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • B60K35/232Head-up displays [HUD] controlling the projection distance of virtual images depending on the condition of the vehicle or the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • B60K35/233Head-up displays [HUD] controlling the size or position in display areas of virtual images depending on the condition of the vehicle or the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • B60K35/234Head-up displays [HUD] controlling the brightness, colour or contrast of virtual images depending on the driving conditions or on the condition of the vehicle or the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • B60K35/235Head-up displays [HUD] with means for detecting the driver's gaze direction or eye points
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/179Distances to obstacles or vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/182Distributing information between displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/23Optical features of instruments using reflectors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/31Virtual images
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0132Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0134Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0183Adaptation to parameters characterising the motion of the vehicle
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/08Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
    • G02B26/0816Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Lenses (AREA)

Abstract

画像を地面に位置させて運転手の視点に拡張現実を実現する、3次元拡張現実ヘッドアップディスプレイを提供する。車両用の3次元ヘッドアップディスプレイは、光源の役割を担うディスプレイ装置と、前記光源の光を運転席の方に反射させると同時に、車両の外部光を透過させるコンバイナとを含み、前記光源の光による画像は、前記車両の前方地面に対応するように横にした3次元視点(perspective)の虚像で表示される、光学構成を含む。【選択図】図5

Description

以下の説明は、3次元ヘッドアップディスプレイ(Head−Up Display)に関する。
図1は、一般的なヘッドアップディスプレイ装置の情報確認のための焦点調節を説明した図である。
図1を参照すると、一般的な車両用ヘッドアップディスプレイ(Head−Up Display:HUD)装置は、ディスプレイ10が車両の現在速度、燃料残量、ナビゲーション(Navigation)の道案内情報のような画像を発信すると、光学系11、12を通過して運転手の前方に位置するフロントガラス13にグラフィックイメージ14が投映されることで、運転手が視線を必要以上に他の場所に移すことを最小限に抑える車両量ディスプレイ装置である。ここで、光学系11、12は、ディスプレイ10が発信した画像の光の経路を変更するために複数のミラーで構成される。このような車両用ヘッドアップディスプレイ装置は、運転手の即時的な反応を誘導すると同時に、利便性を提供するという長所がある。
一般的な車両用ヘッドアップディスプレイ(HUD)装置において、画像は、利用者の前方約2〜3mに固定されて位置する。この反面、運転時の運転手の注視距離は近距離〜約300mである。このような点を考慮するとき、運転手が遠距離を注視しながら運転している最中にヘッドアップディスプレイ(HUD)装置の情報を確認するためには、目の焦点を大幅に調整しなければならない不便が生じる。すなわち、主体となる視野が位置する遠距離と画像が映し出された〜3mとの間で、焦点調節が繰り返されるようになる。
したがって、運転中の注視時点に、目の焦点を変化させなくても運転手が情報を取得することができるように運転環境に拡張現実を実現し、画像表現距離の制約がない3次元ヘッドアップディスプレイ(Three Dimensional Head−Up Display)装置の開発が求められている。
例えば、特許文献1(登録日2014年6月13日)は、3次元拡張現実に基づくヘッドアップディスプレイ装置に関するものであって、3次元イメージに拡張されたイメージ情報を実際の距離情報に基づいて立体的に表示することにより、運転手にリアルな情報を提供することができる、ヘッドアップディスプレイ装置に関する技術が開示されている。
韓国登録特許10−1409846号公報
画像位置を地面に対応させる形態の3次元実現方式を有する、3次元ヘッドアップディスプレイを提供する。
仮想のスクリーンを地面に対応するように横にした3次元視点(perspective)で表現する、3次元ヘッドアップディスプレイを提供する。
車両用3次元ヘッドアップディスプレイであって、光源の役割を担うディスプレイ装置と、前記光源の光を運転席の方に反射させると同時に、車両の外部光を透過させるコンバイナとを含み、前記光源の光による画像が前記車両の前方地面に対応するように横にした3次元視点(perspective)の虚像を表示することを特徴とする、車両用3次元ヘッドアップディスプレイを提供する。
一側面によると、前記ディスプレイ装置に対応するディスプレイ平面は、前記コンバイナにより、前記地面に対応する虚像平面とイメージング条件(imaging condition)を満たしてよい。
他の側面によると、前記ディスプレイ装置に対応するディスプレイ平面、前記コンバイナに対応するコンバイナ平面、および前記地面に対応する虚像平面の間のイメージング条件に基づき、前記虚像が生成されてよい。
また他の側面によると、前記コンバイナ平面に対して垂直でありながら前記コンバイナの光学的中心を通過する直線を基準に、前記ディスプレイ平面と前記虚像平面でイメージング条件を満たす角度を利用して前記虚像の開始位置と大きさが決められてよい。
また他の側面によると、前記角度、前記虚像平面を基準に、前記ディスプレイ平面の角度、前記ディスプレイ平面と前記コンバイナ平面の角度、前記虚像平面から前記コンバイナの光学的中心までの高さのうちの少なくとも1つにより、前記虚像の開始位置と大きさが調節されてよい。
また他の側面によると、前記虚像平面から前記コンバイナまでの高さにおいて、前記ディスプレイ装置と前記コンバイナの離隔距離は、前記虚像平面から前記コンバイナの光学的中心までの高さに該当の高さ方向へのオフセットを加えた高さ値、前記虚像平面を基準に前記ディスプレイ平面の角度、前記虚像平面を基準に前記コンバイナ平面の角度、前記ディスプレイ平面と前記コンバイナ平面の角度によって導き出されてよい。
また他の側面によると、前記コンバイナの位置は、要求されるアイボックス(Eye−box)の位置によるオフセットを含む高さが決定されてよい。
また他の側面によると、前記虚像を遠近感が適用された画像で表示するためのプロセッサをさらに含んでよい。
また他の側面によると、前記ディスプレイ装置は、マルチ画像を同時に実現するためにマルチ光源が配置される形態で構成されてよい。
また他の側面によると、前記ディスプレイ装置は、前記地面に対応するように横にした画像を生成するための第1ディスプレイ、および前記地面に垂直に画像を生成するための少なくとも1つの第2ディスプレイを含んでよい。
また他の側面によると、前記車両の前方領域の周辺情報に基づき、前記地面に対応する背景と前記虚像との距離誤差を認識して補正するためのプロセッサをさらに含んでよい。
また他の側面によれば、前記プロセッサは、前記周辺情報を利用して、前方の全般的な領域で距離誤差が発生する全般的誤差、前方の部分的な領域で距離誤差が発生する部分的誤差、および前方の障害物との距離が閾値以内に接近した状況の完全な誤差を区分して認識してよい。
また他の側面によると、前記プロセッサは、前記3次元ヘッドアップディスプレイに含まれたセンサ、あるいは前記車両に含まれたADAS(advanced driver−assistance system)またはセンサから前記周辺情報を取得してよい。
また他の側面によると、前記プロセッサは、前記距離誤差が事前に定められた許容誤差範囲内を維持するように、前記虚像を調整してよい。
また他の側面によると、前記プロセッサは、前記虚像の遠近感を調整する補正を実行してよい。
また他の側面によると、前記プロセッサは、前記光源と前記コンバイナのうちの少なくとも1つを調整して、前記虚像の勾配または位置を調整してよい。
また他の側面によると、前記プロセッサは、前記虚像の位置が前記コンバイナの画角(FOV)を逸脱する場合、前記コンバイナの位置を移動させてよい。
また他の側面によると、前記プロセッサは、前方の部分的な領域で距離誤差が発生する場合、誤差が発生した部分の遠近感を調整するか一部の画像を取り除いてよい。
また他の側面によると、前記プロセッサは、前方の障害物による距離誤差が発生する場合、前記地面の代わりに、前記障害物上あるいは前記障害物よりも近い距離に、前記地面に垂直な画像で表示してよい。
また他の側面によると、前記ディスプレイ装置は、前記地面に対応するように横にした画像を生成するための第1ディスプレイ、および前記地面に垂直な画像を生成するための少なくとも1つの第2ディスプレイを含み、前記プロセッサは、前方の障害物による距離誤差が発生する場合、前記第1ディスプレイの代わりに前記第2ディスプレイを利用して前記虚像を表示してよい。
車両用3次元ヘッドアップディスプレイの誤差補正方法であって、前記3次元ヘッドアップディスプレイは、光源の光による画像が、コンバイナを経て車両の前方地面に対応するように横になった3次元視点(perspective)の虚像で表示されるものであり、前記誤差補正方法は、少なくとも1つのプロセッサにより、前記車両の前方領域の周辺情報に基づき、前記地面に対応する背景と前記虚像との距離誤差を認識する段階、および前記少なくとも1つのプロセッサにより、前記虚像を調整して前記距離誤差を補正する段階を含む、誤差補正方法を提供する。
前記誤差補正方法を前記コンピュータシステムに実行させるために非一時的なコンピュータ読み取り可能な記録媒体に記録される、コンピュータプログラムを提供する。
車両用3次元ヘッドアップディスプレイの誤差補正装置であって、メモリに含まれるコンピュータ読み取り可能な命令を実行するように構成された少なくとも1つのプロセッサを含み、前記3次元ヘッドアップディスプレイは、光源の光による画像が、コンバイナを経て車両の前方地面に対応するように横にした3次元視点の虚像で表示されるものであり、前記少なくとも1つのプロセッサは、前記車の前方領域の周辺情報に基づき、前記地面に対応する背景と前記虚像との距離誤差を認識する誤差認識部、および前記虚像を調整して前記距離誤差を補正する誤差補正部を含む、誤差補正装置を提供する。
本発明の実施形態によると、画像位置を地面に対応させる形態の3次元実現方式を有する、3次元ヘッドアップディスプレイを提供することができる。
本発明の実施形態によると、仮想のスクリーンを地面に対応するように横にした3次元視点で表現する、3次元ヘッドアップディスプレイを提供することができる。
一般的なヘッドアップディスプレイ装置の情報確認のための焦点調節を説明するための図である。 本発明の一実施形態における、3次元ヘッドアップディスプレイの画像位置を示した図である。 本発明の一実施形態における、道路面のような地面に対応する仮想の平面上に画像を提供する例を示した図である。 本発明の一実施形態における、3次元ヘッドアップディスプレイの光学設計構成の例を示した図である。 本発明の一実施形態における、ディスプレイ平面とコンバイナ平面、および虚像平面の間のイメージング条件を示した図である。 本発明の一実施形態における、ディスプレイ装置とコンバイナの関係式を導き出すのに必要となる変数を示した図である。 本発明の一実施形態における、アイボックス(Eye−box、瞳孔の位置)によって決定されるコンバイナの位置を説明するための例示図である。 本発明の一実施形態における、地面に対応する仮想の平面上に遠近感が反映された画像の例を示した図である。 本発明の一実施形態における、マルチ画像を同時に実現するための3次元ヘッドアップディスプレイの光学設計構成の例を示した図である。 虚像と背景の距離差によって発生する問題を説明するための例示図である。 人間の瞳孔間の距離による許容誤差範囲を示したグラフである。 実際の運転環境で距離による許容誤差範囲を説明するための図である。 本発明の一実施形態における、3次元ヘッドアップディスプレイのプロセッサが含むことのできる構成要素の例を示した図である。 本発明の一実施形態における、3次元ヘッドアップディスプレイが実行することのできる誤差補正方法を示したフローチャートである。 本発明の一実施形態における、全般的誤差を補正する方式を説明するための例示図である。 本発明の一実施形態における、全般的誤差を補正する方式を説明するための例示図である。 本発明の一実施形態における、部分的誤差を補正する方式を説明するための例示図である。 本発明の一実施形態における、部分的誤差を補正する方式を説明するための例示図である。 本発明の一実施形態における、完全な誤差を補正する方式を説明するための例示図である。
以下、添付の図面を参照しながら、実施形態について説明する。
以下で説明する実施形態は、複数の他の形態に変形されてよく、本発明の範囲が以下で説明する実施形態によって限定されてはならない。また、複数の実施形態は、当技術分野において通常の知識を有する者に本発明をより完全に説明するために提供されるものである。図面において、要素の形状および大きさなどは、より明確な説明のために簡素化されるか、縮約あるいは誇張されることもある。
図1を参照しながら説明した既存のヘッドアップディスプレイはもちろん、TV、モニター、プロジエクタスクリーン、VR/ARガラスなどのようなディスプレイの殆どは、運転手の視線に対して垂直方向に位置している。
本発明の実施形態は、画像の位置を地面に対応させる形態の3次元実現方式を有する3次元ヘッドアップディスプレイを提供する。特に、仮想のスクリーンを地面に対応するように横にした3次元視点で表現することにより、運転環境において運転手の視点に対して最適化された3次元ヘッドアップディスプレイを提供することができる。
また、本発明の実施形態は、画像を地面に位置させて運転手の視点に拡張現実を実現する3次元ヘッドアップディスプレイにおいて、周辺環境によって発生するエラーを最小化する方法を提供する。
また、本発明の実施形態は、3次元ヘッドアップディスプレイで提供する画像の距離感が周辺環境と異なるように発生する誤差を、誤差発生状態を考慮しながら効果的に補正する方法を提供する。
図2は、本発明の一実施形態における、3次元ヘッドアップディスプレイの画像位置を示した図である。
図2を参照すると、本発明に係る3次元ヘッドアップディスプレイは、運転手が目で見ることのできる仮想の画像、すなわち虚像24の位置を、運転手の前方の地面と対応するように横にした3次元視点で表現してよい。
一般的な車両用ヘッドアップディスプレイの光学系による画像は、運転手の2〜3m前方の固定された距離に位置し、その殆どが地面25に対して垂直に表示される。これとは異なり、本発明に係る3次元ヘッドアップディスプレイは、運転手が注視する前方の地面25と対応する仮想の平面上に、虚像24を位置させる。
本発明に係る3次元ヘッドアップディスプレイは、プロジエクタのようなスクリーンに直に透写して実像を生成する一般的な方式ではなく、ヘッドアップディスプレイの光学系で反射させて目で見ることのできる虚像24を生成する方式を採用する。
車両用ナビゲーションが提供する主な情報としては、走行中の道路上の迂回路情報、車線情報、前車との距離情報などが該当する。また、ADAS(advanced driver−assistance system)では運転手に安全情報を提供するようになるが、これに該当する情報としては、主に、車線情報、前/横の車両との距離情報、突発情報などとなる。同じように、自律走行時にも、運転の主体となる車両では、道路上の迂回や車線変更などのように、これから起こる状況に関する情報を搭乗者に提供する必要がある。
図3を参照すると、上述したような情報、例えば、車線情報31や前車との距離情報32などを、運転手が注視している時点の実際の道路面上に仮想のイメージで表示することは、極めて重要かつ効果的である。
本発明に係る3次元ヘッドアップディスプレイは、仮想のスクリーンを地面に対応するように横にした3次元視点で表現することにより、多様な運転環境において運転手が運転中に注視している視点から目の焦点を他の場所に移動する必要がなく、運転手が運転中に実際に注視している道路面に伝達すべき情報を拡張現実で実現することができる。
図4は、本発明の一実施形態における、3次元ヘッドアップディスプレイの光学設計の例を示した図である。
図4を参照すると、本発明に係る3次元ヘッドアップディスプレイ400は、虚像24を地面25と対応するように横にした3次元視点で表現するための光学設計構造を含むものであって、ディスプレイ装置(display source)401とコンバイナ(combiner)402とで構成されてよい。
言い換えれば、3次元ヘッドアップディスプレイ400は、光源の役割を担うディスプレイ装置401と、光源の光を運転手の目の方に反射させると同時に、外部(前方)の光を透過させるコンバイナ402とで構成されてよい。
コンバイナ402は、単一あるいは多数の光学素子で構成されてよいが、以下では、説明の便宜のために、単一光学素子で構成されたコンバイナ402を使用する場合について説明する。
画像の品質を高めたり、場合によって最適な大きさと性能を備えるようにするためには、ディスプレイ装置401とコンバイナ402との間に追加の光学系をさらに含んでよい。
また、コンバイナ402は、3次元ヘッドアップディスプレイ400に含まれる素子で構成されてもよいし、車両のフロントガラスをコンバイナ402として利用することも可能である。フロントガラスをコンバイナ402として利用するためには、ディスプレイ装置401の光を運転席の方に反射させると同時に、外部の光を透過させる役割をする追加の光学的措置が必要となる。車両を製造するときに、フロントガラスの基本機能としてコンバイナ402としての機能を含ませることもあるが、このような場合であれば、追加の光学的措置は必ずしも必要でない。
以下では、3次元ヘッドアップディスプレイ400による虚像24を地面25に対応するように位置させるディスプレイ装置401とコンバイナ402の理論的関係式を誘導する。
3次元ヘッドアップディスプレイ400の構成において、ディスプレイ装置401とコンバイナ402は地面25に対してほぼ垂直であり、車両の運転席に座っている運転手の目は地面25とほぼ水平方向に前方を注視する。図4は、説明の便宜のために制限的な状況を示したものであり、3次元ヘッドアップディスプレイ400による虚像24が、実際にはより遠距離に位置することもあるし、実際の状況に比べて一部に差が存在することもある。
図5を参照すると、光が移動する実際の経路は、ディスプレイ装置401を出発してコンバイナ402で反射する。このとき、反射した光が運転手の目に到達し、水晶体(レンズ)によって網膜の焦点に合うようになる(実線)。しかし、運転手が見る画像は、実際の画像が生成されるディスプレイ平面(display plane)51に位置する実像ではなく、虚像24である。このとき、虚像24は、地面と対応する仮想の平面上に位置する(点線)。すなわち、ディスプレイ平面51は、コンバイナ402によって虚像平面(virtual image plane)53とイメージング条件(imaging condition)を満たす(破線)。
地面と対応する位置に虚像24を生成するためのディスプレイ装置401とコンバイナ402の理論的関係式は、運転手の目を除いたディスプレイ装置401と対応するディスプレイ平面51、コンバイナ402と対応するコンバイナ平面52、地面と対応する虚像平面53の間のイメージング条件に基づいて導き出されてよい。
図6は、ディスプレイ装置401とコンバイナ402の関係式を導き出すのに必要となる変数を示している。
DPはディスプレイ平面51、CPはコンバイナ平面52、IPは虚像平面53を意味する。
CKは、CP52に対して垂直であり、コンバイナ402の光学的中心Cを通過する直線を意味する。
ただし、実際のコンバイナ402の位置は、必ずしもCを含んで使用される必要はなく、運転手の視線の位置によってはオフセットを備えて位置してもよい。数式化の便宜のために、Cを含んだ関係式を誘導する。
IはDP51、CP52、IP53が交差する点、JはDP51と平行でありながらCを通過する直線がIP53と交差する点、KはCP52に対して垂直であってCを通過する直線がIP53と交差する点を意味する。
αは、CK基準のDP51とIP53でイメージング条件(imaging condition)を満たす位置の角度であり、該当の位置は、イメージング条件を満たすため、DP51の方向角度とIP53の方向角度が常に一致するようになる。
βはIP53あるいは地面基準のDP51の角度、γはIP53あるいは地面基準のCP52の角度、θはDP51とCP52からなる角度を意味する。
hはIP53あるいは地面からCまでの高さであり、h’はh方向へのオフセットを加えた値(実際にコンバイナ402が使用される高さ)を意味する。
sはIJの長さ、すなわち、地面に対して平行な軸方向であって、高さhにおけるDP51とCP52の離隔距離(separation distance)を意味する。
s’は地面に対して平行な軸方向であって、高さh’におけるDP51とCP52の離隔距離を意味する。
は、IP53あるいは地面基準のコンバイナ402の中心位置から虚像24が始まる位置までの距離を意味する。
は、IP53あるいは地面基準のコンバイナ402中心の位置から虚像24が終わる位置までの距離を意味する。
は、虚像24の大きさを意味する。
fは、コンバイナ402の焦点距離(focal length)を意味する。
先ず、β、γ、およびθの関係式は、次のとおりとなる。
DP51とIP53の間のイメージング条件を適用すれば、数式(1)が成立される。
Figure 2021534464
(γ、θ、h、fはすべて正数)
ここで、hは、車両において地面からダッシュボード上の3次元ヘッドアップディスプレイ400の位置までの高さ(正確には、コンバイナ402の光学的中心Cまでの高さ)を意味する。また、fは、一般的な大きさと曲律を有する3次元ヘッドアップディスプレイ400のコンバイナ402の焦点距離を意味する。
数式(1)にhとfを代入すればθとγの数値的関係が導き出され、これにより、β、γ、θの関係式β=γ+θが導き出される。
次に、s’は、数式(2)により、h’、βとγ、θを利用して導き出される。
Figure 2021534464
最後に、d、d、およびdは、数式(3)によって導き出される。
Figure 2021534464
(αは、CK基準の正数または負数)
数式(3)を利用してdとdを計算する。このとき、虚像24の開始位置を示すdと虚像24の大きさを示すdの調節が必要であれば、h、αとβ、およびθのうちの少なくとも1つを調節して光学構成を最適化してよい。
上述したような関係式により、地面に対するDP51とCP52の角度、および虚像24の位置と大きさを導き出すことができる。
図7を参照すると、要求されるアイボックス(Eye−box、瞳孔の位置)の高さは、運転手が運転席に座っているときに目が位置する高さとすることが一般的であり、アイボックスからコンバイナ402までの距離は、目から3次元ヘッドアップディスプレイ400のコンバイナ402までの距離とする。
コンバイナ402の位置は、要求されるアイボックスの位置に応じてオフセットを含んで高さh’が決まるが、その位置が必ずしもコンバイナ402の光学的中心Cを含む必要はない。h’に応じてDP51とCP52の離隔距離であるs’が決められてよく、このとき、s’は、ディスプレイ装置401とコンバイナ402の距離として参考されてよい。
したがって、本発明に係る3次元ヘッドアップディスプレイ400は、上述した関係式に基づくディスプレイ装置401とコンバイナ402により、運転手が注視している前方の地面25に対応するように横になった3次元視点の虚像24を実現することができる。
運転手と虚像24の間に他の車両や人間などのように虚像24と重なる障害物が存在する場合には、該当の部分で運転手が距離感に対して混同を感じることがある。このような問題を解決するために、本発明に係る3次元ヘッドアップディスプレイ400は、車両に備えられたADASや各種センサなどのような周辺状況を認識するシステム(図示せず)と連動して周辺情報を取得し、取得した周辺情報に基づいて虚像24の表示を制御するためのプロセッサを含んでよい。一例として、3次元ヘッドアップディスプレイ400は、虚像24と重なる障害物が存在する場合、障害物と重なる領域の画像を遮断してよい。他の例として、3次元ヘッドアップディスプレイ400は、虚像24と重なる障害物が存在する場合、前方の地面の代わりに、障害物上あるいは障害物よりも近い距離(例えば、前方の障害物上やボンネット上、あるいはダッシュボードやフロントガラスのような車両内部など)に、地面に対して垂直方向に虚像24を表示してよい。また他の例として、3次元ヘッドアップディスプレイ400は、虚像24と重なる障害物が存在する場合、物理的に虚像24を移動させてもよい。このとき、3次元ヘッドアップディスプレイ400は、ディスプレイ装置401とコンバイナ402のうちの少なくとも1つを移動させて虚像24を表現する位置を移動させてよい。
また、本発明に係る3次元ヘッドアップディスプレイ400は、運転手が注視する前方の地面25に対応する位置に虚像24を生成するときに、図8に示すように、遠近感を与える画像を利用することで、地面に対して垂直方向に立体感のある虚像24を表現してよい。このとき、3次元ヘッドアップディスプレイ400は、虚像24の開始位置を示すdを基準として虚像24の大きさを示すd以内で虚像24に遠近感を適用してよい。
さらに、3次元ヘッドアップディスプレイ400は、マルチディスプレイ装置を利用してマルチ画像を同時に実現することも可能である。
図9は、マルチ画像を同時に実現するための3次元ヘッドアップディスプレイの光学設計構成の例を示した図である。
3次元ヘッドアップディスプレイ400は、マルチ光源が配置された形態のディスプレイ装置401を含んでよく、例えば、地面に対応する横になった画像を生成する第1ディスプレイと、第1ディスプレイを基準にサイド(例えば、左側と右側、上側と下側など)に配置され、地面に対して垂直な画像を生成する第2ディスプレイおよび第3ディスプレイとを含んでよい。
3次元ヘッドアップディスプレイ400は、複数のディスプレイを含むディスプレイ装置401により、地面に対して横になった画像および地面に対して垂直な画像を同時に実現してよい。地面に対して横になった画像の場合は、運転中に運転手が注視する前方3m以上の遠距離に表現し、地面に対して垂直な画像の場合は、車両のダッシュボードやフロントガラスのように運転手の前方約2〜3m以内の近距離に表現してよい。
したがって、本発明に係る3次元ヘッドアップディスプレイは、運転手が運転中に注視する視点に、必要な視覚的情報を前方の地面に対応する位置に表示することができ、車両内で運転手と一定の距離内に画像が固定されて表示される既存のヘッドアップディスプレイの限界を改善し、運転手が注視する多様な遠距離に画像を実現することができる。特に、本発明に係る3次元ヘッドアップディスプレイは、運転手が運転中に主に注視する前方の地面に画像を提供することにより、運転中に目の焦点を調節する必要がなく、情報を自然に取得することができる。本発明に係る3次元ヘッドアップディスプレイは、運転視野と同じ場所に画像を正確に実現することにより、VRやARの体験時に目眩や吐き気の原因となる遠近調節と両目の収斂との差(すなわち、vergence accommodation conflict)をなくして心地よい視野を取得することができ、車両内の運転手に対して最適化された拡張現実を実現することができる。
以下の実施形態は、画像を地面に位置させて運転手の視点に拡張現実を実現する3次元ヘッドアップディスプレイで周辺環境によって発生するエラーを最小限に抑えるための技術に関する。
地面25に対応する背景に虚像24を位置させるときに虚像24と背景の距離感が一致しない場合、収斂(convergence)あるいは発散(divergence)のような2つの形態の誤差が発生することがある。
図10を参照すると、図10(A)に示すように、虚像24の位置が運転手の視線の実際の位置(natural view)に該当する背景25’と一致する場合には、正常な距離感の画像を実現することができ、心地よい視野を提供することができる。
この反面、図10(B)に示すように、虚像24の位置が背景25’と一致せずに背景25’よりも前方に位置する場合には収斂によるエラーが発生し、図10(C)に示すように、虚像24の位置が背景25’よりも後方に位置する場合には発散によるエラーが発生する。
収斂や発散による誤差を含んだ虚像24が長期間かつ持続的に表示される場合には、運転手の目に疲労感や痛みが生じやすくなり、頭痛などに繋がる恐れもある。
図11を参照すると、観察者から背景までの実際の距離による虚像の表現距離に対する許容誤差範囲が存在する。図12に示すように、実際の運転環境では、虚像24が収斂と発散の許容範囲内に存在する場合には、実際の位置と虚像24との間に距離感差を感じることはない。
したがって、本発明では、虚像24と背景25’の距離差が許容誤差範囲内を維持するように該当の誤差を補正してよい。図13を参照すると、本発明に係る3次元ヘッドアップディスプレイ400は、周辺情報に基づいて運転手の視線に対応する実際の位置と虚像24との距離差を補正するためのプロセッサ1310を含んでよい。
プロセッサ1310は、図14の誤差補正方法を実行するための構成要素として、図13に示すように、誤差認識部1311と、誤差補正部1312とを含んでよい。実施形態によって、プロセッサ1310の構成要素は、選択的にプロセッサ1310に含まれても除外されてもよい。また、実施形態によって、プロセッサ1310の構成要素は、プロセッサ1310の機能の表現のために分離されても併合されてもよい。
このようなプロセッサ1310およびプロセッサ1310の構成要素は、図14の誤差補正方法が含む段階1410〜1430を実行するように3次元ヘッドアップディスプレイ400を制御してよい。例えば、プロセッサ1310およびプロセッサ1310の構成要素は、3次元ヘッドアップディスプレイ400が含むオペレーティングシステムのコードと、少なくとも1つのプログラムのコードとによる命令(instruction)を実行するように実現されてよい。
ここで、プロセッサ1310の構成要素は、3次元ヘッドアップディスプレイ400に記録されたプログラムコードが提供する命令にしたがってプロセッサ1310によって実行される、プロセッサ1310の互いに異なる機能(different functions)の表現であってよい。例えば、3次元ヘッドアップディスプレイ400が虚像と背景との距離誤差を認識するように上述した命令にしたがって3次元ヘッドアップディスプレイ400を制御するプロセッサ1310の機能的表現として、誤差認識部1311が利用されてよい。
段階1410で、プロセッサ1310は、3次元ヘッドアップディスプレイ400の制御と関連する命令がロードされた3次元ヘッドアップディスプレイ400に含まれたメモリから必要な命令を読み取ってよい。この場合、前記読み取られた命令は、以下で説明する段階1420〜1430をプロセッサ1310が実行するように制御するための命令を含んでよい。
段階1420で、誤差認識部1311は、周辺情報に基づき、運転手の視線の実際の位置と虚像との距離差による誤差を認識してよい。誤差認識部1311は、3次元ヘッドアップディスプレイ400に備えられた自体センサシステムおよび/または3次元ヘッドアップディスプレイ400と連動可能な車両内のADASや各種センサシステムによって取得したデータを利用し、周辺情報として画像(すなわち、虚像)が位置する領域の3D情報を取得してよい。3D情報を取得するために、ADASや各種センサを通じて車両が取得するデータを使用してよく、さらに、画像を正確な位置に表現するために、ステレオカメラ、赤外線カメラ、LiDAR、RADAR、超音波センサなどを追加で利用してよい。一例として、3D情報を取得するためにLiDAR、RADARのような位置による距離値を測定するセンサを利用する場合は、道路面、構造物、周辺車両などのような前方領域を測定して3Dポイントクラウドを生成した後、3Dポイントクラウドに基づいてメッシュデータに対応する面、すなわち、3D情報を取得するようになる。他の例として、3D情報を取得するためにステレオカメラを利用する場合は、前方領域に対して2つの互いに異なる角度のイメージを両眼視差によって認識し、2つのイメージ差による距離感を累積することによって3D情報を取得してもよい。このとき、誤差認識部1311は、前方領域の3D情報を基準に、3次元ヘッドアップディスプレイ400で提供する画像の距離誤差を認識してよい。3D情報を取得するための方法としては、上述したような方式はもちろん、周知の多様な技術の適用も可能である。また、誤差認識部1311は、前方領域の3D情報に応じて誤差発生状態を次のように3つに区分して認識することも可能である。(1)走行路面環境によって前方の全般的な領域で誤差が発生する場合(全般的誤差)、(2)前方道路の急カーブ、道路上の障害物(例えば、周辺車両、人間、凹凸など)によって前方領域の部分的な領域で誤差が発生する場合(部分的誤差)、(3)車両の停止や駐車などによって前方の障害物や周辺車両との距離が閾値内まで近くなり、地面に対応する形態の画像を提供できなくなった場合(完全な誤差)。
段階1430で、誤差補正部1312は、3次元ヘッドアップディスプレイ400で提供する画像を調整し、画像と背景との距離差が許容誤差範囲内を維持するように該当の画像の距離誤差を補正してよい。誤差補正部1312は、誤差発生状態(全般的誤差、部分的誤差、完全な誤差)を考慮しながら、該当の状態に適した方式によって距離誤差を補正してよい。
具体的な誤差補正方法について、以下のように説明する。
図15〜16は、本発明の一実施形態における、全般的誤差を補正する方式を説明するための例示図である。
図15は、上り坂、下り坂、路面上の凹凸のように、走行路面環境によって全般的誤差が発生した状況の例を示している。
誤差補正部1312は、許容範囲内の全般的誤差が発生した場合(A)には、誤差補正過程を実行せずに虚像を維持するか、または虚像の遠近感を調整する補正を実行してよい。このとき、誤差補正部1312は、虚像の開始位置を示すdを基準に、虚像の大きさを示すd内で虚像の遠近感を調整してよい。
誤差補正部1312は、許容範囲を逸脱した全般的誤差が発生した場合(B)には、虚像の遠近感を調整する補正とともに、虚像の勾配と距離のうちの少なくとも1つを調整する補正を実行してよい。一例として、誤差補正部1312は、ディスプレイ装置401の位置および勾配を調整することによって虚像の位置を補正してよい。3次元ヘッドアップディスプレイ400は、ディスプレイ装置401とコンバイナ402のうちの少なくとも1つの位置と勾配を調整するための構成要素として、2軸以上のアクチュエータ(actuator)を含んでよい。図16に示すように、誤差補正部1312は、アクチュエータを利用してディスプレイ装置401とコンバイナ402のうちの少なくとも1つの位置および/または勾配を調整してよい。このとき、誤差補正部1312は、ディスプレイ平面51と虚像平面53の間のイメージング条件を満たす範囲内で、ディスプレイ装置401の位置と勾配を調整してよい。光学系にミラーなどの追加の構成要素が含まれた場合、該当の構成要素を調整することにより、ディスプレイ装置401を直接調整するのと同じ効果を得ることができる。ディスプレイ装置401を調整することによって虚像の位置がコンバイナ402の画角(FOV)を逸脱する場合、誤差補正部1312は、コンバイナ平面52上でコンバイナ402の位置を移動してよい。
したがって、誤差補正部1312は、許容範囲を逸脱した全般的誤差が発生した場合、虚像の勾配と距離を調整することにより、虚像の距離誤差を前方の走行路面環境に合わせて補正することができる。
図17〜18は、本発明の一実施形態における、部分的誤差を補正する方式を説明するための例示図である。
図17は、前方向の急カーブあるいは周辺車両、人間、凹凸などのように、道路上の障害物によって部分的誤差が発生した状況の例を示している。
誤差補正部1312は、許容範囲内の部分的誤差が発生した場合(A)には、誤差補正過程を実行せずに虚像を維持するか、または誤差が発生した部分の遠近感を調整する補正を実行してよい。このとき、誤差補正部1312は、虚像の誤差が発生した開始位置を基準に、虚像の大きさを示すd内で誤差発生部分の遠近感を調整してよい。他の例として、誤差補正部1312は、虚像で誤差が発生した部分の画像を除去(遮断)する方式によって補正を実行してよい。
誤差補正部1312は、許容範囲を逸脱した部分的誤差が発生した場合(B)には、虚像で誤差が発生した部分の遠近感を調整するか、該当の部分の画像を除去する方式の補正を実行してよく、特に、虚像が提供される距離(すなわち、位置)を調整する補正を実行してよい。一例として、誤差補正部1312は、虚像の距離を調整するためにディスプレイ平面51上でディスプレイ装置401の位置を調整してよく、必要によってはコンバイナ402の位置もコンバイナ平面52上で調整してよい。虚像の距離を調整するために、ディスプレイ装置401とコンバイナ402の角度および位置を変更してよい。3次元ヘッドアップディスプレイ400は、ディスプレイ装置401とコンバイナ402のうちの少なくとも1つの位置を調整するための構成要素として、1軸以上のアクチュエータを含んでよい。図18に示すように、誤差補正部1312は、アクチュエータを利用してディスプレイ装置401の位置を調整してよい。光学系にミラーなどの追加の構成要素が含まれた場合、該当の構成要素を調整することにより、ディスプレイ装置401を直接調整するのと同じ効果を得ることができる。ディスプレイ装置401の位置を調整することによって虚像の位置がコンバイナ402の画角(FOV)を逸脱した場合、誤差補正部1312は、追加でコンバイナ402の位置をコンバイナ平面52上で移動させてよい。誤差補正のために虚像の距離を調整する方法はもちろん、虚像の大きさ(すなわち、d)を調整する方法も適用可能である。
したがって、誤差補正部1312は、許容範囲を逸脱した部分的誤差が発生した場合、虚像が提供される距離を調整することにより、誤差が発生した部分から離れた位置で虚像を提供することができる。
図19は、本発明の一実施形態における、完全な誤差を補正する方式を説明するための例示図である。
図19は、渋滞などによって完全な誤差が発生した状況の例を示している。
誤差補正部1312は、虚像を地面に対応させる形態で表示することのできない、完全な誤差が発生した場合、虚像の位置を変更するようになる。一例として、前方の地面の代わりに、障害物上あるいは障害物よりも近い距離(例えば、前方の障害物上やボンネット上、あるいはダッシュボードやフロントガラスのような車両内部など)に、地面に対して垂直方向に表示してよい。
他の例として、完全な誤差が発生した状況では、虚像を地面に一致させるディスプレイとは別に、同じコンバイナ402を使用しながらも他の位置に虚像を表示するディスプレイを利用してよい。図に示すように、ディスプレイ装置401が、マルチ光源が配置された形態であって、地面に対応する横になった画像を生成する第1ディスプレイと、地面に対して垂直に画像を生成する第2ディスプレイおよび第3ディスプレイとを含む場合、誤差補正部1312は、完全な誤差に対応して、第1ディスプレイはオフにし、第2ディスプレイと第3ディスプレイのうちの少なくとも1つに虚像を表示してよい。
したがって、虚像を地面と一致させるディスプレイの使用が完全に不可能な状況では、虚像の位置を、地面ではなく、運転手により近い位置に移動させるか、他のディスプレイを利用して地面に対して垂直に画像を提供することができる。誤差補正方式は、虚像の遠近感を調整する方法、虚像の勾配や位置を調整する方法、虚像の誤差を部分除去する方法、垂直画像転換方法、個別のディスプレイを利用する方法などがあり、誤差の大きさあるいは誤差状態に応じて1つの補正方法あるいは2つ以上の補正方法の適用が可能である。
このように、本発明の実施形態によると、運転手が運転中に注視する視点に、必要な視覚的情報を前方の地面と対応する位置に表示する3次元ヘッドアップディスプレイを提供することができる。本発明に係る3次元ヘッドアップディスプレイは、車両内で運転手から一定の距離内に画像が固定されて表示される既存のヘッドアップディスプレイの限界を改善し、運転手が注視する多様な遠距離に画像を実現することができる。
また、本発明の実施形態によると、地面に対応する3次元視点の仮想のスクリーンにより、運転手の視点に対して最適化された3次元ヘッドアップディスプレイを提供することができる。
特に、本発明に係る3次元ヘッドアップディスプレイは、運転手が運転中に主に注視する前方の地面に画像を提供することにより、運転中に目の焦点を調節する必要がなく、情報を自然に取得することができる。本発明に係る3次元ヘッドアップディスプレイは、運転視野と同じ場所に画像を正確に実現することにより、VRやARの体験時に目眩や吐き気の原因となる遠近調節(accommodation)と両眼の収斂(vergence)との差(すなわち、vergence accommodation conflict)をなくして心地よい視野を提供することができ、車両内で運転手に対して最適化された拡張現実を実現することができる。
また、本発明の実施形態によると、画像を地面に位置させて運転手の視点に拡張現実を実現する3次元ヘッドアップディスプレイで、周辺環境によって発生するエラーを最小限に抑えることができる。さらに、本発明の実施形態によると、3次元ヘッドアップディスプレイで提供される画像の距離感が周辺環境と異なるように発生する誤差を、誤差発生状態を考慮しながら効果的に補正することができる。
上述した装置は、ハードウェア構成要素、ソフトウェア構成要素、および/またはハードウェア構成要素とソフトウェア構成要素との組み合わせによって実現されてよい。例えば、実施形態で説明された装置および構成要素は、プロセッサ、コントローラ、ALU(arithmetic logic unit)、デジタル信号プロセッサ、マイクロコンピュータ、FPGA(field programmable gate array)、PLU(programmable logic unit)、マイクロプロセッサ、または命令を実行して応答することができる様々な装置のように、1つ以上の汎用コンピュータまたは特殊目的コンピュータを利用して実現されてよい。処理装置は、オペレーティングシステム(OS)およびOS上で実行される1つ以上のソフトウェアアプリケーションを実行してよい。また、処理装置は、ソフトウェアの実行に応答し、データにアクセスし、データを記録、操作、処理、および生成してもよい。理解の便宜のために、1つの処理装置が使用されるとして説明される場合もあるが、当業者は、処理装置が複数個の処理要素および/または複数種類の処理要素を含んでもよいことが理解できるであろう。例えば、処理装置は、複数個のプロセッサまたは1つのプロセッサおよび1つのコントローラを含んでよい。また、並列プロセッサのような、他の処理構成も可能である。
ソフトウェアは、コンピュータプログラム、コード、命令、またはこれらのうちの1つ以上の組み合わせを含んでもよく、思うままに動作するように処理装置を構成したり、独立的または集合的に処理装置に命令したりしてよい。ソフトウェアおよび/またはデータは、処理装置に基づいて解釈されたり、処理装置に命令またはデータを提供したりするために、いかなる種類の機械、コンポーネント、物理装置、コンピュータ記録媒体または装置に具現化されてよい。ソフトウェアは、ネットワークによって接続されたコンピュータシステム上に分散され、分散された状態で記録されても実行されてもよい。ソフトウェアおよびデータは、1つ以上のコンピュータ読み取り可能な記録媒体に記録されてよい。
実施形態に係る方法は、多様なコンピュータ手段によって実行可能なプログラム命令の形態で実現されてコンピュータ読み取り可能な媒体に記録されてよい。ここで、媒体は、コンピュータ実行可能なプログラムを継続して記録するものであっても、実行またはダウンロードのために一時記録するものであってもよい。また、媒体は、単一または複数のハードウェアが結合した形態の多様な記録手段または格納手段であってよく、あるコンピュータシステムに直接接続する媒体に限定されることはなく、ネットワーク上に分散して存在するものであってもよい。媒体の例としては、ハードディスク、フロッピー(登録商標)ディスク、および磁気テープのような磁気媒体、CD−ROMおよびDVDのような光媒体、フロプティカルディスク(floptical disk)のような光磁気媒体、およびROM、RAM、フラッシュメモリなどを含み、プログラム命令が記録されるように構成されたものであってよい。また、媒体の他の例として、アプリケーションを配布するアプリケーションストアやその他の多様なソフトウェアを供給または配布するサイト、サーバなどで管理する記録媒体または格納媒体が挙げられる。
以上のように、実施形態を、限定された実施形態および図面に基づいて説明したが、当業者であれば、上述した記載から多様な修正および変形が可能であろう。例えば、説明された技術が、説明された方法とは異なる順序で実行されたり、かつ/あるいは、説明されたシステム、構造、装置、回路などの構成要素が、説明された方法とは異なる形態で結合されたりまたは組み合わされたり、他の構成要素または均等物によって対置されたり置換されたとしても、適切な結果を達成することができる。
したがって、異なる実施形態であっても、特許請求の範囲と均等なものであれば、添付される特許請求の範囲に属する。

Claims (20)

  1. 車両用3次元ヘッドアップディスプレイであって、
    光源の役割を担うディスプレイ装置、および
    前記光源の光を運転席の方に反射させると同時に、車両の外部光を透過させるコンバイナ
    を含み、
    前記光源の光による画像が、前記車両の前方地面に対応するように横にした3次元視点(perspective)の虚像で表示されること
    を特徴とする、車両用3次元ヘッドアップディスプレイ。
  2. 前記ディスプレイ装置に対応するディスプレイ平面は、前記コンバイナにより、前記地面に対応する虚像平面とイメージング条件(imaging condition)を満たすこと
    を特徴とする、請求項1に記載の車両用3次元ヘッドアップディスプレイ。
  3. 前記ディスプレイ装置に対応するディスプレイ平面と前記コンバイナに対応するコンバイナ平面、および前記地面に対応する虚像平面の間のイメージング条件に基づいて前記虚像が生成されること
    を特徴とする、請求項1または2に記載の車両用3次元ヘッドアップディスプレイ。
  4. 前記コンバイナ平面に対して垂直でありながら前記コンバイナの光学的中心を通過する直線を基準に、前記ディスプレイ平面と前記虚像平面でイメージング条件を満たす角度を利用して前記虚像の開始位置と大きさが決められること
    を特徴とする、請求項3に記載の車両用3次元ヘッドアップディスプレイ。
  5. 前記角度、前記虚像平面を基準に、前記ディスプレイ平面の角度、前記ディスプレイ平面と前記コンバイナ平面の角度、前記虚像平面から前記コンバイナの光学的中心までの高さのうちの少なくとも1つによって前記虚像の開始位置と大きさが調節されること
    を特徴とする、請求項4に記載の車両用3次元ヘッドアップディスプレイ。
  6. 前記虚像平面から前記コンバイナまでの高さにおいて、前記ディスプレイ装置と前記コンバイナの離隔距離は、前記虚像平面から前記コンバイナの光学的中心までの高さに該当の高さ方向へのオフセットを加えた高さ値、前記虚像平面を基準に前記ディスプレイ平面の角度、前記虚像平面を基準に前記コンバイナ平面の角度、前記ディスプレイ平面と前記コンバイナ平面の角度によって導き出されること
    を特徴とする、請求項3〜5のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  7. 前記コンバイナの位置は、要求されるアイボックス(Eye−box)の位置によるオフセットを含んだ高さとして決められること
    を特徴とする、請求項1〜6のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  8. 前記虚像を遠近感が適用された画像で表示するためのプロセッサ
    をさらに含む、請求項1〜7のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  9. 前記ディスプレイ装置は、マルチ画像を同時に実現するためにマルチ光源が配置される形態で構成されること
    を特徴とする、請求項1〜8のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  10. 前記ディスプレイ装置は、
    前記地面に対応するように横にした画像を生成するための第1ディスプレイ、および
    前記地面に対して垂直な画像を生成するための少なくとも1つの第2ディスプレイ
    を含む、請求項9に記載の車両用3次元ヘッドアップディスプレイ。
  11. 前記車両の前方領域の周辺情報に基づき、前記地面に対応する背景と前記虚像の距離誤差を認識して補正するためのプロセッサ
    をさらに含む、請求項1〜8のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  12. 前記プロセッサは、
    前記周辺情報を利用し、前方の全般的な領域で距離誤差が発生する全般的誤差、前方の部分的な領域で距離誤差が発生する部分的誤差、および前方の障害物との距離が閾値内まで近くなった状況の完全な誤差を区分して認識すること
    を特徴とする、請求項11に記載の車両用3次元ヘッドアップディスプレイ。
  13. 前記プロセッサは、
    前記車両用3次元ヘッドアップディスプレイに備えられたセンサ、あるいは前記車両に備えられたADAS(advanced driver−assistance system)またはセンサから前記周辺情報を取得することを特徴とする、請求項11または12に記載の車両用3次元ヘッドアップディスプレイ。
  14. 前記プロセッサは、
    前記距離誤差が事前に定められた許容誤差範囲内を維持するように前記虚像を調整すること
    を特徴とする、請求項11〜13のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  15. 前記プロセッサは、
    前記虚像の遠近感を調整する補正を実行すること
    を特徴とする、請求項11〜14のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  16. 前記プロセッサは、
    前記光源と前記コンバイナのうちの少なくとも1つを調整して前記虚像の勾配または位置を調整すること
    を特徴とする、請求項11〜15のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  17. 前記プロセッサは、
    前記虚像の位置が前記コンバイナの画角(FOV)を逸脱する場合、前記コンバイナの位置を移動させること
    を特徴とする、請求項16に記載の車両用3次元ヘッドアップディスプレイ。
  18. 前記プロセッサは、
    前方の部分的な領域で距離誤差が発生する場合、誤差が発生した部分の遠近感を調整するか一部の画像を除去すること
    を特徴とする、請求項11〜17のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  19. 前記プロセッサは、
    前方の障害物によって距離誤差が発生する場合、前記地面の代わりに、前記障害物上あるいは前記障害物よりも近い距離に、前記地面に対して垂直な画像で表示すること
    を特徴とする、請求項11〜18のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
  20. 前記ディスプレイ装置は、
    前記地面に対応するように横にした画像を生成するための第1ディスプレイ、および
    前記地面に対して垂直な画像を生成するための少なくとも1つの第2ディスプレイ
    を含み、
    前記プロセッサは、
    前方の障害物によって距離誤差が発生する場合、前記第1ディスプレイの代わりに、前記第2ディスプレイを利用して前記虚像を表示すること
    を特徴とする、請求項11〜19のうちのいずれか1項に記載の車両用3次元ヘッドアップディスプレイ。
JP2021510058A 2018-10-10 2018-12-05 画像を地面に位置させて運転手の視点に拡張現実を実現する3次元拡張現実ヘッドアップディスプレイ Active JP7183393B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022186200A JP7397152B2 (ja) 2018-10-10 2022-11-22 画像を地面に位置させて運転手の視点に拡張現実を実現する3次元拡張現実ヘッドアップディスプレイ

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
KR10-2018-0120504 2018-10-10
KR10-2018-0120463 2018-10-10
KR1020180120504A KR102116783B1 (ko) 2018-10-10 2018-10-10 영상을 지면에 위치시켜 운전자의 시점에 증강현실을 구현하는 3차원 증강현실 헤드업 디스플레이
KR20180120463 2018-10-10
KR10-2018-0149251 2018-11-28
KR1020180149251A KR102105447B1 (ko) 2018-10-10 2018-11-28 3차원 증강현실 헤드업 디스플레이의 주변 환경에 따른 오류를 최소화하기 위한 방법 및 장치
PCT/KR2018/015307 WO2020075911A1 (ko) 2018-10-10 2018-12-05 영상을 지면에 위치시켜 운전자의 시점에 증강현실을 구현하는 3차원 증강현실 헤드업 디스플레이

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022186200A Division JP7397152B2 (ja) 2018-10-10 2022-11-22 画像を地面に位置させて運転手の視点に拡張現実を実現する3次元拡張現実ヘッドアップディスプレイ

Publications (2)

Publication Number Publication Date
JP2021534464A true JP2021534464A (ja) 2021-12-09
JP7183393B2 JP7183393B2 (ja) 2022-12-05

Family

ID=70164118

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2021510058A Active JP7183393B2 (ja) 2018-10-10 2018-12-05 画像を地面に位置させて運転手の視点に拡張現実を実現する3次元拡張現実ヘッドアップディスプレイ
JP2021510059A Active JP7178485B2 (ja) 2018-10-10 2019-10-10 フロントガラス反射方式によって仮想の画像を地面に位置させる3次元拡張現実ヘッドアップディスプレイ

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2021510059A Active JP7178485B2 (ja) 2018-10-10 2019-10-10 フロントガラス反射方式によって仮想の画像を地面に位置させる3次元拡張現実ヘッドアップディスプレイ

Country Status (6)

Country Link
US (2) US20210197669A1 (ja)
EP (2) EP3865928A4 (ja)
JP (2) JP7183393B2 (ja)
KR (8) KR102116783B1 (ja)
CN (2) CN112534334A (ja)
WO (1) WO2020076090A1 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7301880B2 (ja) * 2018-05-04 2023-07-03 ハーマン インターナショナル インダストリーズ インコーポレイテッド ミラーレスヘッドアップディスプレイ
DE102019206490B3 (de) * 2019-05-06 2020-03-26 Volkswagen Aktiengesellschaft Parkassistenzsystem für ein Kraftfahrzeug, Verfahren zur Einparkunterstützung für ein Kraftfahrzeug, Computerprogramm und computerlesbares Speichermedium
KR102543899B1 (ko) * 2020-08-27 2023-06-20 네이버랩스 주식회사 헤드업 디스플레이 및 그 제어방법
KR102481075B1 (ko) * 2020-10-08 2022-12-26 네이버랩스 주식회사 헤드업 디스플레이의 제어 방법 및 시스템
US11393368B2 (en) * 2020-11-05 2022-07-19 Innolux Corporation Display method of image
KR102707274B1 (ko) * 2021-07-21 2024-09-13 네이버 주식회사 헤드업 디스플레이 및 그 제어방법
WO2023003109A1 (ko) * 2021-07-21 2023-01-26 네이버랩스 주식회사 헤드업 디스플레이 및 그 제어방법
KR102707275B1 (ko) * 2021-07-21 2024-09-13 네이버 주식회사 헤드업 디스플레이 및 그 제어방법
US11919392B2 (en) 2021-09-21 2024-03-05 GM Global Technology Operations LLC Rollable/bendable virtual 3D display
US11800082B2 (en) * 2021-09-21 2023-10-24 GM Global Technology Operations LLC Virtual 3D display
CN113989466B (zh) * 2021-10-28 2022-09-20 江苏濠汉信息技术有限公司 一种基于事态认知的超视距辅助驾驶系统
KR102437335B1 (ko) * 2022-05-12 2022-08-30 (주)텔레컨스 차량용 헤드업 디스플레이 장치
WO2024022322A1 (zh) * 2022-07-28 2024-02-01 未来(北京)黑科技有限公司 显示装置、像源装置、交通设备及显示方法
GB2627180A (en) * 2023-01-26 2024-08-21 Bentley Motors Ltd Ambient output system

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006145998A (ja) * 2004-11-22 2006-06-08 Olympus Corp 虚像表示型情報表示システム
WO2014061138A1 (ja) * 2012-10-18 2014-04-24 パイオニア株式会社 表示装置及びヘッドアップディスプレイ
JP2014181025A (ja) * 2013-03-15 2014-09-29 Honda Motor Co Ltd 動的焦点面を備える立体ヘッドアップディスプレイ
JP2015197496A (ja) * 2014-03-31 2015-11-09 アイシン・エィ・ダブリュ株式会社 虚像表示装置
JP2016068693A (ja) * 2014-09-29 2016-05-09 矢崎総業株式会社 車両用表示装置
JP2016109645A (ja) * 2014-12-10 2016-06-20 株式会社リコー 情報提供装置、情報提供方法及び情報提供用制御プログラム
WO2016166887A1 (ja) * 2015-04-17 2016-10-20 三菱電機株式会社 表示制御装置、表示システム、表示制御方法および表示制御プログラム
JP2018058544A (ja) * 2016-10-07 2018-04-12 株式会社デンソー 車載表示制御装置
US20180129051A1 (en) * 2015-10-30 2018-05-10 Wei-Yi HUNG Field curvature virtual image display system
JP2018120141A (ja) * 2017-01-26 2018-08-02 日本精機株式会社 ヘッドアップディスプレイ
WO2018168595A1 (ja) * 2017-03-15 2018-09-20 日本精機株式会社 ヘッドアップディスプレイ装置

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10278629A (ja) * 1997-04-08 1998-10-20 Toppan Printing Co Ltd 車両用ヘッドアップディスプレイ装置
JP2007272061A (ja) * 2006-03-31 2007-10-18 Denso Corp ヘッドアップディスプレイ装置
JP4886751B2 (ja) * 2008-09-25 2012-02-29 株式会社東芝 車載用表示システム及び表示方法
JP5161760B2 (ja) * 2008-12-26 2013-03-13 株式会社東芝 車載用表示システム及び表示方法
WO2011036788A1 (ja) * 2009-09-28 2011-03-31 株式会社 東芝 表示装置及び表示方法
KR20130059650A (ko) * 2011-11-29 2013-06-07 현대자동차일본기술연구소 헤드업 디스플레이의 컨텐츠 초점 제어 장치 및 방법
DE102012218360A1 (de) * 2012-10-09 2014-04-10 Robert Bosch Gmbh Blickfeldanzeige für ein Fahrzeug
KR101409846B1 (ko) 2012-12-18 2014-06-19 전자부품연구원 3차원 증강현실 기반 헤드 업 디스플레이 장치
DE102014219567A1 (de) * 2013-09-30 2015-04-02 Honda Motor Co., Ltd. Dreidimensionale (3-d) navigation
KR101526708B1 (ko) * 2013-11-15 2015-06-05 현대자동차주식회사 헤드업 디스플레이 장치 및 그 디스플레이 방법
KR101619220B1 (ko) * 2014-05-29 2016-05-10 현대자동차주식회사 차량용 헤드 업 디스플레이 장치
JP6105532B2 (ja) * 2014-09-04 2017-03-29 矢崎総業株式会社 車両用投影表示装置
JP6337721B2 (ja) * 2014-09-25 2018-06-06 アイシン・エィ・ダブリュ株式会社 虚像表示装置
KR20160059376A (ko) * 2014-11-18 2016-05-26 엘지전자 주식회사 전자 기기 및 그 제어방법
JP2016102966A (ja) * 2014-11-28 2016-06-02 アイシン・エィ・ダブリュ株式会社 虚像表示装置
EP3093194B1 (en) * 2015-04-24 2021-09-22 Ricoh Company, Ltd. Information provision device
JP6516642B2 (ja) * 2015-09-17 2019-05-22 アルパイン株式会社 電子装置、画像表示方法および画像表示プログラム
CN108351517B (zh) * 2015-10-09 2020-09-01 麦克赛尔株式会社 投影光学系统和平视显示装置
CN108369341A (zh) * 2015-12-01 2018-08-03 日本精机株式会社 平视显示器
KR102578679B1 (ko) * 2016-01-11 2023-09-13 엘지전자 주식회사 헤드업 디스플레이 장치 및 그 제어방법
JP6717856B2 (ja) * 2016-02-05 2020-07-08 マクセル株式会社 ヘッドアップディスプレイ装置
JP6629889B2 (ja) * 2016-02-05 2020-01-15 マクセル株式会社 ヘッドアップディスプレイ装置
JP6527605B2 (ja) * 2016-02-12 2019-06-05 マクセル株式会社 車両用映像表示装置
JP6674793B2 (ja) * 2016-02-25 2020-04-01 京セラ株式会社 運転支援情報表示装置
KR102582092B1 (ko) * 2016-04-22 2023-09-25 한국전자통신연구원 차량용 헤드업 디스플레이의 증강현실정보 변환 장치 및 방법
CN118112811A (zh) * 2016-08-29 2024-05-31 麦克赛尔株式会社 车辆
US10976545B2 (en) * 2016-09-01 2021-04-13 Mitsubishi Electric Corporation Display device and adjustment method
US20180067310A1 (en) * 2016-09-08 2018-03-08 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Compact wide field of view (wfov) head up display (hud) using two free form mirrors and dlp technology
CN109791283B (zh) * 2016-10-04 2021-09-07 麦克赛尔株式会社 投影光学系统以及平视显示器装置
JP6911868B2 (ja) * 2016-11-08 2021-07-28 日本精機株式会社 ヘッドアップディスプレイ装置
JP2018077400A (ja) * 2016-11-10 2018-05-17 日本精機株式会社 ヘッドアップディスプレイ
WO2018088362A1 (ja) * 2016-11-11 2018-05-17 日本精機株式会社 ヘッドアップディスプレイ
JP6646844B2 (ja) * 2016-12-27 2020-02-14 パナソニックIpマネジメント株式会社 表示装置、表示装置の制御方法、及び表示装置を備える移動体
KR20180093583A (ko) * 2017-02-14 2018-08-22 현대모비스 주식회사 개별 제어가 가능한 다중 표시영역을 구현하는 헤드 업 디스플레이 장치 및 헤드 업 디스플레이 장치의 표시 제어 방법
EP3648096A4 (en) * 2017-06-28 2021-06-09 Nippon Seiki Co., Ltd. IMAGE PROCESSING UNIT AND HEAD-UP DISPLAY DEVICE EQUIPPED WITH IT
JP6861375B2 (ja) * 2017-06-30 2021-04-21 パナソニックIpマネジメント株式会社 表示システム、情報提示システム、表示システムの制御方法、プログラム、及び移動体
CN107843985A (zh) * 2017-11-27 2018-03-27 上海驾馥电子科技有限公司 增强现实抬头显示器系统及方法
DE102018204254B4 (de) * 2018-03-20 2020-12-03 Volkswagen Aktiengesellschaft Verfahren zur Berechnung einer Einblendung von Zusatzinformationen für eine Anzeige auf einer Anzeigeeinheit, Vorrichtung zur Durchführung des Verfahrens sowie Kraftfahrzeug und Computerprogramm
DE112019003420T5 (de) * 2018-07-05 2021-03-18 Nippon Seiki Co., Ltd. Head-up-Display-Vorrichtung
US11719932B2 (en) * 2018-07-13 2023-08-08 Maxell, Ltd. Head-up display

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006145998A (ja) * 2004-11-22 2006-06-08 Olympus Corp 虚像表示型情報表示システム
WO2014061138A1 (ja) * 2012-10-18 2014-04-24 パイオニア株式会社 表示装置及びヘッドアップディスプレイ
JP2014181025A (ja) * 2013-03-15 2014-09-29 Honda Motor Co Ltd 動的焦点面を備える立体ヘッドアップディスプレイ
JP2015197496A (ja) * 2014-03-31 2015-11-09 アイシン・エィ・ダブリュ株式会社 虚像表示装置
JP2016068693A (ja) * 2014-09-29 2016-05-09 矢崎総業株式会社 車両用表示装置
JP2016109645A (ja) * 2014-12-10 2016-06-20 株式会社リコー 情報提供装置、情報提供方法及び情報提供用制御プログラム
WO2016166887A1 (ja) * 2015-04-17 2016-10-20 三菱電機株式会社 表示制御装置、表示システム、表示制御方法および表示制御プログラム
US20180129051A1 (en) * 2015-10-30 2018-05-10 Wei-Yi HUNG Field curvature virtual image display system
JP2018058544A (ja) * 2016-10-07 2018-04-12 株式会社デンソー 車載表示制御装置
JP2018120141A (ja) * 2017-01-26 2018-08-02 日本精機株式会社 ヘッドアップディスプレイ
WO2018168595A1 (ja) * 2017-03-15 2018-09-20 日本精機株式会社 ヘッドアップディスプレイ装置

Also Published As

Publication number Publication date
US11865915B2 (en) 2024-01-09
US20210197669A1 (en) 2021-07-01
KR20210009397A (ko) 2021-01-26
US20210208392A1 (en) 2021-07-08
EP3869259A1 (en) 2021-08-25
KR102251427B1 (ko) 2021-05-12
EP3865928A4 (en) 2022-07-27
JP7178485B2 (ja) 2022-11-25
KR20200040507A (ko) 2020-04-20
JP2021534465A (ja) 2021-12-09
CN112534334A (zh) 2021-03-19
KR20200040685A (ko) 2020-04-20
KR20200043961A (ko) 2020-04-28
KR102116783B1 (ko) 2020-05-29
JP7183393B2 (ja) 2022-12-05
EP3865928A1 (en) 2021-08-18
KR102251425B1 (ko) 2021-05-12
WO2020076090A1 (ko) 2020-04-16
KR102376329B1 (ko) 2022-03-18
KR102359682B1 (ko) 2022-02-09
KR102105447B1 (ko) 2020-04-28
KR20200040639A (ko) 2020-04-20
KR20210058771A (ko) 2021-05-24
KR20210058770A (ko) 2021-05-24
KR102270483B1 (ko) 2021-06-29
CN113424094A (zh) 2021-09-21
KR20200040662A (ko) 2020-04-20
EP3869259A4 (en) 2022-08-17

Similar Documents

Publication Publication Date Title
JP2021534464A (ja) 画像を地面に位置させて運転手の視点に拡張現実を実現する3次元拡張現実ヘッドアップディスプレイ
EP2914002B1 (en) Virtual see-through instrument cluster with live video
WO2014174575A1 (ja) 車両用ヘッドアップディスプレイ装置
JP7310817B2 (ja) ヘッドアップディスプレイ装置
JP7354846B2 (ja) ヘッドアップディスプレイ装置
JP7397152B2 (ja) 画像を地面に位置させて運転手の視点に拡張現実を実現する3次元拡張現実ヘッドアップディスプレイ
KR102385807B1 (ko) 영상을 지면에 위치시켜 운전자의 시점에 증강현실을 구현하는 3차원 증강현실 헤드업 디스플레이
JP7375753B2 (ja) ヘッドアップディスプレイ装置
JP7503239B2 (ja) ヘッドアップディスプレイ装置
KR102043389B1 (ko) 아이박스의 공액면에서 영상을 분리해 양안시차를 생성하는 3차원 헤드업 디스플레이 장치 및 그 동작 방법
WO2021060218A1 (ja) 表示装置、表示システム及び表示調整方法
JP7338358B2 (ja) 表示装置、表示システム、表示調整方法及び表示調整プログラム
JP6726412B2 (ja) 画像表示装置、移動体、画像表示方法及びプログラム
JP7338362B2 (ja) 表示装置、表示システム、表示調整方法及び表示調整プログラム
JP6793480B2 (ja) 情報表示装置
JP2024048865A (ja) 表示制御装置、表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220301

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220506

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221004

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221025

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221122

R150 Certificate of patent or registration of utility model

Ref document number: 7183393

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350