JP2019116229A - 表示システム - Google Patents

表示システム Download PDF

Info

Publication number
JP2019116229A
JP2019116229A JP2017251889A JP2017251889A JP2019116229A JP 2019116229 A JP2019116229 A JP 2019116229A JP 2017251889 A JP2017251889 A JP 2017251889A JP 2017251889 A JP2017251889 A JP 2017251889A JP 2019116229 A JP2019116229 A JP 2019116229A
Authority
JP
Japan
Prior art keywords
vehicle
virtual marker
virtual
inter
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017251889A
Other languages
English (en)
Other versions
JP6945933B2 (ja
Inventor
瀧沢 昭彦
Akihiko Takizawa
昭彦 瀧沢
英俊 角谷
Hidetoshi Sumiya
英俊 角谷
圭希 沖野
Keiki Okino
圭希 沖野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2017251889A priority Critical patent/JP6945933B2/ja
Priority to US16/210,541 priority patent/US20190196184A1/en
Priority to EP18214339.6A priority patent/EP3505381B1/en
Priority to CN201811598115.XA priority patent/CN109968977B/zh
Publication of JP2019116229A publication Critical patent/JP2019116229A/ja
Application granted granted Critical
Publication of JP6945933B2 publication Critical patent/JP6945933B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/365Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C3/00Measuring distances in line of sight; Optical rangefinders
    • G01C3/02Details
    • G01C3/06Use of electric means to obtain final indication
    • G01C3/08Use of electric radiation detectors
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/166Navigation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/177Augmented reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/179Distances to obstacles or vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • B60K2360/1868Displaying information according to relevancy according to driving situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/334Projection means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Optics & Photonics (AREA)
  • Automation & Control Theory (AREA)
  • Electromagnetism (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

【課題】 仮想マーカーの視認性を改善した表示システムを提供する。【解決手段】 本発明の表示システム100は、HUD130により自車の進行方向等の案内をするための車両形状を表した仮想マーカーDを表示する。表示システム100は、前方車両Xとの車間距離Lを計測し、車間距離Lに応じて仮想マーカーDの表示位置や表示サイズを決定する。車間距離Lが小さくなれば、仮想マーカーDが自車の手前にシフトするように表示され、車間距離Lが大きくなれば、仮想マーカーDが自車の遠方にシフトするように表示される。車間距離Lがより短くなると、仮想マーカーDの一部が自車に吸収するように非表示にされ、さらに短くなると仮想マーカーDが完全に非表示になる。【選択図】 図4

Description

本発明は、ヘッドアップディスプレイを利用した表示システムに関し、特に、自車を誘導または案内するための仮想マーカーを表示するシステムに関する。
運転者を支援するための情報を表示する1つの手段として、ヘッドアップディスプレイ(以下、HUDと略す)が実用化されている。典型的なHUDは、車内に設置された投射装置からのフロントガラス上またはそこに備え付けられたスクリーン上に画像を投射し、運転者は、フロントガラス越しの現実空間にあたかも物体が存在するかのように投射された画像の虚像を視認することができる。HUDを利用すると、運転者の視線方向に運転支援情報を表示することができるため、車内の液晶ディスプレイ等を見る場合と比較して、運転者の視線移動を減らすことができる。
特許文献1は、自車の仮想車両をHUDにより表示し、例えば、車線変更を伴うとき、走行コースを表す矢印画像上を走行する仮想車両を動画で表示させ、運転者に自車の走行進路を視覚的に予告している。
特開2016−182891号公報
HUDにより仮想マーカーを表示するときの従来の課題について説明する。仮想マーカーは、自車の進行方向を誘導するために表示されるものであり、例えば、図8(A)に示すように、車両形状を呈した仮想マーカー20がフロントガラス上に投射され、運転者は、その視線方向において仮想マーカー20の虚像を実空間に重ねて視認することができる。仮想マーカー20は、例えば、ナビゲーション機能と連動し、交差点の右左折や車線変更などの進行方向を表示することができる。運転者は、自車前方の仮想マーカー20の動きを見ることで自車の進行方向を予期する。特に、夜間の走行時や悪天候時などの視界が良好でないとき、仮想マーカー20は、運転者にとって有益な情報である。
前方車両Xと自車との車間距離が一定であれば、運転者は、前方車両Xと自車との間に仮想マーカー20を視認するができるが、自車と前方車両Xとの車間距離が短くなると、運転者は、前方車両と重畳する位置に仮想マーカー20を視認することになり、仮想マーカー20が見難くなってしまう。これを避けるため、図8(B)に示すように、仮想マーカー20の表示位置を側方に移動させ、仮想マーカー20の視認性を保つことが可能であるが、このような処理を行った場合、運転者は、仮想マーカー20の移動に従って側方へ進行すると勘違いしたり、あるいは、前方車両Xと仮想マーカー20のどちらに視点を合わせれば良いか混乱するおそれがある。
本発明は、上記従来の課題を解決するものであり、仮想マーカーの視認性を改善した表示システムを提供することを目的とする。
本発明に係る表示システムは、自車の前方を走行する前方車両を検出する検出手段と、前記前方車両との間の車間距離を計測する計測手段と、自車の進行方向等の案内をするための仮想マーカー用の画像を自車のフロントガラスに向けて投射する投射手段と、前記車間距離に応じて前記仮想マーカーの虚像の表示位置が可変するように前記投射手段を制御する制御手段とを有する。
ある実施態様では、前記制御手段は、前記車間距離が小さくなるにつれ前記仮想マーカーの虚像の表示位置を手前にシフトさせる。ある実施態様では、前記制御手段は、前記車間距離が第1の値以下になったとき前記仮想マーカーの虚像の一部を非表示にする。ある実施態様では、前記制御手段は、前記仮想マーカーの虚像が自車と重なる部分を非表示にする。ある実施態様では、前記制御手段は、前記車間距離が前記第1の値より小さい第2の値以下になったとき、前記仮想マーカーの虚像を完全に非表示にする。ある実施態様では、前記制御手段は、前記車間距離に応じて前記仮想マーカーの大きさを段階的に可変する。ある実施態様では、前記制御手段は、前記検出手段により検出された前方車両の大きさに基づき前記仮想マーカーの大きさを決定する。ある実施態様では、前記制御手段は、自車が停止したとき、前記車間距離の大小にかかわらず、前記仮想マーカーの虚像を非表示にする。ある実施態様では、前記仮想マーカーは、車両形状を表した画像であり、前記車両形状のリア部分を非表示にする。ある実施態様では、表示システムはさらに、運転者の視線または顔の向きを検出する検出手段を含み、前記制御手段は、前記検出手段の検出結果に基づいて前記仮想マーカーの虚像が表示される位置を制御する。
本発明によれば、前方車両との車間距離に応じて仮想マーカーの虚像が表示される位置を可変するようにしたので、仮想マーカーの良好な視認性を確保することができる。また、車間距離が小さくなり仮想マーカーの虚像が自車と重なる場合には、重なる部分を非表示にするようにしたので、仮想マーカーの視認性がさらに向上する。
本発明の実施例に係る表示システムの構成を示すブロック図である。 本発明の実施例に係るHUDの構成の一例を示す図である。 本発明の実施例に係る表示制御プログラムの機能的な構成を示す図である。 本実施例に係るHUDよる仮想マーカーの表示例を示す図である。 本実施例による仮想マーカーの表示位置と車間距離との関係を模式的に示した側面図である。 本実施例に係る表示システムにおいて、車間距離が徐々に短くなるときの仮想マーカーの表示例ある。 本実施例に係る表示システムにおいて、車間距離が徐々に短くなるときの仮想マーカーの表示例ある。 本発明の他の実施例による仮想マーカーの表示例である。 従来の仮想マーカーを表示するときの課題を説明する図である。
本発明に係る表示システムは、HUDに代表される画像投射装置を含み、HUDにより車両のフロントガラスまたはそのスクリーン上に種々の画像を投射または照射する機能を有する。運転者は、その視線方向においてHUDによりフロントガラス上に投射された画像の虚像を視認することができる。
次に、本発明の実施例について図面を参照して説明する。図1は、本発明の実施例に係る表示システムの構成を示すブロック図である。本実施例に係る表示システム100は、撮像カメラ110、物体検出部120、HUD130、記憶部140、I/F部150、制御部160を含んで構成される。
撮像カメラ110は、少なくとも自車の前方を撮像する1つまたは複数の車載カメラを含む。撮像カメラ110は、自車の前方を走行する前方車両を撮像し、撮像した画像データを制御部160へ提供する。この画像データは、自車の前方を走行する前方車両の検出や、前方車両の種別(自家用車、トラック、バス)またはサイズの判定に使用され得る。また、撮像カメラ110は、ステレオカメラであってもよく、この場合、ステレオカメラによって撮像された前方車両までの距離を計測することができる。
さらに撮像カメラ110は、自車の内部空間を撮像する撮像カメラを含むことができ、運転者の顔を撮像する。この場合、撮像カメラ110は、ステアリング近傍、あるいはインスツルメンツパネル内に設けられる。撮像カメラ110により撮像された画像データは、制御部160へ提供され、制御部160は、運転者の視線方向または顔の向きを検出することができる。
物体検出部120は、自車周辺に存在する物体の有無、物体までの距離等を検出する。物体検出部120は、例えば、ミリ波レーダーや赤外線レーザ等である。
HUD130は、自車のフロントガラスまたはスクリーン上に画像を投射し、運転者の視線方向に投射画像の虚像を表示させる。図2は、HUD130の構成の一例を示す図である。HUD130は、光源131、光源131からの光を集光する光学系132、光学系132から入射された光を画像データに基づき変調する光変調手段133、光変調手段133により変調された画像を投射する投射光学系134、投射光学系134の例えば、光軸や焦点距離などを調整するためのアクチュエータ135を含む。
光変調手段133は、例えば、液晶デバイス、あるいは複数の可変ミラーが2次元的に配置されたディジタルミラーデバイス(DMD)などから構成される。光変調手段133は、制御部160から提供される画像データに基づき光学的に変調された投射画像を生成する。制御部160は、例えば、1秒間に30フレームあるいは60フレームの画像データを光変調手段133へ提供し、光変調手段133は、この連続する画像データに基づき投射画像を生成する。
本実施例では、制御部160は、車両形状を表す仮想マーカー用の画像データを光変調手段133に提供し、投射光学系134は、仮想マーカー用の画像データにより変調された画像をフロントガラス上に投射する。表示システム100がI/F部150を介してナビゲーション装置に接続されたとき、HUD130は、ナビゲーション装置から提供された仮想マーカー用の画像データ(例えば、交差点案内、車線変更、走行速度などを案内する画像データ)に基づき生成された画像を投射する。
投射光学系134は、例えば、レンズや凹面鏡等の光学部材を含み、光変調手段133によって生成された画像をフロントガラス上に投射する。アクチュエータ135は、例えば、投射光学系134のレンズの位置やミラーの角度等を調整する。ある実施態様では、投射光学系134は、制御部160からの制御信号に基づき投射光学系134の焦点距離や光軸を調整し、運転者が見る投射画像の虚像の位置や大きさを可変することができる。なお、表示システム100は、複数のHUD130を搭載し、それぞれのHUD130の投射画像を表示させるものであってもよい。
記憶部140は、表示システム100にとって必要な情報を格納する。例えば、HUD130により投射される仮想マーカー用の画像データを格納したり、その他、表示システム100が実行するためのプログラムを格納することができる。ある実施態様では、記憶部140は、前方車両との車間距離に応じて仮想マーカーの表示形態を変更するため、仮想マーカーの表示位置やサイズが異なるような種々の仮想マーカー用の画像データを格納することができる。また、仮想マーカー用の画像データは、2次元座標で定義される画像データのほか、3次元座標で定義される画像データであることができる。仮想マーカー用の画像データは、少なくとも車両の後部(リア)を含み、好ましくは、車両の後部から前部までの車両全体が表された画像データである。
I/F部150は、表示システム100と外部機器との接続を可能にし、本実施例では、I/F部150を介してナビゲーション装置152(またはナビゲーション機能を有する電子装置)が接続される。ナビゲーション装置152は、GPS信号や自立航法センサ(例えば、加速度センサや角速度センサなど)により自車位置を算出する機能、自車位置周辺の道路地図データを表示する機能、現在地から目的地までの経路を探索し、探索された経路を案内する機能などを備えている。ナビゲーション装置152による表示機能は、HUD130とは別に、液晶などのディスプレイ装置などを備えるものであってもよい。ナビゲーション装置152が接続されたとき、制御部160は、ナビゲーション装置152と連携し、ナビゲーション装置152によって目的地までの経路が案内されるときに、ナビゲーション装置152から提供される案内情報に基づき、交差点の右左折や車線変更などの進行方向を案内する仮想マーカーを表示させることができる。
制御部160は、表示システム100の各部を制御し、好ましい態様では、制御部160は、ROM、RAMなどを含むマイクロコントローラ等を含み、表示システム100の動作を制御するための表示制御プログラムを実行する。
図3は、本実施例の表示制御プログラムの機能的な構成を示す図である。表示制御プログラム200は、前方車両検出部210、車間距離計測部220、表示位置決定部230、表示サイズ決定部240、投射制御部250を含む。
前方車両検出部210は、撮像カメラ110により撮像された画像データや物体検出部120の検出結果に基づき、自車の前方を走行する前方車両を検出する。ある実施態様では、前方車両検出部210は、撮像された画像データに基づき前方車両のサイズや車両種別を判別する。
車間距離計測部220は、前方車両検出部210の検出結果に基づき検出された前方車両と自車との間の車間距離を計測する。例えば、図4に示すように、前方車両Xが検出されたとき、自車から前方車両Xまでの直線的な車間距離Lを計測する。車間距離Lは、物体検出部120の赤外線レーザやミリ波レーダーによる検出結果、あるいはステレオカメラの撮像結果から算出することができる。車間距離計測部220は、前方車両が検出されている場合には、一定の時間間隔で繰り返し車間距離を計測する。また、前方車両検出部210によって前方車両が検出されていない場合には、車間距離計測部220は、車間距離の計測を行わない。
表示位置決定部230は、車間距離計測部220によって計測された車間距離に基づき仮想マーカーの表示位置を決定する。ここで、仮想マーカーの表示位置とは、図4に示すように、運転者がその視線方向においてフロントガラス上に投射された仮想マーカーの虚像Dを実空間で見ることができる位置である。表示位置決定部230は、車間距離が短くなるにつれ前方車両が自車に接近するため、前方車両と仮想マーカーとが重複しないように仮想マーカーの表示位置を手前にシフトさせ、反対に、車間距離が大きくなるにつれ前方車両が自車から離れるため、仮想マーカーの表示位置を遠方にシフトさせるように、仮想マーカーの表示位置を決定する。
図4Aに、仮想マーカーの表示位置と車間距離との関係を示す。自車Mと前方車両Xとの車間距離Lが計測され、車間距離Lに応じて仮想マーカーが表示される。例えば、車間距離がL1のとき、運転者は、その視線方向Sにおいて仮想マーカーの虚像D1を距離P1で見ることができ、車間距離がL2(L1>L2)のとき、運転者は、仮想マーカーの虚像D2を距離P2で見ることができ(P1>P2)、車間距離が小さくなるにつれ、仮想マーカーの表示位置が段階的に手前にシフトする。そして、車間距離がL2よりもさらに小さいL3になり、仮想マーカーの虚像D3を距離P3で見るとき(P2>P3)、運転者の視線方向Sには、仮想マーカーの虚像D3が自車Mと重なる部分Qが生じ、この重なる部分Qが非表示にされる。これにより、あたかも仮想マーカーの後部が自車に吸収されるが如く表示されることになる。車間距離がL3よりもさらに小さい閾値以下のL4になると、仮想マーカーの虚像の全体が自車に重複するため、仮想マーカーの虚像が完全に非表示にされ、あたかも仮想マーカーの全体が自車に吸収されるよう見える。運転者の視線方向Sにおいて仮想マーカーの虚像が自車と重複する位置は、自車Mのボンネット等の形状、運転者の視線の高さ、仮想マーカーのサイズ等から既知であり、車間距離Lに応じて仮想マーカーの表示位置を可変するとき、仮想マーカーの表示位置が仮想マーカーの虚像と自車との重複する位置に到達した場合には、仮想マーカーの虚像の一部または全部を非表示にする制御が行われる。
仮想マーカーの虚像が非表示になった状態から車間距離が徐々に大きくなると、自車から仮想マーカーが飛び出すが如く仮想マーカーの虚像が表れるように表示される。前方車両が存在しないとき、あるいは車間距離がある閾値以上であるとき、仮想マーカーの表示位置は自車から最も離れる。このように、車間距離に応じて、仮想マーカーが自車にフェードアウトまたはフェードインするように、仮想マーカーの表示位置を制御する。
仮想マーカーの表示位置を可変する方法は任意であるが、1つの実施態様では、車間距離に応じた仮想マーカー用の画像データを複数用意し、その中から車間距離に応じた画像データを選択する。それぞれの画像データは、各フレーム内の決められた座標位置に仮想マーカーの画像を描写しており、例えば、車間距離が短い画像データであれば、フレームの手前側の座標位置に仮想マーカーの画像が描写され、車間距離が長いときの画像データであれば、フレームの奥側の座標位置に仮想マーカーの画像が描写される。また、仮想マーカーの虚像の一部を非表示にする場合には、仮想マーカーの画像の一部が描写され、仮想マーカーの虚像の全部を非表示にする場合には、仮想マーカーの画像が完全に消去される。但し、このような複数の画像データを予め準備する以外にも、車間距離に応じてリアルタイムでそのような仮想マーカー用の画像を生成するようにしてもよい。また、別の実施態様では、制御部160は、車間距離に基づきアクチュエータ135を介して投射光学系134の投射角度や焦点距離などを制御し、これにより、仮想マーカーの表示位置を変化させるようにしてもよい。
表示サイズ決定部240は、車間距離に応じて仮想マーカーのサイズを決定する。表示サイズ決定部240は、車間距離が短くなるにつれ、前方車両が接近して大きくなるので、それに合わせて仮想マーカーのサイズを大きくし、反対に、車間距離が大きくなるにつれ、前方車両が離れて小さくなるので、それに合わせて仮想マーカーのサイズを小さくする。1つの好ましい態様では、車間距離が小さくなるにつれ仮想マーカーのサイズを段階的に大きくし、車間距離が大きくなるにつれて仮想マーカーのサイズを段階的に小さくするように、表示サイズを制御する。
表示サイズを可変する方法は任意であるが、1つの実施態様では、上記したように車間距離に応じた仮想マーカー用の画像データを準備しあるいは生成する場合には、フレーム内に描写される仮想マーカーの画像サイズを車間距離の応じて異ならせる。また、別の実施態様では、制御部160は、車間距離に基づきアクチュエータ135を介して投射光学系134の投射角度や焦点距離などを制御し、これにより、仮想マーカーの表示サイズを変化させるようにしてもよい。
さらに好ましい態様では、表示サイズ決定部240は、前方車両検出部210により検出された前方車両の大きさに基づき仮想マーカーのサイズを決定する。例えば、車間距離が同じであっても、前方車両の種別(バス、トラック、普通車、軽自動車、二輪車など)によって前方車両のサイズが異なる。前方車両のサイズが大きければ、それに応じて仮想マーカーのサイズを大きくし、前方車両のサイズが小さければ、それに応じて仮想マーカーのサイズを小さくすることで、前方車両と仮想マーカーとのサイズの不一致による違和感をなくすことができる。
投射制御部250は、表示位置決定部230により決定された表示位置、および表示サイズ決定部240により決定された表示サイズに従い、仮想マーカーが投射されるようにHUD130を制御する。つまり、投射制御部250は、光変調手段133へ提供する仮想マーカー用の画像データを制御したり、あるいはアクチュエータ135を介して投射光学系134の投射を制御する。これにより、投射光学系134によりフロントガラス136上に仮想マーカーの画像が投射され、運転者は、図4に示されるように、前方車両Xに重複することなく自車を先導する仮想マーカーの虚像Dを実空間と重ねて視認することができる。
図5および図6は、前方車両Xと自車との車間距離が徐々に短くなるときの仮想マーカーの表示例である。図5(A)において、前方車両Xとの車間距離L1であるとき、前方車両Xの後方に仮想マーカーの虚像D1が表示される。図5(B)では、車間距離L2が短くなり(L2<L1)、それに伴い、仮想マーカーの虚像D2が自車の手前にシフトし、かつサイズが幾分大きくなる。図6(A)に示すように、車間距離L3がさらに短くなると(L3<L2)、仮想マーカーの虚像D3の後部が自車Mと重複し、それ故、仮想マーカーの虚像D3の重複した一部が非表示になり、仮想マーカーがあたかも自車に吸収されるようになる。さらに図6(B)に示すように、車間距離L4がさらに小さくなると(L4<L3)、仮想マーカーの虚像が完全に非表示にされ、仮想マーカーが消滅する。上記とは反対に、車間距離が大きくなる場合には、図6(B)、(A)、図5(B)、(A)の順序で、仮想マーカーの虚像が表示される。
このように本実施例によれば、前方車両との車間距離に応じて仮想マーカーの表示位置を変化させるようにしたので、運転者にとって仮想マーカーの良好な視認性を確保することができる。また、車間距離に応じて仮想マーカーがフェードインまたはフェードアウトさせるように表示させることで、仮想マーカーの表示または非表示が円滑になり、仮想マーカーの視認性を向上させることができる。
なお、上記実施例では、車間距離に応じて仮想マーカーのサイズを可変するようにしたが、これは必ずしも必須ではなく、仮想マーカーのサイズは一定であってもよい。また、表示制御部250は、図6(B)に示すように、車間距離L4が一定値以下になったときに仮想マーカーを完全に非表示にするが、これ以外にも、自車が停止している場合には、仮想マーカーを非表示にすることが望ましい。この場合、前方車両Xとの車間距離は無関係である。自車が停止している場合には、仮想マーカーの表示は、運転者にとって有益な情報となり得ず、却って、邪魔な表示になり得るためである。
次に、本実施例の他の実施例について説明する。当該実施例は、運転者の顔の向きまたは視線方向を考慮した仮想マーカーの表示を行う。制御部160は、撮像カメラ110から提供された運転者の顔を撮像した画像データに基づき運転者の顔の向きまたは視線方向を検出する。表示位置決定部230は、検出された運転者の顔の向きまたは視線方向を考慮して仮想マーカーの表示位置を調整する。
運転者の視線方向が前方である場合には、図7(A)に示すように、その視線方向に仮想マーカーの虚像D10が表示される。運転者の視線方向が右側に向けられると、図7(B)に示すように、その視線方向に仮想マーカーの虚像D12が表示される。このとき、制御部160は、仮想マーカーの虚像D12の車両側面が見えるような3次元の仮想マーカー用の画像を光変調手段133へ提供する。
このように本実施例によれば、運転者の顔の向きまたは視線方向に応じた位置に3次元の仮想マーカーを表示させることができる。上記実施例では、仮想マーカーが車両形状を有する例を示したが、これは一例であって、仮想マーカーは、車両形状以外の形状であってもよい。
以上、本発明の好ましい実施の形態について詳述したが、本発明は、特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
100:表示システム 110:撮像カメラ
120:物体検出部 130:HUD
131:光源 132:光学系
133:光変調手段 134:投射光学系
135:アクチュエータ 140:記憶部
150:I/F部 152:ナビゲーション装置
160:制御部
D:仮想マーカーの虚像 L:車間距離
X:前方車両

Claims (10)

  1. 自車の前方を走行する前方車両を検出する検出手段と、
    前記前方車両との間の車間距離を計測する計測手段と、
    自車の進行方向等の案内をするための仮想マーカー用の画像を自車のフロントガラスに向けて投射する投射手段と、
    前記車間距離に応じて前記仮想マーカーの虚像の表示位置が可変するように前記投射手段を制御する制御手段と、
    を有する表示システム。
  2. 前記制御手段は、前記車間距離が小さくなるにつれ前記仮想マーカーの虚像の表示位置を手前にシフトさせる、請求項1に記載の表示システム。
  3. 前記制御手段は、前記車間距離が第1の値以下になったとき前記仮想マーカーの虚像の一部を非表示にする、請求項1または2に記載の表示システム。
  4. 前記制御手段は、前記仮想マーカーの虚像が自車と重なる部分を非表示にする、請求項3に記載の表示システム。
  5. 前記制御手段は、前記車間距離が前記第1の値より小さい第2の値以下になったとき、前記仮想マーカーの虚像を完全に非表示にする、請求項3または4に記載の表示システム。
  6. 前記制御手段は、前記車間距離に応じて前記仮想マーカーの大きさを段階的に可変する、請求項1ないし5いずれか1つに記載の表示システム。
  7. 前記制御手段は、前記検出手段により検出された前方車両の大きさに基づき前記仮想マーカーの大きさを決定する、請求項6に記載の表示システム。
  8. 前記制御手段は、自車が停止したとき、前記車間距離の大小にかかわらず、前記仮想マーカーの虚像を非表示にする、請求項1ないし7いずれか1つに記載の表示システム。
  9. 前記仮想マーカーは、車両形状を表した画像であり、前記車両形状のリア部分を非表示にする、請求項2に記載の表示システム。
  10. 表示システムはさらに、運転者の視線または顔の向きを検出する検出手段を含み、前記制御手段は、前記検出手段の検出結果に基づいて前記仮想マーカーの虚像が表示される位置を制御する、請求項1ないし9いずれか1つに記載の表示システム。
JP2017251889A 2017-12-27 2017-12-27 表示システム Active JP6945933B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017251889A JP6945933B2 (ja) 2017-12-27 2017-12-27 表示システム
US16/210,541 US20190196184A1 (en) 2017-12-27 2018-12-05 Display system
EP18214339.6A EP3505381B1 (en) 2017-12-27 2018-12-20 Display system and display control program
CN201811598115.XA CN109968977B (zh) 2017-12-27 2018-12-26 显示系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017251889A JP6945933B2 (ja) 2017-12-27 2017-12-27 表示システム

Publications (2)

Publication Number Publication Date
JP2019116229A true JP2019116229A (ja) 2019-07-18
JP6945933B2 JP6945933B2 (ja) 2021-10-06

Family

ID=64746310

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017251889A Active JP6945933B2 (ja) 2017-12-27 2017-12-27 表示システム

Country Status (4)

Country Link
US (1) US20190196184A1 (ja)
EP (1) EP3505381B1 (ja)
JP (1) JP6945933B2 (ja)
CN (1) CN109968977B (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111752046B (zh) * 2015-10-15 2023-06-02 麦克赛尔株式会社 平视显示装置
JP7095291B2 (ja) 2018-01-30 2022-07-05 トヨタ自動車株式会社 車両用表示装置
DE102019105855A1 (de) * 2019-03-07 2020-09-10 Deutsche Post Ag Fahrzeug mit Anzeigeeinrichtung
JP7357284B2 (ja) * 2020-02-12 2023-10-06 パナソニックIpマネジメント株式会社 描画システム、表示システム、移動体、描画方法及びプログラム
CN111301168B (zh) * 2020-03-30 2021-09-03 广州小鹏汽车科技有限公司 一种车辆泊车方法和装置
CN115540898B (zh) * 2022-12-02 2023-04-28 泽景(西安)汽车电子有限责任公司 前方车辆的标记方法、装置、抬头显示器和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004322680A (ja) * 2003-04-21 2004-11-18 Denso Corp ヘッドアップディスプレイ装置
WO2017138297A1 (ja) * 2016-02-08 2017-08-17 株式会社リコー 画像表示装置及び画像表示方法
JP2017189986A (ja) * 2016-04-11 2017-10-19 富士通テン株式会社 運転支援方法、及び、運転支援装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6241093B2 (ja) * 2013-06-28 2017-12-06 アイシン・エィ・ダブリュ株式会社 ヘッドアップディスプレイ装置
JP6524417B2 (ja) * 2014-02-05 2019-06-05 パナソニックIpマネジメント株式会社 車両用表示装置および車両用表示装置の表示方法
US20170134662A1 (en) * 2014-07-01 2017-05-11 Nissan Motor Co., Ltd. Vehicular display apparatus and vehicular display method
JP7156791B2 (ja) * 2014-07-31 2022-10-19 ビュージックス コーポレーション 拡散媒体を介した画像および波フィールド投影
KR101646340B1 (ko) * 2014-08-27 2016-08-05 현대자동차주식회사 차량정보 표시장치 및 그 표시방법
EP3693203B1 (en) * 2014-12-10 2022-05-18 Ricoh Company, Ltd. Controller, display, method and carrier means for information provision
JP6642972B2 (ja) 2015-03-26 2020-02-12 修一 田山 車輌用画像表示システム及び方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004322680A (ja) * 2003-04-21 2004-11-18 Denso Corp ヘッドアップディスプレイ装置
WO2017138297A1 (ja) * 2016-02-08 2017-08-17 株式会社リコー 画像表示装置及び画像表示方法
JP2017189986A (ja) * 2016-04-11 2017-10-19 富士通テン株式会社 運転支援方法、及び、運転支援装置

Also Published As

Publication number Publication date
JP6945933B2 (ja) 2021-10-06
EP3505381A1 (en) 2019-07-03
CN109968977B (zh) 2024-05-10
US20190196184A1 (en) 2019-06-27
EP3505381B1 (en) 2021-06-16
CN109968977A (zh) 2019-07-05

Similar Documents

Publication Publication Date Title
US10852818B2 (en) Information provision device and information provision method
US11951834B2 (en) Information provision device, information provision method, and recording medium storing information provision program for a vehicle display
JP6945933B2 (ja) 表示システム
US8536995B2 (en) Information display apparatus and information display method
JP6414096B2 (ja) 車載装置、車載装置の制御方法及び車載装置の制御プログラム
JP6413207B2 (ja) 車両用表示装置
JP6176478B2 (ja) 車両情報投影システム
JP6225379B2 (ja) 車両情報投影システム
JPWO2013136374A1 (ja) 運転支援装置
JP6504431B2 (ja) 画像表示装置、移動体、画像表示方法及びプログラム
EP3776156A1 (en) Image control apparatus, display apparatus, movable body, and image control method
JP7300112B2 (ja) 制御装置、画像表示方法及びプログラム
US20190283778A1 (en) Controlling the operation of a head-up display apparatus
JP7111582B2 (ja) ヘッドアップディスプレイシステム
TWM553426U (zh) 動態信息系統
WO2019189619A1 (en) Image control apparatus, display apparatus, movable body, and image control method
JP2017149335A (ja) 運転支援情報表示装置
JP2016107947A (ja) 情報提供装置、情報提供方法及び情報提供用制御プログラム
JP2018020779A (ja) 車両情報投影システム
JP2023017641A (ja) 車両用表示制御装置、車両用表示装置、車両用表示制御方法及び車両用表示制御プログラム
JP7166711B2 (ja) 表示システム
JP7037764B2 (ja) 移動ルート案内装置、移動体、移動ルート案内方法及びプログラム
JP7054483B2 (ja) 情報提供装置、情報提供方法及び情報提供用制御プログラム
WO2019230492A1 (ja) 車両用表示装置
WO2020084827A1 (ja) 重畳画像表示装置及びコンピュータプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210630

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210819

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210914

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210914

R150 Certificate of patent or registration of utility model

Ref document number: 6945933

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150