JPWO2020040276A1 - 表示装置 - Google Patents

表示装置 Download PDF

Info

Publication number
JPWO2020040276A1
JPWO2020040276A1 JP2020538477A JP2020538477A JPWO2020040276A1 JP WO2020040276 A1 JPWO2020040276 A1 JP WO2020040276A1 JP 2020538477 A JP2020538477 A JP 2020538477A JP 2020538477 A JP2020538477 A JP 2020538477A JP WO2020040276 A1 JPWO2020040276 A1 JP WO2020040276A1
Authority
JP
Japan
Prior art keywords
image
displayed
display
vehicle
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020538477A
Other languages
English (en)
Inventor
成美 的場
成美 的場
匠 佐藤
匠 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Seiki Co Ltd
Original Assignee
Nippon Seiki Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Seiki Co Ltd filed Critical Nippon Seiki Co Ltd
Publication of JPWO2020040276A1 publication Critical patent/JPWO2020040276A1/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Optics & Photonics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

AR画像と非AR画像とを同じ期間で表示する際に双方を見やすく表示することができる表示装置を提供する。表示装置は、車両の前方風景と重なる虚像Vとして視認者に視認される重畳画像を表示する。表示装置は、虚像Vの表示領域内において車両の前方路面に沿って視認されるAR画像としての第1画像C1と、第1画像C1よりも視認者側に立ち上がって視認される非AR画像としての第2画像C2とを表示可能である。表示装置は、第1画像C1と第2画像C2とを同じ期間で表示する場合に、第1領域Aに第1画像C1を表示するとともに第1領域Aと隣り合う第2領域Bに第2画像C2を表示し、第1領域Aと第2領域Bの境界部Gをグラデーション状に表示し、境界部Gに沿って線状に視認される線状画像Eを表示する。

Description

本発明は、表示装置に関する。
従来の表示装置として、特許文献1には、車両の前方風景と重なる虚像として視認者(主に車両の運転者)に視認される画像を表示するものが開示されている。
特開2015−64472号公報
上記のような表示装置では、虚像として、例えば、車両の前方路面に沿って視認される態様の画像(以下、AR(Augmented Reality)画像と言う。)や、AR画像よりも視認者側に立ち上がって視認される態様(例えば、視認者に正対して視認される態様)の画像(以下、非AR画像と言う。)の表示が可能である。しかしながら、所定の表示領域内において、AR画像と非AR画像とを同じ期間で表示する場合、単に双方を表示しただけでは、情報の混在により視認者に煩わしさを与えてしまう虞がある。
本発明は、上記実情に鑑みてなされたものであり、AR画像と非AR画像とを同じ期間で表示する際に双方を見やすく表示することができる表示装置を提供することを目的とする。
上記目的を達成するため、本発明に係る表示装置は、
車両の前方風景と重なる虚像として視認者に視認される重畳画像を表示する表示装置であって、
前記重畳画像の表示制御を行い、前記重畳画像の表示領域内において前記車両の前方路面に沿って視認される第1画像と前記第1画像よりも前記視認者側に立ち上がって視認される第2画像とを表示可能な表示制御手段を備え、
前記表示制御手段は、前記第1画像と前記第2画像とを同じ期間で表示する場合に、前記表示領域内における第1領域に前記第1画像を表示するとともに前記第1領域と隣り合う第2領域に前記第2画像を表示し、
前記第1領域と前記第2領域の境界部をグラデーション状に表示し、
前記境界部に沿って線状に視認される線状画像を表示する。
本発明によれば、AR画像と非AR画像とを同じ期間で表示する際に双方を見やすく表示することができる。
本発明の一実施形態に係るヘッドアップディスプレイ(HUD)装置の車両への搭載態様を説明するための図である。 車両用表示システムのブロック図である。 (a)〜(c)は、同時表示モードにおける虚像の構成例を説明するための図である。 線状画像パターンの例を示す表の図である。 (a)〜(c)は、線状画像パターンに対応する虚像表示例を示す図である。 (a)〜(c)は、線状画像パターンに対応する虚像表示例を示す図である。 (a)〜(c)は、線状画像パターンに対応する虚像表示例を示す図である。 (a)及び(b)は、影状画像を説明するための図である。 (a)及び(b)は、変形例に係る虚像の構成例を説明するための図である。
本発明の一実施形態に係る表示装置について図面を参照して説明する。
本実施形態に係る表示装置は、図2に示す車両用表示システム100に含まれるHUD(Head-Up Display)装置10である。HUD装置10は、図1に示すように、車両1のダッシュボード2の内部に設けられ、車両1に関する情報(以下、車両情報と言う。)だけでなく、車両情報以外の情報も統合的に運転者5に報知する。なお、車両情報は、車両1自体の情報だけでなく、車両1の運行に関連した車両1の外部の情報も含む。
車両用表示システム100は、車両1内において構成されるシステムであり、HUD装置10と、周辺情報取得部40と、前方情報取得部50と、カーナビゲーション(カーナビ)装置60と、ECU(Electronic Control Unit)70と、操作部80と、を備える。
HUD装置10は、図1に示すように、コンバイナ処理されたフロントガラス3に向けて表示光Lを射出する。フロントガラス3で反射した表示光Lは、運転者5側へと向かう。運転者5は、視点をアイボックス4内におくことで、フロントガラス3の前方に、表示光Lが表す画像を虚像Vとして視認することができる。つまり、HUD装置10は、フロントガラス3の前方位置に虚像Vを表示する。これにより、運転者5は、虚像Vを前方風景と重畳させて観察することができる。
HUD装置10は、図2に示す表示部20及び制御装置30と、図示しない反射部とを備える。
表示部20は、制御装置30の制御により、虚像Vとして運転者5に視認される重畳画像を表示する。表示部20は、例えば、TFT(Thin Film Transistor)型のLCD(Liquid Crystal Display)や、LCDを背後から照明するバックライト等を有する。バックライトは、例えばLED(Light Emitting Diode)から構成されている。表示部20は、制御装置30の制御の下で、バックライトに照明されたLCDが画像を表示することにより表示光Lを生成する。生成した表示光Lは、反射部で反射した後に、フロントガラス3に向けて射出される。反射部は、例えば、折り返しミラーと凹面鏡の二枚の鏡から構成される。折り返しミラーは、表示部20から射出された表示光Lを折り返して凹面鏡へと向かわせる。凹面鏡は、折り返しミラーからの表示光Lを拡大しつつ、フロントガラス3に向けて反射させる。これにより、運転者5に視認される虚像Vは、表示部20に表示されている画像が拡大されたものとなる。なお、反射部を構成する鏡の枚数は設計に応じて任意に変更可能である。
なお、以下では、虚像Vとして運転者5に視認される画像を表示部20が表示することを「重畳画像を表示する」とも言う。また、制御装置30が表示部20の表示制御を行うことを「重畳画像の表示制御を行う」とも言う。また、表示部20は、重畳画像を表示することができれば、LCDを用いたものに限られず、OLED(Organic Light Emitting Diodes)、DMD(Digital Micro mirror Device)、LCOS(Liquid Crystal On Silicon)などの表示デバイスを用いたものであってもよい。
制御装置30は、HUD装置10の全体動作を制御するマイクロコンピュータからなり、制御部31と、ROM(Read Only Memory)32と、RAM(Random Access Memory)33とを備える。また、制御装置30は、図示しない構成として、駆動回路や、車両1内の各種システムと通信を行うための入出力回路を備える。
ROM32は、動作プログラムや各種の画像データを予め記憶する。RAM33は、各種の演算結果などを一時的に記憶する。制御部31は、ROM32に記憶された動作プログラムを実行するCPU(Central Processing Unit)31aと、CPUと協働して画像処理を実行するGDC(Graphics Display Controller)31bとを備える。GDC31bは、例えば、GPU(Graphics Processing Unit)、FPGA(Field-Programmable Gate Array)、ASIC(Application Specific Integrated Circuit)等から構成されている。特に、ROM32には、後述の表示制御を行うための動作プログラムが格納されている。なお、制御装置30や制御部31の構成は、以下に説明する機能を充足する限りにおいては任意である。
制御部31は、表示部20を駆動制御する。例えば、制御部31は、CPU31aで表示部20のバックライトを駆動制御し、CPU31aと協働して動作するGDC31bで表示部20のLCDを駆動制御する。
制御部31のCPU31aは、GDC31bと協働して、ROM32に記憶された各種の画像データに基づき、重畳画像の制御を行う。GDC31bは、CPU31aからの表示制御指令に基づき、表示部20の表示動作の制御内容を決定する。GDC31bは、表示部20に表示する1画面を構成するために必要な画像パーツデータをROM32から読み込み、RAM33へ転送する。また、GDC31bは、RAM33を使って、画像パーツデータやHUD装置10の外部から通信により受け取った各種の画像データを元に、1画面分の絵データを作成する。そして、GDC31bは、RAM33で1画面分の絵データを完成させたところで、画像の更新タイミングに合わせて、表示部20に転送する。これにより、表示部20に虚像Vとして運転者5に視認される重畳画像が表示される。また、虚像Vとして視認される画像を構成する各画像には予めレイヤが割り当てられており、制御部31は、各画像の個別の表示制御が可能となっている。
また、制御部31は、虚像Vの表示領域内におけるコンテンツ画像(図3(a)、(b)に示す後述の第1画像C1や第2画像C2など)の表示位置と、コンテンツ画像の表示距離とを制御する。なお、図3(a)〜(c)等で虚像Vが示している実線の枠は、虚像Vの表示領域を示し、コンテンツ画像は、当該表示領域内に虚像として視認される画像である。これは、虚像Vとして運転者5に視認される重畳画像を表示する表示部20において、当該重畳画像の表示領域内にコンテンツ画像が表示されることと同義である。
表示位置の制御とは、運転者5から見て、虚像Vの表示領域内における任意の位置に画像が表示されるように制御部31が表示部20を制御することである。また、表示距離の制御とは、運転者5から見て、コンテンツ画像が車両1からどのくらい前方に表示されるかの制御である。つまり、表示距離の制御とは、車両1の前方に所定距離向かった位置にコンテンツ画像が視認されるように制御部31が表示部20を制御することである。表示距離の制御については、制御部31が虚像Vの表示領域内におけるコンテンツ画像を、奥行きを持たせた態様で表示制御可能であることにより実現される。例えば、当該奥行きを持たせた態様でコンテンツ画像を表示するには、ROM32に予め3D画像データを格納しておき、後述の物体情報等から算出可能な、画像の重畳対象となる物体の位置や車両1から当該物体までの距離に基づいて、遠近法(例えば、一点透視図法)を用いてコンテンツ画像を描画制御する。また、表示部20の表示面(LCDの表示面や、DMDやLCOSを用いた場合にはスクリーン)を傾けて配置することにより、虚像Vが表示される仮想面(表示部20の表示面に対応する面)を車両1の上下方向に対して前方に傾けて設定することでコンテンツ画像に奥行きを持たせてもよい。この場合、運転者5の視点から視認させたい像の前記仮想面への射影を考慮して、制御部31は、コンテンツ画像を奥行きを持たせた態様で描画制御すればよい。運転者5の視点位置として、制御部31は、ROM32内に予め格納した想定される視点位置を用いてもよいし、運転者5の視点位置を検出する視点検出部(図示せず)からの視線情報を用いてもよい。
この実施形態では、上記のようにコンテンツ画像の表示位置と表示距離とを制御可能であることにより、制御部31は、虚像Vの表示領域内に、次に述べる第1画像C1と第2画像C2とを表示可能となっている。例えば、虚像Vの表示モードとして、虚像Vの表示領域内に第1画像C1と第2画像C2のうち一方を表示するが他方を表示しない「単独表示モード」と、虚像Vの表示領域内に第1画像C1及び第2画像C2の双方を同時に(同じ期間で)表示する「同時表示モード」とが設けられている。そして、制御部31は、操作部80が運転者5による表示モード切替操作を受け付けたことに応じて、現状の表示モードから他の表示モードへと切り替える。まずは、第1画像C1及び第2画像C2について説明する。
第1画像C1は、虚像Vの表示領域内において車両1の前方路面に沿って視認されるAR(Augmented Reality)画像である。
第1画像C1は、後述する前方物体に対応する位置に表示される画像であり、前方物体の存在を報知するための画像である。前方物体は、例えば、車両1(以下、自車1とも言う。)の先行車両であり、図3(a)及び(b)は、第1画像C1が先行車両(図示せず)に対応する位置に表示されている例を示している。図3(a)及び(b)の例では、第1画像C1が略三角形の枠内にエクスクラメーションマークが表されて構成されている。なお、第1画像C1は、対応する前方物体の存在を注意喚起することができれば、その態様は任意であり、例えば、文字、記号、図形、アイコンやこれらの組み合わせであればよい。また、第1画像C1の表示位置としての「前方物体に対応する位置」とは、前方物体に重畳して視認される位置に限られず、前方物体の近傍の位置であってもよい。
第2画像C2は、虚像Vの表示領域内において第1画像C1よりも視認者側に立ち上がって視認される態様(例えば、視認者に正対して視認される態様)の非AR画像である。
第2画像C2は、図3(a)に示すように、ユーザにより設定された案内経路や、車両1の現在地近傍の地図情報(当該地図情報については図示省略)を示すものである。第2画像C2は、例えば、俯瞰態様で表した地図情報画像と、当該画像に重ねて表示される案内経路画像(例えば、矢印を示す画像など)とを含んで構成される。制御部31は、後述のカーナビ装置60からの経路案内情報に基づき、第2画像C2の表示制御を行う。
AR画像としての第1画像C1は、実景としての前方路面に沿って運転者5に視認される。第1画像C1は、例えば、後述の交通情報や前方画像データに基づいて特定される前方路面に沿うように、制御部31によって遠近法(例えば、一点透視図法)を用いて描画される。ここで、遠近法を用いて描画されて前方路面に沿って視認される画像をパース度「100%」とする。一方、前方路面よりも運転者5側に起き上がって視認されるとともに、運転者5と正対して視認される画像をパース度「0%」とする。パース度100%〜0%の間の度合は、視認される画像の前方路面から運転者5に向かっての起き上がり度合に対応する。こうした場合、例えば、AR画像としての第1画像C1はパース度100%で表示され、非AR画像としての第2画像C2はパース度0%で表示される。なお、第1画像C1は、運転者5が前方路面に沿って表示されていると認識可能な範囲であれば、パース度100%よりも小さい度合のパース度で表示されてもよい。また、第2画像C2は、第1画像C1よりも運転者5側に立ち上がって視認されるものであれば、パース度0%よりも大きい度合のパース度で表示されてもよい。
続いて、虚像Vの表示領域内に第1画像C1及び第2画像C2の双方を同じ期間で表示する「同時表示モード」の構成を図3(a)〜(c)を参照して説明する。
同時表示モードにおける虚像Vの表示領域は、第1領域Aと、第2領域Bとを有する。第1領域Aと第2領域Bとは、図3(b)、(c)に点線で示した境界線Dを挟んで隣り合っている。なお、図において点線で示した境界線Dは、第1領域Aと第2領域Bの形状を説明するためのものに過ぎず、実際に視認されるものでなくともよい。図3(b)に示すように、第1領域Aは、運転者5から見て第2領域Bよりも上方に位置する。第1領域A内に第1画像C1が表示され、第2領域B内に第2画像C2が表示される。
また、同時表示モードにおける虚像Vでは、境界線Dを含む境界部G(図3(c)において破線で示した部分)がグラデーション状に表示される。具体的には、第1領域Aのうち境界部Gを除く部分の背景画像の色を「第1の色」とし、第2領域Bのうち境界部Gを除く部分の背景画像の色を「第2の色」とすると、境界部Gにおいては、第1の色と第2の色の一方から他方へ連続的に変化するグラデーション処理が施される。なお、第1の色と第2の色とは互いに異なる色であれば任意である。
また、同時表示モードにおける虚像Vでは、境界部Gに沿って線状に視認される線状画像E(図3(a)、(b)など参照)が表示される。線状画像Eは、例えば、図3(a)に示すように、等脚台形を構成する四辺のうち下底に対応する辺を除いた形状をなすとともに、脚が虚像Vの矩形状の表示領域の角(下側の角)に向かう形状をなしている。これにより、線状画像Eは、虚像Vの中央部から端部に向かって延びており、且つ、当該端部は、運転者5から見て当該中央部よりも下方に位置している。また、当該中央部における線状画像Eは、運転者5から見て左右方向に沿っている。
なお、この実施形態では、図3(b)に示すように、線状画像Eが第1領域A内に表示され、線状画像Eと境界線Dが一致していない例を示しているが、線状画像Eを境界線Dと一致させ、線状画像Eを第1領域Aと第2領域Bとの区分線として機能させてもよい。この実施形態では、線状画像Eの態様として、図4に示すように、互いに異なる態様の線状画像パターンP1〜P9が用意されている。これらパターンについては、後述する。
図2に戻って、制御部31のCPU31aは、周辺情報取得部40、前方情報取得部50、カーナビ装置60、ECU70、操作部80の各々と通信を行う。当該通信としては、例えば、CAN(Controller Area Network)、Ethernet、MOST(Media Oriented Systems Transport)、LVDS(Low Voltage Differential Signaling)などの通信方式が適用可能である。
周辺情報取得部40は、車両1の周辺(外部)の情報を取得するものであり、車両1とワイヤレスネットワークとの通信(V2N:Vehicle To cellular Network)、車両1と他車両との通信(V2V:Vehicle To Vehicle)、車両1と歩行者との通信(V2P:Vehicle To Pedestrian)、車両1と路側のインフラとの通信(V2I:Vehicle To roadside Infrastructure)を可能とする各種モジュールから構成される。つまり、周辺情報取得部40は、車両1と車両1の外部との間でV2X(Vehicle To Everything)による通信を可能とする。
例えば、(i)周辺情報取得部40は、WAN(Wide Area Network)に直接アクセスできる通信モジュール、WANにアクセス可能な外部装置(モバイルルータなど)や公衆無線LAN(Local Area Network)のアクセスポイント等と通信するための通信モジュールなどを備え、インターネット通信を行う。また、周辺情報取得部40は、人工衛星などから受信したGPS(Global Positioning System)信号に基づいて車両1の位置を算出するGPSコントローラを備える。これらの構成により、V2Nによる通信を可能とする。(ii)また、周辺情報取得部40は、所定の無線通信規格に準拠した無線通信モジュールを備え、V2VやV2Pによる通信を行う。(iii)また、周辺情報取得部40は、路側のインフラと無線通信する通信装置を有し、例えば、安全運転支援システム(DSSS:Driving Safety Support Systems)の基地局から、インフラストラクチャーとして設置された路側無線装置を介して、物体情報や交通情報を取得する。これによりV2Iによる通信が可能となる。
この実施形態では、周辺情報取得部40は、自車1の外部に存在する車両、信号機、歩行者などの各種物体の位置、大きさ、属性などを示す物体情報をV2Iにより取得し、制御部31に供給する。なお、物体情報は、V2Iに限られず、V2Xのうち任意の通信により取得されてもよい。また、周辺情報取得部40は、V2Iにより車両1の周辺道路の位置や形状を含む交通情報を取得し、制御部31に供給する。また、周辺情報取得部40のGPSコントローラからの情報に基づき、制御部31は、自車1の位置を算出する。
前方情報取得部50は、例えば、車両1の前方風景を撮像するステレオカメラや、自車1から自車1の前方に位置する物体までの距離を測定するLIDAR(Laser Imaging Detection And Ranging)などの測距センサや、車両1の前方に位置する物体を検出するソナー、超音波センサ、ミリ波レーダ等から構成される。
この実施形態では、前方情報取得部50は、ステレオカメラにより撮像した前方風景画像を示す前方画像データや、測距センサが測定した物体までの距離を示すデータや、その他の検出データをCPU31aに送信する。
カーナビ装置60は、人工衛星などから受信したGPS(Global Positioning System)信号に基づいて車両1の位置を算出するGPSコントローラを含む。カーナビ装置60は、地図データを記憶する記憶部を有し、GPSコントローラからの位置情報に基づいて、現在位置近傍の地図データを記憶部から読み出し、ユーザにより設定された目的地までの案内経路を決定する。そして、カーナビ装置60は、現在の車両1の位置や決定した案内経路に関する情報を制御部31に出力する。また、カーナビ装置60は、地図データを参照することにより、車両1の前方の施設の名称・種類や、施設と車両1との距離などを示す情報を制御部31に出力する。地図データでは、道路形状情報(車線、道路の幅員、車線数、交差点、カーブ、分岐路等)、制限速度などの道路標識に関する規制情報、車線が複数存在する場合の各車線についての情報などの各種情報が位置データと対応付けられている。カーナビ装置60は、これらの各種情報を経路案内情報として、制御部31に出力する。なお、カーナビ装置60は、車両1に搭載されたものに限られず、制御部31との間で有線又は無線により通信を行い、カーナビゲーション機能を有する携帯端末(スマートフォン、タブレットPC(Personal Computer)など)により実現されてもよい。
ECU70は、車両1の各部を制御するものであり、例えば、車両1の現在の車速を示す車速情報をCPU31aへ送信する。なお、CPU31aは、車速センサから車速情報を取得してもよい。また、ECU70は、エンジン回転数などの計測量や、車両1自体の警告情報(燃料低下や、エンジン油圧異常など)や、その他の車両情報をCPU31aへ送信する。ECU70から取得した情報に基づいて、CPU31aは、GDC31bを介して、表示部20に車速、エンジン回転数、各種警告などを示す画像を表示させることが可能となっている。つまり、第1画像C1や第2画像C2の他に、虚像Vの表示領域内に車両情報を示す車両情報画像も表示可能となっている。なお、車両情報画像は、例えば、運転者5と正対して視認されるようにパース度0%で表示される。
操作部80は、運転者5による各種操作を受け付けるものであり、受け付けた操作内容を示す信号を制御部31に供給する。例えば、操作部80は、運転者5による、虚像Vの表示モードの切替操作などを受け付ける。
制御部31は、例えば、操作部80が表示モード切替操作として同時表示モードへの切替操作を受け付けたことを契機に、図3(a)に示すように、虚像Vを同時表示モードで表示する。なお、同時表示モードでの虚像Vの表示は、車両1の自動運転レベルに応じて制限されてもよい。例えば、自動運転レベルがレベル2や、レベル3以上の場合にのみ、虚像Vの同時表示モードでの表示が可能であってもよい。制御部31は、例えば、ECU70から現在の自動運転レベルを示す運転モード情報を取得することで、現在の自動運転レベルを特定可能である。
第2画像C2は、ユーザがカーナビ装置60で設定した目的地までの案内経路に応じて第2領域B内に表示される。一方、第1画像C1については、重畳対象となる前方物体を制御部31が特定したことに応じて第1領域A内に表示される。例えば、制御部31は、路側のインフラから周辺情報取得部40を介してV2IやV2Vで取得した物体情報が示す物体の位置に基づき、当該物体が運転者5から見て虚像Vの表示領域内に位置すると特定した場合に、前方物体があると判別する。なお、前方物体の存在の特定手法は、これに限られない。例えば、周辺情報取得部40からの物体情報は、V2IやV2Vに限られず、V2Xのうち任意の通信(V2N、V2V、V2Pのうち少なくともいずれか)により取得してもよい。また、制御部31は、前方情報取得部50から取得した情報に基づき、前方物体を特定してもよい。具体的には、前方画像データに基づき、例えばパタンマッチング法などの公知の画像解析法により前方物体を特定してもよいし、測距センサ、ソナー、超音波センサ、ミリ波レーダからの検出信号に基づき前方物体を特定してもよい。以上のような手法で前方物体を特定すると、制御部31は、特定した前方物体に対応した位置に第1画像C1をAR態様で表示する。
(線状画像パターンについて)
続いて、線状画像パターン(以下、単に「パターン」とも言う。)について、図4〜図7を参照して説明する。なお、図5〜図7においては、第1領域A内に表示可能な第1画像C1については、図示省略している。また、以下に説明する種々のパターンのうち、同時表示モードの際に実現されるパターンは、予め定められた任意のパターンであってもよいし、操作部80からの設定操作によりユーザの好みに応じて選択されたものであってもよい。ROM32には、図4等に示すパターンのうち1つ以上のパターンを実現するために必要となる各種の画像パーツデータが予め記憶されている。
パターンP1〜P3は、線状画像Eの中央部における幅が、端部(虚像Vの矩形の表示領域の角に向かう部分)における幅よりも広い態様である。
パターンP1は、図5(a)に示すように、線状画像Eがその端部から中央部に向かって虚像Vの背景色に同化するグラデーション状に表示される態様である。パターンP2は、図5(b)に示すように、線状画像Eがその中央部から端部に向かって虚像Vの背景色に同化するグラデーション状に表示される態様である。パターンP3は、図5(c)に示すように、線状画像Eにグラデーション処理を施さない態様である。
パターンP4〜P6は、線状画像Eの端部(虚像Vの矩形の表示領域の角に向かう部分)における幅が、中央部における幅よりも広い態様である。
パターンP4は、図6(a)に示すように、線状画像Eがその端部から中央部に向かって虚像Vの背景色に同化するグラデーション状に表示される態様である。パターンP5は、図6(b)に示すように、線状画像Eがその中央部から端部に向かって虚像Vの背景色に同化するグラデーション状に表示される態様である。パターンP6は、図6(c)に示すように、線状画像Eにグラデーション処理を施さない態様である。
パターンP7〜P9は、線状画像Eの幅が一定(端部における幅と中央部における幅とが等しい)態様である。
パターンP7は、図7(a)に示すように、線状画像Eがその端部から中央部に向かって虚像Vの背景色に同化するグラデーション状に表示される態様である。パターンP8は、図7(b)に示すように、線状画像Eがその中央部から端部に向かって虚像Vの背景色に同化するグラデーション状に表示される態様である。パターンP9は、図7(c)に示すように、線状画像Eにグラデーション処理を施さない態様である。
なお、これらのパターンのうち、P3、P6、及びP9以外のグラデーション処理を施したパターンについて、「虚像Vの背景色に同化するグラデーション状」とは、線状画像Eが表示される領域の背景色に徐々に同化していく態様である。例えば、線状画像Eを第1領域Aに表示する場合は、線状画像Eの所定部分が第1領域Aの背景色に同化していくようにグラデーション処理を施せばよい。また、線状画像Eを第2領域Bに表示する場合は、線状画像Eの所定部分が第2領域Bの背景色に同化していくようにグラデーション処理を施せばよい。また、線状画像Eを前述の境界線Dと一致させた場合には、線状画像Eの所定部分が第1領域A又は第2領域Bのいずれかの背景色に同化していくようにグラデーション処理を施せばよい。
以上に説明したHUD装置10は、車両1の前方風景と重なる虚像Vとして視認者(例えば運転者5)に視認される重畳画像を表示する表示装置の一例である。HUD装置10は、重畳画像の表示制御を行い、重畳画像の表示領域(虚像Vの表示領域に対応)内において車両1の前方路面に沿って視認される第1画像C1(AR画像)と第1画像C1よりも視認者側に立ち上がって視認される第2画像C2(非AR画像)とを表示可能な表示制御手段(例えば、制御部31や表示部20)を備える。
(1)特に、表示制御手段は、第1画像C1と第2画像C2とを同じ期間で表示する場合(同時表示モードの場合)に、前記表示領域内における第1領域Aに第1画像C1を表示するとともに第1領域Aと隣り合う第2領域Bに第2画像C2を表示し、第1領域Aと第2領域Bの境界部Gをグラデーション状に表示し、境界部Gに沿って線状に視認される線状画像Eを表示する。
この構成によれば、線状画像Eを跨いでAR画像と非AR画像とを区分して表示可能でありつつも、第1領域Aと第2領域Bの境界部Gをグラデーション状に表示することで当該境界部Gに表示される情報が視認者に与える煩雑さを低減することができる。つまり、AR画像と非AR画像とを同じ期間で表示する際に双方を見やすく表示することができる。
(2)また、線状画像Eは、重畳画像の中央部から端部に向かって延びており、端部における幅が中央部における幅よりも細い(例えば、線状画像パターンP1〜P3)、ようにしてもよい。
こうすれば、中央部近傍において第1画像C1と第2画像C2とを明瞭に区分しつつも、両画像を違和感無く表示することができる。
(3)また、線状画像Eは、重畳画像の中央部から端部に向かって延びており、端部における幅が中央部における幅よりも太い(例えば、線状画像パターンP4〜P6)、ようにしてもよい。
こうすれば、第1領域Aで第1画像C1を表示している際に、当該第1画像C1と線状画像Eが干渉して視認者に煩わしさを与えることを抑制することができる。
(4)また、線状画像Eは、重畳画像の中央部から端部に向かって延びており、中央部から端部に向かって重畳画像の背景色に同化するグラデーション状に表示される(例えば、線状画像パターンP2、P5、P8)、ようにしてもよい。
こうすれば、中央部近傍において第1画像C1と第2画像C2とを明瞭に区分しつつも、両画像を違和感無く表示することができる。
(5)また、線状画像Eは、重畳画像の中央部から端部に向かって延びており、端部から中央部に向かって重畳画像の背景色に同化するグラデーション状に表示される(例えば、線状画像パターンP1、P4、P7)、ようにしてもよい。
こうすれば、第1領域Aで第1画像C1を表示している際に、当該第1画像C1と線状画像Eが干渉して視認者に煩わしさを与えることを抑制することができる。
(6)また、線状画像Eの第1領域A側又は第2領域B側に、線状画像Eに隣接する影状画像Sを表示する、ようにしてもよい。図8(a)に示すように、線状画像Eの第2領域B側に影状画像Sを表示した場合は、第2領域Bよりも第1領域Aを強調して表示することができる。一方、図8(b)に示すように、線状画像Eの第1領域A側に影状画像Sを表示した場合は、第1領域Aよりも第2領域Bを強調して表示することができる。影状画像Sは、例えば、制御部31の制御により描画されるドロップシャドウが好ましいが、図8(a)又は(b)に示すように影状に視認させることができれば、光彩などの他のエフェクトを用いて実現されるものであってもよい。
(7)また、第1領域Aは、視認者から見て第2領域Bよりも上方に位置し、重畳画像の中央部における線状画像Eは、視認者から見て左右方向に沿っていてもよい。(8)また、線状画像Eは、重畳画像の中央部から端部に向かって延びており、当該端部は、視認者から見て当該中央部よりも下方に位置するようにしてもよい。
なお、図9(a)に示すように、同時表示モード時の虚像Vを、その表示領域の矩形のうち上辺と下辺とを結ぶように境界線Dを設定し、第1領域Aと第2領域Bとが左右方向において隣り合う構成としてもよい。また、図9(b)に示すように、同時表示モード時の虚像Vを、境界線Dが曲線であり、且つ、その端が、虚像Vの表示領域の矩形のうち下辺や角ではなく左側や右側の辺に向かって延びる構成としてもよい。これらの場合も同様に、第1領域Aと第2領域Bの境界部Gをグラデーション状に表示し、境界部Gに沿って線状に視認される線状画像Eを表示することができる。このように、虚像Vの表示領域内において、互いに隣り合う第1領域Aと第2領域Bとを区分することができれば、第1領域A及び第2領域Bの各々の形状は目的に応じて任意である。
また、線状画像Eの表示色は、第1領域A又は第2領域Bのいずれかの背景色に含まれる色であってもよいし、当該背景色に含まれない色(例えば、背景色よりも濃い黒色など)であってもよい。
なお、本発明は以上の実施形態、変形例、及び図面によって限定されるものではない。本発明の要旨を変更しない範囲で、適宜、変更(構成要素の削除も含む)を加えることが可能である。
第1画像C1(AR画像)が「前方路面に沿って視認される」とは、パース度100%に限られず、運転者5が前方路面に沿って画像が表示されていると認識できる状態であれば、パース度100%よりも小さい所定度合であってもよい。また、第1画像C1によりその存在が報知される前方物体は、車両に限られず、歩行者や自転車や他の移動物体であってもよい。
表示光Lの投射対象は、フロントガラス3に限定されず、板状のハーフミラー、ホログラム素子等により構成されるコンバイナであってもよい。また、以上に説明した虚像Vを表示する表示装置としては、HUD装置10に限られない。表示装置は、車両1の運転者5の頭部に装着されるヘッドマウントディスプレイ(HMD:Head Mounted Display)として構成されてもよい。つまり、表示装置は、車両1に搭載されているものに限られず、車両1で使用されるものであればよい。
以上の説明では、本発明の理解を容易にするために、公知の技術的事項の説明を適宜省略した。
100…車両用表示システム
10…HUD装置
20…表示部
30…制御装置
31…制御部(31a…CPU、31b…GDC)
32…ROM、33…RAM
40…周辺情報取得部
50…前方情報取得部
60…カーナビゲーション装置
70…ECU
80…操作部
1…車両、2…ダッシュボード、3…フロントガラス
5…運転者、4…アイボックス、L…表示光
V…虚像
A…第1領域、C1…第1画像
B…第2領域、C2…第2画像
D…境界線、G…境界部
E…線状画像
S…影状画像

Claims (8)

  1. 車両の前方風景と重なる虚像として視認者に視認される重畳画像を表示する表示装置であって、
    前記重畳画像の表示制御を行い、前記重畳画像の表示領域内において前記車両の前方路面に沿って視認される第1画像と前記第1画像よりも前記視認者側に立ち上がって視認される第2画像とを表示可能な表示制御手段を備え、
    前記表示制御手段は、前記第1画像と前記第2画像とを同じ期間で表示する場合に、前記表示領域内における第1領域に前記第1画像を表示するとともに前記第1領域と隣り合う第2領域に前記第2画像を表示し、
    前記第1領域と前記第2領域の境界部をグラデーション状に表示し、
    前記境界部に沿って線状に視認される線状画像を表示する、
    表示装置。
  2. 前記線状画像は、前記重畳画像の中央部から端部に向かって延びており、前記端部における幅が前記中央部における幅よりも細い、
    請求項1に記載の表示装置。
  3. 前記線状画像は、前記重畳画像の中央部から端部に向かって延びており、前記端部における幅が前記中央部における幅よりも太い、
    請求項1に記載の表示装置。
  4. 前記線状画像は、前記重畳画像の中央部から端部に向かって延びており、前記中央部から前記端部に向かって前記重畳画像の背景色に同化するグラデーション状に表示される、
    請求項1乃至3のいずれか1項に記載の表示装置。
  5. 前記線状画像は、前記重畳画像の中央部から端部に向かって延びており、前記端部から前記中央部に向かって前記重畳画像の背景色に同化するグラデーション状に表示される、
    請求項1乃至3のいずれか1項に記載の表示装置。
  6. 前記線状画像の前記第1領域側又は前記第2領域側に、前記線状画像に隣接する影状の画像を表示する、
    請求項1乃至5のいずれか1項に記載の表示装置。
  7. 前記第1領域は、前記視認者から見て前記第2領域よりも上方に位置し、
    前記重畳画像の中央部における前記線状画像は、前記視認者から見て左右方向に沿っている、
    請求項1乃至6のいずれか1項に記載の表示装置。
  8. 前記線状画像は、前記重畳画像の中央部から端部に向かって延びており、
    前記端部は、前記視認者から見て前記中央部よりも下方に位置する、
    請求項1乃至7のいずれか1項に記載の表示装置。
JP2020538477A 2018-08-23 2019-08-23 表示装置 Pending JPWO2020040276A1 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018156377 2018-08-23
JP2018156377 2018-08-23
PCT/JP2019/032968 WO2020040276A1 (ja) 2018-08-23 2019-08-23 表示装置

Publications (1)

Publication Number Publication Date
JPWO2020040276A1 true JPWO2020040276A1 (ja) 2021-08-12

Family

ID=69592986

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020538477A Pending JPWO2020040276A1 (ja) 2018-08-23 2019-08-23 表示装置

Country Status (2)

Country Link
JP (1) JPWO2020040276A1 (ja)
WO (1) WO2020040276A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118176405A (zh) * 2021-10-28 2024-06-11 日本精机株式会社 显示控制装置、平视显示装置和显示控制方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010188826A (ja) * 2009-02-17 2010-09-02 Mazda Motor Corp 車両用表示装置
JP2015157509A (ja) * 2014-02-21 2015-09-03 日本精機株式会社 車両用警告装置および車両用警告ユニット
WO2016072019A1 (ja) * 2014-11-07 2016-05-12 三菱電機株式会社 表示制御装置
JP2016109645A (ja) * 2014-12-10 2016-06-20 株式会社リコー 情報提供装置、情報提供方法及び情報提供用制御プログラム
JP2016146170A (ja) * 2015-01-29 2016-08-12 株式会社デンソー 画像生成装置及び画像生成方法
JP2017154613A (ja) * 2016-03-02 2017-09-07 トヨタ自動車株式会社 車両用表示装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010188826A (ja) * 2009-02-17 2010-09-02 Mazda Motor Corp 車両用表示装置
JP2015157509A (ja) * 2014-02-21 2015-09-03 日本精機株式会社 車両用警告装置および車両用警告ユニット
WO2016072019A1 (ja) * 2014-11-07 2016-05-12 三菱電機株式会社 表示制御装置
JP2016109645A (ja) * 2014-12-10 2016-06-20 株式会社リコー 情報提供装置、情報提供方法及び情報提供用制御プログラム
JP2016146170A (ja) * 2015-01-29 2016-08-12 株式会社デンソー 画像生成装置及び画像生成方法
JP2017154613A (ja) * 2016-03-02 2017-09-07 トヨタ自動車株式会社 車両用表示装置

Also Published As

Publication number Publication date
WO2020040276A1 (ja) 2020-02-27

Similar Documents

Publication Publication Date Title
JP6861375B2 (ja) 表示システム、情報提示システム、表示システムの制御方法、プログラム、及び移動体
US9818206B2 (en) Display device
JP6201690B2 (ja) 車両情報投影システム
US20220118983A1 (en) Display control device and display control program product
JP7310560B2 (ja) 表示制御装置及び表示制御プログラム
EP3776156A1 (en) Image control apparatus, display apparatus, movable body, and image control method
WO2019189619A1 (en) Image control apparatus, display apparatus, movable body, and image control method
JP2019040634A (ja) 画像表示装置、画像表示方法及び画像表示制御プログラム
US20220058998A1 (en) Display control device and non-transitory computer-readable storage medium for display control on head-up display
JP2019202589A (ja) 表示装置
JPWO2020040276A1 (ja) 表示装置
WO2019131296A1 (ja) ヘッドアップディスプレイ装置
WO2021039762A1 (ja) 表示装置
JP2018167669A (ja) ヘッドアップディスプレイ装置
JP7435465B2 (ja) 表示装置
JP2019206262A (ja) 表示装置
JP7338632B2 (ja) 表示装置
JP2019207632A (ja) 表示装置
JP2020047153A (ja) 表示装置
JP7379945B2 (ja) 表示装置
JP7379946B2 (ja) 表示装置
JP2023166057A (ja) 表示装置
WO2023145851A1 (ja) 表示装置
WO2020085159A1 (ja) 表示装置
US20240101138A1 (en) Display system

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20210423

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220620

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221220

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230613