JPWO2020045328A1

JPWO2020045328A1 - 表示装置

Info

Publication number: JPWO2020045328A1
Application number: JP2020539433A
Authority: JP
Inventors: 成美的場; 匠佐藤
Original assignee: Nippon Seiki Co Ltd
Current assignee: Nippon Seiki Co Ltd
Priority date: 2018-08-27
Filing date: 2019-08-26
Publication date: 2021-09-24
Anticipated expiration: 2039-08-26
Also published as: WO2020045328A1; JP7367680B2

Abstract

運転中においても安全に操作対象を選択することができる表示装置を提供する。車両１に搭載される表示装置１００は、画像を表示し、互いに異なる位置にある第１表示部１１及び第２表示部１２を含む複数の表示部と、複数の表示部の各々に関する操作を可能とする操作部と、操作部に対してなされた操作を受け付けるとともに、複数の表示部の表示制御を行う制御部と、を備える。第１表示部１１は、運転者から見て車両１の前方に虚像として画像を表示する。制御部は、複数の表示部のいずれかが一定期間以上、運転者に視認されている視認状態であるか否かを特定可能であり、複数の表示部のうち視認状態である表示部を特定すると、当該表示部に関する操作が可能であることを示すカーソル画像Ｃを当該表示部に表示する。

Description

本発明は、表示装置に関する。

従来の表示装置として、特許文献１には、車両に搭載されたナビゲーションシステムが開示されている。また、特許文献１には、ナビゲーションシステムを含む複数の車載機器で共通のスイッチを備え、車両の乗員の視線が複数の車載機器のいずれかを指向している場合に、当該視線が指向する車載機器がスイッチで操作可能になったことをパイロットランプにて乗員に報知する装置が開示されている。この装置により、乗員は操作したい車載機器を手を使わずに視線で選択し、共通のスイッチにより操作することが可能となる。

特開２０１１−９５７号公報

特許文献１に係る装置では、車両の運転者が操作対象を視線で選択する際に、視線が運転中に注視すべき車両の前方風景から逸れやすい。

本発明は、上記実情に鑑みてなされたものであり、運転中においても安全に操作対象を選択することができる表示装置を提供することを目的とする。

上記目的を達成するため、本発明に係る表示装置は、
車両に搭載される表示装置であって、
画像を表示し、互いに異なる位置にある複数の表示部と、
前記複数の表示部の各々に関する操作を可能とする操作部と、
前記操作部に対してなされた前記操作を受け付けるとともに、前記複数の表示部の表示制御を行う制御部と、を備え、
前記複数の表示部は、前記車両の運転者から見て前記車両の前方に虚像として画像を表示する表示部を含み、
前記制御部は、前記複数の表示部のいずれかが一定期間以上前記運転者に視認されている視認状態であるか否かを特定可能であり、
前記複数の表示部のうち前記視認状態である表示部を特定すると、当該表示部に関する操作が可能であることを示すカーソル画像を当該表示部に表示する。

本発明によれば、運転中においても安全に操作対象を選択することができる。

本発明の一実施形態に係る表示装置の車両への搭載態様を説明するための図である。本発明の一実施形態に係る表示装置が備えるヘッドアップディスプレイの表示態様を説明するための図である。本発明の一実施形態に係る表示装置を主に示すブロック図である。本発明の一実施形態に係る選択制御処理のフローチャートである。（ａ）〜（ｃ）は、カーソル画像の表示例を説明するための図である。（ａ）及び（ｂ）は、カーソル画像の表示例を説明するための図である。（ａ）〜（ｃ）は、警告処理実行時の動作例を説明するための図である。（ａ）〜（ｄ）は、変形例に係る警告処理実行時の動作例を説明するための図である。

本発明の一実施形態に係る表示装置について図面を参照して説明する。

本実施形態に係る表示装置１００は、図１に示すように、車両１のダッシュボード２の内部及び周辺に設けられた第１表示部１１及び第２表示部１２（以下、纏めて「複数の表示部」とも言う。）を備え、車両１に関する情報（以下、「車両情報」とも言う。）だけでなく、車両情報以外の情報も統合的に運転者５（図２参照）に報知する。なお、車両情報は、車両１自体の情報だけでなく、車両１の運行に関連した車両１の外部の情報も含む。

表示装置１００は、図３に示すように、ＨＵＤ（Head-Up Display）２１と、メータ２２と、制御装置３０と、を備える。

第１表示部１１はＨＵＤ２１により、第２表示部１２はメータ２２により実現される。第１表示部１１と第２表示部１２とは、図１に示すように、互いに異なる位置にあり、具体的には、運転者５から見ての上下方向において間隔を空けて隣り合っている。

ＨＵＤ２１は、図２に示すように、ダッシュボード２の内部に設けられ、コンバイナ処理されたフロントガラス４に向けて表示光Ｌを射出する。フロントガラス４で反射した表示光Ｌは、運転者５側へと向かう。運転者５は、視点をアイボックスＥ内におくことで、フロントガラス４の前方に、表示光Ｌが表す画像を虚像Ｖとして視認することができる。つまり、ＨＵＤ装置１００は、フロントガラス４の前方位置に虚像Ｖを表示する。これにより、運転者５は、虚像Ｖを風景と重畳させて観察することができる。

ここで、本明細書における第１表示部１１は、図２に示すように、アイボックスＥと虚像Ｖの表示位置との間における任意の部分を示すものとする。また、ＨＵＤ２１が虚像Ｖを表示することを「第１表示部１１に画像を表示する」とも表現する。アイボックスＥ及び虚像Ｖの表示位置は、後述のＬＣＤ２１ａの表示面の大きさや、ＨＵＤ内の各種の鏡とコンバイナ処理されたフロントガラス４によって構成される光学系に基づいて予め設定される。

ＨＵＤ２１は、図３に示すように、ＬＣＤ（Liquid Crystal Display）２１ａと、ＬＣＤ２１ａを背後から照明する光源２１ｂ（バックライト）と、図示しない平面鏡及び凹面鏡からなる反射部とを有して構成される。例えば、ＬＣＤ２１ａはＴＦＴ（Thin Film Transistor）型のものであり、光源２１ｂはＬＥＤ（Light Emitting Diode）から構成されている。

ＨＵＤ２１は、制御装置３０の制御の下で、光源２１ｂに照明されたＬＣＤ２１ａが画像を表示することにより表示光Ｌを生成する。生成した表示光Ｌは、反射部で反射した後に、フロントガラス４に向けて射出される。これにより、前記のように、第１表示部１１に車両情報を示す画像を表示することが可能となる。なお、ＨＵＤ２１が画像により報知する内容は、メータ２２による報知内容の一部と重複していてもよい。

メータ２２は、図１に示すように、運転者５から見てステアリングホイール３の前方に位置し、車速、エンジン回転数、総走行距離、区間走行距離などの車両１に関する計測量を報知する。つまり、メータ２２は、スピードメータ、タコメータ、オドメータ、トリップメータなどを示す画像を表示可能となっている。メータ２２は、図３に示すように、ＬＣＤ２２ａと、ＬＣＤ２２ａを背後から照明する光源２２ｂ（バックライト）を含んで構成される。例えば、ＬＣＤ２２ａはＴＦＴ型のものであり、光源２２ｂはＬＥＤから構成されている。メータ２２は、制御装置３０の制御の下で、前記計測量を示す画像を第２表示部１２に表示する。つまり、ＬＣＤ２２ａのうち、画像の表示可能領域が第２表示部１２となる。

制御装置３０は、表示装置１００の全体動作を制御するマイクロコンピュータからなり、図３に示すように、制御部３１と、ＲＯＭ（Read Only Memory）３２と、ＲＡＭ（Random Access Memory）３３とを備える。また、制御装置３０は、図示しない構成として、駆動回路や、車両１内の各種システムと通信を行うための入出力回路を備える。また、制御装置３０は、内蔵のタイマにより適宜計時を行う。

ＲＯＭ３２は、動作プログラムや各種の画像データを予め記憶する。ＲＡＭ３３は、各種の演算結果などを一時的に記憶する。制御部３１は、ＲＯＭ３２に記憶された動作プログラムを実行するＣＰＵ（Central Processing Unit）３１ａと、ＣＰＵと協働して画像処理を実行するＧＤＣ（Graphics Display Controller）３１ｂとを備える。ＧＤＣ３１ｂは、例えば、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field-Programmable Gate Array）、ＡＳＩＣ（Application Specific Integrated Circuit）等から構成されている。特に、ＲＯＭ３２には、後述する選択制御処理を実行するための動作プログラムが格納されている。また、制御装置３０や制御部３１の構成は、以下に説明する機能を充足する限りにおいては任意である。

制御部３１は、ＨＵＤ２１及びメータ２２のそれぞれを駆動制御する。例えば、ＣＰＵ３１ａは、ＨＵＤ２１の光源２１ｂ及びメータ２２の光源２２ｂのそれぞれを駆動制御する。また、ＧＤＣ３１ｂは、ＣＰＵ３１ａと協働して、ＨＵＤ２１のＬＣＤ２１ａ及びメータ２２のＬＣＤ２２ａのそれぞれを駆動制御する。

制御部３１のＣＰＵ３１ａは、ＧＤＣ３１ｂと協働して、ＲＯＭ３２に記憶された各種の画像データに基づき、複数の表示部の各々の表示制御を行う。ＧＤＣ３１ｂは、ＣＰＵ３１ａからの表示制御指令に基づき、複数の表示部の各々の表示動作の制御内容を決定する。ＧＤＣ３１ｂは、複数の表示部の各々に表示する１画面を構成するために必要な画像パーツデータをＲＯＭ３２から読み込み、ＲＡＭ３３へ転送する。また、ＧＤＣ３１ｂは、ＲＡＭ３３を使って、画像パーツデータや表示装置１００の外部から通信により受け取った各種の画像データを元に、１画面分の絵データを作成する。そして、ＧＤＣ３１ｂは、ＲＡＭ３３で１画面分の絵データを完成させたところで、画像の更新タイミングに合わせて、複数の表示部の各々に転送する。これにより、複数の表示部の各々に応じた画像が表示される。また、制御部３１は、後述するように、操作部７０に対してなされた操作を受け付け、受け付けた操作に応じて表示動作を制御する。

制御部３１のＣＰＵ３１ａは、車両１に搭載された状況解析部４０、ＥＣＵ（Electronic Control Unit）５０、視線検出部６０、操作部７０の各々と通信を行う。当該通信としては、例えば、ＣＡＮ（Controller Area Network）、Ｅｔｈｅｒｎｅｔ、ＭＯＳＴ、ＬＶＤＳ（Low Voltage Differential Signaling）などの通信方式が適用可能である。

状況解析部４０は、車両１（以下、自車１とも言う。）自体の状況や、自車１の周辺状況を示すデータを制御部３１やＥＣＵ５０へ出力する。状況解析部４０は、車両１とワイヤレスネットワークとの通信（Ｖ２Ｎ：Vehicle To cellular Network）、車両１と他車両との通信（Ｖ２Ｖ：Vehicle To Vehicle）、車両１と歩行者との通信（Ｖ２Ｐ：Vehicle To Pedestrian）、車両１と路側のインフラとの通信（Ｖ２Ｉ：Vehicle To roadside Infrastructure）を可能とする各種モジュールを備える。つまり、状況解析部４０は、車両１と車両１の外部との間でＶ２Ｘ(Vehicle To Everything）による通信を可能とする。

例えば、（ｉ）状況解析部４０は、ＷＡＮ（Wide Area Network）に直接アクセスできる通信モジュール、ＷＡＮにアクセス可能な外部装置（モバイルルータなど）や公衆無線ＬＡＮ（Local Area Network）のアクセスポイント等と通信するための通信モジュールなどを備え、インターネット通信を行う。また、状況解析部４０は、人工衛星などから受信したＧＰＳ（Global Positioning System）信号に基づいて車両１の位置を算出するＧＰＳコントローラを備える。これらの構成により、Ｖ２Ｎによる通信を可能とする。（ｉｉ）また、状況解析部４０は、所定の無線通信規格に準拠した無線通信モジュールを備え、Ｖ２ＶやＶ２Ｐによる通信を行う。（ｉｉｉ）また、状況解析部４０は、路側のインフラと無線通信する通信装置を有し、例えば、安全運転支援システム（ＤＳＳＳ：Driving Safety Support Systems）の基地局から、インフラストラクチャーとして設置された路側無線装置を介して、交通情報を取得する。これによりＶ２Ｉによる通信が可能となる。

また、状況解析部４０は、車両１の外部を撮像するステレオカメラや、ソナー、超音波センサ、ミリ波レーダからなる物体検出手段を備え、車両１周囲の危険を検知し、検知した危険を警告情報としてＣＰＵ３１ａへ送信する。例えば、制御部３１は、ＨＵＤ２１に対応した第１表示部１１に、警告情報を報知するための画像を警告対象の物体（車両１の前方車両や歩行者など）に重畳させて表示する。なお、ＣＰＵ３１ａへ送信される警告情報は、Ｖ２ＮやＶ２Ｉ通信により取得可能な交通情報や、Ｖ２Ｖ通信により取得可能な接近車両情報や、Ｖ２Ｐ通信により取得可能な歩行者情報などに基づくものであってもよい。

ＥＣＵ５０は、状況解析部４０、視線検出部６０及び操作部７０の各々からの情報に基づいて、車両１の各部を制御する。例えば、ＥＣＵ５０は、車両１の現在の車速を示す車速情報をＣＰＵ３１ａへ送信する。なお、ＣＰＵ３１ａは、車速センサから車速情報を取得してもよい。また、ＥＣＵ５０は、エンジン回転数などの計測量や、車両１自体の警告情報（燃料低下、エンジン油圧異常、タイヤ空気圧異常など）や、その他の車両情報をＣＰＵ３１ａへ送信する。ＥＣＵ５０から取得した情報に基づいて、ＣＰＵ３１ａは、ＧＤＣ３１ｂを介して、メータ２２に車速、エンジン回転数、各種警告などの車両情報を表示させる。なお、ＣＰＵ３１ａは、当該車両情報の少なくとも一部をＨＵＤ２１に対応する第１表示部１１に表示させてもよい。

視線検出部６０は、例えば、運転者５の顔を撮像し、撮像データを生成する撮像手段（例えばステレオカメラ）や、撮像データの画像処理を行う画像処理部からなり、運転者５の視線方向を検出する。例えば、視線検出部６０は、パタンマッチング法などの公知の画像解析法により運転者５の視線方向を検出し、検出結果を示す検出データをＣＰＵ３１ａに送信する。ＣＰＵ３１ａは、予めＲＯＭ３２内に格納された、視線方向と、複数の表示部（第１表示部１１及び第２表示部１２）の各々の位置や、所定表示部内に表示されている後述のコンテンツ画像の表示位置とが対応付けられたテーブルデータを参照し、現在、運転者５がどの対象を視認しているかを特定する。つまり、ＣＰＵ３１ａは、所定の対象が運転者５に視認されている視認状態であるか、視認されていない非視認状態であるかを特定する。なお、視線方向は、例えば、運転者５の両目のいずれかに基づいて検出されてもよいし、両目の重心として検出されてもよい。ＣＰＵ３１ａによって、運転者５がある対象を視認しているか否かを特定することができれば、検出データは任意である。また、視線検出部６０は、運転者５の顔の向きを、公知の画像解析法により検出し、検出データとしてもよい。この場合、ＣＰＵ３１ａは、予めＲＯＭ３２内に格納された、顔の向きと、複数の対象の各々の位置とが対応付けられたテーブルデータを参照し、現在、運転者５がある対象を視認しているか否かを特定すればよい。

また、視線検出部６０は、運転者５が頭部に装着したウェアラブルデバイスに搭載された撮像手段や、眼電位センサや、モーションセンサであってもよい。撮像手段による撮像データにより、前述と同様に視線方向や顔の向きを検出可能である。また、眼電位センサは、測定した眼電位に基づいて運転者５の視線方向を検出する。また、モーションセンサは、例えば、加速度センサ、ジャイロセンサ及び地磁気センサのうち１つ又は複数の組み合わせからなり、運転者５の顔の向きを検出する。

なお、ＣＰＵ３１ａが、撮像手段や各種センサからの信号に基づき、運転者５の視線方向や顔の向きを検出する構成としてもよい。ＣＰＵ３１ａが、ある対象が運転者５に視認されている視認状態であるか、視認されていない非視認状態であるかを特定することができれば、運転者５の視線方向や顔の向きの検出手法及び検出構成は任意である。

操作部７０は、ステアリングホイール３に設けられたステアリングスイッチやタッチパネルからなり、操作部７０に対してなされた運転者５による操作を検出し、当該検出結果をＥＣＵ５０や制御部３１に出力する。後述する選択制御処理によって運転者５は自身の視線移動に応じて表示されるカーソル画像（報知画像）Ｃによって操作したい対象を選択し、選択された対象を操作部７０によって操作することができる。操作部７０は、複数の表示部の各々に対する操作を検出する。ＨＵＤ２１に対応する第１表示部１１に対する操作としては、例えば、虚像Ｖとして表示される地図情報や経路案内情報の設定操作や選択操作などである。メータ２２に対応する第２表示部１２に対する操作としては、例えば、オドメータの確認操作、トリップメータの設定操作、メータ２２の表示モードの設定操作などである。また、第１表示部１１及び第２表示部１２に対する操作は、後述のエンタメ情報を表示する際の再生操作や選択操作などを含んでいてもよい。なお、各表示部における表示内容や、各表示部に対する操作の種類は、これらの例に限定されるものではなく、任意である。

また、車両１は、図示しない構成として、娯楽情報を表示装置１００に表示するためのエンターテインメント（エンタメ）システムや、音声入出力部を有する。エンタメシステムは、映像・音楽再生部を有して構成される。エンタメシステムは、先に述べた状況解析部４０の一部を利用して外部との通信を実行してもよい。例えば、エンタメシステムは、映像・音楽再生部として、内蔵メモリ、ＣＤ（Compact Disc）、ＤＶＤ（Digital Video Disk）などの記録媒体に記録された映像や音楽を再生可能であるとともに、映像や音楽に係る情報（作品タイトルや作者名など）を、娯楽情報として制御部３１に供給する。また、映像・音楽再生部は、音声入出力部のスピーカから再生した音声を出力する。音声入出力部は、マイク、スピーカ等からなる。音声入出力部は、ＣＰＵ３１ａからの音声出力指令に応じてスピーカから所定の音声を出力する。また、音声入出力部は、マイクに入力された音声に応じた入力音声データをＣＰＵ３１ａへ送信する。例えば、ＣＰＵ３１ａは、受信した入力音声データに応じた指示操作を受け付け、受け付けた指示操作に従って、複数の表示部の各々の表示画像を切り替える等の制御を行ってもよい。このように、音声入出力部のうちの音声入力部がステアリングスイッチなどの代わりに操作部７０として機能してもよい。

（選択制御処理）
続いて、制御部３１が実行する選択制御処理について、図４を参照して説明する。選択制御処理は、例えば、表示装置１００の起動中において継続して実行される。表示装置１００は、例えば、車両１のイグニッションのオンに伴い起動する。

まず、制御部３１は、視線検出部６０からの検出データに基づき、所定表示部（第１表示部１１又は第２表示部１２）が一定期間（例えば予めＲＯＭ３２に定められた、数秒といった期間）以上、運転者５によって視認されている視認状態であるか否かを判別する（ステップＳ１）。

所定表示部が視認状態である場合（ステップＳ１；Ｙｅｓ）、制御部３１は、当該所定表示部に、当該所定表示部に関する操作が可能であることを示すカーソル画像Ｃを表示する（ステップＳ２）。これにより、第２表示部１２が視認状態である場合は、図１に示すように、第２表示部１２に前記所定表示部に関する操作が可能であることを報知する報知画像であるカーソル画像Ｃが表示される。一方、第１表示部１１が視認状態である場合は、図５（ａ）に示すようにカーソル画像Ｃが表示される。つまり、運転者５は、自身の視線移動に応じて表示されるカーソル画像Ｃによって、操作したい対象を選択することができる。

制御部３１は、第１表示部１１にカーソル画像Ｃが表示されている際に、操作部７０を介して運転者５の操作を受け付けると、当該操作に応じた制御（例えば、虚像Ｖとして表示される地図情報や経路案内情報の設定や選択など）を行う。また、制御部３１は、第２表示部１２にカーソル画像Ｃが表示されている際に、操作部７０を介して運転者５の操作を受け付けると、当該操作に応じた制御（例えば、オドメータやトリップメータの表示切り替え、メータ２２の表示モードの切り替えなど）を行う。

ここで、カーソル画像Ｃは、所定表示部（第１表示部１１又は第２表示部１２）に表示された任意のコンテンツに関する操作が可能であることを運転者５に認識させることができれば、その態様は任意である。例えば、カーソル画像Ｃは、所定表示部内に表示されたコンテンツを示す画像（コンテンツ画像）を囲む枠状の画像であってもよいし、コンテンツ画像の表示領域の少なくとも一部の色、彩度、階調、輝度などを変更することで実現されてもよいし、現在選択されているコンテンツ画像の形状を変形させたものとして実現されてもよい。

所定表示部が視認状態でない場合（ステップＳ１；Ｎｏ）、制御部３１は、カーソル画像Ｃを消去する（ステップＳ３）。これにより、カーソル画像Ｃが表示されている所定表示部（第１表示部１１又は第２表示部１２）が視認状態から非視認状態になった場合は、当該所定表示部からカーソル画像Ｃが消去される。また、運転者５が第１表示部１１も第２表示部１２も視認していない場合には、双方の表示部にカーソル画像Ｃが表示されないことになる。また、カーソル画像Ｃが表示されている第１表示部１１から運転者５が第２表示部１２に視線を移した場合は、第１表示部１１からカーソル画像Ｃが消去され（ステップＳ３）、第２表示部１２にカーソル画像Ｃが表示される（ステップＳ２）ことになる。また、カーソル画像Ｃが表示されている第２表示部１２から運転者５が第１表示部１１に視線を移した場合は、第２表示部１２からカーソル画像Ｃが消去され（ステップＳ３）、第１表示部１１にカーソル画像Ｃが表示される（ステップＳ２）ことになる。

ステップＳ２に続いて、制御部３１は、視認状態の所定表示部に複数のコンテンツ画像が表示されているか否かを判別し（ステップＳ４）、複数のコンテンツ画像が表示されている場合（ステップＳ４；Ｙｅｓ）、運転者５が視認中のコンテンツ画像に応じた位置にカーソル画像Ｃを表示する（ステップＳ５）。この場合のカーソル画像Ｃは、当該コンテンツ画像に関する操作が可能であることを示す。

ここで、複数のコンテンツ画像が表示されている場合の表示例を説明する。図５（ｂ）、（ｃ）等に示す画像Ｉｍは、複数の表示部のうち任意の表示部に表示される画像を示している。図５（ｂ）、（ｃ）に示す画像Ｉｍは、例えば、複数のコンテンツ画像（コンテンツＡ１〜Ａ３）を含んで構成されている。コンテンツＡ１は画像Ｉｍの中央部に位置し、コンテンツＡ２は運転者５から見てコンテンツＡ１の左側に、コンテンツＡ３は運転者５から見てコンテンツＡ１の右側に位置する。コンテンツＡ１〜Ａ３の種類は、各種の車両情報や娯楽情報であればよく、目的に応じて任意である。

図５（ｂ）は、コンテンツＡ２が運転者５に視認されている視認状態であり、操作部７０を介してコンテンツＡ２に関する操作が可能であることを示している。図５（ｃ）は、コンテンツＡ３が運転者５に視認されている視認状態であり、操作部７０を介してコンテンツＡ３に関する操作が可能であることを示している。なお、このようにカーソル画像Ｃが表示される場合、その表示位置はコンテンツ画像に応じた位置であればよい。当該応じた位置とは、コンテンツ画像の少なくとも一部に重畳する位置に限られず、コンテンツ画像から離れているが当該コンテンツ画像が選択されていることが分かる位置であってもよい。例えば、コンテンツ画像の近傍に当該コンテンツ画像を指し示す矢印状のカーソル画像Ｃが表示されるといった態様であってもよい。

また、複数のコンテンツ画像は、運転者５が操作部７０に対して行った決定操作に応じて表示されるものであってもよい。当該表示例を図６（ａ）、（ｂ）に示す。
例えば、図６（ａ）に示すコンテンツＡ１が前記のエンタメシステムからの娯楽情報に基づいて表示されるメディアプレイヤーであるとする。運転者５は、コンテンツＡ１に視線を一定期間以上合わせることで、図６（ａ）に示すように、カーソル画像Ｃを表示させ、メディアプレイヤーが選択された状態とする。当該状態において、操作部７０に対して所定の決定操作を行うと、図６（ｂ）に示すように、メディアプレイヤーを操作するための項目Ａ１１、Ａ１２、Ａ１３が表示される。例えば、項目Ａ１１はライブラリのジャンルリスト、項目Ａ１２はアルバムリスト、Ａ１３はプレイ画面とする。そして、運転者５は、項目Ａ１１、Ａ１２、Ａ１３のいずれかに視線を合わせることで、視線による選択操作を行う。図６（ｂ）は、ジャンルリストとしての項目Ａ１１がカーソル画像Ｃによって選択された状態を示している。当該状態において運転者５が操作部７０に対して所定の操作を行うことで、再生するジャンルの楽曲を決定することが可能となっていてもよい。このように、運転者５が自身の視線により選択可能なコンテンツ画像は、運転者５が一回又は複数回、操作部７０に対して所定の操作を行った後に表示される、下位の階層の画像（例えば、前記の項目Ａ１１〜Ａ１３）などであってもよい。なお、図６（ｂ）に示すように、所定表示部に表示された下位の階層の画像をカーソル画像Ｃで選択した後に、運転者５が他の表示部に視線を逸らして当該カーソル画像Ｃが消去され、再び所定表示部を視認した場合、制御部３１は、上位の階層の画像（例えば、コンテンツ画像Ａ１）に戻って表示してもよいし、操作履歴をＲＡＭ３３等に記憶させておき、直前の操作に応じた下位の階層の画像（例えば、項目Ａ１１〜Ａ１３）を表示してもよい。このように、直前の操作に応じた表示を行えば、ユーザフレンドリである。

図４に戻って、ステップＳ３やＳ５の実行後や、複数のコンテンツ画像が表示されていない場合（ステップＳ４；Ｎｏ）は、制御部３１は、警告情報があるか否かを判別する（ステップＳ６）。例えば、制御部３１は、ＥＣＵ５０から車両１自体の警告情報（燃料低下やエンジン油圧異常など）を取得した場合に警告情報ありと判別する。なお、制御部３１は、状況解析部４０から警告対象の物体（車両１の前方車両や歩行者など）が存在することを示す警告情報を取得した場合に警告情報ありと判別してもよい。

制御部３１は、警告情報がない場合（ステップＳ６；Ｎｏ）、ステップＳ１に処理を戻す一方で、警告情報がある場合（ステップＳ６；Ｙｅｓ）、警告処理を実行する（ステップＳ７）。

ここで、警告処理実行時の動作例を図７（ａ）〜（ｃ）を参照して、説明する。
まず、制御部３１は、図７（ａ）に示すように、所定表示部（第１表示部１１又は第２表示部１２）に表示されている画像Ｉｍの任意の領域に、警告情報を報知するための警告画像Ｄを表示する。図７（ａ）は、警告情報ありの場合に、制御部３１がコンテンツ画像Ａ１の表示されていた領域に、コンテンツ画像Ａ１に代えて警告画像Ｄを表示している例を示している。また、図７（ａ）は、コンテンツ画像Ａ３が枠状のカーソル画像Ｃによって選択されている状態を示している。

警告処理は、一例として、図７（ａ）に示す状態から、カーソル画像Ｃを警告画像Ｄに応じた位置に移動させ、図７（ｂ）に示す状態へと遷移する。この場合、制御部３１は、コンテンツ画像Ａ２に応じて表示されているカーソル画像Ｃを消去し、警告画像Ｄに応じた位置に強調画像としてのカーソル画像Ｃを表示する。なお、制御部３１は、カーソル画像Ｃを警告画像Ｄに向かって徐々に移動させてもよいし、カーソル画像Ｃの移動に伴う残像を表した描画制御を実行してもよい。このようにすることで、運転者５の視線を警告画像Ｄへと誘導し、警告情報の存在を効果的に報知することができる。

なお、カーソル画像Ｃが表示される位置としての「警告画像Ｄに応じた位置」における警告画像Ｄとカーソル画像Ｃとの関係は、前述の「コンテンツ画像に応じた位置」におけるコンテンツ画像とカーソル画像Ｃとの関係と同じである。また、図７（ｂ）に示す状態では、カーソル画像Ｃは、操作可能な対象を示すものではなくなり、警告画像Ｄの存在を強調するための強調画像として機能する。

また、警告処理の他の例として、図７（ａ）に示す状態から、カーソル画像Ｃを拡大変形し、図７（ｃ）に示すように、警告画像Ｄを囲む態様としてもよい。この場合も、制御部３１は、カーソル画像Ｃを警告画像Ｄに向かって徐々に拡大させてもよいし、カーソル画像Ｃの移動に伴う残像を表した描画制御を実行してもよい。図７（ｃ）に示す状態では、カーソル画像Ｃはコンテンツ画像Ａ３に関する操作を可能であることを示しつつも、警告画像Ｄの存在を強調するための強調画像として機能する。つまり、図７（ｃ）に示す状態では、カーソル画像Ｃは、操作可能な対象を示すだけのものではなくなる。

なお、警告画像Ｄを強調する強調画像は、カーソル画像Ｃと同じ態様であればよい。当該同じ態様とは、カーソル画像Ｃと完全に同じ態様だけでなく、図７（ｃ）に示すように大きさを変形した態様や、少なくとも一部の色や形状を変更した態様などを含む。強調画像の態様は、運転者５にカーソル画像Ｃを用いて描画されたものであると認識させることが可能な態様であれば、任意である。また、カーソル画像Ｃが表示されていた領域に警告画像Ｄが表示される場合は、カーソル画像Ｃをそのまま移動せずに強調画像として用いればよい。その際に、カーソル画像Ｃの色を変えたり、カーソル画像Ｃを点滅させたりしてもよい。また、ステップＳ３からステップＳ６でＹｅｓと処理が遷移した場合、制御部３１は、警告画像Ｄの表示に合わせて、強調画像として機能するカーソル画像Ｃを警告画像Ｄに応じた位置に表示すればよい。

ステップＳ７に続いて、制御部３１は、予め定められた終了条件が成立したか否かを判別する（ステップＳ８）。終了条件は、例えば、運転者５による所定操作（警告情報を確認した旨の操作）が操作部７０になされた場合や、警告情報がなくなった場合などに成立する。制御部３１は、終了条件が成立していない場合（ステップＳ８；Ｎｏ）、警告処理の実行を継続する（ステップＳ７）一方で、終了条件が成立した場合（ステップＳ８；Ｙｅｓ）、警告処理を終了する（ステップＳ９）。具体的には、制御部３１は、警告画像Ｄを消去するとともに、強調画像として機能するカーソル画像Ｃの移動や変形を停止することで、警告処理を終了する。警告処理後は、ステップＳ１に処理を戻す。

（変形例）
なお、選択制御処理のステップＳ７において、制御部３１は、図８（ａ）〜図８（ｄ）に遷移例を示す、変形例に係る警告処理を実行してもよい。この変形例では、制御部３１は、前述と同様に警告情報があった場合（ステップＳ６；Ｙｅｓ）、まず、図８（ａ）に示すように、第１表示部１１に第１警告画像Ｄ１を表示するとともに、第２表示部１２に第２警告画像Ｄ２を表示する。なお、図８（ａ）は、第１表示部１１が運転者５に視認されている視認状態である例を示している。

例えば、第１警告画像Ｄ１と第２警告画像Ｄ２は、互いに情報量が異なる画像である（なお、図８では簡略化して、双方の画像を同じく表している）。具体的に、一例として警告情報がエンジン油圧異常を示している場合を説明すると、第１警告画像Ｄ１は「重要な警告があります。」といった内容を表す画像であり、第２警告画像Ｄ２は、「エンジン油圧異常です。安全を確認した上で停車してください。」といった、第１警告画像Ｄ１よりも具体的で、情報量が多い画像である。
制御部３１は、このような第１警告画像Ｄ１及び第２警告画像Ｄ２を表示するとともに、第１表示部１１において第１警告画像Ｄ１に応じた位置に表示されていた枠状のカーソル画像Ｃを、図８（ｂ）、（ｃ）、（ｄ）の順で示すように、第１表示部１１から第２表示部１２へと移動するように描画制御して表示する。これにより、第１警告画像Ｄ１からより詳細な情報を表示している第２警告画像Ｄ２へと運転者５の視線を誘導し、警告情報の存在だけでなく、その内容を効果的に報知することができる。この場合のカーソル画像Ｃは、操作可能な対象を示すものではなくなり、第１警告画像Ｄ１及び第２警告画像Ｄ２を報知するとともに、特に第２警告画像Ｄ２の存在を強調するための強調画像として機能する。なお、第１警告画像Ｄ１と第２警告画像Ｄ２の情報量の大小を逆の関係とし、カーソル画像Ｃを、第２表示部１２から第１表示部１１へと移動するように描画制御して表示するようにしてもよい。また、変形例に係る警告処理は、第１表示部１１又は第２表示部１２が視認状態であるか否かに関わらず実行されてもよい。

なお、本発明は以上の実施形態、変形例、及び図面によって限定されるものではない。本発明の要旨を変更しない範囲で、適宜、変更（構成要素の削除も含む）を加えることが可能である。

表示光Ｌの投射対象は、フロントガラス４に限定されず、板状のハーフミラー、ホログラム素子等により構成されるコンバイナであってもよい。

以上では、ＨＵＤ２１及びメータ２２のディスプレイをＬＣＤとした例を示したが、ＯＬＥＤ（Organic Light Emitting Diodes）を採用してもよい。また、ＨＵＤ２１は、ＤＭＤ（Digital Micro mirror Device）やＬＣＯＳ（Liquid Crystal On Silicon）などの反射型表示デバイスを用いたものであってもよい。

また、以上では、車両１内に２つの第１表示部１１及び第２表示部１２を構成した例を示したが、表示部は、車両１の前方に虚像Ｖとして画像を表示する表示部を含んでいれば、３つ以上あってもよい。さらには、第１表示部１１と第２表示部１２とは、互いに離れた位置にあれば、双方ともＨＵＤによって車両１の前方に虚像Ｖとして画像を表示するものであってもよい。

（１）以上に説明した、車両１に搭載される表示装置１００は、画像を表示し、互いに異なる位置にある複数の表示部（第１表示部１１、第２表示部１２）と、複数の表示部の各々に関する操作を可能とする操作部７０と、操作部７０に対してなされた操作を受け付けるとともに、複数の表示部の表示制御を行う制御部３１と、を備える。複数の表示部は、運転者５から見て車両１の前方に虚像Ｖとして画像を表示する表示部（第１表示部１１）を含む。制御部３１は、複数の表示部のいずれかが一定期間以上運転者５に視認されている視認状態であるか否かを特定可能であり、複数の表示部のうち視認状態である表示部を特定すると、当該表示部に関する操作が可能であることを示すカーソル画像Ｃを当該表示部に表示する。
この構成により、運転者５は自身の視線移動に応じて表示されるカーソル画像Ｃによって、操作したい対象を選択し、選択された対象を１つの操作部７０によって操作することができる。また、カーソル画像Ｃが表示可能な表示部はＨＵＤによるものを含むため、視線による選択操作時に、運転者５が運転中に注視すべき前方風景から視線を逸らしてしまうことを抑制することができる。つまり、表示装置１００によれば、運転中においても安全に操作対象を選択することができる。

（２）具体的に、制御部３１は、複数の表示部のうちカーソル画像Ｃが表示されている表示部が視認状態でないと特定すると、当該表示部からカーソル画像Ｃを消去する。

（３）また、制御部３１は、複数の表示部のうち視認状態である表示部を特定する際に、当該表示部が複数のコンテンツ画像を表示している場合には複数のコンテンツ画像のうちいずれのコンテンツ画像が視認状態であることを特定可能であり、視認状態であることを特定したコンテンツ画像に応じた位置に、カーソル画像Ｃとして、当該コンテンツ画像に関する操作が可能であることを示す画像を表示する。この構成により、表示部内におけるコンテンツ画像も視線で選択することができ、ユーザフレンドリである。

（４）また、制御部３１は、車両１（具体的には、ＥＣＵ５０や状況解析部４０など）から警告情報を取得した場合、複数の表示部の少なくともいずれかに警告情報を報知するための警告画像Ｄを表示し、警告画像Ｄの存在を強調するための画像として、カーソル画像Ｃと同じ態様の強調画像を警告画像Ｄに応じた位置に表示する。（５）また、制御部３１は、警告画像Ｄを表示すると、表示されているカーソル画像Ｃを消去し、強調画像を警告画像Ｄに応じた位置に表示してもよい。
（４）又は（５）に記載の構成により、運転者５の視線を警告画像Ｄへと誘導し、警告情報の存在を効果的に報知することができる。

（６）また、変形例に係る制御部３１は、車両１から警告情報を取得した場合、第１表示部１１に警告情報を報知するための第１警告画像Ｄ１を表示するとともに、第２表示部１２に警告情報を報知するための第２警告画像Ｄ２を表示し、第１警告画像Ｄ１又は第２警告画像Ｄ２を強調するための画像として、カーソル画像Ｃと同じ態様の強調画像を第１表示部１１と第２表示部１２との一方から他方へと移動するように表示してもよい。この構成により、第１警告画像Ｄ１と第２警告画像Ｄ２との一方から他方へと運転者５の視線を誘導し、警告情報の存在だけでなく、その内容を効果的に報知することができる。

以上の説明では、本発明の理解を容易にするために、公知の技術的事項の説明を適宜省略した。

１００…表示装置
１１…第１表示部、１２…第２表示部
２１…ＨＵＤ（２１ａ…ＬＣＤ、２１ｂ…光源）
２２…メータ（２２ａ…ＬＣＤ、２２ｂ…光源）
３０…制御装置
３１…制御部（３１ａ…ＣＰＵ、３１ｂ…ＧＤＣ）
３２…ＲＯＭ、３３…ＲＡＭ
４０…状況解析部
５０…ＥＣＵ
６０…視線検出部
７０…操作部
１…車両、２…ダッシュボード、３…ステアリングホイール、４…フロントガラス
５…運転者、Ｅ…アイボックス、Ｌ…表示光、Ｖ…虚像
Ｃ…カーソル画像、Ｄ…警告画像

Claims

車両に搭載される表示装置であって、
画像を表示し、互いに異なる位置にある複数の表示部と、
前記複数の表示部の各々に関する操作を可能とする操作部と、
前記操作部に対してなされた前記操作を受け付けるとともに、前記複数の表示部の表示制御を行う制御部と、を備え、
前記複数の表示部は、前記車両の運転者から見て前記車両の前方に虚像として画像を表示する表示部を含み、
前記制御部は、前記複数の表示部のいずれかが一定期間以上前記運転者に視認されている視認状態であるか否かを特定可能であり、
前記複数の表示部のうち前記視認状態である表示部を特定すると、当該表示部に関する操作が可能であることを示すカーソル画像を当該表示部に表示する、
表示装置。
前記制御部は、前記複数の表示部のうち前記カーソル画像が表示されている表示部が前記視認状態でないと特定すると、当該表示部から前記カーソル画像を消去する、
請求項１に記載の表示装置。
前記制御部は、前記複数の表示部のうち前記視認状態である表示部を特定する際に、当該表示部が複数のコンテンツ画像を表示している場合には前記複数のコンテンツ画像のうちいずれのコンテンツ画像が前記視認状態であることを特定可能であり、
前記視認状態であることを特定したコンテンツ画像に応じた位置に、前記カーソル画像として、当該コンテンツ画像に関する操作が可能であることを示す画像を表示する、
請求項１又は２に記載の表示装置。
前記制御部は、前記車両から警告情報を取得した場合、前記複数の表示部の少なくともいずれかに前記警告情報を報知するための警告画像を表示し、
前記警告画像の存在を強調するための画像として、前記カーソル画像と同じ態様の強調画像を前記警告画像に応じた位置に表示する、
請求項１乃至３のいずれか１項に記載の表示装置。
前記制御部は、前記警告画像を表示すると、表示されている前記カーソル画像を消去し、前記強調画像を前記警告画像に応じた位置に表示する、
請求項４に記載の表示装置。
前記複数の表示部は、前記虚像として画像を表示する第１表示部と、第２表示部とを含み、
前記制御部は、前記車両から警告情報を取得した場合、前記第１表示部に前記警告情報を報知するための第１警告画像を表示するとともに、前記第２表示部に前記警告情報を報知するための第２警告画像を表示し、
前記第１警告画像又は前記第２警告画像を強調するための画像として、前記カーソル画像と同じ態様の強調画像を前記第１表示部と前記第２表示部との一方から他方へと移動するように表示する、
請求項１乃至３のいずれか１項に記載の表示装置。