JP2018149877A - 画像表示装置 - Google Patents

Abstract

【課題】車内及び車外にそれぞれ画像を表示して相互に重複状態となった場合に、乗員の混乱を抑制又は低減可能な画像表示装置を提供すること。【解決手段】画像表示装置１は、車内で乗員に対して透過型画像を表示する第１画像表示部１０を備えた車両に設けられる画像表示装置１であって、路面に画像を表示する第２画像表示部２０と、第１画像表示部１０の透過型画像と第２画像表示部２０の路面画像とが重複している場合に、透過型画像及び路面画像の少なくともいずれかの画像表示形態を変更する表示制御部５３と、を備える。【選択図】図６

Description

本発明は、画像表示装置、特に車内に表示される透過型画像と車外に表示される路面画像との重複を解消する画像表示装置に関する。

車両の運転者と警告を受ける他者との両当事者に対して適切な表示を行う車両用表示システムが知られている（特許文献１参照）。特許文献１に開示された車両用表示システムは、運転者に向けた運転者用表示と、他者に向けた他者用表示とを含む異なる複数箇所に画像を表示するものである。

特開２００４−１６１０３３号公報

しかしながら、異なる複数箇所に表示を行ったときに乗員から見て画像が重複すると、画像情報を乗員が正確に理解することが困難となり、乗員に混乱を招く。

これに鑑みて、本発明が解決しようとする課題は、車内及び車外にそれぞれ画像を表示して相互に重複状態となった場合に、乗員の混乱を抑制又は低減可能な画像表示装置を提供することである。

前記課題を解決するための手段として、本発明に係る画像表示装置は、車内で乗員に対して透過型画像を表示する第１画像表示部を備えた車両に設けられる画像表示装置であって、路面に画像を表示する第２画像表示部と、第１画像表示部の透過型画像と第２画像表示部の路面画像とが重複している場合に、透過型画像及び路面画像の少なくともいずれかの画像表示形態を変更する表示制御部と、を備える。

本発明に係る画像表示装置において、透過型画像及び路面画像の画像情報に基づいて画像の重複の有無を判定する判定部を更に備えることが好ましい。

本発明に係る画像表示装置において、透過型画像及び路面画像の表示面積、表示量、表示個数及び表示位置の少なくともいずれかを含む画像情報を導出する導出部を更に備えることが好ましい。

本発明に係る画像表示装置において、透過型画像と路面画像との画像情報を比較する比較部を更に備え、表示制御部は、判定部の判定結果と比較部の比較結果とに基づいて画像表示形態を変更することが好ましい。

本発明に係る画像表示装置において、乗員の視線を検出する視線検出部を更に備え、判定部は、画像情報と視線検出部の視線情報とに基づいて判定を行うことが好ましい。

本発明に係る画像表示装置において、車両の周辺環境に基づいた安全度を評価する評価部を更に備え、表示制御部は、安全度が閾値より低い場合に画像表示形態を変更することが好ましい。

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの重複部分の画像表示形態を変更することが好ましい。

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの色彩を変更することが好ましい。

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの輝度を変更することが好ましい。

本発明に係る画像表示装置において、第２画像表示部はヘッドランプにより構成されることが好ましい。

本発明によると、重複が生じると車内の透過型画像又は車外の路面画像の少なくともいずれかの色彩又は輝度を変更する等して画像表示形態を変更することで、重複状態にあっても制御後の画像の視認性が向上するので、重複画像表示の情報の視認不能状態が解消され、かつ画像全体としての情報内容の変化が少ないことによって、乗員の混乱を抑制又は低減可能な画像表示装置を提供することができる。

図１は、本発明の一実施形態である画像表示装置を備えた車両の一画像表示形態を示す斜視概略図である。 図２は、図１の車両を側方視で示す概略図である。 図３は、第１画像表示部のみを駆動した乗員の視界について示す概略図である。 図４は、第２画像表示部のみを駆動した乗員の視界について示す概略図である。 図５は、第１画像表示部及び第２画像表示部を駆動した乗員Ｐの視界について示す概略図である。 図６は、本発明の一実施形態に係る画像表示装置を示すブロック図である。 図７は、図６に示した各部材を用いて画像表示形態の変更制御を行う際の制御フローについて示すフローチャート図である。 図８は、本発明の他の実施形態に係る画像表示装置を示すブロック図である。 図９は、図８に示した部材を用いて画像表示形態の変更制御を行う際の制御フローについて示すフローチャート図である。 図１０は、図８に示した部材を用いて画像表示形態の別の変更制御を行う際の制御フローについて示すフローチャート図である。

（基本実施形態）
本発明に係る画像表示装置の一実施形態について、図１及び図２を参照しつつ説明する。
なお、図１は、本発明の一実施形態である画像表示装置１を備えた車両１００の一画像表示形態を示す斜視概略図である。図２は、図１の車両１００を側方視で示す概略図である。

図１及び２に示すように、車両１００は、第１画像表示部１０と第２画像表示部２０とを備える。

第１画像表示部１０は、車両１００内で乗員Ｐに対して透過型画像Ｇ１を表示する。本実施形態において第１画像表示部１０は、インスツルメントパネル１０１から照射された画像が車両１００のフロントウィンドウ１０２に投影されて透過型画像Ｇ１として表示されるヘッドアップディスプレイ装置として設けられている。
なお、本実施形態のフロントウィンドウ１０２に透過型画像Ｇ１を投影する形態に代えて、ステアリングホイールの前方かつインスツルメントパネル１０１上部に立設される透明板に投影する形態を採用することもできる。

本実施形態において乗員Ｐは車両１００のドライバとして図示及び説明するが、本発明において乗員としては第１画像表示部の透過型画像及び第２画像表示部の路面画像を視認可能であれば良い。

第２画像表示部２０は、路面Ｒに路面画像Ｇ２を表示する。本実施形態において第２画像表示部２０は、車両１００の前部における配光可変型の多光源ヘッドランプとして設けられている。
本発明において第２画像表示部としては、路面に画像を表示可能であればとくに制限されず、例えばデジタルミラーデバイス又はプロジェクタ等であっても良い。

なお、本発明において画像を表示する形態としては、本発明の目的を達成可能な限り様々な形態を採用可能であり、例えば文字及び記号等の照射形態自体に意味を生じるものだけでなく、道路沿いに設置される標識、並びに、規制標示及び指示標示等の道路標示等を強調するための標示の縁取り配光、標示領域に重ねた点滅配光等を挙げることができる。

また、特に図２に示すように車両１００には視線検出部３０が設けられている。視線検出部３０は、図２に破線で示す乗員Ｐの視線を検知する。具体的に視線検出部３０は、車内カメラにより乗員Ｐを監視可能なドライバモニタリングシステムを応用することで、乗員Ｐによる視線方向等の視線に係る情報を検出する。なお、乗員Ｐの視線情報を検出可能であればドライバモニタリングシステム以外の監視手段も採用可能である。
視線検出部３０の使用形態及び作用効果については後述する。

ここで、第１画像表示部１０及び第２画像表示部２０を駆動した場合の乗員Ｐの視点について、図３〜図５を参照しつつ説明する。
図３は、第１画像表示部１０のみを駆動した乗員Ｐの視界について示す概略図である。図４は、第２画像表示部２０のみを駆動した乗員Ｐの視界について示す概略図である。図５は、第１画像表示部１０及び第２画像表示部２０を駆動した乗員Ｐの視界について示す概略図である。

まず、第１画像表示部１０のみを駆動した場合、例えば図４に示すように、フロントウィンドウ１０２に透過型画像Ｇ１が投影表示される。本実施形態における透過型画像Ｇ１は、乗員Ｐが奥行きを視認可能なように画像上部に向かって徐々に縮小する画像として表示されている。これにより、乗員Ｐは、透過型画像Ｇ１を路面Ｒ上の道路標示と同様の視覚情報として視認することができる。

また、第２画像表示部２０のみを駆動した場合、例えば図３に示すように、自車両１００の接近に関わらず道路を横断しようとしている歩行者Ｗに対して、横断禁止を報知する路面画像Ｇ２が路面Ｒに投影表示される。本実施形態における路面画像Ｇ２は、歩行者Ｗが判別及び判読可能な向きで、かつ歩行者Ｗの進行軌道上に表示されている。これにより、歩行者Ｗ及び乗員Ｐは、路面画像Ｇ２を歩行者Ｗ近傍の路面Ｒ上に表示される警告画像として視認することができる。

なお、図４に示した透過型画像Ｇ１は、車両１００の走行案内情報であり、矢印記号で示される走行ルート案内情報、文字で示される案内先での規制情報及び現在の走行速度情報等を含んでいる。更に、図３に示した路面画像Ｇ２は、文字及び記号から成る歩行者Ｗに対する警告情報を含んでいる。透過型画像Ｇ１及び路面画像Ｇ２として表示する情報の種類、面積、量、個数、色彩、輝度、位置、及び表示タイミング等については、車両１００毎又は乗員Ｐ毎に適宜に設定される。

第１画像表示部１０及び第２画像表示部２０を共に駆動した場合、例えば図５に示すように、透過型画像Ｇ１と路面画像Ｇ２とが車内から、特に乗員Ｐからの視界では、重複して見えることがある。このとき、歩行者Ｗにしてみると路面画像Ｇ２が進行軌道上に表示されているに過ぎないので、歩行者Ｗに混乱は生じ難い。しかしながら、乗員Ｐが特に重複部分する両画像それぞれから正確な情報を得ることは難しいので、乗員Ｐに混乱を生じ易い。

このような乗員Ｐの混乱を抑制又は低減するために、上記車両１００には図６に示す画像表示装置１が設けられている。図６に示すように画像表示装置１は、第２画像表示部２０と検出部４０と制御部５とを備える。
なお、図６は、本発明の一実施形態に係る画像表示装置１を示すブロック図である。

検出部４０は、第１画像表示部１０の上記透過型画像Ｇ１、及び第２画像表示部２０の上記路面画像Ｇ２の少なくともいずれか、好ましくは両方を検出する。検出部４０の画像検出形態としては、例えば上記フロントウィンドウ１０２及び上記路面Ｒを車載カメラにより撮像することで画像の有無を直接的に検出する形態を採用することができる。また、他の画像検出形態として、第１画像表示部１０及び第２画像表示部２０に対して適宜の車載ＣＰＵから入力される画像を表示させるための信号、又は、第１画像表示部１０及び第２画像表示部２０自体の駆動信号を検出することで、画像の有無を間接的に検出する形態等であっても良い。

制御部５は、導出部５１、判定部５２、表示変更部５３、及び比較部５４を有する。
なお、制御部５は本発明における表示制御部の一例である。本発明においては、後述の判定部５２及び比較部５４等を含めて表示画像に応じた詳細な制御を行う必要が無ければ表示制御部として画像表示の表示形態を変更可能であれば良く、例えば後述の表示変更部５３のみを設けることとしても良い。また、後述するように本実施形態では検出部４０の検出結果に基づいて判定、比較、表示形態の変更等の様々な処理を行う部材として制御部５を採用しているが、本発明においては処理毎に制御部材を分けても良い。

導出部５１は、上記透過型画像Ｇ１及び上記路面画像Ｇ２の画像情報を導出する。本実施形態では検出部４０により検出された画像に係る信号が導出部５１に入力される。導出部５１は入力された画像に係る信号を解析することで、画像情報を導出することとなる。
画像情報としては、それぞれの画像の表示面積、表示量、表示個数、表示位置及び表示内容の少なくともいずれかを含む。

判定部５２は、上記透過型画像Ｇ１及び上記路面画像Ｇ２の画像情報に基づいて画像の重複の有無を判定する。本実施形態では導出部５１により導出された画像情報に係る信号が判定部５２に入力される。判定部５２は入力された画像情報に係る信号に基づいて、透過型画像Ｇ１と路面画像Ｇ２とが車内から重複して見えるか否か、又は、重複して見える蓋然性が高いか否かを判定することとなる。

表示変更部５３は、検出部４０の検出結果に基づいて上記透過型画像Ｇ１と上記路面画像Ｇ２とが重複している場合に、透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれかの画像表示形態を変更する。本実施形態では判定部５２により重複の有無に係る信号が表示変更部５３に入力される。表示変更部５３は、重複して見える第１画像表示部１０又は第２画像表示部２０の少なくともいずれかの画像表示について、表示形態を変更させることで重複状態にあっても視認性を向上させる。

表示変更部５３による画像表示の変更態様としては、表示内容は維持しつつ透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれかの表示形態を変えることで、車内から見た画像の視認性を向上せしめることができれば良く、様々な変更態様を採用可能である。この変更態様としては、例えば一方又は両方の画像の色彩を変更する態様、及び、画像の輝度を変更する態様等を挙げることができる。なお、画像の色彩及び輝度を変更する態様として具体的には、例えば画像表示部に入力される駆動信号を制御することで実際に画像の照射光の色彩又は輝度を変更する態様、及び、画像表示部の光の照射部を可動式の色付き又は遮光フィルターで覆うことで表示部自体は駆動していても表示される画像の色彩又は輝度を規制する態様等が挙げられる。可動式のフィルターを設ける態様では、それぞれの画像を表示し得る領域において少なくとも重複状態となり易い領域を覆うことができるように配置すれば良い。

なお、画像の色彩又は輝度の変更は、透過型画像Ｇ１及び路面画像Ｇ２が重複していても相互に見分けることができるような色彩又は輝度に調整されることが好ましく、重複していても良好な視認性が得られる色彩又は輝度の相関、組合せ等を予め設定しておくのが良い。

比較部５４は、上記透過型画像Ｇ１と上記路面画像Ｇ２との画像情報を比較する。本実施形態では導出部５１により導出された画像情報に係る信号が比較部５４に入力される。比較部５４は、透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれかに対して表示形態変更制御を行った場合に、車両１００の走行状況に対して生じ得る影響の大きさを導出するために、画像情報の比較を行う。

画像情報として表示面積、表示量及び表示個数等に応じて車両１００の走行状況への影響が生じ得るが、画像情報として画像内容に応じた影響が最も大きいことが多い。表示形態変更制御による走行状況への影響としては、車両１００がそれまでの安全な走行状態を維持することが困難となる要素を挙げることができる。この要素としては、例えば透過型画像Ｇ１の輝度を下げると、走行時の天候によっては車両前方の風景と透過型画像Ｇ１とが同化し易くなること、及び、路面画像Ｇ２の色彩を変更すると、歩行者Ｗが信号と同様に色が切り替ると横断して良いと思い込んで通常の路面画像Ｇ２によって中止していた道路の横断を始めてしまうこと等である。

好ましくは、比較部５４は上記走行状況に対して生じ得る影響の大きさを数値化した画像情報を比較することで、後述の表示変更部５３による制御対象とする画像の決定が煩雑とならずに容易に行うことができる。なおこれは、種々の画像情報に対応する走行への影響の大小を数値化した換算表を予め設定しておくことで容易に実行可能である。

本実施形態では、判定部５２による画像重複の有無の判定結果に係る信号と、比較部５４による画像情報の比較結果に係る信号とが、表示変更部５３に入力される。これらに基づいて、表示変更部５３は、画像表示形態の変更制御と、変更制御を行う側の決定制御とを行う。

ここで、図６に示した各部材を用いて画像表示形態の変更制御を行う際の制御フローについて、フローチャート図として示した図７を参照しつつ説明する。

まず、図２及び図６に示した第１画像表示部１０及び第２画像表示部２０の駆動により表示された図１等に示した透過型画像Ｇ１及び路面画像Ｇ２を、検出部４０が検出する（ステップＳ１）。

次に、検出部４０が検出した透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれか、好ましくは両方の画像情報を、導出部５１が導出する（ステップＳ２）。このとき、導出する画像情報としては、透過型画像Ｇ１と路面画像Ｇ２とが車内から重複して見えている又はその蓋然性が高いと判定可能な情報が得ることができれば良い。

例えば透過型画像Ｇ１の表示面積が大きいことで、表示面積の小さい路面画像Ｇ２が表示されていても車内の乗員には重複して見えてしまう蓋然性が高い場合がある。この場合、大きな画像表示をしているという第１画像表示部１０の駆動信号を検知した上で、透過型画像Ｇ１の表示面積のみを導出して、次工程で用いる判定部５２に出力すれば良い。もっとも、画像表示部の駆動信号を検知することなく、透過型画像Ｇ１及び路面画像Ｇ２の表示面積を導出しても良い。この場合、透過型画像Ｇ１の表示面積が予め設定された閾値を超えていれば、透過型画像Ｇ１の表示面積に係る画像情報のみを判定部５２に出力することができる。

表示面積だけでなく、画像が重複して見える蓋然性が高くなる表示量、表示個数及び表示位置等について予め閾値を設定しておいて、該閾値を超えた場合は閾値を超えた画像情報を判定部５２に出力することができる。なお、該閾値を設定することなく、又は閾値を超えるものがあっても、導出した両画像の画像情報を全て判定部５２に出力することとしても良い。

次いで、車両１００内の乗員の視線を視線検出部３０が検出する（ステップＳ３）。なお、この視線検出工程（ステップＳ３）は、表示変更部５３による画像表示の表示形態変更制御を行う前であれば、上記ステップＳ１及び上記ステップＳ２と順序が逆であっても良い。

ステップＳ２により導出された画像情報及びステップＳ３により検出された乗員Ｐの視線情報に基づいて、判定部５２が画像の重複の有無を判定する（ステップＳ４）。ここでは、フロントウィンドウ１０２及び路面Ｒにおいて、視線情報に基づいて乗員Ｐの視線上で画像が重複しているか否かを判定部５２が判定する。画像が重複していると判定された場合は、次工程に移る（ステップＳ４のＹｅｓ）。画像が重複していないと判定された場合は、乗員Ｐは透過型画像Ｇ１及び路面画像Ｇ２のそれぞれから正確な情報を得ることができて混乱が生じ難いので、画像表示形態を変更する必要は無い。この場合は、別の画像表示がなされるまでそれぞれの画像表示を維持しつつ制御フローを完了状態としておく（ステップＳ４のＮｏ）。
なお、ステップＳ２において上述したように、画像重複の蓋然性が高い場合に大きな表示面積等の画像情報を判定部５２が入力された際には、視線情報と照合することなく画像重複有りという判定を行うこともできる（ステップＳ４のＹｅｓ）。

続いて、画像の重複有りと判定された場合は、比較部５４による画像情報の比較が行われる（ステップＳ５）。ここでは、次工程において表示形態変更制御を行う画像を決定するための要素を導出する準備工程として、透過型画像Ｇ１の画像情報と路面画像Ｇ２の画像情報とを、例えば走行への影響の大小という観点等に基づいて比較する。

更に、表示変更部５３による表示形態の変更制御の対象となる画像の決定が行われる（ステップＳ６）。このとき、表示変更部５３に入力された比較部５４による比較結果に基づいて、透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれかの画像表示の形態を変更するかを決定する。表示変更部５３は、一方の画像又は両画像において表示形態の変更制御を行った場合に、車両１００の走行に影響の小さい変更形態を決定する。逆に、本工程では画像表示形態を変更した場合に走行に影響の大きい画像表示は維持する側を決定することとしても良い。

次に、形態変更の制御対象と決定した画像表示の表示部である第１画像表示部１０及び第２画像表示部２０の少なくともいずれかに対して、表示変更部５３が表示形態の変更制御を行う（ステップＳ７）。これにより、第１画像表示部１０及び第２画像表示部２０の画像表示の色彩又は輝度が変更された状態となる。

乗員から見て重複している２種の画像表示の一方又は両方の表示形態を変更する制御を行うことで、画像表示の視認性が向上するので、重複状態であっても乗員Ｐはそれぞれの画像から画像情報を読み取ることができるようになり、車両１００の走行について乗員Ｐに混乱を生じさせない又は生じさせ難くなる。

更に言うと、上記透過型画像Ｇ１及び上記路面画像Ｇ２において、画像表示形態の変更制御を行うことで、表示面積、表示量、表示個数、及び表示位置等の画像情報の大部分に変化が無く、情報内容を維持することができる。情報内容の変化を少なくすることで、表示制御前後で変化した部分の乗員Ｐによる視認と、変化した内容の乗員Ｐによる抽出及び確認作業とが少なくて済む。これにより、結果として表示制御前後での乗員Ｐの混乱を抑制又は低減するだけでなく、乗員Ｐを安全な車両１００の運転に集中させることができる。

（変形例）
以下に、本発明の変形例について説明する。
図８〜図１０には、本発明に係る画像表示装置の変形例を示した。
なお、図８は、本発明の他の実施形態に係る画像表示装置１１を示すブロック図である。図９は、図８に示した部材を用いて画像表示形態の変更制御を行う際の制御フローについて示すフローチャート図である。図１０は、図８に示した部材を用いて画像表示形態の別の変更制御を行う際の制御フローについて示すフローチャート図である。図８に示す画像表示装置１１と図６に示した画像表示装置１とにおいて共通する部材については、共通の参照符号を付すこととし、詳細な説明を省略する。

図８に示す画像表示装置１１における上記画像表示装置１との相違点は、第２導出部５５、評価部５６及び検知手段６０の有無である。具体的には、画像表示装置１１は、制御部５０の一部材として第２導出部５５及び評価部５６を備えると共に、評価部５６による制御のために検知手段６０を設けている。

第２導出部５５は、上記透過型画像Ｇ１及び上記路面画像Ｇ２の重複部分を導出する。図８に係る実施形態では、導出部５１により導出された画像情報に係る信号が第２導出部５５に入力される。第２導出部５５は、画像の表示位置及び表示面積等の画像情報に基づいて、乗員Ｐが透過型画像Ｇ１及び上記路面画像Ｇ２において重複して見える部分、領域を導出する。

なお、図８に係る実施形態では画像情報に基づいて重複部分を導出しているが、検出部４０により検出された画像に係る信号が第２導出部５５に直接入力されても良く、この場合は画像分析と画像の重複部分の導出とを第２導出部５５が行うこととなる。更に、視線検出部３０により検出された乗員Ｐの視線情報に係る信号を第２導出部５５に入力しても良く、この場合は視線情報と画像情報とを併せることで画像の重複部分を正確に導出することができるようになる。

評価部５６は、上記車両１００の周辺環境に基づいた安全度を評価する。図８に係る実施形態では検知手段６０により検知された画像に係る信号が評価部５６に入力される。

車両１００の周辺環境は、例えば歩行者に係る情報、他車両の通行に係る情報、ナビゲーションシステム等による地図及び走行ルートに係る情報、交通規制等の交通に係る情報、並びに、雨雪等の路面状態に係る情報に基づいて認識することができる。この周辺環境を認識するための情報は、各種センサ、カメラ、衛星通信デバイス、車々間通信デバイス及び路車間通信デバイス等の適宜の検知手段６０によって得られる。

また、車両１００の安全度は、車両１００の周辺環境が車両１００の走行に及ぼす又は及ぼし得る影響の大きさに応じて変化するものとして設定することができる。上記安全度は、例えば歩行者の有無、歩行者の進行方向、他車両の有無、他車両の速度及び進行方向、走行ルート上及びその周辺の交通規制の内容、並びに、乾湿状況及び凍結状況等の路面状態等によって、複合的に変化する。安全度に及ぼす影響の大きさを周辺環境の各要素について例えば数値等で予め登録しておくことで、検知手段６０による検知結果に基づいて安全度への複合的な影響を導出し易くなる。

図８に係る実施形態では、第２導出部５５による画像の重複部分に係る信号と、評価部５６による安全度の評価結果に係る信号とが、表示変更部５３に入力される。これにより、表示変更部５３は、上述した画像表示形態の部分的な変更制御、及び変更制御を行う側の決定制御に加えて、安全度と閾値との比較に基づいた形態変更の要否に係る決定制御を行う。

画像表示装置１１を用いた制御フローとしては、例えば図９に示すように、ステップＳ４において画像の重複有りと判定された場合は、評価部５６による安全度に係る評価が行われる（ステップＳ８）。ここでは、車外撮像用カメラ及び各種センサ等の検知手段６０によって検知される車両１００の周辺環境の情報に基づいた現実の安全度と、予め設定された安全度の閾値との差を評価部５６が導出することで評価を行う。ここで設定される閾値は、現実の安全度が下回ると車両１００の走行を正常に維持することが困難と成り得る安全度を例えば数値化したものであって良い。

現実の安全度が閾値よりも低いと評価部５６が評価した場合は、次工程である上記画像情報の比較工程（ステップＳ５）に移る（ステップＳ８のＹｅｓ）。現実の安全度が閾値よりも高いと評価部５６が評価した場合は、別の画像表示がなされるまで画像表示を維持しつつ制御フローを完了状態としておく（ステップＳ８のＮｏ）。

評価工程以降（ステップＳ８のＹｅｓ以降）は図７を参照しつつ説明した画像情報の比較制御（ステップＳ５）及び変更制御対象を決定する制御（ステップＳ６）を実行した後に、上記第２導出部５５による制御を実行する。第２導出部５５による制御としては、画像の重複部分の導出である（ステップＳ９）。ここでは、次工程において表示形態の変更制御を行うための準備工程として、透過型画像Ｇ１の画像情報と路面画像Ｇ２の画像情報との重複部分、好ましくは画像表示の色彩又は輝度の変更が可能な重複部分を導出する。

更に、前工程で導出された重複部分の画像表示形態を変更する制御を実行する（ステップＳ７０）。第２導出部５５を設けない場合には上述したように透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれかの画像表示形態を変更する制御を行っていた（ステップＳ７）のに対して、図９に示す制御形態では重複部分のみの表示形態の変更を行う。

以上のように、図９に示した実施形態では、画像が重複していると判定がなされても画像表示の形態変更制御が即時実行されることはない。画像表示装置１１において評価部５６を設けることで、画像重複に起因して情報の一部を乗員Ｐが視認しにくい状態となっていても、走行に重大な影響が無い安全度を維持している限りは画像表示形態の変更制御を行わない。つまり、画像の重複が生じている場合で、かつ現実の安全度が所定の閾値より低い場合に初めて画像表示形態の変更制御を行う。これにより、車両１００として必要性及び緊急性の高い画像表示制御を選択的に実行することができるようになるので、画像表示形態の変更という画像の経時的変化が少なくなる。画像の経時的変化が少なくなると、乗員Ｐによる変化した画像表示の注視動作に起因して、他の走行環境の変化に対する乗員Ｐの対応が遅れるという状況を低減又は抑制することがより一層可能となる。

また、画像全体の中でも画像の重複部分に対して選択的に表示形態の変更制御を行うことによって、表示内容の変化をより一層低減することができ、乗員Ｐが得られる画像表示全体の印象が制御前後でほぼ変わらなくなるので、乗員Ｐの混乱が大きく抑制される。

なお、図９に示した制御フローの更なる変形例として、ステップＳ８のＮｏの場合にフローを完了状態とせずに、ステップＳ８がＮｏである限り、表示している画像が維持されている間は、重複判定工程（ステップＳ４）と安全度評価工程（ステップＳ８）とを反復して実行する制御形態を採っても良い。

更に、図８に示した画像表示装置１１を用いた別の制御形態を図１０に示す。図１０に示す制御フローと図９に示した制御フローとの相違点は、画像表示の形態変更制御を解除する制御を行っている点である。

具体的な制御フローとしては、図１０に示すように、安全度評価工程において現実の安全度が所定の閾値よりも低いと評価された場合（ステップＳ８のＹｅｓ）に、重複部分の画像表示形態の変更工程（ステップＳ７０）まで実行した後に、第２安全度評価工程（ステップＳ８０）を実行する。具体的には、実行している形態変更制御を解除したと仮定した場合、つまり走行している車両１００の経時的に変化する周辺環境に必要な画像表示を重複状態となっても実行した場合に、車両１００の安全度と所定の閾値との差を上記評価部５６が導出し直すことで、第２安全度評価工程（ステップＳ８０）を実行することとする。

導出し直した安全度が閾値よりも高い、すなわち画像が重複しても走行に影響が無い又は小さくなったと評価部５６が評価した場合は、次工程である画像表示形態の変更制御の解除工程（ステップＳ１０）に移る（ステップＳ８０のＮｏ）。これに対して、導出し直した安全度が閾値よりも低い、すなわち画像が重複すると走行に影響が生じ得ると評価部５６が評価した場合は、画像表示形態の変更制御を維持しつつ安全度と閾値との差を反復して導出し続ける（ステップＳ８０のＹｅｓ）。

具体的には、現実の安全度が所定の閾値より一旦低くなった（ステップＳ８のＹｅｓ）後に、導出し直した安全度が閾値より高くなった場合（ステップＳ８０のＮｏ）は、画像表示形態の変更制御を解除する制御を行う（ステップＳ１０）。これにより、第１画像表示部１０及び第２画像表示部２０の少なくともいずれかの画像表示形態の変更状態が解除されるので、乗員から視認可能な画像表示が変更前の色彩及び輝度等を有する重複画像となる。本工程で画像が表示形態の変更前の重複画像に戻ったとしても、戻った場合の安全度に応じて車両１００の走行に問題無い状況を選択して戻しているので、乗員Ｐに混乱を生じ難い。

このように、図１０に示した実施形態では、画像の重複判定と安全度の評価結果とに基づいた画像表示形態の変更制御だけでなく、安全度の評価結果に基づいた画像表示の変更制御前状態への復帰も実行することができるようになる。

以上、本発明者によってなされた発明を適用した実施形態について説明したが、この実施形態による本発明の開示の一部をなす論述及び図面により、本発明は限定されることはない。すなわち、この実施形態に基づいて当業者等によりなされる他の実施形態、実施例及び運用技術等は全て本発明の範疇に含まれることは勿論であることを付け加えておく。

１及び１１：画像表示装置、１０：第１画像表示部、２０：第２画像表示部、３０：視線検出部、４０：検出部、５及び５０：制御部、５１：導出部、５２：判定部、５３：表示変更部、５４：比較部、５５：第２導出部、５６：評価部、６０：検知手段、１００：車両、１０１：インスツルメントパネル、１０２：フロントウィンドウ、Ｇ１：透過型画像、Ｇ２：路面画像、Ｐ：乗員、Ｒ：路面、Ｗ：歩行者

Claims (10)

1. 車内で乗員に対して透過型画像を表示する第１画像表示部を備えた車両に設けられる画像表示装置であって、
   路面に画像を表示する第２画像表示部と、
   前記第１画像表示部の前記透過型画像と前記第２画像表示部の路面画像とが重複している場合に、前記透過型画像及び前記路面画像の少なくともいずれかの画像表示形態を変更する表示制御部と、を備える、
   画像表示装置。
2. 前記透過型画像及び前記路面画像の画像情報に基づいて画像の重複の有無を判定する判定部を更に備える、
   請求項１に記載の画像表示装置。
3. 前記透過型画像及び前記路面画像の表示面積、表示量、表示個数及び表示位置の少なくともいずれかを含む前記画像情報を導出する導出部を更に備える、
   請求項２に記載の画像表示装置。
4. 前記透過型画像と前記路面画像との前記画像情報を比較する比較部を更に備え、
   前記表示制御部は、前記判定部の判定結果と前記比較部の比較結果とに基づいて画像表示形態を変更する、
   請求項２又は３に記載の画像表示装置。
5. 乗員の視線を検出する視線検出部を更に備え、
   前記判定部は、前記画像情報と前記視線検出部の視線情報とに基づいて判定を行う、
   請求項２〜４のいずれかに記載の画像表示装置。
6. 前記車両の周辺環境に基づいた安全度を評価する評価部を更に備え、
   前記表示制御部は、前記安全度が閾値より低い場合に前記画像表示形態を変更する、
   請求項１〜５のいずれかに記載の画像表示装置。
7. 前記表示制御部は、前記透過型画像及び前記路面画像の少なくともいずれかの重複部分の画像表示形態を変更する、
   請求項１〜６のいずれかに記載の画像表示装置。
8. 前記表示制御部は、前記透過型画像及び前記路面画像の少なくともいずれかの色彩を変更する、
   請求項１〜７のいずれかに記載の画像表示装置。
9. 前記表示制御部は、前記透過型画像及び前記路面画像の少なくともいずれかの輝度を変更する、
   請求項１〜７のいずれかに記載の画像表示装置。
10. 前記第２画像表示部はヘッドランプにより構成される、
    請求項１〜９のいずれかに記載の画像表示装置。