JP6860384B2 - 画像表示装置 - Google Patents

Description

本発明は、画像表示装置、特に車内に表示される透過型画像と車外に表示される路面画像との重複を解消する画像表示装置に関する。

車両の運転者と警告を受ける他者との両当事者に対して適切な表示を行う車両用表示システムが知られている（特許文献１参照）。特許文献１に開示された車両用表示システムは、運転者に向けた運転者用表示と、他者に向けた他者用表示とを含む異なる複数箇所に画像を表示するものである。

特開２００４−１６１０３３号公報

しかしながら、異なる複数箇所に表示を行ったときに乗員から見て画像が重複すると、画像情報を乗員が正確に理解することが困難となり、乗員に混乱を招く。

これに鑑みて、本発明が解決しようとする課題は、車内及び車外にそれぞれ画像を表示して相互に重複状態となった場合に、乗員の混乱を抑制又は低減可能な画像表示装置を提供することである。

前記課題を解決するための手段として、本発明に係る画像表示装置は、車内で乗員に対して透過型画像を表示する第１画像表示部を備えた車両に設けられる画像表示装置であって、路面に画像を表示する第２画像表示部と、第１画像表示部の透過型画像と第２画像表示部の路面画像とが重複している場合に、透過型画像及び路面画像の少なくともいずれかの画像表示を非重複状態に表示する表示制御部と、を備える。

本発明に係る画像表示装置において、透過型画像及び路面画像の画像情報に基づいて画像の重複の有無を判定する判定部を更に備えることが好ましい。

本発明に係る画像表示装置において、透過型画像及び路面画像の表示面積、表示量、表示個数及び表示位置の少なくともいずれかを含む画像情報を導出する導出部を更に備えることが好ましい。

本発明に係る画像表示装置において、透過型画像と路面画像との画像情報を比較する比較部を更に備え、表示制御部は、判定部の判定結果と比較部の比較結果とに基づいて非重複状態に表示する画像を決定することが好ましい。

本発明に係る画像表示装置において、乗員の視線を検出する視線検出部を更に備え、判定部は、画像情報と視線検出部の視線情報とに基づいて判定を行うことが好ましい。

本発明に係る画像表示装置において、車両の周辺環境に基づいた安全度を評価する評価部を更に備え、表示制御部は、安全度が閾値より低い場合に画像表示を非重複状態に表示することが好ましい。

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの重複部分の画像表示を停止させることが好ましい。

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの重複部分の画像表示を非重複となる領域まで移動させることが好ましい。

本発明に係る画像表示装置において、表示制御部は、透過型画像及び路面画像の少なくともいずれかの重複部分の画像表示を拡大、縮小又は変形させることが好ましい。

本発明に係る画像表示装置において、第２画像表示部はヘッドランプにより構成されることが好ましい。

本発明によると、重複が生じると車内の透過型画像又は車外の路面画像の重複部分の画像表示を停止、移動、拡縮又は変形する等して非重複化して表示することで重複状態が解消するので、制御後の画像表示では重複に起因する情報の視認不能状態が解消され、かつ画像全体としての情報量の変化が少ないことによって、乗員の混乱を抑制又は低減可能な画像表示装置を提供することができる。

図１は、本発明の一実施形態である画像表示装置を備えた車両の一画像表示形態を示す斜視概略図である。 図２は、図１の車両を側方視で示す概略図である。 図３は、第１画像表示部のみを駆動した乗員の視界について示す概略図である。 図４は、第２画像表示部のみを駆動した乗員の視界について示す概略図である。 図５は、第１画像表示部及び第２画像表示部を駆動した乗員Ｐの視界について示す概略図である。 図６は、本発明の一実施形態に係る画像表示装置を示すブロック図である。 図７は、図６に示した各部材を用いて画像表示の非重複化制御を行う際の制御フローについて示すフローチャート図である。 図８は、非重複化制御の一形態を実行した場合の乗員の視界について示す概略図である。 図９は、非重複化制御の他の形態を実行した場合の乗員の視界について示す概略図である。 図１０は、非重複化制御の更に他の形態を実行した場合の乗員の視界について示す概略図である。 図１１は、本発明の他の実施形態に係る画像表示装置を示すブロック図である。 図１２は、図１１に示した部材を用いて画像表示の非重複化制御を行う際の制御フローについて示すフローチャート図である。 図１３は、図１１に示した部材を用いて画像表示の別の非重複化制御を行う際の制御フローについて示すフローチャート図である。

（基本実施形態）
本発明に係る画像表示装置の一実施形態について、図１及び図２を参照しつつ説明する。
なお、図１は、本発明の一実施形態である画像表示装置１を備えた車両１００の一画像表示形態を示す斜視概略図である。図２は、図１の車両１００を側方視で示す概略図である。

図１及び２に示すように、車両１００は、第１画像表示部１０と第２画像表示部２０とを備える。

第１画像表示部１０は、車両１００内で乗員Ｐに対して透過型画像Ｇ１を表示する。本実施形態において第１画像表示部１０は、インスツルメントパネル１０１から照射された画像が車両１００のフロントウィンドウ１０２に投影されて透過型画像Ｇ１として表示されるヘッドアップディスプレイ装置として設けられている。
なお、本実施形態のフロントウィンドウ１０２に透過型画像Ｇ１を投影する形態に代えて、ステアリングホイールの前方かつインスツルメントパネル１０１上部に立設される透明板に投影する形態を採用することもできる。

本実施形態において乗員Ｐは車両１００のドライバとして図示及び説明するが、本発明において乗員としては第１画像表示部の透過型画像及び第２画像表示部の路面画像を視認可能であれば良い。

第２画像表示部２０は、路面Ｒに路面画像Ｇ２を表示する。本実施形態において第２画像表示部２０は、車両１００の前部における配光可変型の多光源ヘッドランプとして設けられている。
本発明において第２画像表示部としては、路面に画像を表示可能であればとくに制限されず、例えばデジタルミラーデバイス又はプロジェクタ等であっても良い。

なお、本発明において画像を表示する形態としては、本発明の目的を達成可能な限り様々な形態を採用可能であり、例えば文字及び記号等の照射形態自体に意味を生じるものだけでなく、道路沿いに設置される標識、並びに、規制標示及び指示標示等の道路標示等を強調するための標示の縁取り配光、標示領域に重ねた点滅配光等を挙げることができる。

また、特に図２に示すように車両１００には視線検出部３０が設けられている。視線検出部３０は、図２に破線で示す乗員Ｐの視線を検知する。具体的に視線検出部３０は、車内カメラにより乗員Ｐを監視可能なドライバモニタリングシステムを応用することで、乗員Ｐによる視線方向等の視線に係る情報を検出する。なお、乗員Ｐの視線情報を検出可能であればドライバモニタリングシステム以外の監視手段も採用可能である。
視線検出部３０の使用形態及び作用効果については後述する。

ここで、第１画像表示部１０及び第２画像表示部２０を駆動した場合の乗員Ｐの視点について、図３〜図５を参照しつつ説明する。
図３は、第１画像表示部１０のみを駆動した乗員Ｐの視界について示す概略図である。図４は、第２画像表示部２０のみを駆動した乗員Ｐの視界について示す概略図である。図５は、第１画像表示部１０及び第２画像表示部２０を駆動した乗員Ｐの視界について示す概略図である。

まず、第１画像表示部１０のみを駆動した場合、例えば図４に示すように、フロントウィンドウ１０２に透過型画像Ｇ１が投影表示される。本実施形態における透過型画像Ｇ１は、乗員Ｐが奥行きを視認可能なように画像上部に向かって徐々に縮小する画像として表示されている。これにより、乗員Ｐは、透過型画像Ｇ１を路面Ｒ上の道路標示と同様の視覚情報として視認することができる。

また、第２画像表示部２０のみを駆動した場合、例えば図３に示すように、自車両１００の接近に関わらず道路を横断しようとしている歩行者Ｗに対して、横断禁止を報知する路面画像Ｇ２が路面Ｒに投影表示される。本実施形態における路面画像Ｇ２は、歩行者Ｗが判別及び判読可能な向きで、かつ歩行者Ｗの進行軌道上に表示されている。これにより、歩行者Ｗ及び乗員Ｐは、路面画像Ｇ２を歩行者Ｗ近傍の路面Ｒ上に表示される警告画像として視認することができる。

なお、図４に示した透過型画像Ｇ１は、車両１００の走行案内情報であり、矢印記号で示される走行ルート案内情報、文字で示される案内先での規制情報及び現在の走行速度情報等を含んでいる。更に、図３に示した路面画像Ｇ２は、文字及び記号から成る歩行者Ｗに対する警告情報を含んでいる。透過型画像Ｇ１及び路面画像Ｇ２として表示する情報の種類、面積、量、個数、色彩、輝度、位置、及び表示タイミング等については、車両１００毎又は乗員Ｐ毎に適宜に設定される。

第１画像表示部１０及び第２画像表示部２０を共に駆動した場合、例えば図５に示すように、透過型画像Ｇ１と路面画像Ｇ２とが車内から、特に乗員Ｐからの視界では、重複して視えることがある。このとき、歩行者Ｗにしてみると路面画像Ｇ２が進行軌道上に表示されているに過ぎないので、歩行者Ｗに混乱は生じ難い。しかしながら、乗員Ｐが特に重複部分する両画像それぞれから正確な情報を得ることは難しいので、乗員Ｐに混乱を生じ易い。

このような乗員Ｐの混乱を抑制又は低減するために、上記車両１００には図６に示す画像表示装置１が設けられている。図６に示すように画像表示装置１は、第２画像表示部２０と検出部４０と制御部５とを備える。
なお、図６は、本発明の一実施形態に係る画像表示装置１を示すブロック図である。

検出部４０は、第１画像表示部１０の上記透過型画像Ｇ１、及び第２画像表示部２０の上記路面画像Ｇ２の少なくともいずれか、好ましくは両方を検出する。検出部４０の画像検出形態としては、例えば上記フロントウィンドウ１０２及び上記路面Ｒを車載カメラにより撮像することで画像の有無を直接的に検出する形態を採用することができる。また、他の画像検出形態として、第１画像表示部１０及び第２画像表示部２０に対して適宜の車載ＣＰＵから入力される画像を表示させるための信号、又は、第１画像表示部１０及び第２画像表示部２０自体の駆動信号を検出することで、画像の有無を間接的に検出する形態等であっても良い。

制御部５は、導出部５１、判定部５２、部分表示制御部５３、比較部５４及び第２導出部５５を有する。
なお、制御部５は本発明における表示制御部の一例である。本発明においては、後述の判定部５２及び比較部５４等を含めて表示画像に応じた詳細な制御を行う必要が無ければ表示制御部として画像表示の非重複化が可能であれば良く、例えば後述の部分表示制御部５３のみを設けることとしても良い。また、後述するように本実施形態では検出部４０の検出結果に基づいて判定、比較、表示の非重複化等の様々な処理を行う部材として制御部５を採用しているが、本発明においては処理毎に制御部材を分けても良い。

導出部５１は、上記透過型画像Ｇ１及び上記路面画像Ｇ２の画像情報を導出する。本実施形態では検出部４０により検出された画像に係る信号が導出部５１に入力される。導出部５１は入力された画像に係る信号を解析することで、画像情報を導出することとなる。
画像情報としては、それぞれの画像の表示面積、表示量、表示個数、表示位置及び表示内容の少なくともいずれかを含む。

判定部５２は、上記透過型画像Ｇ１及び上記路面画像Ｇ２の画像情報に基づいて画像の重複の有無を判定する。本実施形態では導出部５１により導出された画像情報に係る信号が判定部５２に入力される。判定部５２は入力された画像情報に係る信号に基づいて、透過型画像Ｇ１と路面画像Ｇ２とが車内から重複して見えるか否か、又は、重複して見える蓋然性が高いか否かを判定することとなる。

部分表示制御部５３は、検出部４０の検出結果に基づいて上記透過型画像Ｇ１と上記路面画像Ｇ２とが重複している場合に、透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれかの画像表示を非重複状態に表示する。本実施形態では判定部５２により重複の有無に係る信号が部分表示制御部５３に入力される。部分表示制御部５３は、重複して見える第１画像表示部１０又は第２画像表示部２０の少なくともいずれかの画像表示について、表示の非重複化制御を行うことで重複状態を解消させる。

部分表示制御部５３による画像表示の非重複化形態としては、透過型画像Ｇ１及び／又は路面画像Ｇ２の部分的な画像制御を行うことにより両画像を非重複状態とすることで車内から見た重複状態を解消することができれば良く、様々な非重複化形態を採用可能である。非重複化形態としては、例えば重複部分の画像表示を選択的に停止する形態、重複部分の画像表示を非重複となる領域まで移動させる形態、及び、重複部分の画像表示を拡大、縮小又は変形させる形態等を挙げることができる。なお、画像表示の一部を停止する形態として具体的には、例えば多光源から成る画像表示部の駆動信号の一部を停止させる又は遮断することで表示部の一部を駆動停止にする形態、及び、画像表示部の光の照射部の一部を可動式のシャッターで覆うことで表示部自体は駆動していても画像の一部をマスクする形態等が挙げられる。可動式のシャッターを設ける形態では、画像を表示し得る領域における重複状態となり易い領域を覆うことができるように配置すれば良い。

比較部５４は、上記透過型画像Ｇ１と上記路面画像Ｇ２との画像情報を比較する。本実施形態では導出部５１により導出された画像情報に係る信号が比較部５４に入力される。比較部５４は、透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれかにおける重複部分に対して非重複化制御を行った場合に、車両１００の走行状況に対して生じ得る影響の大きさを導出するために、画像情報の比較を行う。

画像情報として表示面積、表示量及び表示個数等に応じて車両１００の走行状況への影響が生じ得るが、画像情報として画像内容に応じた影響が最も大きいことが多い。非重複化制御による走行状況への影響としては、車両１００がそれまでの安全な走行状態を維持することが困難となる要素を挙げることができる。この要素としては、例えば透過型画像Ｇ１の一部を停止することで運転者である乗員Ｐがナビ情報等の一部を視認不能となること、及び、路面画像Ｇ２の一部を停止することで歩行者Ｗが路面画像Ｇ２によって中止していた道路の横断を始めてしまうこと等である。

好ましくは、比較部５４は上記走行状況に対して生じ得る影響の大きさを数値化した画像情報を比較することで、後述の部分表示制御部５３による表示制御対象とする画像の決定が煩雑とならずに容易に行うことができる。なおこれは、種々の画像情報に対応する走行への影響の大小を数値化した換算表を予め設定しておくことで容易に実行可能である。

第２導出部５５は、上記透過型画像Ｇ１及び上記路面画像Ｇ２の重複部分を導出する。本実施形態では、導出部５１により導出された画像情報に係る信号が第２導出部５５に入力される。第２導出部５５は、画像の表示位置及び表示面積等の画像情報に基づいて、乗員Ｐが透過型画像Ｇ１及び上記路面画像Ｇ２において重複して見える部分、領域を導出する。

なお、本実施形態では画像情報に基づいて重複部分を導出しているが、検出部４０により検出された画像に係る信号が第２導出部５５に直接入力されても良く、この場合は画像分析と画像の重複部分の導出とを第２導出部５５が行うこととなる。更に、視線検出部３０により検出された乗員Ｐの視線情報に係る信号を第２導出部５５に入力しても良く、この場合は視線情報と画像情報とを併せることで画像の重複部分を正確に導出することができるようになる。

本実施形態では、判定部５２による画像重複の有無の判定結果に係る信号と、比較部５４による画像情報の比較結果に係る信号と、第２導出部５５による画像の重複部分に係る信号とが、部分表示制御部５３に入力される。これらに基づいて、部分表示制御部５３は、画像表示の非重複化制御と、非重複化するために表示制御を行う側の決定制御とを行う。

ここで、図６に示した各部材を用いて画像表示の非重複化制御を行う際の制御フローについて、フローチャート図として示した図７を参照しつつ説明する。

まず、図２及び図６に示した第１画像表示部１０及び第２画像表示部２０の駆動により表示された図１等に示した透過型画像Ｇ１及び路面画像Ｇ２を、検出部４０が検出する（ステップＳ１）。

次に、検出部４０が検出した透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれか、好ましくは両方の画像情報を、導出部５１が導出する（ステップＳ２）。このとき、導出する画像情報としては、透過型画像Ｇ１と路面画像Ｇ２とが車内から重複して見えている又はその蓋然性が高いと判定可能な情報が得ることができれば良い。

例えば透過型画像Ｇ１の表示面積が大きいことで、表示面積の小さい路面画像Ｇ２が表示されていても車内の乗員には重複して見えてしまう蓋然性が高い場合がある。この場合、大きな画像表示をしているという第１画像表示部１０の駆動信号を検知した上で、透過型画像Ｇ１の表示面積のみを導出して、次工程で用いる判定部５２に出力すれば良い。もっとも、画像表示部の駆動信号を検知することなく、透過型画像Ｇ１及び路面画像Ｇ２の表示面積を導出しても良い。この場合、透過型画像Ｇ１の表示面積が予め設定された閾値を超えていれば、透過型画像Ｇ１の表示面積に係る画像情報のみを判定部５２に出力することができる。

表示面積だけでなく、画像が重複して見える蓋然性が高くなる表示量、表示個数及び表示位置等について予め閾値を設定しておいて、該閾値を超えた場合は閾値を超えた画像情報を判定部５２に出力することができる。なお、該閾値を設定することなく、又は閾値を超えるものがあっても、導出した両画像の画像情報を全て判定部５２に出力することとしても良い。

次いで、車両１００内の乗員の視線を視線検出部３０が検出する（ステップＳ３）。なお、この視線検出工程（ステップＳ３）は、部分表示制御部５３による画像表示の非重複化制御を行う前であれば、上記ステップＳ１及び上記ステップＳ２と順序が逆であっても良い。

ステップＳ２により導出された画像情報及びステップＳ３により検出された乗員Ｐの視線情報に基づいて、判定部５２が画像の重複の有無を判定する（ステップＳ４）。ここでは、フロントウィンドウ１０２及び路面Ｒにおいて、視線情報に基づいて乗員Ｐの視線上で画像が重複しているか否かを判定部５２が判定する。画像が重複していると判定された場合は、次工程に移る（ステップＳ４のＹｅｓ）。画像が重複していないと判定された場合は、乗員Ｐは透過型画像Ｇ１及び路面画像Ｇ２のそれぞれから正確な情報を得ることができて混乱が生じ難いので、画像表示を非重複化する必要は無い。この場合は、別の画像表示がなされるまでそれぞれの画像表示を維持しつつ制御フローを完了状態としておく（ステップＳ４のＮｏ）。
なお、ステップＳ２において上述したように、画像重複の蓋然性が高い場合に大きな表示面積等の画像情報を判定部５２が入力された際には、視線情報と照合することなく画像重複有りという判定を行うこともできる（ステップＳ４のＹｅｓ）。

続いて、画像の重複有りと判定された場合は、比較部５４による画像情報の比較が行われる（ステップＳ５）。ここでは、後の工程において非重複化制御を行う画像を決定するための要素を導出する準備工程として、透過型画像Ｇ１の画像情報と路面画像Ｇ２の画像情報とを、例えば走行への影響の大小という観点等に基づいて比較する。

更に、部分表示制御部５３による非重複化制御の対象となる画像の決定が行われる（ステップＳ６）。このとき、部分表示制御部５３に入力された比較部５４による比較結果に基づいて、透過型画像Ｇ１及び路面画像Ｇ２の少なくともいずれかの画像表示における重複部分を非重複状態とするかを決定する。部分表示制御部５３は、一方の画像又は両画像において非重複化制御を行った場合に、車両１００の走行に影響の小さい非重複形態を決定する。逆に、本工程では画像表示の重複部分を非重複化した場合に走行に影響の大きい画像表示は維持する側を決定することとしても良い。

次いで、第２導出部５５による画像の重複部分の導出が行われる（ステップＳ７）。ここでは、次工程において非重複化制御を行うための準備工程として、透過型画像Ｇ１の画像情報と路面画像Ｇ２の画像情報との重複部分、好ましくは画像表示の停止、移動、拡縮又は変形が可能な重複部分を導出する。

次に、非重複化の制御対象と決定した画像表示の表示部である第１画像表示部１０及び第２画像表示部２０の少なくともいずれかに対して、部分表示制御部５３が非重複化制御を行う（ステップＳ８）。これにより、第１画像表示部１０及び第２画像表示部２０の画像表示の一部が停止、移動、拡縮又は変形されて非重複状態となる。

ここで、非重複化制御を行った場合の具体例を図８〜図１０に示す。図８は、非重複化制御の一形態を実行した場合の乗員Ｐの視界について示す概略図である。図９は、非重複化制御の他の形態を実行した場合の乗員Ｐの視界について示す概略図である。図１０は、非重複化制御の更に他の形態を実行した場合の乗員Ｐの視界について示す概略図である。

図８に示す非重複化形態は、画像表示における重複部分の停止形態である。具体的には、図５に示した透過型画像Ｇ１において文字による案内先の交通規制情報の一部と路面画像Ｇ２とが重複状態であったので、図８に示すように規制情報の画像表示のみを停止して非表示状態とした透過型画像Ｇ１１を表示している。これにより、透過型画像Ｇ１１と路面画像Ｇ２とが非重複状態となる。

図９に示す非重複化形態は、画像表示における重複部分の移動形態である。具体的には、図９に示すように交通規制情報の画像表示をフロントウィンドウ１０２の上方に移動させて上記透過型画像Ｇ１よりも奥側に見える状態とした透過型画像Ｇ１２を上記透過型画像Ｇ１に代えて表示している。これにより、透過型画像Ｇ１２と路面画像Ｇ２とが非重複状態となっている。

図１０に示す非重複化形態は、画像表示における重複部分の拡縮形態である。具体的には、図１０に示すように横断中止を歩行者Ｗに促す画像表示を縮小して歩行者側Ｗ側に移動させた状態とした路面画像Ｇ２１を上記路面画像Ｇ２に代えて表示している。これにより、透過型画像Ｇ１と路面画像Ｇ２１とが非重複状態となっている。

以上のように、乗員から見て重複している２種の画像表示の一方又は両方を非重複状態となるように制御することで、車両１００の走行について乗員Ｐに混乱を生じさせない又は生じさせ難くなる。つまり、重複に起因して画像が示す情報を乗員Ｐが正確に読み取ることが困難であった状態を解消することができる。

更に言うと、所定の表示領域をそれぞれ有する上記透過型画像Ｇ１及び上記路面画像Ｇ２において、少なくとも重複部分のみの表示を制御することで画像全体から乗員Ｐが得られる情報量の変化を少なくすることができる。情報量の変化を少なくすることで、車両１００の安全な走行に必要な情報が不足し難くなるので、結果として表示制御前後での乗員Ｐの混乱を抑制又は低減するだけでなく、乗員Ｐを安全な車両１００の運転に集中させることができる。

なお、図８に示す非重複化形態では、画像表示の重複部分の停止を行った上で、停止した表示領域において再度重複状態とならないような停止画像を簡略化した画像、縮小した画像又は変形した画像等を表示するようにしても良い。つまり、停止制御と別画像による差替制御とを組合せても良く、制御前後で情報量の変化が少ないので、乗員Ｐの混乱をより一層抑制又は低減することができる。

また、図９に示す非重複化形態では、交通規制情報の画像表示の移動に併せて、ナビ情報に基づいた矢印の案内記号、及び現在の車速に基づいた文字情報も移動させることで、透過型画像Ｇ１２の表示領域、表示面積を透過型画像Ｇ１より広げることなく一体的な表示を維持することができる。一体的な表示を維持することで、情報量が低下することが無いので、乗員Ｐの混乱をより一層抑制又は低減することができる。

（変形例）
以下に、本発明の変形例について説明する。
図１１〜図１３には、本発明に係る画像表示装置の変形例を示した。
なお、図１１は、本発明の他の実施形態に係る画像表示装置１１を示すブロック図である。図１２は、図１１に示した部材を用いて画像表示の非重複化制御を行う際の制御フローについて示すフローチャート図である。図１３は、図１１に示した部材を用いて画像表示の別の非重複化制御を行う際の制御フローについて示すフローチャート図である。図１１に示す画像表示装置１１と図６に示した画像表示装置１とにおいて共通する部材については、共通の参照符号を付すこととし、詳細な説明を省略する。

図１１に示す画像表示装置１１における上記画像表示装置１との相違点は、評価部５６の有無である。具体的には、画像表示装置１１は、制御部５０の一部材として評価部５６を備えている。

評価部５６は、上記車両１００の周辺環境に基づいた安全度を評価する。図１１に係る実施形態では検知手段６０により検知された画像に係る信号が評価部５６に入力される。

車両１００の周辺環境は、例えば歩行者に係る情報、他車両の通行に係る情報、ナビゲーションシステム等による地図及び走行ルートに係る情報、交通規制等の交通に係る情報、並びに、雨雪等の路面状態に係る情報に基づいて認識することができる。この周辺環境を認識するための情報は、各種センサ、カメラ、衛星通信デバイス、車々間通信デバイス及び路車間通信デバイス等の適宜の検知手段６０によって得られる。

また、車両１００の安全度は、車両１００の周辺環境が車両１００の走行に及ぼす又は及ぼし得る影響の大きさに応じて変化するものとして設定することができる。上記安全度は、例えば歩行者の有無、歩行者の進行方向、他車両の有無、他車両の速度及び進行方向、走行ルート上及びその周辺の交通規制の内容、並びに、乾湿状況及び凍結状況等の路面状態等によって、複合的に変化する。安全度に及ぼす影響の大きさを周辺環境の各要素について例えば数値等で予め登録しておくことで、検知手段６０による検知結果に基づいて安全度への複合的な影響を導出し易くなる。

図１１に係る実施形態では、評価部５６による安全度の評価結果に係る信号が部分表示制御部５３に入力される。これにより、部分表示制御部５３は、上述した画像表示の非重複化制御、及び非重複化するために表示制御を行う側の決定制御に加えて、安全度と閾値との比較に基づいた非重複化の要否に係る決定制御を行う。

画像表示装置１１を用いた制御フローとしては、例えば図１２に示すように、ステップＳ４において画像の重複有りと判定された場合は、評価部５６による安全度に係る評価が行われる（ステップＳ９）。ここでは、車外撮像用カメラ及び各種センサ等の検知手段６０によって検知される車両１００の周辺環境の情報に基づいた現実の安全度と、予め設定された安全度の閾値との差を評価部５６が導出することで評価を行う。ここで設定される閾値は、現実の安全度が下回ると車両１００の走行を正常に維持することが困難と成り得る安全度を例えば数値化したものであって良い。

現実の安全度が閾値よりも低いと評価部５６が評価した場合は、次工程である上記画像情報の比較工程（ステップＳ５）に移る（ステップＳ９のＹｅｓ）。現実の安全度が閾値よりも高いと評価部５６が評価した場合は、別の画像表示がなされるまで画像表示を維持しつつ制御フローを完了状態としておく（ステップＳ９のＮｏ）。評価工程以降（ステップＳ９のＹｅｓ以降）は図７を参照しつつ説明した制御と同様であって良い。

以上のように、図１２に示した実施形態では、画像が重複していると判定がなされても画像表示の非重複化制御が即時実行されることはない。画像表示装置１１において評価部５６を設けることで、画像重複に起因して情報の一部を乗員Ｐが視認しにくい状態となっていても、走行に重大な影響が無い安全度を維持している限りは画像表示の非重複化制御を行わない。つまり、画像の重複が生じている場合で、かつ現実の安全度が所定の閾値より低い場合に初めて画像表示の非重複化制御を行う。これにより、車両１００として必要性及び緊急性の高い画像表示制御を選択的に実行することができるようになるので、画像表示の非重複化という画像の経時的変化が少なくなる。画像の経時的変化が少なくなると、乗員Ｐが変化した画像表示を注視することで他の走行環境の変化に対する乗員Ｐの対応が遅れるという状況を低減又は抑制することがより一層可能となる。

なお、図１２に示した制御フローの更なる変形例として、ステップＳ９のＮｏの場合にフローを完了状態とせずに、ステップＳ９がＮｏである限り、表示している画像が維持されている間は、重複判定工程（ステップＳ４）と安全度評価工程（ステップＳ９）とを反復して実行する制御形態を採っても良い。

ここで、図１１に示した評価部５６を用いた別の制御形態を図１３に示す。図１３に示す制御フローと図１２に示した制御フローとの相違点は、画像表示の非重複化制御を解除する制御を行っている点である。

具体的な制御フローとしては、図１３に示すように、安全度評価工程において現実の安全度が所定の閾値よりも低いと評価された場合（ステップＳ９のＹｅｓ）に、画像表示の非重複化工程（ステップＳ８）まで実行した後に、第２安全度評価工程（ステップＳ９０）を実行する。具体的には、実行している非重複化制御を解除したと仮定した場合、つまり走行している車両１００の経時的に変化する周辺環境に必要な画像表示を重複状態となっても実行した場合に、車両１００の安全度と所定の閾値との差を上記評価部５６が導出し直すことで、第２安全度評価工程（ステップＳ９０）を実行することとする。

導出し直した安全度が閾値よりも高い、すなわち画像が重複しても走行に影響が無い又は小さくなったと評価部５６が評価した場合は、次工程である画像表示の非重複化制御の解除工程（ステップＳ１０）に移る（ステップＳ９０のＮｏ）。これに対して、導出し直した安全度が閾値よりも低い、すなわち画像が重複すると走行に影響が生じ得ると評価部５６が評価した場合は、画像表示の非重複化状態を維持しつつ安全度と閾値との差を反復して導出し続ける（ステップＳ９０のＹｅｓ）。

具体的には、現実の安全度が所定の閾値より一旦低くなった（ステップＳ９のＹｅｓ）後に、導出し直した安全度が閾値より高くなった場合（ステップＳ９０のＮｏ）は、画像表示の非重複化制御を解除する制御を行う（ステップＳ１０）。これにより、第１画像表示部１０及び第２画像表示部２０の少なくともいずれかの画像表示の非重複化が解除されるので、乗員から視認可能な画像表示は２つに戻ると共に、相互に重複した状態となる。本工程で画像が重複して見える状態に戻るとしても、戻した場合の安全度に応じて車両１００の走行に問題無い状況を選択して戻しているので、乗員Ｐに混乱を生じ難い。

このように、図１３に示した実施形態では、画像の重複判定と安全度の評価結果とに基づいた画像表示の非重複化だけでなく、非重複化した画像表示の復帰も実行することができるようになる。

以上、本発明者によってなされた発明を適用した実施形態について説明したが、この実施形態による本発明の開示の一部をなす論述及び図面により、本発明は限定されることはない。すなわち、この実施形態に基づいて当業者等によりなされる他の実施形態、実施例及び運用技術等は全て本発明の範疇に含まれることは勿論であることを付け加えておく。

１及び１１：画像表示装置、１０：第１画像表示部、２０：第２画像表示部、３０：視線検出部、４０：検出部、５及び５０：制御部、５１：導出部、５２：判定部、５３：部分表示制御部、５４：比較部、５５：第２導出部、５６：評価部、６０：検知手段、１００：車両、１０１：インスツルメントパネル、１０２：フロントウィンドウ、Ｇ１、Ｇ１１及びＧ１２：透過型画像、Ｇ２及びＧ２１：路面画像、Ｐ：乗員、Ｒ：路面、Ｗ：歩行者

Claims (9)

1. 車内で乗員に対して透過型画像を表示する第１画像表示部を備えた車両に設けられる画像表示装置であって、
   路面に路面画像を表示する第２画像表示部と、
   前記透過型画像及び前記路面画像の画像情報に基づいて、前記乗員から見た画像の重複の有無を判定する判定部と、
   前記判定部が、前記透過型画像と前記路面画像とが重複していると判定した場合に、前記透過型画像及び前記路面画像のいずれかの画像表示を非重複状態に表示する表示制御部と、
   前記透過型画像と前記路面画像との前記画像情報を比較する比較部を備え、
   前記判定部により画像の重複が有ると判定された場合に前記比較部により前記画像情報を比較し、前記透過型画像及び前記路面画像の画像表示のうち、非重複化制御により前記車両の走行に影響の小さい画像表示を非重複状態で表示し、影響の大きい画像表示は維持して表示する、
   画像表示装置。
2. 前記比較部は、走行状況に対して生じ得る影響の大きさを数値化した前記画像情報を比較する、
   請求項１に記載の画像表示装置。
3. 前記透過型画像及び前記路面画像の表示面積、表示量、表示個数及び表示位置の少なくともいずれかを含む前記画像情報を導出する導出部を更に備える、
   請求項１または２に記載の画像表示装置。
4. 前記乗員の視線を検出する視線検出部を更に備え、
   前記判定部は、前記画像情報と前記視線検出部の視線情報とに基づいて判定を行う、
   請求項１〜３のいずれかに記載の画像表示装置。
5. 前記車両の周辺環境に基づいた安全度を評価する評価部を更に備え、
   前記表示制御部は、前記安全度が閾値より低い場合に前記画像表示を非重複状態に表示する、
   請求項１〜４のいずれかに記載の画像表示装置。
6. 前記非重複状態の前記画像表示は、重複部分の表示を停止させるものである、
   請求項１〜５のいずれかに記載の画像表示装置。
7. 前記非重複状態の前記画像表示は、重複部分を非重複となる領域まで移動させるものである、
   請求項１〜５のいずれかに記載の画像表示装置。
8. 前記非重複状態の前記画像表示は、重複部分を拡大、縮小又は変形させるものである、
   請求項１〜５のいずれかに記載の画像表示装置。
9. 前記第２画像表示部はヘッドランプにより構成される、
   請求項１〜８のいずれかに記載の画像表示装置。
   

Images