JP2022044136A - 表示制御装置、ヘッドアップディスプレイ装置、及びヘッドアップディスプレイ装置の表示制御方法 - Google Patents

Abstract

【課題】 本発明は、視認者の視線が前方視界から外れた後、前方視界に復帰する場合、又は、視点ロストが生じた後、視点位置が再検出される場合に、ＨＵＤ装置による表示が実景の視認を妨げることを抑制する。【解決手段】制御部１０８は、一時的に前方非視認状態となった場合、又は視点ロストが生じた場合に、少なくとも一部の表示コンテンツについて虚像を非表示とする、又は視認性を低下させる、あるいは視認性を低下させて最終的には非表示とする、又は表示コンテンツの数を低減することを含む第１の制御を実行し、前方視認状態や視点検出状態に復帰した場合、視認性又は表示コンテンツ数を徐々に増大させ、又は非表示や視認性低下の状態の維持期間を設けた後、視認性又は表示コンテンツ数を時間に対して徐々に、又はすみやかに増大させることを含む第２の制御を実行する。【選択図】 図９

Description

本発明は、例えば自動車等の車両に搭載される表示制御装置、ヘッドアップディスプレイ（ＨＵＤ）装置、及びヘッドアップディスプレイ装置の表示制御方法等に関する。

車両の運転中において、例えば前方に十字路やＴ字路がある場合、あるいは左折、右折を行う場合等では、運転者（視認者）は左右の確認のために顔を左や右に向け、このとき運転者の視線は左右に移動して前方視界から外れ、やがて元に戻り、視線は前方を向く。

このような視線の移動に対応して、ＨＵＤ装置による表示を変更することが、例えば、特許文献１に記載されている。特許文献１の図９及び[００４１]～[００４３]には、車両の左折時において、車両の走行状態に応じたＨＵＤ装置の表示領域のサイズを変更することが記載されている。

［００４２］の記載によれば、車両が交差点の手前を走行している場合には、表示領域のサイズを縮小して、交差点までの距離情報や進行方向を示す直進の矢印を表示し、交差点に近づくと、表領域のサイズを左方向に拡大して左折位置を示す矢印を表示して行き先案内を行い、左折が完了した時点で表示領域のサイズを元の縮小サイズに戻して直進の矢印を表示す。［００４３］には、「これにより、左折操作のために運転者に必要な情報を運転の妨げにならないようなサイズで表示することができる」と記載されている。

特開２０１９－１０９６５号公報

本発明者は、視認者の視線が左／右に移動して前方視界から外れ、やがて元に戻って、前方視界に復帰するような場合における、ＨＵＤ装置の好ましい表示について検討し、以下の事項を認識した。

運転者（視認者）が左右を確認した後に前方視認の状態に戻るときや、左折／右折が完了して前方視認の状態に戻る場合を想定する。このとき、運転者（視認者）は、安全の確認のため、道路の前方の実景を迅速に視認しようとする。特に、まっすぐ前を向いて、車両が進行している前方の、かなり遠くまでを見通すことで、前方の状況を確認したいと思うのが通常である。

このとき、ＨＵＤ装置による表示コンテンツ（例えば、ナビゲーション用の矢印等）が表示されていると、運転者（視認者）は、実景を迅速に視認したいのに、その画像（虚像）が視認の妨げとなり、前方の実景の視認性が低下する場合があり得る。

上記の特許文献１では、この点については対策されていない。特許文献１では、車両の左折する前には、左折路が見え易くなるように、表示領域の左端を右側に寄せて表示サイズを縮小し、左折時には、ナビゲーション用矢印を大きく拡大して表示し、左折が完了するとすぐに（その直後から）、直進を促すナビゲーション用矢印を表示している（特許文献１の図９（ａ）～（ｃ）参照）。

特許文献１の図９（ｃ）では、左折直後に、直進を促すナビゲーション用の矢印を表示している。このような表示制御では、「運転者（視認者）の視線が前方視認の状態に復帰したとき、実景を迅速に視認したいのに、その画像（虚像）が視認の妨げとなり、前方の実景の視認性が低下することがある」という課題を解決することはできない。

また、特許文献１では、「左折時の左折路が見えにくくならないように表示領域を縮小する」のであり、本発明者が認識した課題のように、「視線が前方視認の状態に復帰した後に、実景の視認の妨げとならないようにＨＵＤ装置による表示を制御することの重要性」については、何ら言及されていない。

なお、視認者の視点位置（視線方向）を検出して、その検出結果に基づいて表示の態様を制御する場合において、上記の「視認者の視線が前方視界から外れた状態」は、視認者の視点位置が一時的に喪失した「視点ロスト状態」となる場合が多いと想定される。よって、上述の説明は、視点ロスト状態となった場合にも適用され得る。

本発明は、視認者の視線が前方視界から外れた後、前方視界に復帰する場合、又は、視点ロストが生じた後、視点位置が再検出される場合に、ＨＵＤ装置による表示が実景の視認を妨げることを抑制することである。

本発明の他の目的は、以下に例示する態様及び最良の実施形態、並びに添付の図面を参照することによって、当業者に明らかになるであろう。

以下に、本発明の概要を容易に理解するために、本発明に従う態様を例示する。

第１の態様において、表示制御装置は、
画像を被投影部材に投影することで、視認者に前記画像の虚像を視認させるヘッドアップディスプレイ（ＨＵＤ）装置における表示制御を実行する表示制御装置であって、
視認者の視点位置に基づいて前記虚像の表示態様を制御する制御部を有し、
前記制御部は、
前記ＨＵＤ装置による表示領域に表示コンテンツの虚像を表示させているときに、前記視認者が前方視認状態から、一時的に前方非視認状態となった場合、又は、前記視認者の視点を一時的に喪失する視点ロストが生じた場合に、
少なくとも一部の前記表示コンテンツについては、虚像を非表示とする、
又は、
少なくとも一部の前記表示コンテンツについては、視認性を低下させる、あるいは、視認性を低下させて最終的には虚像を非表示とする、
又は、
前記表示コンテンツの数を低減する、
ことを含む第１の制御を実行し、
視認者が前方視認状態に復帰した場合、又は視点ロスト後に視点位置を再取得した場合に、
非表示とされていた表示コンテンツ、又は視認性が低下されていた表示コンテンツについて、視認性を時間に対して線形、非線形に徐々に増大させ、又は、非表示状態あるいは視認性低下状態を維持する期間を設けた後、視認性を時間に対して徐々に、又はすみやかに増大させ、
又は、
コンテンツ数が低減されていた表示コンテンツについて、コンテンツ数を時間に対して徐々に増大させ、あるいは、コンテンツ数の低減状態の維持期間を設けた後、コンテンツ数を時間に対して徐々に、又はすみやかに増大させ、
これによって、前方視認状態に対応した虚像表示、又は視点位置検出状態に対応した虚像表示に復帰させる、ことを含む第２の制御を実行する。

第１の態様では、前方非視認状態あるいは視点ロストが生じたとき、第１の制御を実行して、虚像を非表示としたり、視認性を低下させたり、コンテンツ数を低減したりして対応する。

視認者（運転者等）の視線が、例えば一時的に前方視界外となり、再び前方視界に復帰した場合には、視認者（運転者等）は、前方の遠方まで見通して、実景を確認しようとする。このとき、虚像の表示がないことから、あるいは、虚像の視認性が低いことから、表示コンテンツの虚像が、視認者による実景の視認の妨げになることが抑制される。

言い換えれば、復帰直後における視認者の視野を事前に確保しておき、視認者が、実景を迅速に視認することを可能とし、その後、例えば、徐々に視認性を上げる、又は、コンテンツ数を上げることで、虚像が前方視界を妨害することがない。よって、視認者の違和感が低減され、快適な車両の運転等を行える。この点は、安全運転等にも寄与する。

視認性あるいはコンテンツ数を増大させる態様としては、大別して２つの態様がある。その１つは、上記のとおり、時間に対して徐々に増大させることで、視認者が、ＨＵＤ装置の表示に妨げられずに前方を確認できる期間（例えば、視認性等が変化している期間の前半の期間）を確保する態様である。

他の１つは、時間に対して徐々に増大させるか、すみやかに（急峻に）増大させるかに関係なく、非表示状態／視認性低下状態／コンテンツ数削減状態が所定時間、維持される維持期間を設け、その維持期間の経過後に、時間に対して徐々に増大させるか、すみやかに（急峻に）増大させる態様である。維持期間を強制的に設けることで、視認者が、ＨＵＤ装置の表示に妨げられずに前方を確認できる期間を、確実に設けることができる。

第１の態様に従属する第２の態様において、
前記一時的な視点ロストが生じる場合は、前記視認者が左又は右を見ることで、視線方向が前方視界外になることによって生じる場合を含み、
前記制御部は、
前記第１の制御を実行する際、
実景に重畳するように表示される重畳コンテンツを前記第１の制御の対象とし、非重畳コンテンツは前記第１の制御の対象とせず、
前記視認者が前方の遠方を注視しているときの注視点又は消失点からの距離が小さく、前記視認者から見て遠方側に見える表示コンテンツを前記第１の制御の対象とし、前記注視点又は消失点からの距離が大きく、前記視認者から見て手前側に見える表示コンテンツを前記第１の制御の対象とはしないようにしてもよい。

第２の態様では、視認者が左右を見ることで視線方向が前方視界外になって視点ロストが生じ得ることを確認的に示している。

また、第２の態様では、車速表示等の視認者の近傍に常時表示されるコンテンツ（例えば、近傍常時表示コンテンツ：実景に重畳されない、あるいはする必要のない非重畳コンテンツ）を第１の制御の対象から外すことで、運転操作に必要不可欠な車速表示等について表示態様の変化が生じて、情報の認識性が低下したり、視認者が違和感をおぼえたりすることがないようにしている。

また、第２の態様では、第１の制御において、視認者が前方の遠方を注視している場合における注視点又は消失点からの距離が小さく、視認者から見て遠方側に見える表示コンテンツを第１の制御の対象とする。これにより、視認者が、前方をまっすぐ見て、遠方の実景を見通そうとするとき、視線が、表示されているコンテンツによって妨げられることが抑制される。

なお、上記の「注視点」に代えて、「消失点（遠近法で本来平行である２つ以上の線を平行でなく描くときの、それが交わる地点）」を用いてもよい。なお、注視点と消失点とは異なる概念ではあるが、視認者（運転者等）が遠方を見通すように見ているときの視線方向を示すという点で、同様の意義をもつと考えられる。

第１又は第２の態様に従属する第３の態様において、
前記制御部は、
前記第１の制御を実行して、複数の表示コンテンツの虚像の視認性を低下させる際、急峻に低下させ、又は、時間に対して線形、又は非線形に徐々に低下させ、
かつ、前記複数の表示コンテンツ間で、視認性を低下させるときの変化率に差を設けず、同じ変化率としてもよい。

第３の態様では、前方非視認後、あるいは視点ロスト後以降、第１の制御による視認性低下の対象となるすべての表示コンテンツについて、同じように視認性を低下させる。これにより、例えば、視認者の周辺視で視認され得るコンテンツ毎の異なる変化が抑制され、違和感が低減される。

第１乃至第３の態様の何れか１つに従属する第４の態様において、
前記制御部は、
前記第２の制御を実行して、複数の表示コンテンツについて、視認性を時間に対して徐々に変化させて線形に、又は非線形に増大させる場合に、
前記視認者が前方の遠方を注視しているときの注視点又は消失点からの距離が大きく、前記視認者から見て手前側に見える第１の表示コンテンツと、前記注視点又は消失点からの距離が小さく、前記視認者から見て遠方側に見える第２の表示コンテンツとを区別し、
前記第２の表示コンテンツの視認性の変化率を、前記第１の表示コンテンツの視認性の変化率よりも小さくしてもよい。

第４の態様では、第２の制御によって、前方視認状態に対応した虚像表示、又は視点位置検出状態に対応した虚像表示に復帰させるとき、複数のコンテンツが存在する場合には、手前側コンテンツ（近方側コンテンツ、あるいは近傍コンテンツ：第１の表示コンテンツ）と、遠方側コンテンツ（第２の表示コンテンツ）とを区別し、視認性を上昇させるときの変化率を、遠方側コンテンツ（第２の表示コンテン）の方が、手前側（近方側）コンテンツ（第１の表示コンテンツ）よりも小さくなるようにする。言い換えれば、遠方側コンテンツ（第２の表示コンテンツ）の輝度上昇の速度は、手前側（近方側）コンテンツ（第１の表示コンテンツ）よりも遅く設定される。

これにより、遠くを見通すように見ている視認者の注視点（あるいは消失点）に近い視野範囲で、輝度が立ち上がってくる遠方側コンテンツ（第２の表示コンテンツ）の虚像によって、実景の視認が妨げられることがない。言い換えれば、遠方の注視点（あるいは消失点）に近い視野領域で見通し性を確保し、遠視野での前方視界隠れを、手前側（近傍）の視野領域よりも抑える。したがって、視認者の違和感を低減できる。また、視認者は、遠くの実景を迅速に、はっきりと確認できるため、安全性等も向上する。

第１乃至第３の態様の何れか１つに従属する第５の態様において、
前記制御部は、
前記第２の制御を実行して、複数の表示コンテンツについて、視認性を時間に対して徐々に変化させて線形に、又は非線形に増大させる場合に、
前記視認者が前方の遠方を注視しているときの注視点又は消失点からの距離が大きく、前記視認者から見て手前側に見える第１の表示コンテンツと、前記注視点又は消失点からの距離が小さく、前記視認者から見て遠方側に見える第２の表示コンテンツとを区別し、
前記第２の表示コンテンツについての、前記視認性の変化の終点における視認性の設定値を、前記第１の表示コンテンツについての視認性の変化の終点における視認性の設定値よりも小さく設定し、
かつ、視認性を変化させる期間の長さは、前記第１の表示コンテンツと前記第２表示コンテンツとの間で差を設けず、同じ長さとしてもよい。

第５の態様では、第２の制御によって、複数のコンテンツの視認性を上昇させる場合に、第１の表示コンテンツ（手前側コンテンツ）と第２の表示コンテンツ（遠方側コンテンツ）との間で、視認性を変化させる期間（視認性の遷移期間）については差を設けず、同じ（略同じを含む）とする。

第２の表示コンテンツ（遠方側コンテンツ）については、視認者の遠方の視界を妨げることを抑制するために、最終輝度値を比較的低く設定し、第１の表示コンテンツ（手前側コンテンツ）については、はっきりと視認できるように、最終輝度値を比較的高く設定する。第１、第２の各表示コンテンツにおいて、共通の視認性の遷移期間終了後には、設定した各最終輝度値に達するように、例えば、速度一定で視認性を変化させる。

これによって、各表示コンテンツの視認性は、最終輝度に向かって各々の速度で上昇し、共通の視認性の遷移期間が終了すると、最終輝度値に達し、視認性変化が終了することになる。仮に、一方の表示コンテンツの視認性の変化が終了しているが、他方の表示コンテンツの視認性は徐々に上昇している、という状態となったときは、そのことが、視認者に不自然な視覚を与え、違和感を与える可能性がある。本態様では、視認性が変化する期間は共通であり、各表示コンテンツの視認性変化は、ほぼ同時に終了する。よって、そのような不都合が生じない。

第１乃至第５の何れか１つの態様に従属する第６の態様において、
前記制御部は、
前記第１の制御を開始した後の所定時間の期間は、前記第１の制御を継続する期間としてもよい。

第６の態様では、第１の制御を開始した後、例えば、視認者の視点が前方視界にすぐに復帰したとき、あるいは、すぐに視点位置を再検出したときであっても、所定時間（例えば、０．５秒～１秒）が経過した後でないと、第１の制御から、復帰に向けた第２の制御への切り替えを実施しないこととする。

この期間では、ＨＵＤ装置による虚像は非表示であるか、あるいは、かなり低い視認性に抑えられている。よって、視認者が、実景を確実に視認することができる。

第６の態様に従属する第７の態様において、
前記制御部は、
前記第１の制御を継続する期間において、前方視認状態への復帰、又は視点位置の再取得が検出されたが、所定閾値時間経過することなく、再び前方非視認状態、又は視点ロストの状態に戻ったときは、前記検出に関係なく前記第１の制御を続行してもよい。

第７の態様では、第６の態様における「第１の制御を継続する期間（所定時間の期間）」において、前方視認状態への復帰、又は視点位置の再取得が検出されたが、その検出時間は、所定閾値時間よりも短く、すぐに前方非視認状態、又は視点ロストの状態に戻ってしまったときは、その検出はノイズである可能性が高いため感応せず、第１の制御を続行する。これによって、表示コンテンツの虚像の見た目が瞬時的に変化する等の不都合が生じない。

第１乃至第７の何れか１つの態様に従属する第８の態様において、
前記制御部は、
前記第１の制御を実行している期間において、表示コンテンツの視認性を低下させている、あるいは、非表示としていることを報知する報知画像の虚像を表示させ、
かつ、前記報知画像の虚像は、視認性を低下させている表示コンテンツと同じ輝度、又はそれよりも高い輝度としてもよい。

第８の態様では、表示コンテンツの視認性を低下させる等の制御がなされていることを、報知画像により、視認者に報知する。これにより、視認者は、現状を確実に認識することができる。言い換えれば、表示コンテンツの視認性が低下等していることによって、視認者に不安感を与えるといった事態が生じない。

第１乃至第７の何れか１つの態様に従属する第８の態様において、
前記制御部は、
前記第２の制御を実行して、前記視認性が低下されていた、又は非表示とされていた表示コンテンツの輝度を、時間に対して徐々に増大させる場合において、
周囲の明るさを示す情報、又は明るさを推定可能な情報に基づき、周囲が暗いと判定される場合には、明るいと判定される場合に比べて、目標とする輝度まで増大させるのに要する時間を短くしてもよい。

第８の態様によれば、実景が見にくい暗い環境では、ＨＵＤ装置による表示の復帰速度を速める。これによって、視認者は、暗い環境下で、ＨＵＤ装置の表示を参考にしつつ、安全な運転をすることができる。

第１乃至第９の何れか１つの態様に従属する第１０の態様において、
前記制御部は、
前記第２の制御を実行して、前記視認性が低下されていた、又は非表示とされていた表示コンテンツの輝度を、時間に対して徐々に増大させる場合において、
目標輝度に復帰した後、少なくとも一部の表示コンテンツの虚像については、その虚像を一時的に強調表示してもよい。

第１０の態様では、ＨＵＤ装置の表示（虚像）を復帰させたときに、その表示（虚像）を、強調表示（通常表示よりも誘目性を高めた表示）により表示する。強調表示としては、例えば、色を変えたり、陰影をつけたり、輪郭をはっきりさせたり、サイズを若干大きくしたり、点滅させたりすることが想定され得る。但し、これらは一例であり、これらに限定されるものではない。

これにより、第１、第２の一連の制御が終了して、通常の表示制御に移行したことを、視認者（運転者等）に知らせることができる。よって、視認者に安心感を与えることができる。

第１１の態様において、ヘッドアップディスプレイ装置は、
画像を被投影部材に投影することで、視認者に前記画像の虚像を視認させるヘッドアップディスプレイ（ＨＵＤ）装置であって、
前記画像を生成する画像生成部と、
前記画像を表示する表示部と、
前記画像の表示光を反射して、前記被投影部材に投影する光学部材を含む光学系と、
第１乃至第１０の何れか１つの態様の表示制御装置と、
を有する。

第１１の態様によれば、実景の視認の妨げとならないように、ＨＵＤ装置による表示の態様が運転状況によって変化し、適切な時期に元の表示に戻る、といった、従来にない高度な表示制御を行えるＨＵＤ装置を提供することができる。

第１２の態様において、ヘッドアップディスプレイ装置の表示制御方法は、
画像を被投影部材に投影することで、視認者に前記画像の虚像を視認させるヘッドアップディスプレイ（ＨＵＤ）装置の表示制御方法であって、
前記ＨＵＤ装置による表示領域に表示コンテンツの虚像を表示させているときに、前記視認者が前方の視認状態から、一時的に前方の非視認状態となった場合、又は、前記視認者の視点位置を一時的に喪失する視点ロストが生じた場合に、
少なくとも一部の前記表示コンテンツについては、虚像を非表示とする、
又は、
少なくとも一部の前記表示コンテンツについては、視認性を低下させる、あるいは、視認性を低下させて最終的には虚像を非表示とする、
又は、
前記表示コンテンツの数を低減する、
ことを含む第１の制御を実行し、
視認者が前方視認状態に復帰した場合、又は視点ロスト後に視点位置を再取得した場合に、
非表示とされていた表示コンテンツ、又は視認性が低下されていた表示コンテンツについて、視認性を時間に対して線形、非線形に徐々に増大させ、又は、非表示状態あるいは視認性低下状態の維持期間を設けた後、視認性を増大させ、
又は、
コンテンツ数が低減されていた表示コンテンツについて、コンテンツ数を時間に対して徐々に増大させ、あるいは、コンテンツ数の低減状態の維持期間を設けた後、コンテンツ数を増大させ、
これによって、前方視認状態に対応した虚像表示、又は視点位置検出状態に対応した虚像表示に復帰させる、ことを含む第２の制御を実行する。

第１２の態様によれば、実景の視認の妨げとならないように、ＨＵＤ装置による表示の態様が運転状況によって変化し、適切な時期に元の表示に戻る、といった、従来にない高度な表示制御を実現することができる。

当業者は、例示した本発明に従う態様が、本発明の精神を逸脱することなく、さらに変更され得ることを容易に理解できるであろう。

視点位置の検出に基づく表示制御を実行するＨＵＤ装置の構成の一例を示す図である。 図２は、視認者の周囲の空間を、複数の視野範囲に区分した例を示す図である。 図３（Ａ）、（Ｂ）は、前方非視認又は視点ロストに伴う表示態様の変更の一例を示す図である。 図４（Ａ）、（Ｂ）は、前方非視認又は視点ロストに伴う表示態様の変更の他の例を示す図である。 図５（Ａ）、（Ｂ）は、前方非視認又は視点ロストに伴う表示態様の変更の、さらに他の例を示す図である。 図６（Ａ）、（Ｂ）は、前方非視認又は視点ロストに伴う表示態様の変更の、さらに他の例を示す図である。 図７（Ａ）、（Ｂ）は、前方視認状態への復帰又は視点の再取得に伴う表示態様の変更の一例を示す図である。 図８（Ａ）～（Ｄ）は、前方視認状態への復帰又は視点の再取得に伴う表示態様の変更の他の例（復帰後の強調表示を実施する例）を示す図である。 図９（Ａ）～（Ｈ）は、左折時における、表示態様の変化の一例を示す図である。 図１０（Ａ）、（Ｂ）は、表示コンテンツの視認性（輝度値）の増大方法の一例を示す図である。 図１１（Ａ）、（Ｂ）は、表示コンテンツの視認性（輝度値）の増大方法の他の例を示す図である。 図１２は、前方非視認又は視点ロスト後における視認性制御の一例を示す図である。 図１３は、前方非視認又は視点ロスト後における視認性制御の他の例を示す図である。 ＨＵＤ装置のシステム構成の一例を示す図である。 ＨＵＤ装置を含むシステムの要部構成の一例を示す図である。 表示制御装置による表示制御の手順例を示すフローチャートである。

以下に説明する最良の実施形態は、本発明を容易に理解するために用いられている。従って、当業者は、本発明が、以下に説明される実施形態によって不当に限定されないことを留意すべきである。

図１を参照する。図１は、視点位置の検出に基づく表示制御を実行するＨＵＤ装置の構成の一例を示す図である。図１において、Ｘ方向は、車両１の幅方向（左右方向）を示し、Ｙ方向は、地面（路面）に垂直な方向であり、車両の高さ方向ということもできる。Ｚ方向は、車両の前方向（あるいは前後方向）である。

図１に示されるように、ＨＵＤ装置１００は、表示部（例えば、光透過型のスクリーンや液晶表示装置等）１０１（表示面１０２を備える）と、反射鏡１０３と、表示光を投影する光学部材としての曲面ミラー（例えば凹面鏡であり、反射面は自由曲面である場合もある）１０５と、を有する。表示部１０１（液晶パネル等）１０１の表示面１０２に表示された画像は、反射鏡１０３、曲面ミラー１０５を経て、被投影部材としてのウインドシールド２に投影される。図１において、符号４は投影領域を示す。なお、ＨＵＤ装置１００は、曲面ミラーを複数設けてもよく、本実施形態のミラー（反射光学素子）に加えて、又は本実施形態のミラー（反射光学素子）の一部（又は全部）に代えて、レンズなどの屈折光学素子、回折光学素子などの機能性光学素子を含んでいてもよい。

画像の表示光の一部は、ウインドシールド２で反射されて、予め設定されたアイボックスＥＢ内（あるいはＥＢ上）に位置する視認者（運転者、ユーザー等）の視点（目）Ａに入射され、車両１の前方に結像することで、表示部１０１の表示面１０２に対応する仮想的な虚像表示面ＰＳの表示領域（ＨＵＤ表示領域）１０において、虚像Ｖが表示される。

なお、アイボックスＥＢは立体的なものであるが、図１では、説明の便宜上、アイボックスＥＢは四角形として描いている。

視点Ａは、瞳撮像カメラ５０によって、その位置が検出される。また、アイボックスＥＢ内は、複数の視域（分割領域）Ｊ１～Ｊ９に分割されている。各視域Ｊ１～Ｊ９を単位として、視点位置（あるいは視線方向）を検出することが可能である。なお、各視域毎にワーピングパラメータを設定し、視点位置の移動に合わせて使用するワーピングパラメータを変更することで、視点位置追従ワーピングを実施することができる。

図２を参照する。図２は、視認者の周囲の空間を、複数の視野範囲に区分した例を示す図である。図２では、視認者８はまっすぐ前を向いた状態である。また、図２では、視認者８を、Ｙ方向（高さ方向）から見た平面視で描いている。また、視点Ａは、左右の各目の中間に位置するものとして描いている。なお、前方視野は、前方視界等という場合がある。

図２において、Ｚ１は、前方視野範囲を示し、Ｚ２及びＺ４は周辺視野範囲を示し、Ｚ３及びＺ５は視野外の範囲を示す。視認者８の視点Ａを通って前方（Ｚ方向）に延びる直線を基準として、θ１の角度をなす範囲が、前方視野Ｚ１の左半分となる。また、θ２とθ１との差に相当する範囲が、周辺視野範囲Ｚ２となる。

視認者（ここでは運転者とする）８が、車両１を運転中に、十字路やＴ字路が前方に見えたことによって左右を確認する場合、あるいは左折／右折をする場合等には、顔の向きが変わり、視線（視点）は大きく移動する。例えば、左折の場合は、視点位置（視線方向）は、Ｚ１からＺ２、さらにＺ３まで進み、左折が終わると、Ｚ３からＺ２、さらにＺ１へと復帰する。言い換えれば、前方視認状態から前方非視認状態となり（あるいは、前方視界から周辺視界へと外れ）、その後、前方視認状態（あるいは前方視界）に復帰する。

このような視点位置（視線方向）の移動があったときは、周辺視野範囲Ｚ２、Ｚ４、あるいは視野外の範囲Ｚ３、Ｚ５において、瞳撮像カメラ５０による視点位置の検出ができず、一時的に視点（視点位置）を喪失する視点ロストが生じる場合が起こり易い。なお、視点ロストが生じても、ＨＵＤ装置１００は、例えば、ＥＣＵから得られる車両１の操舵角情報等に基づいて、車両１の左折や右折の状況を判定することは可能である。

視点位置（視線方向）の前方視界からの逸脱（あるいは視点ロスト）が生じ、その後、視点（視線）が元の状態（元の位置）に復帰する場合には、視認者（運転者）は、復帰直後に、前方を、遠くまで見通して、実景を視認し、道路の状況等を確認しようとする。

よって、視認者によるその実景の視認を、ＨＵＤ装置の表示が妨げることのないように配慮する必要がある。また、復帰後の適切なタイミングにて、元の表示に戻して、視認者に、情報を適切なタイミングにて提供することも重要である。この点を考慮して、本発明では、従来にない高度な表示制御が実行される。

言い換えれば、制御部（図１５の符号１０８）は、ＨＵＤ装置１００による表示領域１０（図１参照）に表示コンテンツの虚像Ｖを表示させているときに、視認者が前方視認状態から、一時的に前方非視認状態となった場合、又は、視認者の視点を一時的に喪失する視点ロストが生じた場合に、少なくとも一部の表示コンテンツについては、虚像を非表示とする、又は、少なくとも一部の前記表示コンテンツについては、視認性を低下させる、あるいは、視認性を低下させて最終的には虚像を非表示とする、又は、表示コンテンツの数を低減することを含む「第１の制御」を実行する。以下、具体的に説明する。

図３を参照する。図３（Ａ）、（Ｂ）は、前方非視認又は視点ロストに伴う表示態様の変更の一例を示す図である。

図３（Ａ）の運転シーンでは、直線状の道路を進行している車両１の前方に十字路が見えており、運転者（視認者）は、左右を確認する必要がある。運転者（視認者）が左又は右を見ることで、視点位置（視線方向）が前方視界外になり、あるいは、一時的な視点ロストが生じる場合も想定され得る。

制御部（図１５の符号１０８）は、上記の「第１の制御」を実行する際、実景に重畳するように表示される重畳コンテンツを前記第１の制御の対象とし、非重畳コンテンツは前記第１の制御の対象とせず、視認者が前方の遠方を注視しているときの注視点又は消失点からの距離が小さく、視認者から見て遠方側に見える表示コンテンツを第１の制御の対象とし、注視点又は消失点からの距離が大きく、視認者から見て手前側に見える表示コンテンツを前記第１の制御の対象とはしない。なお、距離の大小の判定に際しては、注視点等と表示が重畳される実景との距離を検出し、閾値を適用して判定してよい。また、簡易的に、液晶表示装置等の表示面の縦画角（実空間における路面に垂直な高さ方向に対応する縦方向の長さ）の半分を基準として、画像が上にあるか下にあるかによって、遠方側コンテンツであるか、手前側（近方側）コンテンツであるかを判定してもよい。これらは例示であり、これらに限定されるものではない。

図３（Ａ）に示すように、表示領域（ＨＵＤ表示領域）１０の手前側には、非重畳コンテンツである車速表示ＳＰと、制限速度表示ＬＭとが表示されている。遠方側には、歩行者に重畳される注意喚起表示ＣＵ１と、遠方の先行車両に重畳される注意喚起表示ＣＵ２と、進路を示すナビゲーション表示（複数の矢印状の表示要素で構成される）ＮＶと、建物情報ＰＯＩとが表示されている。

図３（Ａ）では、非重畳コンテンツである車速表示ＳＰ、手前側に見える制限速度表示ＬＭは、第１の制御の対象から外される。遠方側に表示される、注意喚起表示ＣＵ１及びＣＵ２、ナビゲーション表示ＮＶ、及び建物情報ＰＯＩが第１の制御の対象となる。図３（Ｂ）では、これら３つの表示は、いっせいに非表示状態となっている。この表示態様の変化は、図４の例では、すみやかに（急峻）に行われる（時間に対して徐々に視認性が低下する例は図５にて説明する）。

次に、図４を参照する。図４（Ａ）、（Ｂ）は、前方非視認又は視点ロストに伴う表示態様の変更の他の例を示す図である。図４の運転シーンは、図３と同じである。注意喚起表示ＣＵ１及びＣＵ２、ナビゲーション表示ＮＶ、及び建物情報ＰＯＩが第１の制御の対象となる点も共通する。

但し、図４では、ナビゲーション表示（複数の矢印状の表示要素で構成される）ＮＶについては、表示コンテンツの数を減少させる、という方法が適用される。ここで、複数の矢印状の表示要素の各々が１つの表示コンテンツを構成する。図４（Ａ）の例では、ナビゲーション表示ＮＶにおける遠方側の４つの表示要素は非表示となっている。これによって、表示コンテンツの数が低減されている。この低減に関しては、すみやかに（急峻に）低減してもよく、時間に対して徐々に低減してもよい。図４（Ｂ）では、図４（Ａ）で残っていた３つの表示要素も非表示となる。この状態は図３（Ｂ）の状態と同じである。

次に、図５を参照する。図５（Ａ）、（Ｂ）は、前方非視認又は視点ロストに伴う表示態様の変更の、さらに他の例を示す図である。図５の運転シーンは図３と同じであり、第１の制御の対象となる表示コンテンツも図３と同じである。

但し、図５（Ａ）では、遠方側に表示される、注意喚起表示ＣＵ１及びＣＵ２、ナビゲーション表示ＮＶ、及び建物情報ＰＯＩを非表示とする際、時間に対して徐々に視認性（具体的には輝度）を低下させている。図５（Ａ）において、各表示は、視認性（輝度）が低下した状態であることを明確化するために破線にて記載している。図５（Ｂ）では、図５（Ａ）の視認性を低下させる制御の後、最終的に、各表示が非表示となる。

第１の制御については、変形、応用が可能である。例えば、第１の制御を実行して、複数の表示コンテンツの虚像の視認性を低下させる際、急峻に低下させ、又は、時間に対して線形、又は非線形に徐々に低下させ、かつ、複数の表示コンテンツ間で、視認性を低下させるときの変化率に差を設けず、同じ変化率としてもよい。

この場合には、前方非視認後、あるいは視点ロスト後以降、第１の制御による視認性低下の対象となるすべての表示コンテンツについて、同じように視認性を低下させる。これにより、例えば、視認者の周辺視で視認され得るコンテンツ毎の異なる変化が抑制され、違和感が低減される。

次に、図６を参照する。図６（Ａ）、（Ｂ）は、前方非視認又は視点ロストに伴う表示態様の変更の、さらに他の例を示す図である。図６（Ａ）、（Ｂ）では、第１の制御を実行している期間において、表示コンテンツの視認性を低下させている、あるいは、非表示としていることを報知する報知画像の虚像１２、１３（「低輝度表示中」、「非表示中」という表記）を表示している。

報知画像の虚像１２、１３は、視認性を低下させている表示コンテンツ（図６（Ａ）のナビゲーション表示ＮＶ）と同じ輝度、又はそれよりも高い輝度としてもよい。

図６の例表示コンテンツの視認性を低下させる等の制御がなされていることを、報知画像により、視認者に報知する。これにより、視認者は、現状を確実に認識することができる。言い換えれば、表示コンテンツの視認性が低下等していることによって、視認者に不安感を与えるといった事態が生じない。

このように、前方非視認状態あるいは視点ロストが生じたとき、第１の制御を実行して、虚像を非表示としたり、視認性を低下させたり、コンテンツ数を低減したりして対応する。

視認者（運転者等）の視線が、例えば一時的に前方視界外となり、再び前方視界に復帰した場合には、視認者（運転者等）は、前方の遠方まで見通して、実景を確認しようとする。このとき、虚像の表示がないことから、あるいは、虚像の視認性が低いことから、表示コンテンツの虚像が、視認者による実景の視認の妨げになることが抑制される。

次に、「第２の制御」について説明する。第２の制御は、視認者が前方視認状態に復帰した場合、又は視点ロスト後に視点位置を再取得した場合に、非表示とされていた表示コンテンツ、又は視認性が低下されていた表示コンテンツについて、視認性を時間に対して線形、非線形に徐々に増大させ、又は、非表示状態あるいは視認性低下状態を維持する期間を設けた後、視認性を増大させ、又は、コンテンツ数が低減されていた表示コンテンツについて、コンテンツ数を時間に対して徐々に増大させ、あるいはコンテンツ数の低減状態の維持期間を設けた後にコンテンツ数を増大させ、これによって、前方視認状態に対応した虚像表示、又は視点位置検出状態に対応した虚像表示に復帰させることを含む制御である。

第１の制御によって、復帰直後における視認者の視野（視界）は事前に確保されている。よって視認者が実景を迅速に視認することが可能である。その後、第２の制御を行って、例えば、徐々に視認性を上げる、又はコンテンツ数を上げることで、視認性が上昇してくる表示（虚像）が前方視界を妨害することが抑制される。よって、視認者の違和感が低減され、快適な車両の運転等を行える。この点は、安全運転等にも寄与する。以下、具体的に説明する。

次に、図７を参照する。図７（Ａ）、（Ｂ）は、前方視認状態への復帰又は視点の再取得に伴う表示態様の変更の一例を示す図である。図７（Ａ）、（Ｂ）は、先に示した図３（Ｂ）、図４（Ｂ）、図５（Ｂ）あるいは図６（Ｂ）の後の（それらに続く）表示制御の例を示している。

図７の例では、視認者（運転者）が前方視認状態に復帰した場合、又は視点ロスト後に視点位置を再取得した場合に、非表示とされていた表示コンテンツ（又は視認性が低下されていた表示コンテンツ）について、視認性を時間に対して線形、非線形に徐々に増大させる制御が実行される。言い換えれば、図７（Ａ）では、図３（Ｂ）、（図４（Ｂ）、図５（Ｂ）、図６（Ｂ）にて非表示とされていた各表示コンテンツについて、視認性を徐々に増大させて元の表示に戻している。図７（Ｂ）では、図３（Ａ）の表示に復帰している。視認性が徐々に戻ることから、戻っている期間の例えば前半では、視認者の前方の視認（特に遠方を見通すように見るときの遠景の視認）が妨げられない。

なお、図４（Ａ）のような表示コンテンツの数が減少された状態が維持されているとき（図４（Ｂ）のように最終的に非表示とならないとき）には、その表示コンテンツ数の低減によって非表示とされている表示コンテンツについて、上記と同様の制御を実行してもよい。

以上の例は、表示コンテンツの視認性（又は表示コンテンツの数）を徐々に増大させる例であるが、これに限定されるものではない。時間に対して、すみやかに（急峻に）に視認性を上昇させる場合もあり得る。但し、前方視認への復帰の直後、あるいは視点再検出の直後に、元の視認性の表示に戻したのでは、結局、視認者（運転者）が前方を確認するときに表示が復活しており、前方の実景の視認が妨げられることになる。これでは第１の制御を実施する意味がない。

また、表示コンテンツの視認性（又は表示コンテンツの数）を徐々に増大させる場合であっても、その変化がある程度、急であるときは、視認者が前方を確認できる期間は短くなってしまう。

そこで、視認性（コンテンツ数）を時間に対して徐々に増大させるか、すみやかに（急峻に）増大させるかに関係なく、非表示状態／視認性低下状態／コンテンツ数削減状態が所定時間、維持される維持期間を設け、その維持期間の経過後に、時間に対して徐々に増大させるか、すみやかに（急峻に）増大させてもよい。この場合、維持期間が強制的に設定される。よって、視認者が、ＨＵＤ装置の表示に妨げられずに前方を確認できる期間を確実に設けることができる。

なお、上記の「維持期間」は、後述する図１２の例では、期間Ｔｂ（時刻ｔ２～ｔ３）に相当する。図１２の例では、時刻ｔ２で前方視認（あるいは視点再検出）の状態となるが、視認性はすぐには元に戻らず、期間Ｔｂ（時刻ｔ２～ｔ３）の後に戻りが開始されることになる。図１２の例では、視認性は徐々に増大している（但し、急峻に戻す場合もあり得る）。

第２の制御については、いくつかの変形、応用例（例えば、複数の表示コンテンツについて制御を実施する場合の取り扱い等）があるが、これについては後述する。

次に、図８を参照する。図８（Ａ）～（Ｄ）は、前方視認状態への復帰又は視点の再取得に伴う表示態様の変更の他の例（復帰後の強調表示を実施する例）を示す図である。なお、図８（Ａ）～（Ｄ）では、説明の便宜上、表示（虚像）の変化のみを示し、背景の実景は記載していない。

図８の例では、第２の制御を実行して、視認性が低下されていた、又は非表示とされていた表示コンテンツの輝度を、時間に対して徐々に増大させる場合において、目標輝度に復帰した後、少なくとも一部の表示コンテンツの虚像については、その虚像を一時的に強調表示する。

言い換えれば、ＨＵＤ装置１００の表示（虚像）を復帰させたときに、その表示（虚像）を、強調表示（通常表示よりも誘目性を高めた表示）により表示する。ここで、強調表示としては、例えば、色を変えたり、陰影をつけたり、輪郭をはっきりさせたり、サイズを若干大きくしたり、点滅させたりすることが想定され得る。但し、これらは一例であり、これらに限定されるものではない。

これにより、第１、第２の一連の制御が終了して、通常の表示制御に移行したことを、視認者（運転者等）に知らせることができる。よって、視認者に安心感を与えることができる。

図８（Ａ）では、第１の制御の対象となっていた、注意喚起表示ＣＵ１及びＣＵ２、ナビゲーション表示ＮＶ、及び建物情報ＰＯＩの視認性が、時間に対して徐々に増加している。図８（Ｂ）では元の表示の輝度に戻る。

図８（Ｃ）では、注意喚起表示ＣＵ１及びＣＵ２、ナビゲーション表示ＮＶ、及び建物情報ＰＯＩの全部について強調表示（ここでは輪郭強調）がなされる。その後、図８（Ｂ）に戻る。

図８（Ｄ）では、ナビゲーション表示ＮＶのみが強調表示の対象とされる。その後、図８（Ｂ）に戻る。

次に、図９を参照する。図９（Ａ）～（Ｈ）は、左折時における、表示態様の変化の一例を示す図である。図９（Ａ）では、前方に、現在車両１が進行中の道路１４を左右に横切る道路１６が見えている。また、表示領域（ＨＵＤ表示領域）１０において、左折を案内する矢印のナビゲーション表示（以下、左折表示という）１５が表示されている。

図９（Ｂ）では、車両１が左折する道路１６に近づいたことから、左折表示１５の視認性を低下させる。図９（Ｃ）では、車両１が左折中であり、この状態では、左折表示１５は非表示である。

図９（Ｄ）では、車両１は左折を終えた直後であり、前方に、直線状の道路１６、及び建物１７が見えている。この状態では、ＨＵＤ装置１００による表示は非表示状態を保っている（この点については、図１２を用いて後述する）。

図９（Ｅ）では、ナビゲーション用矢印の表示１５ａ、建物１７の情報（ＰＯＩ情報）の表示（ＰＯＩ表示）１８、及び目的地（あるいは景勝地等）を示す表示（ＰＯＩ表示）１９が表示される。但し、視認者（運転者）の前方確認をさまたげないように、まず、視認性を低下させた状態で表示する。その後、時間に対して徐々に視認性（輝度）を上昇させていく、という制御が実行される。この間、視認者（運転者）は、視界を妨げられることなく、前方の実景等を確認できる。

図９（Ｆ）では、元の表示（通常状態の表示）に戻る。図９（Ｇ）では、全部の表示について強調表示がなされる。図９（Ｈ）では、強調表示が解除され、図９（Ｆ）と同様の通常状態の表示に戻る。

次に、第２の制御の変形、応用例について説明する。図１０を参照する。図１０（Ａ）、（Ｂ）は、表示コンテンツの視認性（輝度値）の増大方法の一例を示す図である。

図１０の例では、第２の制御を実行して、複数の表示コンテンツについて、視認性を時間に対して徐々に変化させて線形に、又は非線形に増大させる場合に、視認者が前方の遠方を注視しているときの注視点又は消失点からの距離が大きく、視認者から見て手前側に見える第１の表示コンテンツと、注視点又は消失点からの距離が小さく、視認者から見て遠方側に見える第２の表示コンテンツとを区別し、第２の表示コンテンツの視認性の変化率を、第１の表示コンテンツの視認性の変化率よりも小さくする。

これにより、遠くを見通すように見ている視認者の注視点（あるいは消失点）に近い視野範囲で、輝度が立ち上がってくる遠方側コンテンツ（第２の表示コンテンツ）の虚像によって、実景の視認が妨げられることがない。言い換えれば、遠方の注視点（あるいは消失点）に近い視野領域で見通し性を確保し、遠視野での前方視界隠れを、手前側（近傍）の視野領域よりも抑える。したがって、視認者の違和感を低減できる。また、視認者は、遠くの実景を迅速に、はっきりと確認できるため、安全性等も向上する。

例えば、前側（近方側）コンテンツ（第１の表示コンテンツ）については、図１０（Ａ）の特性線Ｑ１で示されるように視認性を変化させ、一方、遠方側コンテンツ（第２の表示コンテン）については、図１０（Ａ）の特性線Ｑ２のように視認性を変化させる。

視認性の変化は、線形、非線形を問わない。図１０（Ｂ）の特性線Ｑ１０は、視認性の線形の変化の一例を示す。特性線Ｑ２０は非線形の変化の一例を示す。

次に、図１１を参照する。図１１（Ａ）、（Ｂ）は、表示コンテンツの視認性（輝度値）の増大方法の他の例を示す図である。

図１１の例では、第２の制御を実行して、複数の表示コンテンツについて、視認性を時間に対して徐々に変化させて線形に、又は非線形に増大させる場合に、図１０の例と同様に、視認者から見て手前側に見える第１の表示コンテンツと、視認者から見て遠方側に見える第２の表示コンテンツとを区別し、第２の表示コンテンツについての、視認性の変化の終点における視認性の設定値を、第１の表示コンテンツについての視認性の変化の終点における視認性の設定値よりも小さく設定し、かつ、視認性を変化させる期間の長さは、第１の表示コンテンツと第２表示コンテンツとの間で差を設けず、同じ長さとする。

図１１（Ａ）の線形の変化例では、手前側の第１の表示コンテンツの視認性の変化が特性線Ｑ３で示され、遠方側の第２の表示コンテンツの視認性の変化が特性線Ｑ４で示されている。特性線Ｑ３における視認性の変化の終点における設定値（輝度値）は、Ｐ１に設定され、特性線Ｑ４における視認性の変化の終点における設定値（輝度値）は、Ｐ２（＜Ｐ１）に設定されている。視認性が変化する期間は共にｔ０～ｔ１の期間であり、長さ（時間）は同じ（略同じを含む）である。

図１１（Ｂ）の非線形の変化例では、手前側の第１の表示コンテンツの視認性の変化が特性線Ｑ５で示され、遠方側の第２の表示コンテンツの視認性の変化が特性線Ｑ６で示されている。特性線Ｑ５における視認性の変化の終点における設定値（輝度値）は、Ｐ３に設定され、特性線Ｑ６における視認性の変化の終点における設定値（輝度値）は、Ｐ４（＜Ｐ３）に設定されている。視認性が変化する期間は共にｔ０～ｔ１の期間であり、長さ（時間）は同じ（略同じを含む）である。

第２の表示コンテンツ（遠方側コンテンツ）については、視認者の遠方の視界を妨げることを抑制するために、最終輝度値を比較的低く設定する。例えば図１０（Ａ）、（Ｂ）のＰ２、Ｐ４に設定する。一方、第１の表示コンテンツ（手前側コンテンツ）については、はっきりと視認できるように、最終輝度値を比較的高く設定する。例えば、図１０（Ａ）、（Ｂ）のＰ１、Ｐ３に設定する。第１、第２の各表示コンテンツにおいて、共通の視認性の遷移期間（時刻ｔ０～ｔ１の期間）の終了後には、設定した各最終輝度値（図１０（Ａ）、（Ｂ）のＰ１～Ｐ４）に達するように、例えば、速度一定で視認性を変化させる。これによって、各表示コンテンツの視認性は、最終輝度に向かって各々の速度で上昇し、共通の視認性の遷移期間が終了すると、最終輝度値に達し、視認性変化が終了することになる。

ここで、仮に、一方の表示コンテンツの視認性の変化が終了しているが、他方の表示コンテンツの視認性は徐々に上昇している、という状態となったときは、そのことが、視認者に不自然な視覚を与え、違和感を与える可能性がある。図１１の例では、視認性が変化する期間は共通であり、各表示コンテンツの視認性変化は、ほぼ同時に終了する。よって、そのような不都合が生じない。

次に、図１２を参照する。図１２は、前方非視認又は視点ロスト後における視認性制御の一例を示す図である。図１２において、上側には、時間に対する、ＨＵＤ装置１００による表示の視認性の変化が示されている。下側には、時間軸上のある時点で、視点検出／前方視認の状態であるか、あるいは、視点ロスト／前方非視認の状態であるかが示されている。

図１２の例では、第１の制御を開始した後の所定時間の期間は、第１の制御を継続する期間（継続期間）とする。言い換えれば、第１の制御を開始した後、例えば、視認者の視点が前方視界にすぐに復帰したとき、あるいは、すぐに視点位置を再検出したときであっても、所定時間（例えば、０．５秒～１秒）が経過した後でないと、第１の制御から、復帰に向けた第２の制御への切り替えを実施しないこととする。これによって、視認者が、前方の実景や周囲の状況等を確認できる期間が確実に設けられる。

図１２において、時刻ｔ１が第１の制御の開始時点である。時刻ｔ１にＨＵＤ装置１００による表示の視認性が零となる。言い換えれば、時刻ｔ１にて表示が非表示とされる。

時刻ｔ１からｔ３までの期間が、非表示状態（あるいは低視認性状態）を継続する「継続期間」である。言い換えれば、図１２の期間Ｔａ（時刻ｔ１～ｔ２）と、期間Ｔｂ（時刻ｔ２～ｔ３）を合わせた期間が「継続期間」であり、例えば、０．５秒～１秒に設定される。

図１２の例では、時刻ｔ１～ｔ２（期間Ｔａ）では、視点ロスト／前方非視認の状態であるが、時刻ｔ２に、視点検出／前方視認の状態へと状況が変化する。但し、時刻ｔ２でただちに視認性を増大させる制御を開始せず、期間Ｔｂ（時刻ｔ２～ｔ３）の後に、開始する。

先に説明したように、期間Ｔｂは、非視認（又は低視認性状態）が維持される「維持期間」である。図１２の例は、この「維持期間」が、第１の制御の開始時点（時刻ｔ１）後に設定される「継続期間」に含まれている例である。

次に、図１３を参照する。図１３は、前方非視認又は視点ロスト後における視認性制御の他の例を示す図である。図１３の例では、第１の制御を開始した後、前方視認状態への復帰、又は視点位置の再取得が検出されたが（期間Ｔｃ）、所定閾値時間経過することなく、再び前方非視認状態、又は視点ロストの状態に戻っている。ここでは、所定閾値時間は、期間Ｔａと同じ時間であるとする。図１３の例では、Ｔｃ＜Ｔａである。

この場合、その検出はノイズである可能性が高いため感応せず、第１の制御を続行してもよい。よって、表示コンテンツの虚像の見た目が瞬時的に変化する等の不都合が生じず、視認者の違和感を抑制することができる。

本発明は、さらに変形、応用が可能である。例えば、第２の制御を実行して、視認性が低下されていた、又は非表示とされていた表示コンテンツの輝度を、時間に対して徐々に増大させる場合等において、周囲の明るさを示す情報、又は明るさを推定可能な情報に基づき、周囲が暗いと判定される場合には、明るいと判定される場合に比べて、目標とする輝度まで増大させるのに要する時間を短くしてもよい。

実景が見にくい暗い環境では、ＨＵＤ装置１００による表示の復帰速度を速める。これによって、視認者（運転者）は、暗い環境下で、ＨＵＤ装置１００の表示を参考にしつつ、安全な運転をすることができる。

次に、図１４を参照する。図１４は、ＨＵＤ装置のシステム構成の例を示す図である。ＨＵＤ装置１００は、Ｉ／Ｏインタフェース３０と、プロセッサ（表示制御装置）１６０と、画像処理部２１０と、画像表示部（表示部）１０１と、記憶部３００と、を有する。

Ｉ／Ｏインタフェース３０には、道路情報データベース４０３と、自車位置検出部４０５と、車外センサ４０７と、視線方向検出部４０９と、目位置検出部４１１と、携帯情報端末４１３と、車両ＥＣＵ４１５と、が接続される。

車両ＥＣＵ４１５には、ピッチ角センサ４１７や舵角センサ４１９等から、適宜、必要な情報が提供される。また、Ｉ／Ｏインタフェース３０は、社外通信接続機器４２０と接続される。

また、記憶部３００には、視認性／コンテンツ数の変更及び復帰の制御モジュール（コンピュータプログラム）３２６が記憶（搭載）されている。視認性／コンテンツ数の変更及び復帰の制御モジュール３２６は、第１の制御の実行部３２７と、第２の制御の実行部３２９とを有する。プロセッサ（表示制御装置）１６０が、視認性／コンテンツ数の変更及び復帰の制御モジュール（コンピュータプログラム）３２６に従って動作することで、機能ブロックとしての制御部（表示態様制御部：図１５の符号１０８）が構築される。

次に、図１５を参照する。ＨＵＤ装置を含むシステムの要部構成の一例を示す図である。車両１には、瞳撮像カメラ（顔撮像カメラ等の名称は問わない）５０と、瞳撮像カメラ５０からの撮像信号に基づいて、視認者（運転者）８の視線位置（視線方向）の情報（視線位置情報）を取得（検出）する視線位置取得部５２と、視線がどの視野範囲にあるかの情報（視野範囲情報）を取得（検出）する視野範囲取得部９４と、視線の移動方向の情報（視線移動方向情報）を取得（検出）する視線移動方向取得部９６と、運転状況判定部９８と、表示制御装置（プロセッサ）１６０と、ＨＵＤ装置１００の投光部２００（光源２０２を備える）と、を有する。表示制御装置（プロセッサ）１６０は、制御部（表示態様制御部）１０８を有する。

運転状況判定部９８には、一例として、周囲撮像カメラ５４の撮像信号が入力され、また、車両１を統括的に制御すると共に、各種の車両情報等を収集する車載ＥＣＵ（車載電子制御ユニット）４１５からの各種の情報（例えば、操舵角情報、前照灯のオン／オフ等を示す照明情報等）が入力され、また、必要に応じて、生体情報検出部（例えば、運転者１の腕に取り付けられる脈拍計）からの生体情報が入力されてもよい。

表示制御装置（プロセッサ）１６０における制御部（表示態様制御部）１０８は、例えば、液晶表示装置等の表示階調や、投光部２００の光源２０２の発光輝度を制御等することで、ＨＵＤ装置１００による表示画像（虚像）の視認性を、例えば線形に、または非線形に制御する。但し段階的（ステップ的）な制御であってもよい。

次に、図１６を参照する。図１６は、表示制御装置による表示制御の手順例を示すフローチャートである。

まず、視線検出処理が実行される（ステップＳ１）。視線検出処理では、運転者の顔画像が入力され（ステップＳ１１）、視認者（運転者等）の視線の向きが検出され（ステップＳ１２）、続いて、視線の移動が検出される（ステップＳ１３）。

次に、視線の移動方向／視野範囲の検出処理が実行される（ステップＳ２）。視線の移動方向／視野範囲の検出処理では、視線の移動方向の推定（検出）が実行され（ステップＳ２１）、視認者の視線が、どの視野範囲（図２のＺ１～Ｚ５）にあるかが検出される。

次に、表示制御処理を実行する（ステップＳ３）。表示制御処理では、表示コンテンツの画像（コンテンツ画像）が入力され（ステップＳ３１）、続いて、視認性／コンテンツ数の変更制御が必要であるか否かが判定される（ステップＳ３２）。Ｎのときは、ステップＳ３６に移行し、Ｙのときは、ステップＳ３３に移行する。

ステップＳ３３では、視認性／コンテンツ数変更処理が実行される。この処理には、第１の制御の実行（ステップＳ３４）、及び第２の制御の実行（ステップＳ３５）が含まれる。ステップＳ３６では、例えば、コンテンツ画像の表示処理等が実行される（ステップＳ３６）。

本発明は、左右の各眼に同じ画像の表示光を入射させる単眼式、左右の各眼に、視差をもつ画像を入射させる視差式のいずれのＨＵＤ装置においても、また、３ＤＨＵＤ装置においても使用可能である。

本明細書において、車両という用語は、広義に、乗り物としても解釈し得るものである。また、ナビゲーションに関する用語（例えば標識等）についても、例えば、車両の運行に役立つ広義のナビゲーション情報という観点等も考慮し、広義に解釈するものとする。また、ＨＵＤ装置には、シミュレータ（例えば、航空機のシミュレータ、ゲーム装置としてのシミュレータ等）として使用されるものも含まれるものとする。

本発明は、上述の例示的な実施形態に限定されず、また、当業者は、上述の例示的な実施形態を特許請求の範囲に含まれる範囲まで、容易に変更することができるであろう。

１・・・車両（自車両）、２・・・被投影部材（反射透光部材、ウインドシールド等）、４・・・投影領域、１０・・・表示領域（ＨＵＤ表示領域）、３０・・・Ｉ／Ｏインタフェース、５０・・・瞳撮像カメラ、５２・・・視線位置検出部、５４・・・周辺撮像カメラ、５８・・・生体情報検出部、９４・・・視野範囲検出部、９６・・・視線移動方向検出部、９８・・・運転状況判定部、１００・・・ＨＵＤ装置、１０１・・・画像表示部（表示部）、１０２・・・表示面（画像表示面）、１０３・・・反射ミラー、１０５・・・曲面ミラー（凹面鏡等）、１０８・・・制御部（表示態様制御部）、１６０・・・表示制御装置（プロセッサ）、２００・・・投光部、２０２・・・光源、２１０・・・画像処理部、３００・・・記憶部（メモリ）、３２６・・・視認性／コンテンツ数の変更及び復帰の制御モジュール、３２６・・・第１の制御の実行部、３２９・・・第２の制御の実行部、４１５・・・車載ＥＣＵ、４２０・・・車外通信接続機器。

Claims (12)

1. 画像を被投影部材に投影することで、視認者に前記画像の虚像を視認させるヘッドアップディスプレイ（ＨＵＤ）装置における表示制御を実行する表示制御装置であって、
   視認者の視点位置に基づいて前記虚像の表示態様を制御する制御部を有し、
   前記制御部は、
   前記ＨＵＤ装置による表示領域に表示コンテンツの虚像を表示させているときに、前記視認者が前方視認状態から、一時的に前方非視認状態となった場合、又は、前記視認者の視点を一時的に喪失する視点ロストが生じた場合に、
   少なくとも一部の前記表示コンテンツについては、虚像を非表示とする、
   又は、
   少なくとも一部の前記表示コンテンツについては、視認性を低下させる、あるいは、視認性を低下させて最終的には虚像を非表示とする、
   又は、
   前記表示コンテンツの数を低減する、
   ことを含む第１の制御を実行し、
   視認者が前方視認状態に復帰した場合、又は視点ロスト後に視点位置を再取得した場合に、
   非表示とされていた表示コンテンツ、又は視認性が低下されていた表示コンテンツについて、視認性を時間に対して徐々に増大させ、又は、非表示状態あるいは視認性低下状態を維持する期間を設けた後、視認性を時間に対して徐々に、又はすみやかに増大させ、
   又は、
   コンテンツ数が低減されていた表示コンテンツについて、コンテンツ数を時間に対して徐々に増大させ、あるいは、コンテンツ数の低減状態の維持期間を設けた後、コンテンツ数を時間に対して徐々に、又はすみやかに増大させ、
   これによって、前方視認状態に対応した虚像表示、又は視点位置検出状態に対応した虚像表示に復帰させる、ことを含む第２の制御を実行する、
   ことを特徴とする表示制御装置。
2. 前記一時的な視点ロストが生じる場合は、前記視認者が左又は右を見ることで、視線方向が前方視界外になることによって生じる場合を含み、
   前記制御部は、
   前記第１の制御を実行する際、
   実景に重畳するように表示される重畳コンテンツを前記第１の制御の対象とし、非重畳コンテンツは前記第１の制御の対象とせず、
   前記視認者が前方の遠方を注視しているときの注視点又は消失点からの距離が小さく、前記視認者から見て遠方側に見える表示コンテンツを前記第１の制御の対象とし、前記注視点又は消失点からの距離が大きく、前記視認者から見て手前側に見える表示コンテンツを前記第１の制御の対象とはしない、
   ことを特徴とする、請求項１に記載の表示制御装置。
3. 前記制御部は、
   前記第１の制御を実行して、複数の表示コンテンツの虚像の視認性を低下させる際、急峻に低下させ、又は、時間に対して線形、又は非線形に徐々に低下させ、
   かつ、前記複数の表示コンテンツ間で、視認性を低下させるときの変化率に差を設けず、同じ変化率とする、ことを特徴とする、請求項１又は２に記載の表示制御装置。
4. 前記制御部は、
   前記第２の制御を実行して、複数の表示コンテンツについて、視認性を時間に対して徐々に変化させて線形に、又は非線形に増大させる場合に、
   前記視認者が前方の遠方を注視しているときの注視点又は消失点からの距離が大きく、前記視認者から見て手前側に見える第１の表示コンテンツと、前記注視点又は消失点からの距離が小さく、前記視認者から見て遠方側に見える第２の表示コンテンツとを区別し、
   前記第２の表示コンテンツの視認性の変化率を、前記第１の表示コンテンツの視認性の変化率よりも小さくする、
   ことを特徴とする、請求項１乃至３の何れか１項に記載の表示制御装置。
5. 前記制御部は、
   前記第２の制御を実行して、複数の表示コンテンツについて、視認性を時間に対して徐々に変化させて線形に、又は非線形に増大させる場合に、
   前記視認者が前方の遠方を注視しているときの注視点又は消失点からの距離が大きく、前記視認者から見て手前側に見える第１の表示コンテンツと、前記注視点又は消失点からの距離が小さく、前記視認者から見て遠方側に見える第２の表示コンテンツとを区別し、
   前記第２の表示コンテンツについての、前記視認性の変化の終点における視認性の設定値を、前記第１の表示コンテンツについての視認性の変化の終点における視認性の設定値よりも小さく設定し、
   かつ、視認性を変化させる期間の長さは、前記第１の表示コンテンツと前記第２表示コンテンツとの間で差を設けず、同じ長さとする、
   ことを特徴とする、請求項１乃至３の何れか１項に記載の表示制御装置。
6. 前記制御部は、
   前記第１の制御を開始した後の所定時間の期間は、前記第１の制御を継続する期間とする、ことを特徴とする、請求項１乃至５の何れか１項に記載の表示制御装置。
7. 前記制御部は、
   前記第１の制御を開始した後、前方視認状態への復帰、又は視点位置の再取得が検出されたが、所定閾値時間経過することなく、再び前方非視認状態、又は視点ロストの状態に戻ったときは、前記検出に関係なく前記第１の制御を続行する、ことを特徴とする、請求項１乃至６の何れか１項に記載の表示制御装置。
8. 前記制御部は、
   前記第１の制御を実行している期間において、表示コンテンツの視認性を低下させている、あるいは、非表示としていることを報知する報知画像の虚像を表示させ、
   かつ、前記報知画像の虚像は、視認性を低下させている表示コンテンツと同じ輝度、又はそれよりも高い輝度とする、
   ことを特徴とする、請求項１乃至７の何れか１項に記載の表示制御装置。
9. 前記制御部は、
   前記第２の制御を実行して、前記視認性が低下されていた、又は非表示とされていた表示コンテンツの輝度を、時間に対して徐々に増大させる場合において、
   周囲の明るさを示す情報、又は明るさを推定可能な情報に基づき、周囲が暗いと判定される場合には、明るいと判定される場合に比べて、目標とする輝度まで増大させるのに要する時間を短くする、
   ことを特徴とする、請求項１乃至８の何れか１項に記載の表示制御装置。
10. 前記制御部は、
    前記第２の制御を実行して、前記視認性が低下されていた、又は非表示とされていた表示コンテンツの輝度を、時間に対して徐々に増大させる場合において、
    目標輝度に復帰した後、少なくとも一部の表示コンテンツの虚像については、その虚像を一時的に強調表示する、
    ことを特徴とする、請求項１乃至９の何れか１項に記載の表示制御装置。
11. 画像を被投影部材に投影することで、視認者に前記画像の虚像を視認させるヘッドアップディスプレイ（ＨＵＤ）装置であって、
    前記画像を生成する画像生成部と、
    前記画像を表示する表示部と、
    前記画像の表示光を反射して、前記被投影部材に投影する光学部材を含む光学系と、
    請求項１乃至１０の何れか１項に記載の表示制御装置と、
    を有することを特徴とするヘッドアップディスプレイ装置。
12. 画像を被投影部材に投影することで、視認者に前記画像の虚像を視認させるヘッドアップディスプレイ（ＨＵＤ）装置の表示制御方法であって、
    前記ＨＵＤ装置による表示領域に表示コンテンツの虚像を表示させているときに、前記視認者が前方の視認状態から、一時的に前方の非視認状態となった場合、又は、前記視認者の視点位置を一時的に喪失する視点ロストが生じた場合に、
    少なくとも一部の前記表示コンテンツについては、虚像を非表示とする、
    又は、
    少なくとも一部の前記表示コンテンツについては、視認性を低下させる、あるいは、視認性を低下させて最終的には虚像を非表示とする、
    又は、
    前記表示コンテンツの数を低減する、
    ことを含む第１の制御を実行し、
    視認者が前方視認状態に復帰した場合、又は視点ロスト後に視点位置を再取得した場合に、
    非表示とされていた表示コンテンツ、又は視認性が低下されていた表示コンテンツについて、視認性を時間に対して線形、非線形に徐々に増大させ、又は、非表示状態あるいは視認性低下状態の維持期間を設けた後、視認性を増大させ、
    又は、
    コンテンツ数が低減されていた表示コンテンツについて、コンテンツ数を時間に対して徐々に増大させ、あるいは、コンテンツ数の低減状態の維持期間を設けた後、コンテンツ数を増大させ、
    これによって、前方視認状態に対応した虚像表示、又は視点位置検出状態に対応した虚像表示に復帰させる、ことを含む第２の制御を実行する、
    ことを特徴とする、ヘッドアップディスプレイ装置の表示制御方法。

Images