WO2021019989A1

WO2021019989A1 - 画像処理装置、および画像処理方法、並びに表示部固定方法

Info

Publication number: WO2021019989A1
Application number: PCT/JP2020/025271
Authority: WO
Inventors: 英史大場
Original assignee: ソニーセミコンダクタソリューションズ株式会社
Priority date: 2019-07-26
Filing date: 2020-06-26
Publication date: 2021-02-04

Abstract

本発明は、運転中に前方や表示部を見ている運転者の顔を正面から撮影可能とした構成を実現する。　本発明の画像処理装置は、表示情報出力部（１０２）と、表示情報出力部（１０２）の出力光に基づく情報表示を行う情報表示部（２０）を有する。情報表示部（２０）は表示情報出力部（１０２）の出力光に対応する波長光を選択的に反射する反射膜によって構成され、表示情報出力部（１０２）の出力光に対応する波長光以外の波長光を透過する。例えば、表示情報出力部（１０２）はＲＧＢ波長光を出力し、情報表示部（２０）は、ＲＧＢ波長光を選択的に反射する。さらに、赤外光を反射し赤外光カメラ（１０４）により、情報表示部（２０）を見ている運転者（３０）の顔を正面から撮影することができる。

Description

画像処理装置、および画像処理方法、並びに表示部固定方法

　本開示は、画像処理装置、および画像処理方法、並びに表示部固定方法に関する。さらに詳細には、例えば自動車の運転者に対する画像表示処理や運転者の視線や眼球挙動の解析を行う画像処理装置、および画像処理方法、並びに表示部固定方法に関する。

　例えば、自動車の運転者が正常な状態、すなわち意識のはっきりした覚醒状態で運転を行っているかを確認するための手法として、運転者の視線や眼球挙動を解析する手法が知られている。

　例えば特許文献１（特開２０１１－１５２８８３号公報）には、運転者の前方に表示データを表示するヘッドアップディスプレイ（ＨＵＤ）を見ている運転者の顔画像を撮影して眼球挙動を解析する構成を開示している。

　この文献では、車両のダッシュボード内に置かれた表示装置の出力情報をミラーに反射させて運転者が観察できるようにして、表示情報を見ている運転者の画像をカメラで撮影して解析する構成を開示している。
　しかし、この文献の構成では、運転者は、運転中に表示情報を見る際に車両進行方向である前方から一時的に目をそらすことになり、危険である。

特開２０１１－１５２８８３号公報

　本開示は、例えば、上述の問題点に鑑みてなされたものであり、車両進行方向である前方を見ている視線を移動させることなく、運転者が表示情報を観察でき、かつ、その時点の運転者の正面からの撮影画像を取得し、この撮影画像に基づいて精度の高い視線や眼球挙動の解析を可能とした画像処理装置、および画像処理方法、並びに表示部固定方法を提供することを目的とする。

　本開示の第１の側面は、
　表示情報を出力する表示情報出力部と、
　前記表示情報出力部の出力光に基づく情報表示を行う情報表示部を有し、
　前記情報表示部は、
　前記表示情報出力部の出力光に対応する波長光を選択的に反射する反射膜によって構成された表示部である画像処理装置にある。

　さらに、本開示の第２の側面は、
　画像処理装置において実行する画像処理方法であり、
　表示情報出力が、１つ以上の波長光の出力により表示情報を出力する表示情報出力ステップと、
　情報表示部が、前記表示情報出力部の出力光に基づく情報表示を行う情報表示ステップを有し、
　前記情報表示ステップは、
　前記情報表示部を構成する高機能反射膜により、前記表示情報出力部の出力する波長光を選択的に反射して情報表示を行うステップである画像処理方法にある。

　さらに、本開示の第３の側面は、
　所定の曲率を有するカーブ面に表示部を固定する表示部固定方法であり、
　前記表示部は、表示情報出力部の出力光に対応する波長光を選択的に反射する反射膜によって構成された表示部であり、
　基板上に形成した反射膜を、前記カーブ面の曲率半径より小さい曲率半径を持つように変形させるステップと、
　変形させた反射膜を前記カーブ面に押し付けて、反射膜と前記カーブ面間の空気を周囲に押し出しながら密着させるステップを有する表示部固定方法にある。

　本開示のさらに他の目的、特徴や利点は、後述する本開示の実施例や添付する図面に基づくより詳細な説明によって明らかになるであろう。なお、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。

　本開示の一実施例の構成によれば、運転中に前方や表示部を見ている運転者の顔を正面から撮影可能とした構成が実現される。
　具体的には、例えば、表示情報出力部と、表示情報出力部の出力光に基づく情報表示を行う情報表示部を有する。情報表示部は表示情報出力部の出力光に対応する波長光を選択的に反射する反射膜によって構成され、表示情報出力部の出力光に対応する波長光以外の波長光を透過する。例えば、表示情報出力部はＲＧＢ波長光を出力し、情報表示部は、ＲＧＢ波長光を選択的に反射する。さらに、赤外光を反射し赤外光カメラにより、表示部を見ている運転者の顔を正面から撮影することができる。
　本構成により、運転中に前方や表示部を見ている運転者の顔を正面から撮影可能とした構成が実現される。
　なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。

車両のフロントウィンドウに設定される情報表示部の例を示す図である。本開示の画像処理装置の構成と処理について説明する図である。情報表示部を構成する高機能反射膜（狭波長選択性反射膜）の特性の詳細について説明する図である。情報表示部を構成する高機能反射膜（狭波長選択性反射膜）の光透過率の特性について説明する図である。運転者の眼の分布空間に相当するアイリプス（Ｅｙｅｌｌｉｐｓｅ）空間と情報表示部の配置例について説明する図である。情報表示部を構成する高機能反射膜（狭波長選択性反射膜）の反射特性の一例について説明する図である。本開示の画像処理装置の構成と処理について説明する図である。赤外光反射部の反射特性例について説明する図である。高機能反射膜をフロントウィンドウに積層して固定する情報表示部の製造工程の具体例について説明する図である。高機能反射膜をフロントウィンドウに積層して固定する情報表示部の製造工程の具体例について説明する図である。高機能反射膜をフロントウィンドウに積層して固定する情報表示部の製造工程の具体例について説明する図である。高機能反射膜をフロントウィンドウに積層して固定する情報表示部の製造工程の具体例について説明する図である。本開示の画像処理装置の構成例について説明する図である。発光部の構成例について説明する図である。眼球挙動の解析例について説明する図である。本開示の画像処理装置の構成例について説明する図である。情報表示部の透過率制御例について説明する図である。情報表示部の透過率制御例について説明する図である。画像処理装置のハードウェア構成例について説明する図である。

　以下、図面を参照しながら本開示の画像処理装置、および画像処理方法、並びに表示部固定方法の詳細について説明する。なお、説明は以下の項目に従って行なう。
　１．本開示の画像処理装置の構成と処理について
　２．情報表示部（高機能反射膜）の特性について
　３．情報表示部と独立した赤外光反射部を設けた構成例について
　４．高機能反射膜をフロントウィンドウに積層して固定する情報表示部の製造工程の具体例について
　５．画像処理装置の構成例と運転者視線の解析処理の一例について
　６．情報表示部の透過率制御構成例について
　７．画像処理装置のハードウェア構成例について
　８．本開示の構成のまとめ

　　［１．本開示の画像処理装置の構成と処理について］
　まず、図１以下を参照して、本開示の画像処理装置の構成と処理について説明する。

　本開示の画像処理装置は、運転者の正面から運転者の眼球をカメラで撮影可能とした構成を持つ。
　運転者の視線正面から運転者の眼球をカメラ撮影することで、撮影画像に含まれる眼球情報の最大化が実現され、高精度な視線トラッキングや視線挙動解析が可能となる。

　本開示の画像処理装置は、運転者正面から運転者の眼球撮影を可能とするとともに、カメラ撮影時に車両前方から運転者の眼に入る可視光を遮ることなく、運転者が車両前方の道路等を継続的に観察することを可能とした構成を有する。

　運転者正面から運転者の眼球撮影を可能とするため、車両のフロントウィンドウに情報表示を行い、表示された情報を見ている運転者の眼球を含む画像を車両のフロントウィンドウに設定した表示部方向から撮影する。つまり、運転者が走行中に進行方向前方へ視線を向けているが、ヘッドアップディスプレイ反射板を用いることで概ね同一方角から運転者の視線、顔の撮像を選択的に行うことができる。

　図１は、車両のフロントウィンドウ１０に設定される情報表示部２０の例を示す図である。
　情報表示部２０は、特定波長光のみを選択的に反射する高機能反射膜（狭波長選択性反射膜）によって構成される。情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の特性の詳細については後述する。
　なお、情報表示部２０はほとんどの可視光を透過する特性を有し、運転者は情報表示部２０、およびフロントウィンドウ１０を介して前方を妨害されることなく見ることができる。
。

　情報表示部２０は、いわゆるヘッドアップディスプレイ（ＨＵＤ：Ｈｅａｄ　Ｕｐ　Ｄｉｓｐｌａｙ）型の表示部である。
　ヘッドアップディスプレイ（ＨＵＤ）は、運転者が運転中に視線を向けている前方の景色に重畳して情報表示を行うことが可能である。

　ヘッドアップディスプレイ（ＨＵＤ）は、例えばレンズや凹面ミラーを利用して、運転者の視界となる車両前方向に表示情報から構成される虚像を生成して表示する構成を持つ。運転者は前方景色に重畳して虚像として表示される情報を視線を大きく変更させることなく確認できる。

　次に、図２を参照して、本開示の画像処理装置の構成例について説明する。
　画像処理装置の一部は、例えば車両のコンソールボックス内部に設置される。
　図２に示すように車両のコンソールボックス内部には、データ処理部１０１、表示情報出力部１０２、ミラー１０３ａ，ｂ、カメラ１０４、発光部１０５を有する。

　データ処理部１０１が生成した情報、あるいは図示しない記憶部等から取得した情報、あるいは図示しない通信部を介して取得した情報等が表示情報出力部１０２介して情報表示部（高機能反射膜）２０に出力される。

　表示情報出力部１０２が出力した表示情報は、ミラー１０３ａ，ｂを介して情報表示部（高機能反射膜）２０に表示される。
　なお、表示情報出力部１０２が出力する表示情報は例えばＲＧＢカラー画像である。

　運転者３０は、運転しながら情報表示部（高機能反射膜）２０に表示された情報を見て確認する。なお、情報表示部（高機能反射膜）２０は可視光のほとんどを透過する特性を有し、運転者３０は、情報表示部（高機能反射膜）２０に表示された情報を見ながら、フロントウィンドウ１０の前方の景色も併せて見ることができる。

　画像処理装置のカメラ１０４は、例えば赤外光を撮影する赤外カメラである。
　発光部１０５は運転者３０の顔領域に赤外光を照射する。
　カメラ１０４は、運転者の眼球を含む顔領域の画像を撮影する。撮影画像は、情報表示部（高機能反射膜）２０において反射された赤外光の撮影画像、いわゆる赤外光画像である。

　図に示す実線の光路は表示情報出力部１０２から出力される表示情報によって構成される表示画像高であり、図に示す点線は、カメラ１０４に入力するカメラ入力光である。
　運転しながら情報表示部（高機能反射膜）２０に表示された情報を見ている運転者３０の視線方向は、情報表示部（高機能反射膜）２０の方向であり、この時にカメラ１０４によって撮影される画像は、運転者３０顔や運転者３０の眼球をほぼ正面から撮影した画像となる。

　このように運転者３０の眼球をほぼ正面から撮影した画像は、データ処理部１０１に入力され、データ処理部１０１において、画像解析が行われる。具体的には運転者の視線トラッキングや眼球挙動解析が行われ、例えば運転者３０の覚醒度判定処理が実行される。

　このように、本開示の画像処理装置は、運転者３０の眼球を含む画像を運転者３０のほぼ正面から撮影可能としているので、高精度な視線トラッキングや眼球挙動解析行うことが可能となる。

　　［２．情報表示部（高機能反射膜）の特性について］
　次に、情報表示部（高機能反射膜）の特性の詳細について説明する。
　前述したように、情報表示部２０は、特定波長光のみを選択的に反射する高機能反射膜（狭波長選択性反射膜）によって構成される。

　図３を参照して情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の特性の詳細について説明する。
　図３は、横軸に波長（ｎｍ）縦軸に反射率（％）を示したグラフであり、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）に対する入射光の波長対応の反射率を示すグラフである。

　図３に示すように、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）は、ＲＧＢの波長光、すなわちＲ（赤）、Ｇ（緑）、Ｂ（青）の各色対応の特定の狭波長領域と、波長＝７５０ｎｍ以上の赤外光領域の反射率が高くなっており、その他の領域の反射率が低い反射率特性を持つ。

　表示情報出力部１０２が出力する表示情報がＲＧＢカラー画像である場合、表示情報出力部１０２はＲ（赤）、Ｇ（緑）、Ｂ（青）の３種類の波長光を出力する。
　図３に示すグラフ中のＲ（赤）、Ｇ（緑）、Ｂ（青）各色対応の高反射率の狭波長領域は、表示情報出力部１０２の出力するＲＧＢ各色の出力波長に対応する。

　すなわち、表示情報出力部１０２の出力するＲＧＢ光は、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）において、その多くが反射される。この結果、運転者は情報表示部２０で反射するＲＧＢカラー画像、すなわち情報出力部１０２が出力したカラー画像を鮮明に見ることが可能となる。

　また、図３に示す反射率特性グラフから理解されるように、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）は、赤外光成分も強く反射する。
　従って、図２に示す発光部１０５が照射した赤外光は、運転者３０の顔や眼球表面で反射して、さらに情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）において反射し、その反射光がカメラ１０４に入力する。
　この結果、カメラ１０４は、鮮明な運転者３０の赤外光画像を撮影することができる。

　なお、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）を、７５０ｎｍ以上の長波長側の赤外光を反射する特性を持たせた構成とすることで、斜めに配置されたフロントウィンドウの反射特性として現れやすい短波長シフトによるレッドカット（ブルーシフト）を抑える効果もある。

　次に、図４を参照して情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の光透過率の特性について説明する。
　図４に示すように、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）は、外部から入力する光の約９５％を透過する。

　図に示すように、車両の前方から車両内部に向かう前方視界光の光量１００％中、フロントウィンドウ１０と情報表示部２０を透過して運転者３０の眼に入る透過光は前方視界光量の約９５％であり、反射光はわずか約５％である。
　この結果、運転者３０は、情報表示部２０とフロントウィンドウ１０を介して車両前方の景色を鮮明に確認することができる。

　なお、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性は、図３を参照して説明したように、ＲＧＢ各色に対応する極めて狭い波長領域の光信号を反射するものとして説明したが、これらの反射率の高い波長光と同じ波長光がフロントウィンドウ外部から入射した場合、表示情報と紛らわしくなることが考えられる。例えば信号の色と表示色とがほぼ同じ色となってしまうと、運転者に混乱を与える可能性がある。

　このような事態を防止するため、表示情報出力部１０２の出力するＲＧＢ信号の波長は、信号や標識等に利用される色と異なる色の波長光とすることが好ましい。これに併せて、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性も、反射率の高い波長領域は、信号や標識等に利用される色と異なる色の波長領域とすることが好ましい。

　なお、図３を参照して説明した「反射特性」を有し、図４を参照して説明した「光透過特性」を有する高機能反射膜は、例えば酸化シリコン膜によって構成することができる。例えば、誘電体を高精度で交互に製膜する処理により、Ｒ，Ｇ，Ｂ、赤外光、各波長の反射特性を有する複数の膜を積層したフィルム状の高機能反射膜（情報表示部）を生成することが可能である。

　次に、フロントウィンドウ１０における情報表示部２０の配置位置について説明する。フロントウィンドウ１０上の情報表示部２０の配置位置は、図５に示すように、運転者の眼の分布空間に相当するアイリプス（Ｅｙｅｌｌｉｐｓｅ）３１の空間領域を車両の正面方向に平行移動してフロントウィンドウ１０に射影して、射影部の中心が情報表示部２０のほぼ中心になる位置とすることが好ましい。

　なお、アイリプス（Ｅｙｅｌｌｉｐｓｅ）とは、様々な体格の運転者の眼の位置の分布の解析結果として得られた空間領域である。アイリプス（Ｅｙｅｌｌｉｐｓｅ）は、車両の前後方向に長軸を持つ楕円形のラグビーボル形状を持つ空間領域であり、アイレンジとも呼ばれる。

　なお、先に図３を参照して説明した情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性は、表示情報出力部１０２が出力する表示情報がＲＧＢカラー画像である場合に対応する特性である。

　情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性は、表示情報出力部１０２が出力する光の波長を選択的に反射する狭波長選択反射特性を有する構成とすればよい。
　すなわち、例えば表示情報出力部１０２の出力光が単色、具体的にはＢ（青）１色の波長光を出力する構成の場合、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性は、図６に示すような特性とすればよい。

　図６は、Ｂ（青）対応の特定の狭波長領域と、波長＝７５０ｎｍ以上の赤外光領域の反射率が高くなっており、その他の領域の反射率が低い反射率特性を持つ。
　表示情報出力部１０２が出力する表示情報がＢ（青）単色の画像である場合、表示情報出力部１０２はＢ（青）のみの波長光を出力する。
　図６に示すグラフ中のＢ（青）領域の高反射率の狭波長領域は、表示情報出力部１０２の出力するＢ（青）色の出力波長に対応する。

　すなわち、表示情報出力部１０２の出力するＢ（青）色光は、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）において選択的に反射される。この結果、運転者は情報表示部２０で反射するＢ（青）色の単色画像、すなわち情報出力部１０２が出力したＢ（青）色の単色画像を鮮明に見ることが可能となる。

　ここでは、情報出力部１０２が出力する単色画像が、Ｂ（青）一色の単色画像である場合について説明したが、例えば情報出力部１０２が出力する単色画像がＲ（赤）色の単色画像である場合は、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性をＲ（赤）対応の特定の狭波長領域の反射率を高め、Ｂ，Ｇの波長領域については低反射率とすればよい。

　同様に、情報出力部１０２が出力する単色画像がＧ（緑）色の単色画像である場合は、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性を、Ｇ（緑）対応の特定の狭波長領域の反射率を高め、Ｒ，Ｂの波長領域については低反射率とすればよい。

　このように、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性は、表示情報出力部１０２が出力する光の波長を選択的に反射する狭波長選択反射特性を有する構成とすればよい。
　このような特性を有する情報表示部２０を構成することで、運転者は情報出力部１０２が出力する画像を鮮明に見ることが可能となる。

　　［３．情報表示部と独立した赤外光反射部を設けた構成例について］
　次に、情報表示部と独立した赤外光反射部を設けた構成例について説明する。
　図２を参照して説明した構成では、情報表示部２０は、表示情報出力部１０２が出力する光の波長、例えばＲＧＢの各波長と赤外光波長を反射する特性を有する構成とした。

　図２の構成において、情報表示部２０における赤外光の反射光は、カメラ１０４による赤外光画像の撮影のために用いられる。
　このカメラ撮影光としての赤外光をカメラに入力するための赤外光反射板は、情報表示部２０と別の独立した構成としてもよい。

　図７に情報表示部と独立した赤外光反射部を設けた構成の具体例を示す。
　図７に示す構成と、先に図２を参照して説明した構成との差異は、独立した赤外光反射部５０を設けた点である。

　赤外光反射部５０は、発光部１０５が運転者３０の顔領域に照射した赤外光を反射してカメラ１０４に入力させる。
　カメラ１０４は、運転者の眼球を含む顔領域の画像を撮影する。撮影画像は、赤外光反射部５０において反射された赤外光の撮影画像、いわゆる赤外光画像である。
　赤外光反射部５０の反射特性例を図８に示す。図８に示すように、赤外光反射部５０は、赤外光のみを反射し、その他の光、例えばＲＧＢ波長領域の光は透過するという反射特性を有する。

　なお、赤外光反射部５０は、赤外光のみを反射し、その他の光、例えばＲＧＢ波長領域の光は透過する。
　従って、運転者３０は、情報表示部２０に表示された情報や、情報表示部２０やフロントウィンドウ１０を介した前方の景色を邪魔されることなく見ることができる。

　このようなに赤外光反射部５０を情報表示部２０と独立して設けることで、カメラ１０４の配置自由度を高めることができる。

　　［４．高機能反射膜をフロントウィンドウに積層して固定する情報表示部の製造工程の具体例について］
　次に、高機能反射膜をフロントウィンドウに積層して固定する情報表示部の製造工程の具体例について説明する。

　図２や図７を参照して説明した構成とするためには、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）をフロントウィンドウ１０に密着させて固定させることが必要である。
　すなわち、高機能反射膜をフロントウィンドウ１０の内側ガラス面に密着させて積層させて固定する製造工程が必要となる。

　一般的に波長選択性の高い多層膜の形成処理には誘電体を高精度で交互に製膜する処理が必要とされている。
　しかし、車両のフロントガラスのような大型の面に、直接、誘電体を高精度で交互に製膜することは極めて困難である。

　この製造困難性を打開するため、本開示では以下のようなプロセスで高機能反射膜をフロントウィンドウ１０の内側ガラス面に密着固定させる。

　（プロセス１）
　まず、Ｒ，Ｇ，Ｂ、赤外光、各波長の反射特性を有する複数の膜を積層したフィルム状の高機能反射膜（情報表示部）を生成する。
　この（プロセス１）の処理は、従来の誘電体を高精度で交互に製膜する処理により実行可能である。

　（プロセス２）
　次に、上述した（プロセス１）において生成した高機能反射膜を基板（ハードフィルム）上に固定する。なお、固定は例えば接着材等によって仮固定する。ただし、後段プロセスのため、剥離剤や熱等によって接着力を解除可能な接着剤を使用する。

　この（プロセス２）以下の工程について、図９を参照して説明する。
　上記（プロセス２）によって、図９（プロセス２）に示す基板２１に仮固定された情報表示部（高機能反射膜）２０が生成される。

　（プロセス３）
　次に、上記（プロセス２）で生成した基板上に仮固定した情報表示部（高機能反射膜）２０の中央部に空気等のガスを注入し、情報表示部（高機能反射膜）２０を、所定の曲率半径を持つように凸面化処理を行う。

　この（プロセス３）の処理の詳細について図１０を参照して説明する。
　図３に示すように、情報表示部（高機能反射膜）２０を密着固定させるフロントウィンドウ１０の内側ガラス面は平面ではなく所定の曲率半径を有する曲面によって構成されている。
　フロントウィンドウ１０の内側ガラス面の曲率半径をＲｗｓとする。

　（プロセス３）では、情報表示部（高機能反射膜）２０の中央部に空気等のガスを注入し、情報表示部（高機能反射膜）２０を、フロントウィンドウ１０の内側ガラス面曲率半径：Ｒｗｓより小さい曲率半径を持つように凸面化処理を行う。
　情報表示部（高機能反射膜）２０の変形処理によって生成する情報表示部（高機能反射膜）２０の曲率半径をＲｒｅｆとすると、ＲｒｅｆとＲｓの関係は以下の関係となる。
　Ｒｒｅｆ＜Ｒｗｓ

　なお、曲率半径が小さいほど曲率は大きくなるすなわち、図１０に示すように、情報表示部（高機能反射膜）２０は、フロントウィンドウ１０の内側ガラス面より大きく内側に曲がった形状となる。

　このように、（プロセス３）では、基板上に仮固定した情報表示部（高機能反射膜）２０の中央部に空気等のガスを注入し、情報表示部（高機能反射膜）２０を、フロントウィンドウ１０の内側ガラス面より大きく内側に曲がった形状に変形させる。

　　（プロセス４）
　（プロセス４）は、基板２１上の情報表示部（高機能反射膜）２０をフロントウィンドウ１０の内側ガラス面の固定位置に固定する処理を行うプロセスである。

　（プロセス４）の処理について図９に戻り、説明する。
　図９に示すように（プロセス４）では、フロントウィンドウ１０の内側ガラス面より大きく内側に曲がった形状を持つ基板２１上の情報表示部（高機能反射膜）２０を、フロントウィンドウ１０の内側ガラス面の固定位置に近づける。
　この処理によって、まず、基板２１上の情報表示部（高機能反射膜）２０の中央部がフロントウィンドウ１０の内側ガラス面に接触する。

　なお、基板２１上の情報表示部（高機能反射膜）２０のフロントウィンドウ１０側面には予め接着剤を塗布しておく。この張り合わせ接着材は必ずしも張り合わせ時点で接着性を有したフィルム工法である必要はなく、例えば可視光や紫外線、赤外等などの光活性による重合反応で硬化させる材料などでもよい。

　この（プロセス４）の処理の詳細について、図１１を参照して説明する。
　図１１（プロセス４－１）の状態は、基板２１上の情報表示部（高機能反射膜）２０の中央部がフロントウィンドウ１０の内側ガラス面に接触した状態を示している。
　この位置から、さらに、基板２１をフロントウィンドウ１０側に押圧する。この押圧処理により、基板２１上の情報表示部（高機能反射膜）２０は、その曲率がフロントウィンドウ１０の曲率に近づくように変形される。

　図１１（プロセス４－２）に示すように、この変形に伴い、情報表示部（高機能反射膜）２０とフロントウィンドウ１０間の隙間が徐々に小さくなり、その間の空気は、情報表示部（高機能反射膜）２０の中央部から周囲部にスムーズに排出される。

　最終的に、基板２１上の情報表示部（高機能反射膜）２０の曲率がフロントウィンドウ１０の曲率に一致し、情報表示部（高機能反射膜）２０がフロントウィンドウ１０に密着し、そのまま接着剤により固定される。

　　（プロセス５）
　（プロセス５）の処理について、図９に戻って説明する。
　（プロセス５）では、情報表示部（高機能反射膜）２０に仮固定されていた基板２１を、情報表示部（高機能反射膜）２０から取り外す。

　先に説明したように、基板２１と情報表示部（高機能反射膜）２０を仮固定する接着材は、剥離剤や熱等によって接着力を解除可能な接着剤であり、接着力を解除して剥離することができる。

　これらのプロセスによって、情報表示部（高機能反射膜）２０は、所定の曲率を持つフロントウィンドウ１０の内側ガラス面に密着固定させることができる。

　なお、先に図５を参照して説明したように、情報表示部２０のフロントウィンドウ１０上の配置位置は、運転者の眼の分布空間に相当するアイリプス（Ｅｙｅｌｌｉｐｓｅ）の空間領域を車両の正面方向に平行移動してフロントウィンドウ１０に射影して、射影部の中心が情報表示部２０のほぼ中心になる位置とすることが好ましい。

　なお、情報表示部（高機能反射膜）２０を、所定の曲率を持つフロントウィンドウ１０の内側ガラス面に密着固定させるプロセスは、上述したプロセスに限らず、その他の方法も適用可能である。
　例えば、図９～図１１を参照して説明したプロセス２～プロセス５の代わりに、図１２に示すプロセス２Ｂ～プロセス５Ｂを適用することも可能である。

　図１２に示すプロセス２Ｂ～プロセス５Ｂについて説明する。
　　（プロセス２Ｂ）
　フロントウィンドウ１０に情報表示部（高機能反射膜）２０を着磁性のあるフレキシブル補助基材に張った状態でアライメントして仮貼り付けを行う。ここで、、情報表示部（高機能反射膜）２０のフロントウィンドウ１０側には、ガラス面と光硬化処理で硬化する接着材を塗布しておく。情報表示部（高機能反射膜）２０より広めのフレキシブル補助基材とその周囲部には仮止め固定の接着材を塗布しておく。

　　（プロセス３Ｂ）
　フロントウィンドウ１０に情報表示部（高機能反射膜）２０を仮止めした状態で、フロントウィンドウ１０の両面からフレキシブル補助基材を囲むより広範囲をカバーする柔軟な気密パッキング性を有するカバー（チャンバー）で覆う。

　カバー（チャンバー）の外周パッキングから空気が中に漏れ込まないようにしてカバー（チャンバー）内側を減圧する。両カバー（チャンバー）の挟む位置を同じ位置に合わせた上で各カバー（チャンバー）の減圧を同じに圧に保つ形で進めると、真空にしてもフロントウィンドウ１０片側に偏った圧力が加わることを避けることができる。カバー（チャンバー）の張り合わせ位置がフロントウィンドウ１０面に直角方向で重なっていれば、大気圧はフロントウィンドウ１０のガラス面の面方向の成分が主となり、ガラスにストレスを加えることなく、高真空中で情報表示部（高機能反射膜）２０をフロントウィンドウ１０に張り合わせすることが可能となる。

　図に示すように、情報表示部（高機能反射膜）２０張り付け面の反対側のチャンバーに電磁チャックを置いて通電することで着磁性のあるフレキシブル補助基材をフロントウィンドウ１０面に押しつけることが真空中でも実行可能となる。
　着磁性のフレキシブル補助基材の少なくとも外周をフロントウィンドウ１０表面と密閉できる程度の仮固定ができたら、カバー（チャンバー）内の圧力を大気圧に戻してもよい。

　　（プロセス４Ｂ）
　一旦、真空中でフロントウィンドウ１０に情報表示部（高機能反射膜）２０を装着したフレキシブル補助基材を仮固定した後、カバー（チャンバー）内の圧力を大気圧に戻すと機材を通して満遍なく情報表示部（高機能反射膜）２０に一定の大気圧が加わることで、気泡を含まないフロントウィンドウ１０面との安定した仮止めができる。

　この状態で、フレキシブル補助基材の外周はフロントウィンドウ１０面と仮止めされているため、大気が情報表示部（高機能反射膜）２０とフロントウィンドウ１０面の間に漏れ込むことはない。
　この状態で、情報表示部（高機能反射膜）２０をフロントウィンドウ１０面に光硬化型接着材を用いて固定する。

　　（プロセス５Ｂ）
　情報表示部（高機能反射膜）２０の固定ができた段階で、貼り付け補助剤として用いた電着機能のあるフレキシブル補助基材は不要となるため剥離する。

　このような処理プロセスを用いても、情報表示部（高機能反射膜）２０を、所定の曲率を持つフロントウィンドウ１０の内側ガラス面に密着固定させることができる。

　　［５．画像処理装置の構成例と運転者視線の解析処理の一例について］
　次に、本開示の画像処理装置の構成例と運転者視線の解析処理の一例について説明する。

　図１３は、本開示の画像処理装置１００の構成例を示す図である。
　図１３に示す画像処理装置１００の構成中、データ処理部１０１、表示情報出力部１０２、情報表示部２０、カメラ１０４、発光部１０５は、図２や図７に示す各構成要素に対応する。

　データ処理部１０１の表示情報生成／取得部１５１は、記憶部１７１に格納された表示情報、または通信部１７２を介して外部から、運転者に提示するための表示情報を取得、あるいは取得情報に基づいて表示情報を生成する。

　表示情報生成／取得部１５１の生成または取得した表示情報は、表示情報出力部１０２を介して情報表示部２０に出力される。

　情報表示部２０は、先に説明したように、特定波長光のみを選択的に反射する高機能反射膜（狭波長選択性反射膜）によって構成され、車両のフロントウィンドウに積層された表示部である。

　先に図３、図４を参照して説明したように、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）の反射特性は、表示情報出力部１０２が出力する光の波長を選択的に反射する狭波長選択反射特性を有する。

　例えば、表示情報出力部１０２の出力する画像がＲＧＢカラー画像である場合、情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）は、表示情報出力部１０２の出力するＲＧＢ各信号の波長を選択的に強く反射する。この結果、運転者は情報表示部２０で反射するＲＧＢカラー画像、すなわち情報出力部１０２が出力したカラー画像を鮮明に見ることが可能となる。

　発光制御部１５２は、発光部１０５の発光する赤外光の発光制御を実行する。
　先に図２を参照して説明したように、発光部１０５が照射した赤外光は、運転者の顔や眼球表面で反射して、さらに情報表示部２０を構成する高機能反射膜（狭波長選択性反射膜）、または図７に示す赤外光反射部５０で反射し、その反射光がカメラ１０４に入力される。

　なお、カメラ１０４は、先に説明した図２や図７の構成によって、運転者のほぼ正面から運転者の眼球を含む画像を撮影する。この撮影画像はデータ処理部１０１の運転者眼球挙動解析部１５３に入力される。

　なお、発光部１０５は、カメラ１０４の視野角から必ずしも離れている必要はなく、例えば図１４に示すように、視覚遮蔽断面寸法を略１mm^２程度のマイクロＬＥＤ等にして運転者直接視界範囲に分散配列する構成としてもよい。この構成により、運転者の視覚遮蔽妨害を抑え、かつ顔や目の照明を効果的に行うことができる。

　すなわち、図１４に示す情報表示部（高機能反射膜）２０に運転者視線観測用光波長域の反射特性を持たせることで、運転者の視線を情報表示部（高機能反射膜）２０の反射を介してカメラ１０４で観測をしてもよい。視線観測に用いる光源は、例えば、図１４に示すような、赤外光マイクロＬＥＤアレイを用いる。視界に対する遮蔽略１mm^２程度を超えない表面実装型の有指向性のＬＥＤを運転者の前方視線方向に間欠配置する。この光を、反射膜を介さないで運転者の顔に直接あてることで、反射膜表面での散乱や反射といったカメラ撮像に対する迷光による妨害を防ぐことが可能である。

　この場合、光は運転者の走行中の有効視界に入ることになるので、視界に対する遮蔽領域が略１mm^２程度を超えないようにすることが好ましい。視界占有率が１％を超えるＬＥＤの配置は、視界妨害を招き、好ましくない。

　なお、顔や視線を観測するカメラ１０４の光路の赤外光反射部５０の反射部よりも目に寄った光路位置にＬＥＤ光源を配置することで、反射部による光源光が当たらないようにすることが可能で、光源をカメラ寄りに配置した場合に発生する反射面による妨害迷光の発生を防ぐ効果がある。

　運転者眼球挙動解析部１５３は、運転者の視線トラッキングや眼球挙動解析を行わう。この解析結果が運転者覚醒度判定部１５４に入力される。運転者覚醒度判定部１５４は、運転者眼球挙動解析部１５３の解析結果に基づいて運転者の覚醒度判定処理を実行する。例えば運転者の覚醒度が不十分であると判定した場合は、警告出力部１８１を介して警告出力などを実行する。

　運転者眼球挙動解析部１５３の実行する眼球挙動解析処理と、運転者覚醒度判定部１５４の実行する覚醒度判定処理の具体例について図１５を参照して説明する。
　眼球の挙動解析は、運転者の意識復帰を確認する有効な手段である。なお、例えば視線を振り向けた方向を解析して視線を解析することが可能であることは、従来から知られている。この技術をさらに発展させ、高速で視線挙動の解析を行うことで、眼球のより詳細な挙動検出ができる。

　眼球の詳細挙動解析は、生体反射的に現れる挙動が一部あるものの、その挙動には脳内の神経伝達と処理を反映して現れる多くの現象も同時に見られるため、脳の認知等の活動結果が反映され、表に見える形になる。
　眼球挙動に脳内の活動が反映されることを利用して、運転者の覚醒レベルを高精度で推測することが可能となる。

　人が行動に必要な状況判断を行う場合に取得する外界情報は、視覚的情報から得られるものが多い。人が視覚的情報を知覚し、認識し、行動に移す際に、人は情報に視線を向けて、その情報と自身の記憶（記録知識）との比較参照を行う。視線の先の情報を理解するまでの間、人は、その情報が見える部分やその近傍に視線を向けたまま細かな固視、マイクロサッカード、トレモア、ドリフトと言った視覚情報認知に必要となる特定の眼球挙動を示すことが知られている。

　この眼球挙動は、人が正常な覚醒状態にある場合と、意識・覚醒低下状態にある場合とでは、異なる振る舞いを示す。
　運転者の眼球挙動の軌跡の一例を図１５に示す。
　図１５示す例は、人がまず、領域ａ付近を注視し、その後、領域ｂ付近を注視した際の眼球挙動の軌跡を示したものである。

　ある情報を目視して内容を理解しようとする場合、人は図１５に示す挙動軌跡のように大きなサッカードと呼ばれる眼球回転を行い、所定の目視箇所に眼球を振り向け、その近傍で固視（Ｆｉｘａｔｉｏｎ（フィクセーション））と、局所領域の微小な眼球回転動作であるマイクロサッカードを伴う眼球挙動を行う。

　以上説明をしたように、人が意識をして視覚情報から必要な情報を取得し、必要な判断を行う際に、情報を得るために特徴的な眼球挙動が発現する。他方で、意識低下したりしてこの視覚的情報探索が不十分であると、情報を確定取得する固視に必要な眼球挙動に乱れが生じる。

　運転者眼球挙動解析部１５３は、例えばこの図１５に示すような眼球挙動解析処理を実行し、運転者覚醒度判定部１５４は、この解析結果に基づいて運転者の覚醒度を判定する。

　なお、画像処理装置１００は、さらに、図１６に示すように、データ処理部１０１内に直接視界透過率制御部１５５、運転者状態学習器、推定器１５６を有する構成としてもよい。
　直接視界透過率制御部１５５は、情報表示部２０の透過率を制御して情報表示部２０を介した運転者の視界を過度に遮らないような処理を行う。
　運転者状態学習器、推定器１５６は、運転者各制度判定部１５４において実行する運転者覚醒度判定処理に利用する学習データの生成、および学習データの提供を行う。

　　［６．情報表示部の透過率制御構成例について］
　次に、情報表示部の透過率制御構成例について説明する。
　今後、自動運転技術やＡＲ技術の進化に伴い、運転者には、より多くの複合的な情報が提示されることが想定される。
　これらの情報をフロントウィンドウ１０面のＨＵＤに表示すると、状況によっては運転者の直接視界を妨害する可能性がある。外界の実空間が明るい場合、表示情報の輝度やコントラストが不十分であると運転者が表示情報を知覚することが困難になる。それを避けるためは、表示情報の輝度を上げて、適度なコントラストを確保することが必要となる。
　しかし、単純に発光輝度やコントラストを強くすると、外光に対する目の輝度調整がその分ずれてしまい、好ましいといえない。

　表示情報を提示する際には実空間の背景の明るさを、例えばエレクトロミックＮＤ調光膜を用いて部分的に落とした方が、見やすくなる。ただし、運転者の外界に対する視界が妨げられるのは好ましくない。

　従って、運転者に必要な視界高さに応じて表示領域や透過率を電子的に調整することが好ましい。
　これを実現するための構成として、高機能反射膜、いわゆるコンバイナーを構成する光学素子の車両前方側の面にエレクトロクロミックフィルタをマトリックス状、または領域として配置し、制御する構成が有効である。

　例えば車両が高速走行中の場合は、一定の車間距離を取って走行をするため、ＨＵＤで提示する視界下方の領域は運転判断に直接的な視覚情報が重要でなく、時空間の視覚情報に対して透過率を低下させ、その領域に提示するＨＵＤの表示情報に重点を置いても支障は少ない。

　また、自動運転システムが運転制御を行う自動運転走行可能区間では、運転者よる運転が不要であり、運転者の前方視界方向に情報を表示してもよい。

　図１７、図１８に運転者の前方視界を妨げない情報表示例を示す。
　図１７は、車両の横方向から観察した図である。
　図１８は、フロントウィンドウ１０上の情報表示部（高機能反射膜）２０の情報表示領域（透過率低下領域）と、情報非表示領域（透過率非低下領域）の設定例を示す図である。
　車両のボンネット上の運転者視覚の境界線より上の領域は透過率を低下させない情報非表示領域（透過率非低下領域）として設定し、境界線より下方の領域に限定して情報表示領域（透過率低下領域）を設定してこの領域の透過率低下を行う。例えば透過率を８０％から９０％程度に落として情報を表示する。

　なお、走行条件、車間距離情報、自動運転での継続走行許容残存距離などに応じて、運転者が操舵に必要な直接視界範囲は決定される。
　例えば、渋滞で車両が進まず止まった状態であれば、その間に前方の遠方方角になる水平線を含む範囲で、視界がＨＵＤの表示画像で妨害され、遠方の視界透過率が落ちても直接的に安全へ悪影響がない。

　しかし、定速で車間距離が詰まった状態で走行中に、直前に車高の低いスポーツカーやマイクロカーなどが走行している場合は、ボンネットライン近くまでの視覚情報は追突を防ぐために重要な視野領域となる。
　この場合、この重要な視野領域の透過率は低下させるべきではない。

　つまり、ＨＵＤを構成するエレクトロミックＮＤ調光膜の制御により透過率制御を行う構成とした場合、外界視界透過率の低減範囲は、状況に応じて自動または手動で調整ができる構成とすることが望ましい。

　　［７．画像処理装置のハードウェア構成例について］
　次に、本開示の画像処理装置１００のハードウェア構成例について説明する。

　図１９は、本開示の画像処理装置１００のハードウェア構成の一例を示す図である。
　ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）３０１は、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）３０２、または記憶部３０８に記憶されているプログラムに従って各種の処理を実行するデータ処理部として機能する。例えば、上述した実施例において説明した処理を実行する。
　ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）３０３には、ＣＰＵ３０１が実行するプログラムやデータなどが記憶される。これらのＣＰＵ３０１、ＲＯＭ３０２、およびＲＡＭ３０３は、バス３０４により相互に接続されている。

　ＣＰＵ３０１はバス３０４を介して入出力インタフェース３０５に接続され、入出力インタフェース３０５には、各種スイッチ、キーボード、タッチパネル、マウス、マイクロフォン、さらに、センサ、カメラ、ＧＰＳ等の状況データ取得部などよりなる入力部３０６、ディスプレイ、スピーカなどよりなる出力部３０７が接続されている。

　ＣＰＵ３０１は、入力部３０６から入力される指令や状況データ等を入力し、各種の処理を実行し、処理結果を例えば出力部３０７に出力する。
　入出力インタフェース３０５に接続されている記憶部３０８は、例えばハードディスク等からなり、ＣＰＵ３０１が実行するプログラムや各種のデータを記憶する。通信部３０９は、インターネットやローカルエリアネットワークなどのネットワークを介したデータ通信の送受信部として機能し、外部の装置と通信する。

　入出力インタフェース３０５に接続されているドライブ３１０は、磁気ディスク、光ディスク、光磁気ディスク、あるいはメモリカード等の半導体メモリなどのリムーバブルメディア３１１を駆動し、データの記録あるいは読み取りを実行する。

　　［８．本開示の構成のまとめ］
　以上、特定の実施例を参照しながら、本開示の実施例について詳解してきた。しかしながら、本開示の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本開示の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。

　なお、本明細書において開示した技術は、以下のような構成をとることができる。
　（１）　表示情報を出力する表示情報出力部と、
　前記表示情報出力部の出力光に基づく情報表示を行う情報表示部を有し、
　前記情報表示部は、
　前記表示情報出力部の出力光に対応する波長光を選択的に反射する反射膜によって構成された表示部である画像処理装置。

　（２）　前記情報表示部は、
　前記表示情報出力部の出力光に対応する波長光以外の波長光を透過する特性を有する（１）に記載の画像処理装置。

　（３）　前記表示情報出力部は、
　カラー画像を構成するＲＧＢの３色に対応する３種類の波長光を出力する構成であり、
　前記情報表示部は、
　前記表示情報出力部の出力するＲＧＢ波長光を選択的に反射する反射膜によって構成された表示部である（１）または（２）に記載の画像処理装置。

　（４）　前記表示情報出力部は、
　単色画像を構成する１種類の色に対応する波長光を出力する構成であり、
　前記情報表示部は、
　前記表示情報出力部の出力する１種類の色に対応する波長光を選択的に反射する反射膜によって構成された表示部である（１）～（３）いずれかに記載の画像処理装置。

　（５）　前記情報表示部は、
　車両のフロントウィンドウに積層して固定された構成であり、
　フロントウィンドウから入射する可視光を透過する光透過特性を有する（１）～（４）いずれかに記載の画像処理装置。

　（６）　前記表示情報出力部は、
　信号に利用される色と異なる色の波長光を出力する構成であり、
　前記情報表示部は、
　前記表示情報出力部の出力する波長光である信号に利用される色と異なる色の波長光を選択的に反射する反射膜によって構成された表示部である（５）に記載の画像処理装置。

　（７）　前記情報表示部は、
　さらに赤外光を反射する反射膜によって構成された表示部である（１）～（６）いずれかに記載の画像処理装置。

　（８）　前記画像処理装置は、
　前記情報表示部において反射された赤外光を入射して撮影するカメラを有する（７）に記載の画像処理装置。

　（９）　前記情報表示部は、
　車両のフロントウィンドウに積層して固定された構成であり、
　前記カメラは、
　前記情報表示部の表示情報を見る運転者の正面からの画像を撮影することを可能とした構成である（８）に記載の画像処理装置。

　（１０）　前記画像処理装置は、さらに、
　前記カメラの撮影画像を解析して運転者の眼球挙動を解析する運転者眼球挙動解析部を有する（８）または（９）に記載の画像処理装置。

　（１１）　画像処理装置において実行する画像処理方法であり、
　表示情報出力が、１つ以上の波長光の出力により表示情報を出力する表示情報出力ステップと、
　情報表示部が、前記表示情報出力部の出力光に基づく情報表示を行う情報表示ステップを有し、
　前記情報表示ステップは、
　前記情報表示部を構成する高機能反射膜により、前記表示情報出力部の出力する波長光を選択的に反射して情報表示を行うステップである画像処理方法。

　（１２）　所定の曲率を有するカーブ面に表示部を固定する表示部固定方法であり、
　前記表示部は、表示情報出力部の出力光に対応する波長光を選択的に反射する反射膜によって構成された表示部であり、
　基板上に形成した反射膜を、前記カーブ面の曲率半径より小さい曲率半径を持つように変形させるステップと、
　変形させた反射膜を前記カーブ面に押し付けて、反射膜と前記カーブ面間の空気を周囲に押し出しながら密着させるステップを有する表示部固定方法。

　（１３）　前記所定の曲率を有するカーブ面は車両のフロントウィンドウである（１２）に記載の表示部固定方法。

　また、明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させるか、あるいは、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。例えば、プログラムは記録媒体に予め記録しておくことができる。記録媒体からコンピュータにインストールする他、ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）、インターネットといったネットワークを介してプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。

　なお、明細書に記載された各種の処理は、記載に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されてもよい。また、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。

　以上、説明したように、本開示の一実施例の構成によれば、運転中に前方や表示部を見ている運転者の顔を正面から撮影可能とした構成が実現される。
　具体的には、例えば、表示情報出力部と、表示情報出力部の出力光に基づく情報表示を行う情報表示部を有する。情報表示部は表示情報出力部の出力光に対応する波長光を選択的に反射する反射膜によって構成され、表示情報出力部の出力光に対応する波長光以外の波長光を透過する。例えば、表示情報出力部はＲＧＢ波長光を出力し、情報表示部は、ＲＧＢ波長光を選択的に反射する。さらに、赤外光を反射し赤外光カメラにより、表示部を見ている運転者の顔を正面から撮影することができる。
　本構成により、運転中に前方や表示部を見ている運転者の顔を正面から撮影可能とした構成が実現される。

　　１０　フロントウィンドウ
　　２０　情報表示部（高機能反射膜）
　　２１　基板
　　５０　赤外光反射部
　１００　画像処理装置
　１０１　データ処理部
　１０２　表示情報出力部
　１０３　ミラー
　１０４　カメラ
　１０５　発光部
　１５１　表示情報生成／取得部
　１５２　発光制御部
　１５３　運転者眼球挙動解析部
　１５４　運転者覚醒度判定部
　１７１　記憶部
　１７２　通信部
　１８１　警告出力部
　３０１　ＣＰＵ
　３０２　ＲＯＭ
　３０３　ＲＡＭ
　３０４　バス
　３０５　入出力インタフェース
　３０６　入力部
　３０７　出力部
　３０８　記憶部
　３０９　通信部
　３１０　ドライブ
　３１１　リムーバブルメディア

Claims

　表示情報を出力する表示情報出力部と、
　前記表示情報出力部の出力光に基づく情報表示を行う情報表示部を有し、
　前記情報表示部は、
　前記表示情報出力部の出力光に対応する波長光を選択的に反射する反射膜によって構成された表示部である画像処理装置。
　前記情報表示部は、
　前記表示情報出力部の出力光に対応する波長光以外の波長光を透過する特性を有する請求項１に記載の画像処理装置。
　前記表示情報出力部は、
　カラー画像を構成するＲＧＢの３色に対応する３種類の波長光を出力する構成であり、
　前記情報表示部は、
　前記表示情報出力部の出力するＲＧＢ波長光を選択的に反射する反射膜によって構成された表示部である請求項１に記載の画像処理装置。
　前記表示情報出力部は、
　単色画像を構成する１種類の色に対応する波長光を出力する構成であり、
　前記情報表示部は、
　前記表示情報出力部の出力する１種類の色に対応する波長光を選択的に反射する反射膜によって構成された表示部である請求項１に記載の画像処理装置。
　前記情報表示部は、
　車両のフロントウィンドウに積層して固定された構成であり、
　フロントウィンドウから入射する可視光を透過する光透過特性を有する請求項１に記載の画像処理装置。
　前記表示情報出力部は、
　信号に利用される色と異なる色の波長光を出力する構成であり、
　前記情報表示部は、
　前記表示情報出力部の出力する波長光である信号に利用される色と異なる色の波長光を選択的に反射する反射膜によって構成された表示部である請求項５に記載の画像処理装置。
　前記情報表示部は、
　さらに赤外光を反射する反射膜によって構成された表示部である請求項１に記載の画像処理装置。
　前記画像処理装置は、
　前記情報表示部において反射された赤外光を入射して撮影するカメラを有する請求項７に記載の画像処理装置。
　前記情報表示部は、
　車両のフロントウィンドウに積層して固定された構成であり、
　前記カメラは、
　前記情報表示部の表示情報を見る運転者の正面からの画像を撮影することを可能とした構成である請求項８に記載の画像処理装置。
　前記画像処理装置は、さらに、
　前記カメラの撮影画像を解析して運転者の眼球挙動を解析する運転者眼球挙動解析部を有する請求項８に記載の画像処理装置。
　画像処理装置において実行する画像処理方法であり、
　表示情報出力が、１つ以上の波長光の出力により表示情報を出力する表示情報出力ステップと、
　情報表示部が、前記表示情報出力部の出力光に基づく情報表示を行う情報表示ステップを有し、
　前記情報表示ステップは、
　前記情報表示部を構成する高機能反射膜により、前記表示情報出力部の出力する波長光を選択的に反射して情報表示を行うステップである画像処理方法。
　所定の曲率を有するカーブ面に表示部を固定する表示部固定方法であり、
　前記表示部は、表示情報出力部の出力光に対応する波長光を選択的に反射する反射膜によって構成された表示部であり、
　基板上に形成した反射膜を、前記カーブ面の曲率半径より小さい曲率半径を持つように変形させるステップと、
　変形させた反射膜を前記カーブ面に押し付けて、反射膜と前記カーブ面間の空気を周囲に押し出しながら密着させるステップを有する表示部固定方法。
　前記所定の曲率を有するカーブ面は車両のフロントウィンドウである請求項１２に記載の表示部固定方法。