JP5955153B2 - 表示装置 - Google Patents

Description

本発明は、表示装置に関し、特に、車両に搭載されるカメラを内蔵したディスプレイ装置またはディスプレイユニットに関する。

テレビ会議システム等では、対話する相手を撮像するためのカメラと、カメラで撮像された人物を表示するためのディスプレイとを必要とする。このため、小型化、省スペース化の観点からカメラを内蔵したディスプレイ装置が望まれている。特許文献１は、透過型液晶パネルの背部にカメラを設け、薄型化を可能にしたカメラ内蔵のディスプレイ装置を開示している。液晶表示部の中央には、点滅表示されるシャッター領域が設定され、シャッター領域の画像を制御することで、前面側からの光の透過を可能にしている。特許文献２は、視野角を広くするために複数のカメラを内蔵し、複数のカメラで撮像されたデータを合成するカメラ内蔵ディスプレイ装置を開示している。

特開２００７−１６３８１６号公報 特開２００９−１５２７２号公報

運転者監視システムを搭載する車両では、ステアリングの後方にカメラユニットを設置し、カメラユニットにより運転者の目や瞼の状態を撮像し、撮像データから運転者の居眠りを検知している。図１は、運転者監視システムに用いられるカメラユニットの取付例を示す図である。同図に示すように、運転者の正面には、スピードメータ等の計器類を配したメータパネル１０が設置され、メータパネル１０の下部には専用のカメラユニット１２が取付けられる。カメラユニット１２内には、撮像素子と、夜間でも確実に運転者の顔を撮像できるようにするための赤外線を出射する複数のＬＥＤ光源１４が内蔵されている。しかしながら、このようなカメラユニット１２を設置すると、メータパネル１０の視認性を損ねたり、メータパネル１０の外観上の美観やデザイン性を損ねるという課題がある。

他方、特許文献１または２に示されるカメラ内蔵のディスプレイ装置は、カメラユニットのレンズを収容するための孔をバックライトユニット内に形成するなどの微細な物理的加工を必要とするため、構成が複雑であり、低コスト化を図ることが難しいという課題がある。さらに、夜間の撮像に必ずしも適した構成にはなっていない。

本発明は、このような従来の課題を解決するものであり、デザイン性や美観を損なわせることなく低コスト化を図ることができる、撮像素子を包含する表示装置を提供することを目的とする。
さらに本発明は、車両の運転者監視システムに適した撮像素子を包含する表示装置を提供することを目的とする。

本発明に係る撮像素子を包含する表示装置は、画像データに基づき画像を表示可能な表示手段と、前記表示手段の背面側に配置され、前記表示手段を介して物体を撮像可能な撮像手段と、赤外光を出射する光源と、前記撮像手段に対応する前記表示手段の所定表示領域が前記光源からの赤外光を透過するようにように、前記所定表示領域の表示画像を制御する制御手段とを有する。

好ましくは前記表示手段は、少なくとも液晶パネルを含み、前記制御手段は、前記所定表示領域を赤色で表示させる。好ましくは前記液晶パネルは、Ｒ（赤）、Ｇ（緑）、Ｂ（青）を含むカラーフィルタを含み、前記制御手段は、前記所定表示領域からＲのフィルタにより一定以上の波長の光を透過させる。好ましくは前記表示手段は、バックライトを含み、前記光源は前記バックライト内に設けられる。好ましくは前記表示手段は、前記所定表示領域を覆う赤外光フィルタを含む。好ましくは表示装置はさらに、周辺の明るさを検出する検出手段と、前記光源の駆動を制御する駆動制御手段と、前記検出手段からの検出結果に基づき周辺が暗いか否かを判定する判定手段とを有し、前記駆動制御手段は、前記判定手段により周辺が暗いと判定されたとき、前記光源から赤外光を出射される。好ましくは前記制御手段は、前記判定手段により周辺が明るいと判定されたとき、前記所定表示領域の光の透過量が減少するように前記所定表示領域の表示画像を制御する。好ましくは前記表示手段は、車両のメータ等を表示するインスツルメンツパネルを構成する。

好ましくは本発明の運転者監視システムは、上記構成の撮像素子を包含する表示装置を含み、当該運転者監視システムは、前記撮像手段により撮像された画像データを処理する処置手段と、処理された画像データから運転者の瞼または目の状態を監視する監視手段と、監視手段の監視結果に基づき警告を発する警告手段とを含む。好ましくは前記監視手段は、運転者の居眠りを検知する。

本発明によれば、撮像素子を表示手段の背面側に配置し、表示手段の所定表示領域を利用して赤外光を透過させるようにしたので、表示装置の外観上の美観が損なわれることがなくなる。さらに、赤外光の光源を備え、赤外光による撮像が可能になるため、夜間等であっても、運転者等を確実に撮像することができる。

従来の運転者監視システムに用いられるカメラユニットの取付例を説明する図である。 本発明の第１の実施例に係るカメラモジュール内蔵ディスプレイ装置の構成を示す側面図と正面図である。 液晶パネルのカラーフィルタの分光特性の一例を示すグラフである。 本発明の第１の実施例に係る運転者監視システムの構成を示すブロック図である。 本発明の第２の実施例に係るカメラモジュール内蔵ディスプレイ装置の構成を示す側面図と正面図である。 本発明の第２の実施例に係る運転者監視システムの構成を示すブロック図である。 本発明の第３の実施例による赤外光透過領域の表示タイミング制御を説明する図である。

以下、本発明の好ましい実施態様について図面を参照して説明する。本実施の態様では、カメラ内蔵のディスプレイ装置は、車両のメータパネルを構成する表示ユニットとして利用され、かつ運転者監視システムにおける運転者を撮像する撮像ユニットとしても利用される。図２（Ａ）は、本発明の実施例に係るカメラモジュール内蔵のディスプレイ装置の概略側面図、図２（Ｂ）は、本発明の実施例に係るカメラモジュール内蔵のディスプレイ装置の正面図である。

本実施例のカメラモジュール内蔵のディスプレイ装置１００は、薄型の矩形状を有する液晶装置１１０と、カメラユニット１２０とを含み、液晶装置１１０は、液晶パネル１１２とバックライトユニット１１４とを含んで構成される。バックライトユニット１１４の底部には、光源１１６が設けられている。

液晶パネル１１２は、公知のように、２枚の透明な基板の間に液晶材料をサンドイッチし、２枚の透明な基板の表面側には、Ｒ（赤）、Ｇ（緑）、Ｂ（青）のカラーフィルタが配列されたカラーフィルタ基板が配置され、背面側には、ＴＦＴなどが形成されたアクティブ基板が配置される。典型的な液晶パネルでは、２つの透明基板のさらに外側に１組の偏光フィルタ（偏光板）が設けられる。透過型の液晶パネルでは、バックライトユニット１１４から発せられた光が、偏光フィルタ、アクティブ基板、液晶、カラーフィルタ基板、偏光フィルタを通り、ユーザーの目に到達する。

バックライトユニット１１４は、導光板や光源１１６などを含み、液晶パネル１１２の全面を背面側からほぼ垂直方向に照射する。光源１１６には、例えば、ＣＣＦＬ（冷陰極管）や白色ＬＥＤなどが利用される。好ましくは、バックライトユニット１１４は、図２に示すように、導光板のエッジに光源１１６を配置したエッジライト型により構成され、液晶装置１１０の薄型化を図っている。なお、バックライトユニット１１４は、導光板を持たずに拡散板などを用いて均一な光を照射するものであってもよい。

本実施例では、光源１１６は、液晶パネル１１２の表示輝度を調整するためのランプ、例えば白色ＬＥＤと、運転者を撮像するための赤外線の波長を出射する赤外光ＬＥＤとを含み、これらのＬＥＤは、バックライトユニット１１４のエッジに一列に配置される。赤外光ＬＥＤ１１６Ａは、図２（Ｂ）に示すように、液晶パネル１２の一部の表示エリアに割り当てられる赤外光透過領域１３０に対応して配置され、例えば、８００ｎｍ程度の近赤外の波長を出射する。図の例では、赤外光透過領域１３０の下部において、赤外光ＬＥＤ１１６Ａ（ハッチングで示す）と白色ＬＥＤ１１６Ｂとが交互に配置され、赤外光透過領域１３０以外の領域には、白色ＬＥＤ１１６Ｂが配置されている。

白色ＬＥＤ１１６Ｂから出射された光は、バックライトユニット１１４内の導光板等によりほぼ垂直方向に反射され、これらの光は、液晶パネル１１２の面光源として機能する。赤外光ＬＥＤも同様にバックライトユニット１１４内でほぼ垂直方向に反射される、その一部は、赤外光透過領域１３０を透過して液晶パネル１１２の正面側から外部へ放射される。赤外光透過領域１３０に対応して配置される赤外光ＬＥＤ１１６Ａの数や配列等は、白色ＬＥＤ１１６Ｂによる照射ムラが生じないように、また液晶パネル１１２の輝度が大きく損なわれないように、他方、赤外光透過領域１３０を介して運転者の瞼または眼の状態を十分に撮像できる光量が得られるように、適宜選択される。

バックライトユニット１１４の背面には、カメラモジュール１２０が取付けられる。カメラモジュール１２０は、撮像素子としてのＣＣＤやＣＭＯＳセンサを含み、さらに一定の視野角を得るためにレンズを含むことができる。ここに用いられる撮像素子は、赤外光、好ましくは近赤外光を検知し、運転者の撮像を可能にする。従って、カメラのレンズは、赤外光を透過可能な材料から構成される。カメラモジュール１２０は、赤外光透過領域１３０の後方であっておおよそ液晶パネル１１０のほぼ中央に配置される。図２（Ｂ）に示す領域１２２は、カメラモジュール１２０への赤外光が入射される領域であって、少なくともバックライトユニット１１４の領域１２２は、赤外光を透過するような材料から構成されるか、または反射しない形状を有する。あるいは領域１２２は、穴または空洞を形成するものであってもよい。後述するように、赤外光透過領域１３０は、赤外光を透過するように画像制御される領域であり、赤外光ＬＥＤ１１６Ａから発せられた赤外光は、バックライトユニット１１４、赤外光透過領域１３０を介して外部へ出射され、物体を撮像した赤外光は、赤外光透過領域１３０、バックライトユニット１１４の領域１２２を介してカメラの撮像素子へ入射される。

好ましい態様では、液晶パネル１１２は、車両のメータパネルを構成する。図２（Ｂ）に示すように、液晶パネル１１２には、画像データに基づき、メータパネルに含まれるメータ類１４０が表示される。メータ類１４０は、例えば、スピードメータ、タコメータ、燃料メータ、ラジエータの水温計などである。メータ類１４０の下方には、赤外光透過領域１３０が割り当てられる。赤外光透過領域１３０は、他の領域と同様に画像データに基づき画像を表示することが可能であるが、赤外光透過領域１３０が画像データに基づき赤色を表示するように画像制御されたとき、カラーフィルタの分光特性により赤の波長のみならずこれよりも波長が大きい赤外光も透過される。

図３に、液晶パネルのカラーフィルタの分光特性の例を示す。同図には、Ｒ（赤）、Ｇ（緑）、Ｂ（青）の分光特性（光透過度）が示されている。赤色フィルタは、約６００ｎｍ以上の波長の光を透過するため、液晶パネル１１２で赤色の表示が行われた領域では、近赤外光（８００ｎｍ程度）もまたそこを透過する。

このように、赤外光透過領域１３０が赤外光を透過させるとき、赤外光透過領域１３０は赤色を表示することになる。液晶パネル１１２の一定領域が赤色に表示されると、非常に目立ち、デザイン的に好ましくない。このため、赤外光透過領域１３０を覆う赤外光フィルタ１５０を液晶パネル１１２の表面に取付けることが望ましい。赤外光フィルタ１５０は、赤外光を透過し、それ以外の光を吸収することができるので、赤外光透過領域１３０の赤色の表示を目立たせなくすることができる。

図４は、本発明の実施例の運転者監視システムの構成を示すブロック図である。本実施例の運転者監視システム２００は、カメラモジュール内蔵のディスプレイ装置１００、システム全体を制御する制御部２１０、ディスプレイ装置１００の表示画像を制御する表示制御部２２０、カメラモジュール内蔵のディスプレイ装置１００により撮像された運転者の顔の画像データを処理する画像処理部２３０、および運転者等に警告を発する警告部２４０を含んで構成される。

表示制御部２２０は、制御部２１０の制御下において、画像データに基づき液晶パネル１１２に図２（Ｂ）に示すようなメータ類１４０を表示させる。また、表示制御部２２０は、画像データに基づき赤外光透過領域１３０が赤色を表示するように表示制御をする。これにより、液晶パネル１１２には、メータ類１４０のリアルタイムな情報が表示され、同時に、赤外光透過領域１３０を介して運転者が赤外光により照射され、その反射光が赤外光透過領域１３０を介してカメラモジュール１２０（撮像素子）で受光される。カメラモジュール１２０は、受光された電気信号を増幅し、これを画像処理部２３０へ出力する。画像処理部２３０は、電気信号をディジタル信号に変換し、ディジタル画像データに基づき運転者の瞼や視線を検出し、これを制御部２１０へ出力する。制御部２１０は、運転者の瞼の開き具合、または瞬きの回数などから運転者が居眠りをしているか否かを判定し、居眠りをしていると判定した場合には、警告部２４０を介して警告を運転者に与える。

このように本実施例では、バックライトユニット１１４の白色ＬＥＤ１１６Ｂの一部を赤外光ＬＥＤ１１６Ａに置換し、新たに赤外光を発光させるための装置または筐体（例えば、図１のユニット１２）を設ける必要がなくなり、メータパネルのデザイン性、美観を維持することができる。また、カメラ内蔵のディスプレイ装置１００をユニット化またはモジュール化して車両に搭載することで、取付けが容易になり、生産性が改善される。

なお、上記実施例では、赤外光透過領域１３０は、液晶パネルの下方に割り当てるようにしたが、これに限らず他の領域であってもよい。また、赤外光透過領域１３０の大きさ、形状は、適宜選択可能であるし、さらに赤外光透過領域１３０は、複数の領域であってもよい。いずれの場合にも、カメラモジュール１２０は、赤外光透過領域１３０からの赤外光を入射できるように位置されるか、あるいはそのような光学系を生じさせるようにレンズやミラー等の光学部品を含むことができる。さらに上記実施例では、カメラ内蔵のディスプレイ装置により車両のメータパネルを表示する例を示したが、ディスプレイ装置は、このような表示以外にも、他の画像を表示するものとして利用することも可能である。

次に、本発明の第２の実施例について説明する。第１の実施例では、バックライトユニットの光源の一部を赤外光ＬＥＤに置換するものであったが、第２の実施例では、バックライトユニットの背面に赤外光ＬＥＤを配置するものである。図５に、第２の実施例のカメラモジュール内蔵のディスプレイ装置を示し、図２と同一構成については同一参照番号を附す。

第２の実施例のディスプレイ装置１００Ａにおいて、複数の赤外光ＬＥＤ３００がバックライトユニット１１４の背面側であって赤外光透過領域１３０と重複する位置に取付けられる。赤色ＬＥＤ３００は、バックライトユニット１１４、液晶パネル１１２の面にほぼ垂直に入射され、第１の実施例のときと同様に、赤外光透過領域１３０を透過し、運転者の顔面を照射する。第２の実施例では、バックライトユニット１１４の全体、または赤外光透過領域１３０に対応する領域は、赤外光を透過可能な材料から構成されることが望ましい。

第２の実施例では、赤外光ＬＥＤ３００をバックライトユニット１１４の白色光源と別構成とすることで赤外光ＬＥＤ３００を、バックライトユニット１１４の光源から独立して駆動することが可能になる。これにより、バックライトユニット１１４による光量を低下させることなく、赤外光ＬＥＤ３００により夜間でも確実に運転者の瞼の状態を撮像することができる。好ましくは、運転者の周囲が暗いときに赤外光ＬＥＤ３００を点灯させ、周囲が明るいときには赤外光ＬＥＤ３００を消灯させることができる。

図６は、第２の実施例の運転者監視システムの構成を示すブロック図である。第2の実施例の運転者監視システム２００Ａでは新たに、照度センサ３１０、ディマースイッチ３２０、点灯駆動部３３０を含む。照度センサ３１０は、例えばフォトダイオードまたはフォトトランジスタを含み、ディスプレイ装置１００Ａまたは運転者の近傍の明るさを検出し、この検出結果を制御部２１０へ提供する。ディマースイッチ３２０は、車両のライトがオンしたことを検知するものであり、この検知結果は制御部２１０へ提供される。制御部２１０は、周囲の明るさが暗くなった判定したとき、またはディマースイッチがオンされたとき、点灯駆動部３３０を介して赤外光ＬＥＤ３００をオンさせ、夜間等においても運転者の顔面を赤外光で照射できるようにする。また、制御部２１０は、周囲の明るさに応じて赤外光の光量が段階的に増加するように、点灯させる赤外光ＬＥＤの数を可変するようにしてもよい。

上記実施例では、赤外光ＬＥＤ３００は、バックライトユニットの光源と別構成であれば、どのような取付けの形態であってもよい。例えば、赤外光ＬＥＤ３００は、カメラモジュール１２０と一体に取付けられるようにしてもよいし、バックライトユニット１１４の背面に一体に取付けられるようにしてもよい。また、照度センサ３１０もまた、ディスプレイ装置１００Ａと一体に取付けられるようにしてもよい。

次に、本発明の第３の実施例について説明する。第３の実施例では、直射日光がカメラに直接当たるような入射光量が非常に多い場面に、赤外光透過領域１３０の液晶の表示制御により、カメラのレンズ部分の透過率を下げることで、カメラの露出を調整する。図６において、照度センサ３１０による検出結果が制御部２１０に提供され、制御部２１０は、周囲の明るさが一定上であると判定すると、表示制御部２２０を介して赤外線の透過量を減少させる。例えば、図７に示すように、赤外光透過領域１３０が赤色を表示する期間がＴであるとき、断続的に短い期間Ｔａで赤色が表示されるように表示タイミングを制御することで、透過量を調整する。

本発明の好ましい実施の形態について詳述したが、本発明は、特定の実施形態に限定されるものではなく、特許請求の範囲に記載された発明の要旨の範囲において、種々の変形・変更が可能である。

１００、１００Ａ：カメラモジュール内蔵ディスプレイ装置
１１０：液晶装置
１１２：液晶パネル
１１４：バックライトユニット
１１６：光源
１１６Ａ、３００：赤外光ＬＥＤ
１１６Ｂ：白色ＬＥＤ
１２０：カメラモジュール
１３０：赤外光透過領域
１４０：メータ類
１５０：赤外光フィルタ

Claims (8)

1. 撮像素子を包含する表示装置であって、
   画像データに基づき画像を表示可能であり、少なくともＲ（赤）、Ｇ（緑）、Ｂ（青）のカラーフィルタを含む液晶パネルを有する表示手段と、
   前記表示手段の背面側に配置され、前記表示手段を介して物体を撮像可能な撮像手段と、
   赤外光を出射する光源と、
   前記撮像手段に対応する前記表示手段の所定表示領域からＲのフィルタを介して一定以上の波長の光を透過させるように、前記所定表示領域を赤色で表示させる制御手段と、
   を有する表示装置。
2. 前記表示手段は、バックライトを含み、前記光源は前記バックライト内に設けられる、請求項１に記載の表示装置。
3. 前記表示手段は、前記所定表示領域を覆う赤外光フィルタを含む、請求項１または２記載の表示装置。
4. 表示装置はさらに、周辺の明るさを検出する検出手段と、前記光源の駆動を制御する駆動制御手段と、前記検出手段からの検出結果に基づき周辺が暗いか否かを判定する判定手段とを有し、前記駆動制御手段は、前記判定手段により周辺が暗いと判定されたとき、前記光源から赤外光を出射される、請求項１ないし３いずれか１つに記載の表示装置。
5. 前記制御手段は、前記判定手段により周辺が明るいと判定されたとき、前記所定表示領域の光の透過量が減少するように前記所定表示領域の表示画像を制御する、請求項４に記載の表示装置。
6. 前記表示手段は、車両のメータ等を表示するインスツルメンツパネルを構成する、請求項１ないし５いずれか１つに記載の表示装置。
7. 請求項１ないし６いずれか１つに記載の表示装置を含む運転者監視システムであって、
   当該運転者監視システムは、前記撮像手段により撮像された画像データを処理する処置手段と、処理された画像データから運転者の瞼または目の状態を監視する監視手段と、監視手段の監視結果に基づき警告を発する警告手段とを含む、運転者監視システム。
8. 前記監視手段は、運転者の居眠りを検知する、請求項７に記載の運転者監視システム。

Images