JP2022163917A - 表示装置 - Google Patents

Abstract

【課題】照明装置を別途準備することなく、顔映りが鮮明な画像を外部へ送り得る表示装置を提供する。【解決手段】表示装置は、取得部、表示部、表示制御部、複数の光源、輝度制御部、特定部、及び通信部を含む。表示部は表示領域を有する。取得部は、表示領域に向き合っているユーザの顔を含む被写体画像を取得する。表示制御部は表示対象画像を表示領域に表示させる。複数の光源は表示領域の背面から光を照射する。輝度制御部は複数の光源の輝度を制御する。特定部は被写体画像におけるユーザの顔の明るさが基準値以下の部分領域を特定する。通信部は被写体画像を外部へ出力する。輝度制御部は、被写体画像における部分領域の位置及び範囲に基づき全光源の一部の輝度を他の光源より高くする。【選択図】図７

Description

本発明は、表示装置に関する。

近年の通信回線技術の向上により、テレビ会議システムの利用が高まっている。これに伴い、テレビ会議システムに関する様々な技術が提案されている。特許文献１には、テレビ会議を行う双方のディスプレイに表示される通信相手の照度が一致するように、それぞれの通信相手の顔の部分の表示輝度を調整するテレビ会議システムが開示されている。特許文献１に記載のテレビ会議システムでは、テレビ会議を行う双方の通信相手が同じ空間を共有するような臨場感を与えることができる。

特開２００８－００５１２２号公報

ところで、テレビ会議を行う場所の照明の位置等によってカメラに映るユーザの顔に影ができる場合がある。顔に影のある画像は、通信相手の表情を分かりにくくし、スムーズなコミュニケーションを取りにくくする。そのため、照明を別途設置するなどしてカメラの顔映りを良くすることが考えられる。しかしながら、この場合、照明を用意し、適切な位置にセッティングするなど、様々な事前準備が必要となる。

本発明は、照明装置を別途準備することなく、顔映りが鮮明な画像を外部へ送り得る表示装置を提供することを目的とする。

本発明に係る表示装置は、取得部、表示部、表示制御部、複数の光源、輝度制御部、特定部、及び通信部を備える。表示部は表示領域を有する。取得部は、表示領域に向き合っているユーザの顔を含む被写体画像を取得する。表示制御部は、表示対象画像を表示領域に表示させる。複数の光源は、表示領域の背面から光を照射する。輝度制御部は、複数の光源の輝度を制御する。特定部は、被写体画像におけるユーザの顔の明るさが基準値以下である部分領域を特定する。通信部は、被写体画像を外部へ出力する。輝度制御部は、被写体画像における部分領域の位置及び範囲に基づいて、複数の光源のうちの一部の光源の輝度を他の光源よりも高くする。

本発明に係る表示装置によれば、照明装置を別途準備することなく、顔映りが鮮明な画像を外部へ送ることができる。

図１は、実施形態におけるテレビ会議システムの構成を示す模式図である。 図２は、実施形態における表示装置の概略構成を示すブロック図である。 図３は、バックライトの構成を示す模式図である。 図４は、影パターンに対応する点灯パターンが規定された点灯制御情報の一例を示す図である。 図５Ａは、影パターンＰ１の影領域を示す模式図である。 図５Ｂは、影パターンＰ２の影領域を示す模式図である。 図５Ｃは、影パターンＰ３の影領域を示す模式図である。 図５Ｄは、影パターンＰ４の影領域を示す模式図である。 図６Ａは、点灯パターンＬ１に応じたバックライトのローカルディミングのエリアを示す模式図である。 図６Ｂは、点灯パターンＬ２に応じたバックライトローカルディミングのエリアを示す模式図である。 図６Ｃは、点灯パターンＬ３に応じたバックライトのローカルディミングのエリアを示す模式図である。 図６Ｄは、点灯パターンＬ４に応じたバックライトのローカルディミングのエリアを示す模式図である。 図７は、実施形態のテレビ会議における表示装置のバックライト制御を示す動作フロー図である。 図８は、変形例（１）における撮影データの顔部分に対する輝度値のヒストグラムと影領域との関係を示すイメージ図である。

以下、図面を参照して、実施形態に係る表示装置について説明する。なお、図中、同一又は相当部分については同一の参照符号を付して説明を繰り返さない。

図１は、本実施形態におけるテレビ会議システム１００の構成を示す模式図である。図１に示すように、テレビ会議システム１００は、拠点Ａに設置された表示装置１、カメラ２ａ、及びマイク２ｂと、拠点Ｂに設置された外部装置３とを含む。本実施形態において、表示装置１及び外部装置３は、例えばＰＣ（Personal Computer）で構成されるが、ディスプレイを備えるものであればＰＣに限らず、タブレット端末等であってもよい。

拠点Ａにおいて、表示装置１は、ユーザＨａをカメラ２ａで撮像した画像信号をネットワークＮを介して拠点Ｂの外部装置３へ逐次送信する。拠点Ｂにおいて、外部装置３は、表示装置１から送信された画像信号に基づくユーザＨａの画像を表示する。なお、拠点Ｂにおいて、ユーザＨｂを撮影するためのカメラが設置され、ユーザＨｂを撮影した画像信号が表示装置１へ送信されてもよいが、拠点Ｂにカメラが設置されていなくてもよい。以下、本実施形態における表示装置１の構成について具体的に説明する。

（構成）
図２は、本実施形態における表示装置１の概略構成を示すブロック図である。図２に示すように、表示装置１は、スピーカ２ｃ、制御部１０、通信部１１、バックライト制御部１２、バックライト（光源）１３、表示部１４、操作部１５、及び記憶部１６を含む。本実施形態において、表示装置１は、カメラ２ａ（撮影部）及びマイク２ｂと電気的に接続されている。

カメラ２ａは、被写体としてユーザＨａを撮像した撮像信号を表示装置１へ逐次出力する。

マイク２ｂは、ユーザＨａに装着され、集音した音声を示す音声信号を表示装置１へ出力する。

本実施形態において、カメラ２ａ及びマイク２ｂは、表示装置１とは別体として設けられるが、カメラ２ａ及びマイク２ｂが表示装置１に内蔵されていてもよい。また、例えば、マイク２ｂにイヤホンが接続されていてもよいし、マイク２ｂのみ表示装置１とは別に机上に設置されていてもよい。

スピーカ２ｃは、表示装置１に設けられ、制御部１０から出力されたデジタル音声信号をアナログ信号に変換し、増幅して放音する。

通信部１１は、ネットワークＮを介して外部装置３と通信する通信インタフェースである。通信部１１は、制御部１０の制御の下、外部装置３との間で画像信号及び音声信号を送受信する。具体的には、通信部１１は、外部装置３から受信した画像信号及び音声信号を制御部１０へ出力する。また、通信部１１は、制御部１０から出力された画像信号及び音声信号を外部装置３へ送信する。

表示部１４は、液晶パネルと、液晶パネルを駆動する駆動回路とを含む（いずれも図示略）。液晶パネルは、Ｒ（赤），Ｇ（緑），Ｂ（青）の各色の画素をそれぞれ複数含み、全画素からなる表示領域を有する。駆動回路は、制御部１０の制御の下、液晶パネルの各画素に画像を表示するための駆動信号を供給する。

バックライト１３は、液晶パネルの背面に配置される直下型バックライトである。図３は、バックライト１３の構成を示す模式図である。図３に示すように、バックライト１３は、マトリクス状に配列された複数の光源１２１を含む。光源１２１は、例えばＬＥＤである。

バックライト制御部１２は、制御部１０からの指示に応じてバックライト１３の光源１２１をエリア単位に制御するローカルディミング処理を行う。具体的には、バックライト制御部１２は、制御部１０から指示される点灯パターンに基づいて、各光源１２１の点灯を制御する。各光源１２１は、例えばＰＷＭ（Pulse Width Modulation）制御によって点灯される。点灯パターンは、後述の制御部１０の説明において詳述する。

記憶部１６は、ハードディスク等の不揮発性記憶媒体である。記憶部１６は、バックライト１３の点灯パターンを示す点灯情報や、ユーザＨａの顔を予め撮影した顔画像データ、各種文書データ、及びテレビ会議システムに用いられるテレビ会議用画像データ等を記憶する。顔画像データは、テレビ会議中にカメラ２ａでユーザＨａの顔を撮影した撮影画像と照合するために用いられる。

操作部１５は、キーボードやマウス、及び表示装置１に設けられた操作ボタンを含む。操作部１５は、ユーザＨａからの操作を受け付け、受け付けた操作を示す操作信号を制御部１０へ出力する。

制御部１０は、ＣＰＵ（Central Processing Unit）及びメモリ（ＲＯＭ(Read Only Memory)及びＲＡＭ(Random Access Memory)）を含む。制御部１０は、ＣＰＵがＲＯＭに記憶された制御プログラムを実行することにより、通信制御部１０ａ、取得部１０ｂ、特定部１０ｃ、表示制御部１０ｄ、輝度制御部１０ｅ、及びテレビ（ＴＶ）会議制御部１０ｆとして機能する。

テレビ会議制御部１０ｆは、操作部１５を介したテレビ会議システムの起動又は終了操作に応じて、カメラ２ａ、マイク２ｂ、及びスピーカ２ｃを起動又は終了させる。また、テレビ会議制御部１０ｆは、操作部１５を介したテレビ会議システムの起動に応じて、所定のテレビ会議システム規格に応じた通信接続を通信制御部１０ａに指示し、操作部１５を介したテレビ開始システムの終了に応じて、通信接続の終了を通信制御部１０ａに指示する。

通信制御部１０ａは、テレビ会議制御部１０ｆからの通信接続の指示に基づき、通信部１１を介して外部装置３との間で通信を確立し、外部装置３との間でテレビ会議中の撮影画像及び音声データを送受信する。具体的には、通信制御部１０ａは、マイク２ｂから入力される音声信号をテレビ会議システムの規格に応じたデジタルデータに変換し、デジタルデータを所定の規格（Ｇ．７１１，Ｇ．７２２，ＭＰＥＧ４－ＡＡＣ等）に応じてエンコードして音声データを生成する。通信制御部１０ａは、生成した音声データを通信部１１へ出力する。また、通信制御部１０ａは、カメラ２ａから入力される映像信号をテレビ会議システムの規格に応じたデジタルデータに変換し、デジタルデータを所定の規格（Ｈ．２６１，Ｈ．２６３，Ｈ．２６４等）に応じてエンコードして画像データを生成する。通信制御部１０ａは、生成した画像データを通信部１１へ出力する。また、通信制御部１０ａは、通信部１１から入力される外部装置３からの音声データ及び画像データをデコードする。

取得部１０ｂは、通信制御部１０ａでデコードされた音声データ及び画像データを取得する。取得部１０ｂは、取得した音声データをスピーカ２ｃに出力し、スピーカ２ｃから放音させる。また、取得部１０ｂは、取得した画像データを表示制御部１０ｄ及び特定部１０ｃへ送出する。また、取得部１０ｂは、カメラ２ａで撮影された映像信号が入力される。取得部１０ｂは、入力された映像信号をデジタルの画像データ（以下、撮影画像データ）に変換し、特定部１０ｃ及び表示制御部１０ｄへ出力する。

特定部１０ｃは、取得部１０ｂから送出された画像データから顔部分を特定し、特定した顔部分において影がある部分領域（以下、影領域）を特定する。具体的には、特定部１０ｃは、撮影画像データから所定の顔検出方法を用いて顔部分を特定する。顔検出方法としては、予め多数の顔画像データを基に、主成分分析により抽出された固有顔(Eigenface)を用いて人物の顔を検出するAppearance-based 顔認識方法を用いてもよい。又は、予め記憶された目、鼻、口等の特徴点を用いたパターンマッチングによって顔検出を行ってもよい。特定部１０ｃは、撮影画像データの顔部分の比較対象の画像として、記憶部１６に記憶された顔画像データを用い、撮影画像データの顔部分と顔画像データとを照合する。特定部１０ｃは、撮影画像データの顔部分において、顔画像データの顔の明度（基準値の一例）より一定レベル以上明度が低い領域を影領域とする。顔画像データの顔の明度は、例えば、顔画像データにおける顔全体の明度の平均値を基準としてもよい。又は、撮影画像データにおいて、例えば、特定箇所（目、鼻、顎の下、及び頬の一部の少なくとも１つ）を比較対象部分とし、比較対象部分の明度と、顔画像データにおいて比較対象部分に対応する箇所の明度とが比較されてもよい。

輝度制御部１０ｅは、特定部１０ｃで特定された影領域が、予め定められた影領域のパターン（以下、影パターン）に該当する場合、その影パターンに応じた点灯パターンをバックライト１３の点灯パターンとして設定する。図４は、影パターンに対応する点灯パターンが規定された点灯制御情報１３１の一例を示す図である。図４に示すように、点灯制御情報１３１には、影パターンＰ１～Ｐ４のそれぞれと対応する点灯パターンＬ１～Ｌ４が規定されている。以下、影パターンＰ１～Ｐ４と点灯パターンＬ１～Ｌ４の具体例を説明する。

図５Ａ～図５Ｄは、影パターンＰ１～Ｐ４の各影領域を示すイメージ図である。また、図６Ａ～図６Ｄは、点灯パターンＬ１～Ｌ４に応じたバックライト１３のローカルディミングのエリアを示す模式図である。

図５Ａ～図５Ｄに示す顔画像２１は、記憶部１６に記憶されたユーザＨａの顔画像を簡略化した模式図である。図５Ａ～図５Ｄにおいて斜線で示す領域が各影パターンの影領域である。

図５Ａは、影パターンＰ１の影領域２１１～２１３を示す模式図である。影パターンＰ１は、ユーザＨａの頭上から光があてられている場合であり、この場合、目２１ａ及び鼻２１ｂの下、顎や頬等のフェイスラインに影ができやすい。

図６Ａは、点灯パターンＬ１に応じたバックライト１３のローカルディミングのエリアを示す模式図である。図４に示したように、点灯パターンＬ１は、影パターンＰ１に対応する点灯パターンである。点灯パターンＬ１においては、バックライト１３における領域ＲＵ１及び領域ＲＤ１のそれぞれの領域単位に光源１２１の点灯が制御される。領域ＲＵ１は、全ての光源１２１が設けられた全光源領域のうち、バックライト１３の上辺(Ｙ軸正方向側の辺)に、領域ＲＤ１よりも近い領域である。領域ＲＤ１は、全光源領域において領域ＲＵ１以外の領域、すなわち、バックライト１３の下辺（Ｙ軸負方向側の辺）に、領域ＲＵ１よりも近い領域である。領域ＲＤ１のＹ軸方向の長さは領域ＲＵ１よりも短い。領域ＲＤ１に設けられた光源１２１は、領域ＲＵ１に設けられた光源１２１よりも高い輝度で点灯される。よって、点灯パターンＬ１でバックライト１３を点灯させた場合、表示装置１の表示領域において領域ＲＤ１に対応する部分は、領域ＲＵ１に対応する部分よりも明るくなる。つまり、撮影画像における影領域が影パターンＰ１に該当する場合、表示部１４の前に位置するユーザＨａの顔は、表示領域の下方から放出される光によって照らされる。

図５Ｂは、影パターンＰ２の影領域２２１を示す模式図である。影パターンＰ２は、ユーザＨａの背面から光があてられている場合であり、この場合、顔全体に影ができやすい。

図６Ｂは、点灯パターンＬ２に応じたバックライト１３のローカルディミングのエリアを示す模式図である。図４に示したように、点灯パターンＬ２は、影パターンＰ２に対応する点灯パターンである。点灯パターンＬ２においては、バックライト１３における領域ＲＵ２及び領域ＲＤ２のそれぞれの領域単位に光源１２１の点灯が制御される。領域ＲＵ２は、全光源領域のうちバックライト１３の上辺(Ｙ軸正方向側の辺)に領域ＲＤ２より近い領域である。領域ＲＤ２は、全光源領域において領域ＲＵ２以外の領域、すなわち、バックライト１３の下辺（Ｙ軸負方向側の辺）に、領域ＲＤ２より近い領域である。領域ＲＤ２のＹ軸方向の長さは領域ＲＵ２よりも長い。

点灯パターンＬ２では、領域ＲＵ２に設けられた光源１２１は、領域ＲＤ２に設けられた光源１２１よりも高い輝度で点灯される。よって、点灯パターンＬ２でバックライト１３を点灯させた場合、表示領域において領域ＲＵ２に対応する部分は、領域ＲＤ２に対応する部分よりも明るくなる。すなわち、表示領域の下方よりも明るい光が表示領域の上方からユーザＨａに向けて照射され、ユーザＨａの顔の上方が照らされる。

図５Ｃは、影パターンＰ３の影領域２３１を示す模式図である。影パターンＰ３は、紙面に向かってユーザＨａの顔の右側から光があてられている場合であり、この場合、顔の左側全体に影ができやすい。

図６Ｃは、点灯パターンＬ３に応じたバックライト１３のローカルディミングのエリアを示す模式図である。点灯パターンＬ３においては、バックライト１３における領域ＲＬ１及び領域ＲＲ１の領域単位に光源１２１の点灯が制御される。領域ＲＬ１は、全光源領域のうちバックライト１３の左辺(Ｘ軸負方向側の辺)に、領域ＲＲ１より近い領域である。領域ＲＲ１は、全光源領域において領域ＲＬ１以外の領域、すなわち、バックライト１３の右辺（Ｘ軸正方向側の辺）に領域ＲＬ１より近い領域である。領域ＲＬ１のＸ軸方向の長さは領域ＲＲ１よりも短い。

点灯パターンＬ３では、領域ＲＬ１に設けられた光源１２１は、領域ＲＲ１に設けられた光源１２１よりも高い輝度で点灯される。よって、点灯パターンＬ３でバックライト１３を点灯させた場合、表示領域において領域ＲＬ１に対応する部分は、領域ＲＲ１に対応する部分よりも明るくなる。すなわち、表示領域の右側よりも明るい光が表示領域の左側からユーザＨａに向けて放射され、ユーザＨａの顔の左側が照らされる。

図５Ｄは、影パターンＰ４の影領域２４１を示す模式図である。影パターンＰ４は、紙面に向かってユーザＨａの顔の左側から光があてられている場合であり、この場合、顔の右側全体に影ができやすい。

図６Ｄは、点灯パターンＬ４に応じたバックライト１３のローカルディミングのエリアを示す模式図である。点灯パターンＬ４においては、バックライト１３における領域ＲＬ２及び領域ＲＲ２の領域単位に光源１２１の点灯が制御される。領域ＲＬ２は、全光源領域のうちバックライト１３の左辺(Ｘ軸負方向側の辺)に、領域ＲＲ２より近い領域である。領域ＲＲ２は、全光源領域において領域ＲＬ２以外の領域、すなわち、バックライト１３の右辺（Ｘ軸正方向側の辺）に、領域ＲＬ２より近い領域である。領域ＲＬ２のＸ軸方向の長さは領域ＲＲ２よりも長い。

点灯パターンＬ４では、領域ＲＲ２に設けられた光源１２１は、領域ＲＬ２に設けられた光源１２１よりも高い輝度で点灯される。よって、点灯パターンＬ４でバックライト１３を点灯させた場合、表示領域において領域ＲＲ２に対応する部分は、領域ＲＬ２に対応する部分よりも明るくなる。すなわち、表示領域の左側よりも明るい光が表示領域の右側からユーザＨａに向けて放射され、ユーザＨａの顔の右側が照らされる。

点灯パターンＬ１～Ｌ４において、バックライト１３の全光源領域のうち領域ＲＤ１、ＲＵ２、ＲＬ１、ＲＲ２は高輝度で点灯される領域である。以下では、これら領域を高輝度エリアと記載する場合がある。

撮影画像における影領域がいずれかの影パターンに該当するか否かの判断は、例えば、影領域の位置及び範囲に基づいて判断されればよい。つまり、例えば、影パターンＰ１の場合、撮影画像におけるユーザＨａの目及び鼻の下、フェイスラインの少なくともいずれかに一定の大きさ以上の影領域がある場合に、影パターンＰ１に該当すると判断されてもよい。また、影パターンＰ２の場合、撮影画像におけるユーザＨａの鼻の部分を含む一定の大きさ以上の影領域がある場合に、影パターンＰ２に該当すると判断されてもよい。また、影パターンＰ３又はＰ４の場合は、撮影画像におけるユーザＨａの顔の左側又は右側において一定の大きさ以上の影領域がある場合に、影パターンＰ３又はＰ４に該当すると判断されてもよい。このように、輝度制御部１０ｅは、ユーザＨａの撮影画像における影領域の位置や大きさ（範囲）に基づいて影パターンを判断し、影パターンに応じた点灯パターンが設定されてもよい。

輝度制御部１０ｅは、特定部１０ｃにおいて、一定の大きさ以上の影領域が特定できなかった場合、又は、影領域がいずれの影パターンにも該当しないと判断された場合、全光源１２１に対して共通の輝度を設定する。

図２に戻り、表示制御部１０ｄは、表示領域に表示すべき表示対象画像を示す画像データを表示部１４に出力し、表示対象画像を表示部１４に表示させる。表示対象画像の画像データは、例えば、取得部１０ｂから送出された画像データ、すなわち、外部装置３から送られた通信相手の顔画像を含む画像データや、カメラ２ａで撮影された画像データ（被写体画像）であってもよいし、表示装置１の記憶部１６に記憶された文書データ等であってもよい。

（動作）
図７は、本実施形態のテレビ会議における表示装置１のバックライト制御を示す動作フロー図である。図７に示す動作フローは、操作部１５を介してテレビ会議システムの起動操作に応じて開始する。また、図７の動作フローでは、表示装置１と外部装置３とがネットワークＮを介して通信接続され、ユーザＨａとユーザＨｂとの間でテレビ会議が行われているものとする。

表示装置１は、取得部１０ｂにおいて、テレビ会議中のユーザＨａが撮影された撮影データをカメラ２ａから逐次取得する（ステップＳ１）。

表示装置１は、特定部１０ｃにより、取得した撮影データから被写体（ユーザＨａ）の顔部分を特定する（ステップＳ２）。具体的には、特定部１０ｃは、Appearance-based顔認識方法等の所定の検出方法を用いて撮影データからユーザＨａの顔部分を特定する。

表示装置１は、特定部１０ｃにより、記憶部１６に記憶された比較対象画像に基づいて、特定した顔部分における影領域を判定する（ステップＳ３）。具体的には、特定部１０ｃは、記憶部１６に記憶された比較対象画像であるユーザＨａの顔画像データと、撮影画像データにおけるユーザＨａの顔部分とを照合する。そして、特定部１０ｃは、撮影画像データにおけるユーザＨａの顔部分において、顔画像データにおけるユーザＨａの顔の特定箇所（例えば頬の部分）の明度より一定レベル以上明度が低い領域を影領域として判定する。

表示装置１は、撮影画像データにおいて顔部分に影領域があり（ステップＳ４：ＹＥＳ）、影領域が所定の影パターンに該当する場合（ステップＳ５：ＹＥＳ）、影パターンに基づいてバックライト１３の輝度を制御する（ステップＳ７）。具体的には、輝度制御部１０ｅは、ステップＳ３において判定された影領域の位置及び大きさに基づいて影パターンを特定する。例えば、撮影画像データにおける顔部分において、所定の大きさ以上の影領域が、目又は鼻の下、及びフェイスラインのいずれかにある場合、影パターンとして影パターンＰ１が特定されてもよい。また、撮影画像データにおける顔部分において、鼻全体を含む顔の中心部分に所定の大きさ以上の影領域がある場合、影パターンとして影パターンＰ２が特定されてもよい。また、撮影画像データにおける顔部分において、顔の左側又は右側に所定の大きさ以上の影領域がある場合、影パターンとして影パターンＰ３又はＰ４が特定されてもよい。輝度制御部１０ｅは、点灯制御情報１３１（図４）に基づいて、特定した影パターンに応じた点灯パターンを示す点灯指示をバックライト制御部１２へ出力する。バックライト制御部１２は、点灯指示で示された点灯パターンに応じてバックライト１３の各光源１２１の輝度を制御する。

ステップＳ４において、撮影画像データにおける顔部分に一定の大きさ以上の影領域が特定されなかった場合（ステップＳ４：ＮＯ）、又は、ステップＳ５において、影領域に対応する影パターンが無い場合（ステップＳ５：ＮＯ）、表示装置１は、バックライト１３の全光源１２１を所定の輝度で点灯させる（ステップＳ６）。つまり、輝度制御部１０ｅは、顔部分に一定の大きさ以上の影領域が無い場合（ステップＳ４：ＮＯ）、又は、特定された影領域がいずれの影パターンＰ１～Ｐ４に該当しない場合（ステップＳ５：ＮＯ）、バックライト１３の全光源１２１に対して所定の輝度を設定する。そして、バックライト制御部１２は、輝度制御部１０ｅで設定された所定の輝度でバックライト１３を点灯させる。

表示装置１は、操作部１５を介してテレビ会議終了の操作がなされるまで、（ステップＳ８：ＮＯ）、ステップＳ１～Ｓ７の処理を繰り返す。また、表示装置１は、操作部１５を介してテレビ会議終了の操作がなされると（ステップＳ８：ＮＯ）、テレビ会議を終了する（ステップＳ９）。具体的には、テレビ会議制御部１０ｆにより、通信制御部１０ａに通信接続の終了を指示するとともに、カメラ２ａ、マイク２ｂ、及びスピーカ２ｃをオフにする。

例えば、ステップＳ３で判定された影領域に対応する影パターンが影パターンＰ１（図５Ａ）である場合、影パターンＰ１に対応する点灯パターンとして点灯パターンＬ１（図６Ａ）が輝度制御部１０ｅからバックライト制御部１２へ指示される。この場合、バックライト制御部１２は、バックライト１３において領域ＲＵ１に設けられた光源１２１よりも所定レベルだけ高い輝度で領域ＲＤ１に設けられた光源１２１を点灯させる。これにより、表示装置１の表示領域において、バックライト１３の領域ＲＤ１に対応する領域、すなわち表示領域の下方の領域に表示される画像は、表示領域の上方の領域に表示される画像よりも明るく表示される。

バックライト１３から表示面を透過した光がユーザＨａに放射される。点灯パターンＬ１の場合、表示領域の下方の領域は上方の領域よりも明るくなるため、ユーザＨａの顔を下側からライティングする効果が得られる。その結果、ユーザＨａの頭上から照明が当たっている場合であっても、目や鼻の下、頬や顎等のフェイスラインに影ができにくく、より鮮明な撮影画像データが外部装置３に送られる。

ステップＳ３で判定された影領域が影パターンＰ２～Ｐ４のいずれかに該当する場合も影パターンに応じた点灯パターン（Ｌ２～Ｌ４）により、表示領域の一部の領域が他の領域よりも明るく表示される。その結果、点灯パターンに応じた方向からユーザＨａの顔がライティングされ、ユーザＨａの顔に影ができにくくなり、カメラ２ａによりユーザＨａの顔がより鮮明に映される。

以上、図面（図１～図７）を参照して本発明に係る表示装置の実施形態について説明した。但し、表示装置は、上記の実施形態に限られるものではなく、その要旨を逸脱しない範囲で種々の態様において実施することが可能である。図面は、理解しやすくするために、それぞれの構成要素を主体に模式的に示しており、図示された各構成要素の厚み、長さ、個数等は、図面作成の都合上から実際とは異なる。また、上記の実施形態で示す各構成要素の形状、寸法等は一例であって、特に限定されるものではなく、本発明の効果から実質的に逸脱しない範囲で種々の変更が可能である。以下、上記実施形態の変形例を説明する。

［変形例］
（１）表示装置１において、特定部１０ｃは、例えば、撮影画像における顔部分の輝度値のヒストグラムを生成し、ヒストグラムに基づいて影領域を特定してもよい。具体的には、例えば画素が２５６階調で表される場合、顔部分の縦及び横方向のそれぞれの画素の輝度値（０～２５５）のヒストグラムを生成し、縦及び横方向の輝度値のヒストグラムにおいて閾値以下の領域を影領域としてもよい。図８は、本変形例における撮影データの顔部分に対する輝度値のヒストグラムと影領域との関係を示すイメージ図である。図８の場合、顔部分３００のＹ軸方向（縦）のヒストグラム４００ｙにおいて、閾値Ｌｔｈ以下となるＹ軸方向の位置に影領域３０１が存在し、顔部分３００のＸ軸方向（横）のヒストグラム４００ｘにおいて、閾値Ｌｔｈ以下となるＸ軸方向の位置に影領域３０１が存在する。

また、特定部１０ｃは、特定した顔部分における所定領域（目の周辺、鼻の下、及びフェイスライン（頬及び顎）の周辺領域等））と、顔部分における所定領域以外の他の領域との輝度値を比較し、他の領域よりも輝度値が一定レベル以上低い部分を影領域としてもよい。また、特定部１０ｃは、特定した顔部分における所定領域のＸ及びＹ方向の輝度値のヒストグラムを生成し、輝度値が閾値以下となる領域を影領域として特定してもよい。

（２）実施形態において、点灯パターンＬ１～Ｌ４（図６Ａ～６Ｄ）のそれぞれにおける高輝度エリア（ＲＤ１、ＲＵ２、ＲＬ１、ＲＲ２）に対応する表示領域の部分をライティングエリアとし、表示制御部１０ｄにより、ライティング効果の高い白色の画像を表示させてもよい。ライティングエリアに白色の画像を表示させる場合、画素の光の透過率が最大となり、より高いライティング効果が得られる。この場合、表示制御部１０ｄは、ライティングエリア以外の他の表示領域に、外部装置３から送信された画像や、カメラ２ａで撮影された画像等の表示対象画像を表示させる。つまり、ライティングエリアに白色画像を表示させる場合、ライティングエリアを設けずに表示対象画像を表示領域に表示する場合と比べ、表示対象画像が表示される領域は縮小される。そのため、表示制御部１０ｄは、点灯パターンＬ１～Ｌ４に対応するライティングエリア以外の表示領域の大きさに合わせて表示対象画像を縮小して表示させる。

なお、点灯パターンＬ１～Ｌ４の高輝度エリアに対応する表示領域の部分に白色の画像を表示させる場合、白色の画像を表示させる領域の形状は高輝度エリアの形状と同じ形状（矩形形状）に限らない。表示領域において白色の画像を表示させる領域の形状は、円形やキャラクターの形状等、任意の形状であってもよい。なお、実施形態において、高輝度エリアの形状を矩形形状としたが、高輝度エリアも矩形形状に限定されない。

（３）実施形態において、輝度制御部１０ｅは、表示装置１が設置されている場所の照明の色、及び表示装置１に表示される画像の色の少なくとも一方に応じて、高輝度エリアに点灯させる色を変えてもよい。この場合、光源１２１としてＲＧＢの３色のＬＥＤを用いてもよい。例えば、操作部１５を介して、照明の色温度及び色味等の照明の色を示す情報の入力を受け付けた場合、輝度制御部１０ｅは、高輝度エリアにおける３色の光源を、入力された照明の色に応じた色に発光させる。又は、輝度制御部１０ｅは、表示対象画像のＲＧＢ値に基づいて表示対象画像の色調が暖色系又は寒色系であるかを判定し、判定結果に応じて光源を発光させる色を変えてもよい。具体的には、照明の色又は表示対象画像の色調が暖色系である場合には、高輝度エリアの光源を白味がかった色に発光させてもよい。また、照明の色又は表示対象画像の色調が寒色系である場合には、高輝度エリアの光源を赤味がかった色に発光させてもよい。このように構成することで、ユーザの顔色をより良く見せることができる。

（４）実施形態において、輝度制御部１０ｅによって自動制御されたバックライト１３における高輝度エリアの輝度を、ユーザが操作部１５を介して変更してもよい。この場合、輝度制御部１０ｅは、操作部１５を介して受け付けた輝度のレベルに基づいて高輝度エリアの光源を点灯させる。

（５）輝度制御部１０ｅは、特定部１０ｃで特定された影領域の明度に応じて、高輝度エリアの範囲及び輝度の少なくとも一方を調整してもよい。例えば、影領域の明度が閾値以上である場合、点灯パターンＬ１～Ｌ４に対応する高輝度エリアの範囲をデフォルトの範囲より小さくしてもよいし、高輝度エリアの輝度レベルをデフォルト値よりも小さくしてもよい。また、影領域の明度が閾値未満である場合、点灯パターンＬ１～Ｌ４に対応する高輝度エリアの範囲をデフォルトの範囲より大きくしてもよいし、高輝度エリアの輝度レベルをデフォルト値よりも大きくしてもよい。

（６）輝度制御部１０ｅは、表示装置１の画面のサイズや表示装置１が設置される高さ、及び表示装置１に対するユーザの顔の高さ等の初期設定条件を予め記憶し、初期設定条件に基づいて、点灯パターンＬ１～Ｌ４に対応する高輝度エリアを調整してもよい。例えば、画面のサイズが所定のサイズより大きい場合、点灯パターンＬ１～Ｌ４に対応する高輝度エリアを画面のサイズに応じて小さくしてもよい。又は、ユーザの顔の高さが表示装置１が設置される高さに対して所定の高さよりも高い場合、点灯パターンＬ１及びＬ２（図６Ａ、６Ｂ）に対応する高輝度エリア（ＲＤ１、ＲＵ２）の位置をデフォルトの位置よりも高い位置に調整してもよい。また、点灯パターンＬ３及びＬ４（図６Ｃ、６Ｄ）に対応する高輝度エリア（ＲＬ１、ＲＲ２）をＹ軸正方向側の上方部分のみに限定してもよい。

（７）表示装置１は、表示装置１が設置される場所の照明の色又は表示対象画像の色に応じてホワイトバランス調整を行ってもよい。つまり、照明の色温度が予め表示装置１に記憶される場合、表示制御部１０ｄは、記憶された色温度に基づいてホワイトバランス調整を行ってよいし、表示対象画像の色温度に応じてホワイトバランス調整を行ってもよい。この場合、ホワイトバランス調整された被写体画像が通信相手に送信される。また、例えば、表示装置１は、表示装置１と電気的に接続された照明装置の色を、表示対象画像の色温度に応じて変化させ、ホワイトバランス調整を行ってもよい。

（８）実施形態では、被写体画像の顔部分における影領域を、被写体画像におけるユーザの顔の明るさが基準値以下である部分領域の一例として説明したが、部分領域は、比較対象となる画像の明るさよりも一定レベル以上暗い領域であればよく、影に限定されない。つまり、被写体画像の顔部分において、比較対象画像の色相、明度、及び彩度の少なくとも１つが一定レベル以上低い部分を部分領域としてもよい。

本発明は、遠隔で通信相手の映像を送受信するテレビ会議等に適用できる。

１ ：表示装置
２ａ ：カメラ
２ｂ ：マイク
２ｃ ：スピーカ
３ ：外部装置
１０ ：制御部
１０ａ ：通信制御部
１０ｂ ：取得部
１０ｃ ：特定部
１０ｄ ：表示制御部
１０ｅ ：輝度制御部
１０ｆ ：テレビ会議制御部
１１ ：通信部
１２ ：バックライト制御部
１３ ：バックライト
１４ ：表示部
１５ ：操作部
１６ ：記憶部
１００ ：テレビ会議システム
１２１ ：光源
１３１ ：点灯制御情報
Ｌ１～Ｌ４：点灯パターン
Ｐ１～Ｐ４：影パターン

Claims (9)

1. 表示領域を有する表示部と、
   前記表示領域に向き合っているユーザの顔を含む被写体画像を取得する取得部と、
   表示対象画像を前記表示領域に表示させる表示制御部と、
   前記表示領域の背面から光を照射する複数の光源と、
   前記複数の光源の輝度を制御する輝度制御部と、
   前記被写体画像における前記ユーザの顔の明るさが基準値以下である部分領域を特定する特定部と、
   前記被写体画像を外部へ出力する通信部と
   を備え、
   前記輝度制御部は、前記被写体画像における前記部分領域の位置及び範囲に基づいて、前記複数の光源のうちの一部の光源の輝度を他の光源よりも高くする、表示装置。
2. 前記特定部は、前記被写体画像における前記ユーザの顔のうち、前記基準値との比較対象となる少なくとも１つの比較対象部分を特定し、前記少なくとも１つの比較対象部分が前記基準値以下である場合、前記少なくとも１つの比較対象部分を前記部分領域とする、請求項１に記載の表示装置。
3. 自装置に対する前記ユーザの顔の位置、及び前記自装置の周囲に設置された照明の位置のうち少なくとも一方を含む設定条件を記憶する記憶部をさらに備え、
   前記輝度制御部は、前記部分領域及び前記設定条件に基づいて前記一部の光源を決定する、請求項２に記載の表示装置。
4. 前記表示制御部は、前記表示領域において前記一部の光源に対応する領域に白色の画像を表示させ、他の領域に前記表示対象画像を表示させる、請求項１から３のいずれか一項に記載の表示装置。
5. 前記表示制御部は、前記表示対象画像を縮小して前記他の領域に表示させる、請求項４に記載の表示装置。
6. 前記輝度制御部は、前記部分領域の明るさが前記基準値より暗いほど前記一部の光源の輝度を高くする、請求項１から５のいずれか一項に記載の表示装置。
7. 自装置の周囲に設けられた照明の色、及び前記表示領域に表示される画像の色の少なくとも一方を示す色情報を記憶する記憶部をさらに備え、
   前記複数の光源は、Ｒ（赤）、Ｇ（緑）、及びＢ（青）の各色の発光素子をそれぞれ複数含み、
   前記輝度制御部は、前記色情報に基づいて、前記各色の発光素子によって発光させる色を調整する、請求項１から６のいずれか一項に記載の表示装置。
8. 前記一部の光源に対する輝度レベルを調整する指示を受け付ける操作部をさらに備え、
   前記輝度制御部は、前記操作部において受け付けられた前記輝度レベルに応じて前記一部の光源の前記輝度を調整する、請求項１から７のいずれか一項に記載の表示装置。
9. 前記ユーザの顔を撮影して前記被写体画像を出力する撮影部をさらに備え、
   前記取得部は、前記撮影部から前記被写体画像を取得する、請求項１から８のいずれか一項に記載の表示装置。

Images