JPWO2020129146A1 - 表示制御装置及び表示制御方法 - Google Patents

Abstract

表示装置の輝度を早く制御することが可能な技術を提供することを目的とする。表示制御装置は、車両周辺を撮像して得られた周辺画像を表示する表示装置を制御する表示制御装置であって、取得部と、制御部とを備える。取得部は、車両の運転者の顔の画像に基づく顔特徴量を取得する。制御部は、運転者が周辺画像を見ていないときに取得部で取得された顔特徴量である特定顔特徴量に基づいて、表示装置に表示される周辺画像の輝度である周辺画像輝度を制御する。

Description

本発明は、車両周辺を撮像して得られた周辺画像を表示する表示装置を制御する表示制御装置及び表示制御方法に関する。

近年、バックミラーやサイドミラーなどの物理鏡の代用として、車両から後方に向けられたカメラの撮影画像を表示装置で表示する電子ミラー装置などのカメラモニタリングシステム（ＣＭＳ）が提案されている。このようなＣＭＳについて様々な技術が提案されている。

例えば特許文献１では、ドライバモニタリングシステム（ＤＭＳ）を用いて運転者の画像から、表示装置を見ているときの運転者の瞳孔径を取得し、取得した瞳孔径と予め記憶された径との差に基づいて表示装置の輝度を制御する技術が提案されている。このような技術によれば、表示装置の輝度が運転者にとって明る過ぎないように、または暗過ぎないように制御されるので、運転者は、適切な明るさの撮影画像を見ることが可能となる。

特開２０１８−４３７２４号公報

例えば電子ミラー装置において、運転者は、昼間などに比較的明るい車両外部を見ながら運転している間に、車両室内に設けられた表示装置の画像を瞬間的に見て後方を確認したい場合がある。しかしながら従来技術では、運転者が表示装置を見た時点から、表示装置の輝度が制御されるため、表示装置の輝度を適切に制御することが間に合わないことがあった。この結果、表示装置の輝度が運転者にとって適切でなく、表示装置の画像が運転者にとって見難い場合があった。

そこで、本発明は、上記のような問題点を鑑みてなされたものであり、表示装置の輝度を早く制御することが可能な技術を提供することを目的とする。

本発明に係る表示制御装置は、車両周辺を撮像して得られた周辺画像を表示する表示装置を制御する表示制御装置であって、車両の運転者の顔の画像に基づく顔特徴量を取得する取得部と、運転者が周辺画像を見ていないときに取得部で取得された顔特徴量である特定顔特徴量に基づいて、表示装置に表示される周辺画像の輝度である周辺画像輝度を制御する制御部とを備える。

本発明によれば、運転者が周辺画像を見ていないときに取得部で取得された顔特徴量である特定顔特徴量に基づいて、表示装置に表示される周辺画像の輝度である周辺画像輝度を制御する。このような構成によれば、表示装置の輝度を早く制御することができる。

本発明の目的、特徴、態様及び利点は、以下の詳細な説明と添付図面とによって、より明白となる。

実施の形態１に係る表示制御装置の構成を示すブロック図である。 実施の形態２に係る表示制御装置の構成を示すブロック図である。 実施の形態２に係るＤＭＳの構成を示すブロック図である。 実施の形態２に係るＣＭＳ画像処理装置の構成を示すブロック図である。 実施の形態２に係る表示装置の構成を示すブロック図である。 実施の形態２に係る表示制御装置の動作を示すフローチャートである。 変形例１に係る表示制御装置の動作を示すフローチャートである。 変形例１に係る表示制御装置の動作を示すフローチャートである。 変形例２に係るＣＭＳ画像処理装置の構成を示すブロック図である。 その他の変形例に係る表示制御装置のハードウェア構成を示すブロック図である。 その他の変形例に係る表示制御装置のハードウェア構成を示すブロック図である。 その他の変形例に係るサーバの構成を示すブロック図である。 その他の変形例に係る通信端末の構成を示すブロック図である。

＜実施の形態１＞
図１は、本発明の実施の形態１に係る表示制御装置１の構成を示すブロック図である。以下、表示制御装置１が搭載され、着目の対象となる車両を「自車両」と記載して説明する。

図１の表示制御装置１は、撮像装置３１及び表示装置３２と、有線または無線によって接続されている。表示制御装置１、撮像装置３１及び表示装置３２は、例えばカメラモニタリングシステム（ＣＭＳ）を構成する。以下、表示制御装置１について説明する前に、撮像装置３１及び表示装置３２について説明する。

撮像装置３１は、自車両周辺を撮像する装置であり、例えば自車両に搭載されたカメラなどが適用される。以下の説明では、撮像装置３１は、自車両の後方を自車両周辺として撮像するものとするが、例えば自車両の前方または側方を自車両周辺として撮像してもよい。撮像装置３１が周辺画像を撮像して得られた自車両周辺の画像は、周辺画像として表示制御装置１に送信される。なお図１では、撮像装置３１は、表示制御装置１と個別に設けられている構成が示されているが、表示制御装置１に備えられてもよい。

表示装置３２は、表示制御装置１で各種処理が行われた周辺画像を受信し、当該周辺画像を表示する。なお図１では、表示装置３２は、表示制御装置１と個別に設けられている構成が示されているが、表示制御装置１に備えられてもよい。また、表示装置３２は、自車両に固定された表示装置であってもよいし、自車両に持ち込まれた表示装置であってもよい。

次に、表示制御装置１について説明する。図１の表示制御装置１は、取得部１１と、制御部１２とを備え、以下で説明するように周辺画像を表示する表示装置３２を制御する。

取得部１１は、自車両の運転者の顔の画像に基づく顔特徴量を取得する。運転者は、運転座席に座っている人である。顔特徴量は、運転者の瞳孔径、運転者の顔に当たっている光の強度、及び、運転者の開眼度、のうちの少なくとも１つを含む。なお、運転者の開眼度は、運転者の上下瞼の間の通常距離に対する、運転者の上下瞼の間の取得時の距離の割合に相当する。

図１では、表示制御装置１の外部に設けられた図示しないドライバモニタリングシステム（ＤＭＳ）が、運転者の画像を取得して、当該画像に基づいて運転者の顔特徴量を生成し、取得部１１が、ＤＭＳから当該顔特徴量を取得する構成が示されている。この構成の場合、取得部１１は、例えば受信装置またはインターフェースである。しかしながら、取得部１１はこれらに限ったものではなく、取得部１１自体がＤＭＳであってもよい。

制御部１２は、運転者が周辺画像を見ていないときに取得部１１で取得された顔特徴量に基づいて、表示装置３２に表示される周辺画像の輝度を制御する。以下の説明では、任意の時点に取得部１１で取得された顔特徴量のうち、運転者が周辺画像を見ていないときに取得部１１で取得された顔特徴量を「特定顔特徴量」と記すこともある。また、表示装置３２に表示される周辺画像の輝度を「周辺画像輝度」と記すこともある。特定顔特徴量は、例えば、運転者が自車両の外部を見ているとき、または自車両室内の表示装置３２以外の部分を見ているときに取得部１１で取得された前記顔特徴量を含む。

例えば、特定顔特徴量が瞳孔径を含む場合、制御部１２は、瞳孔径が小さくなるほど周辺画像の輝度を高くする。例えば、特定顔特徴量が光の強度を含む場合、制御部１２は、光の強度が大きくなるほど周辺画像の輝度を高くする。例えば、特定顔特徴量が開眼度を含む場合、制御部１２は、開眼度が小さくなるほど周辺画像の輝度を高くする。このような制御部１２は、後述するＥＣＵ（Electronic Control Unit）などであってもよいし、後述するＣＰＵ（Central Processing Unit）などであってもよい。

なお、取得部１１で取得された顔特徴量が、特定顔特徴量であるか否かの判定は、取得部１１で行われてもよいし、制御部１２で行われてもよい。

以下、取得部１１が特定顔特徴量の判定を行う第１例について説明する。この第１例では、取得部１１は、自車両の運転者の画像から運転者の視線方向を検出することが可能に構成される。取得部１１は、当該視線方向が予め定められた範囲内であると判定した場合に、上記画像から取得された顔特徴量が特定顔特徴量であると判定し、当該視線方向が予め定められた範囲外であると判定した場合に、上記画像から取得された顔特徴量が特定顔特徴量でないと判定する。

次に、取得部１１が特定顔特徴量の判定を行う第２例について説明する。この第２例では、取得部１１は、自車両の運転者の画像から運転者の顔の向きを検出することが可能に構成される。取得部１１は、当該顔の向きが予め定められた範囲内であると判定した場合に、上記画像から取得された顔特徴量が特定顔特徴量であると判定し、当該視線方向が予め定められた範囲外であると判定した場合に、上記画像から取得された顔特徴量が特定顔特徴量でないと判定する。

以上、取得部１１で取得された顔特徴量が、特定顔特徴量であるか否かを判定する例について説明したが、制御部１２が判定を行う場合の説明も以上の説明と同様である。また以上の説明では、制御部１２は、特定顔特徴量に基づいて周辺画像輝度を制御したが、その制御に加えて、運転者が周辺画像を見ているときに取得部１１で取得された顔特徴量に基づいて周辺画像輝度を制御してもよい。

＜実施の形態１のまとめ＞
以上のような本実施の形態１に係る表示制御装置１によれば、自車両の運転者が周辺画像を見ていないときに取得部１１で取得された顔特徴量に基づいて、表示装置３２に表示される周辺画像の輝度を制御する。このような構成によれば、運転者が、表示装置３２に表示されている周辺画像を見る前から、当該周辺画像の輝度を制御することができる。このため、表示装置３２の輝度を早く制御することができるので、運転者は、周辺画像を瞬間的に見る場合であっても、適切な明るさの周辺画像を瞬間的に見ることができる。

＜実施の形態２＞
図２は、本発明の実施の形態２に係る表示制御装置１の構成を示すブロック図である。以下、本実施の形態２に係る構成要素のうち、上述の構成要素と同じまたは類似する構成要素については同じ参照符号を付し、異なる構成要素について主に説明する。

図２の表示制御装置１は、実施の形態１と同様に撮像装置３１及び表示装置３２と接続されている。撮像装置３１及び表示装置３２の構成は、実施の形態１で説明した撮像装置３１と概ね同様である。ただし、表示装置３２の構成については後で詳細に説明する。

図２の表示制御装置１は、ドライバモニタリングシステム２１（ＤＭＳ２１）と、ＣＭＳ画像処理装置２２とを備える。

図３は、ＤＭＳ２１の構成を示すブロック図である。図３のＤＭＳ２１は、ＤＭＳ撮像装置２１ａと、ＤＭＳ画像処理部２１ｂと、ＤＭＳ送信部２１ｃとを備える。このＤＭＳ２１は、以下で説明するように、運転者の画像を撮像し、当該画像に基づいて運転者の顔特徴量を生成する。なお、ＤＭＳ２１は、図１の取得部１１の概念に含まれる。

ＤＭＳ撮像装置２１ａは、例えば自車両に搭載されたカメラであり、自車両の運転者の画像を撮像する。

ＤＭＳ画像処理部２１ｂは、ＤＭＳ撮像装置２１ａで撮像された運転者の画像から、運転者の顔特徴量を取得する。図３のＤＭＳ画像処理部２１ｂは、瞳孔径計測部２１ｂ１と、顔光強度分布測定部２１ｂ２と、開眼度検出部２１ｂ３とを備える。瞳孔径計測部２１ｂ１は、運転者の画像から、運転者の瞳孔径を顔特徴量として計測する。顔光強度分布測定部２１ｂ２は、運転者の画像から、運転者の顔に当たっている光の強度及び分布を計測し、その計測結果に基づいて運転者の眼及び眼周辺の光の強度を顔特徴量として測定する。開眼度検出部２１ｂ３は、運転者の画像から、運転者の開眼度を顔特徴量として検出する。

ＤＭＳ画像処理部２１ｂは、取得された顔特徴量が、特定顔特徴量であるか否か、つまり運転者が周辺画像を見ていないときに取得部１１で取得された顔特徴量であるか否かを判定する。ＤＭＳ画像処理部２１ｂにおける特定顔特徴量の判定には、例えば実施の形態１で説明した第１例または第２例の判定が用いられる。

ＤＭＳ送信部２１ｃは、ＤＭＳ画像処理部２１ｂにて特定顔特徴量であると判定された顔特徴量をＣＭＳ画像処理装置２２に送信する。

図４は、ＣＭＳ画像処理装置２２の構成を示すブロック図である。図４のＣＭＳ画像処理装置２２は、画像受信部２２ａと、画像処理部２２ｂと、画像送信部２２ｃと、ＤＭＳ処理結果受信部２２ｄと、顔特徴判定部２２ｅと、照度データ受信部２２ｆと、照度判定部２２ｇと、画像輝度設定部２２ｈと、画像輝度データ送信部２２ｉとを備える。このＣＭＳ画像処理装置２２は、以下で説明するように、ＤＭＳ２１で取得された特定顔特徴量に基づいて、表示装置３２に表示される周辺画像の輝度を制御するための画像輝度データを生成する。

なお、ＣＭＳ画像処理装置２２、撮像装置３１及び表示装置３２は、ＣＭＳを構成する。また、照度データ受信部２２ｆ及び照度判定部２２ｇは、図１の取得部１１の概念に含まれ、顔特徴判定部２２ｅ及び画像輝度設定部２２ｈは、図１の制御部１２の概念に含まれる。

画像受信部２２ａは、図２の撮像装置３１から送信された周辺画像を受信する。画像処理部２２ｂは、画像受信部２２ａで受信された周辺画像に各種処理を行う。画像送信部２２ｃは、画像処理部２２ｂで処理された周辺画像を表示装置３２に送信する。

ＤＭＳ処理結果受信部２２ｄは、図３のＤＭＳ２１から送信された特定顔特徴量を受信する。顔特徴判定部２２ｅは、ＤＭＳ処理結果受信部２２ｄで受信された特定顔特徴量が特定の条件を満たすか否かを判定する。例えば、特定の条件は、特定顔特徴量が瞳孔径を含むか否か、つまり瞳孔径が読み取り可能であったか否かであってもよい。また例えば、特定顔特徴量が開眼度を含む場合には、特定の条件は、開眼度が予め定められた閾値以下であるか否かであってもよい。また例えば、特定顔特徴量が光の強度を含む場合には、特定の条件は、光の強度が予め定められた閾値以上であるか否かであってもよい。また例えば、特定の条件は、これらの組み合わせであってもよい。顔特徴判定部２２ｅは、特定顔特徴量が特定の条件を満たすか否かの判定結果と、ＤＭＳ処理結果受信部２２ｄで受信された特定顔特徴量とを画像輝度設定部２２ｈに出力する。

照度データ受信部２２ｆは、後述する表示装置３２から送信された照度データを受信する。照度判定部２２ｇは、照度データ受信部２２ｆで受信された照度データに基づいて、表示装置３２周辺の照度を判定する。ここでいう表示装置３２周辺の照度は、表示装置３２の照度も含む。このように、照度データ受信部２２ｆ及び照度判定部２２ｇは協働して、表示装置３２周辺の照度を取得する。

画像輝度設定部２２ｈは、特定顔特徴量と周辺画像輝度とが予め対応付けられた第１テーブルとを有している。第１テーブルは、瞳孔径−輝度テーブルと、強度−輝度テーブルと、開眼度−輝度テーブルと、の少なくとも１つを含む。なお、瞳孔径−輝度テーブルでは、瞳孔径が小さくなるにつれて周辺画像輝度が高くなるように、瞳孔径と周辺画像輝度とが予め対応付けられている。強度−輝度テーブルでは、光の強度が大きくなるにつれて周辺画像輝度が高くなるように、光の強度と周辺画像輝度とが予め対応付けられている。開眼度−輝度テーブルでは、開眼度が小さくなるにつれて周辺画像輝度が高くなるように、開眼度と周辺画像輝度とが予め対応付けられている。

また、画像輝度設定部２２ｈは、照度−輝度テーブルを含む第２テーブルを有している。照度−輝度テーブルでは、表示装置３２周辺の照度が大きくなるにつれて周辺画像輝度が高くなるように、照度と周辺画像輝度とが予め対応付けられている。

特定顔特徴量が特定の条件を満たすと顔特徴判定部２２ｅで判定された場合、画像輝度設定部２２ｈは、顔特徴判定部２２ｅから出力された特定顔特徴量に対応する周辺画像輝度を第１テーブルから読み出し、当該周辺画像輝度を示す画像輝度データを生成する。特定顔特徴量が特定の条件を満たさないと顔特徴判定部２２ｅで判定された場合、画像輝度設定部２２ｈは、照度判定部２２ｇで判定された表示装置３２周辺の照度に対応する周辺画像輝度を第２テーブルから読み出し、当該周辺画像輝度を示す画像輝度データを生成する。

画像輝度データ送信部２２ｉは、画像輝度設定部２２ｈで生成された画像輝度データを表示装置３２に送信する。

図５は、表示装置３２の構成を示すブロック図である。図５の表示装置３２は、画像受信部３２ａと、表示部３２ｂと、画像輝度データ受信部３２ｃと、画像輝度制御部３２ｄと、画像輝度調整部３２ｅと、照度センサ３２ｆと、照度データ送信部３２ｇとを備える。

画像受信部３２ａは、図４のＣＭＳ画像処理装置２２から送信された周辺画像を受信する。表示部３２ｂは、例えば液晶パネルであり、画像受信部３２ａで受信された周辺画像を表示する。画像輝度データ受信部３２ｃは、図４のＣＭＳ画像処理装置２２から送信された画像輝度データを受信する。

画像輝度制御部３２ｄは、画像輝度データ受信部３２ｃで受信された画像輝度データに基づいて画像輝度調整部３２ｅを制御する。画像輝度調整部３２ｅは、例えばバックライトであり、表示部３２ｂに表示されている周辺画像の輝度を、画像輝度制御部３２ｄの制御によって適宜調整する。この場合、本実施の形態２に係る画像輝度データは、バックライト制御データに相当する。なお、図５の表示装置３２では、表示部３２ｂ、画像輝度制御部３２ｄ、及び、画像輝度調整部３２ｅが個別に設けられているが、表示部３２ｂ、画像輝度制御部３２ｄ、及び、画像輝度調整部３２ｅのいくつかが一体化されてもよい。

照度センサ３２ｆは、表示装置３２周辺の照度を検出する。照度データ送信部３２ｇは、照度センサ３２ｆで検出された表示装置３２周辺の照度を示す照度データをＣＭＳ画像処理装置２２に送信する。

以上のような構成によれば、特定顔特徴量が特定の条件を満たす場合に、画像輝度設定部２２ｈは、特定顔特徴量に基づいて、表示装置３２に表示される周辺画像の輝度を制御する。この際、画像輝度設定部２２ｈは、第１テーブルにおいて特定顔特徴量と予め対応付けられた輝度に周辺画像輝度を合わせる制御を行う。

一方、特定顔特徴量が特定の条件を満たさない場合に、画像輝度設定部２２ｈは、表示装置３２周辺の照度に基づいて、表示装置３２に表示される周辺画像の輝度を制御する。この際、画像輝度設定部２２ｈは、第２テーブルにおいて表示装置３２周辺の照度と予め対応付けられた輝度に周辺画像輝度を合わせる制御を行う。

＜動作＞
図６は、本実施の形態２に係る表示制御装置１の動作を示すフローチャートである。

ステップＳ１にて、ＣＭＳ画像処理装置２２は、表示装置３２から送信された照度データを読み出す。ステップＳ２にて、ＣＭＳ画像処理装置２２は、ＤＭＳ２１から送信された特定顔特徴量を読み出す。

ステップＳ３にて、図４のＣＭＳ画像処理装置２２の顔特徴判定部２２ｅは、特定顔特徴量に基づいて瞳孔径が読み取り可能であったか否かを判定する。瞳孔径が読み取り可能であったと判定された場合には、処理がステップＳ４に進み、瞳孔径が読み取り可能でなかったと判定された場合には、処理がステップＳ６に進む。

ステップＳ４にて、画像輝度設定部２２ｈは瞳孔径−輝度テーブルを参照する。そしてステップＳ５にて、画像輝度設定部２２ｈは、特定顔特徴量に含まれる瞳孔径に対応する周辺画像輝度を、瞳孔径−輝度テーブルから読み出し、当該周辺画像輝度を示す画像輝度データを生成する。その後、処理がステップＳ１２に進む。

ステップＳ６にて、顔特徴判定部２２ｅは、特定顔特徴量に含まれる開眼度が予め定められた閾値以下であるか否かを判定する。開眼度が予め定められた閾値以下であると判定された場合には、処理がステップＳ７に進み、開眼度が予め定められた閾値よりも大きいと判定された場合には、処理がステップＳ８に進む。

ステップＳ７にて、顔特徴判定部２２ｅは、特定顔特徴量に含まれる光の強度が予め定められた閾値以上であるか否かを判定する。光の強度が予め定められた閾値以上であると判定された場合には、処理がステップＳ１０に進み、光の強度が予め定められた閾値よりも小さいと判定された場合には、処理がステップＳ８に進む。なお、ステップＳ７からステップＳ１０に処理が進む場合には、運転者は眼に光を浴びて眩しいと感じて目を細めていると推測され、ステップＳ７からステップＳ８に処理が進む場合には、運転者は眩しさ以外の要因で目を細めていると推測される。

ステップＳ８にて、画像輝度設定部２２ｈは照度−輝度テーブルを参照する。そしてステップＳ９にて、画像輝度設定部２２ｈは、照度データが示す照度に対応する周辺画像輝度を、照度−輝度テーブルから読み出し、当該周辺画像輝度を示す画像輝度データを生成する。その後、処理がステップＳ１２に進む。

ステップＳ１０にて、画像輝度設定部２２ｈは開眼度−輝度テーブルを参照する。そしてステップＳ１１にて、画像輝度設定部２２ｈは、特定顔特徴量に含まれる開眼度に対応する周辺画像輝度を、開眼度−輝度テーブルから読み出し、当該周辺画像輝度を示す画像輝度データを生成する。その後、処理がステップＳ１２に進む。

ステップＳ１２にて、画像輝度データ送信部２２ｉは、画像輝度設定部２２ｈで生成された画像輝度データを表示装置３２に送信する。これにより、表示装置３２は、当該画像輝度データに基づいて周辺画像輝度を適宜調整する。その後、図６の動作が終了する。

＜実施の形態２のまとめ＞
以上のような本実施の形態２に係る表示制御装置１によれば、画像輝度設定部２２ｈは、特定顔特徴量と予め対応付けられた輝度に周辺画像輝度を合わせる制御を行う。このような構成によれば、比較的簡単な構成で周辺画像輝度を適切に制御することができる。

また本実施の形態２によれば、特定顔特徴量が特定の条件を満たさない場合に、画像輝度設定部２２ｈは、表示装置３２周辺の照度に基づいて、表示装置３２に表示される周辺画像の輝度を制御する。このような構成によれば、特定顔特徴量を用いて周辺画像の輝度を制御することが適切でない場合に、表示装置３２周辺の照度に基づいて、周辺画像の輝度を制御することができる。

＜変形例１＞
実施の形態２に係る表示制御装置１の動作を示すフローチャート（図６）の説明では、顔特徴量及び特定顔特徴量は、瞳孔径、光の強度、及び、開眼度を含んでいた。しかしながら、顔特徴量及び特定顔特徴量は、瞳孔径、光の強度、及び、開眼度の少なくとも１つを含んでいればよい。

図７は、顔特徴量及び特定顔特徴量が、光の強度及び開眼度を含まずに、瞳孔径を含む場合の表示制御装置１の動作を示すフローチャートである。この図７のフローチャートは、図６のフローチャートからステップＳ６，Ｓ７，Ｓ１０，Ｓ１１を取り除いたフローチャートと同様である。

図８は、顔特徴量及び特定顔特徴量が、瞳孔径を含まずに、光の強度及び開眼度を含む場合の表示制御装置１の動作を示すフローチャートである。この図７のフローチャートは、図６のフローチャートからステップＳ３〜Ｓ５を取り除いたフローチャートと同様である。

＜変形例２＞
図９は、本変形例２に係るＣＭＳ画像処理装置２２の構成を示すブロック図である。図９のＣＭＳ画像処理装置２２の構成は、図４のＣＭＳ画像処理装置２２の構成に、運転情報取得部２２ｊが追加された構成と同様である。なお、運転情報取得部２２ｊは、図１の取得部１１の概念に含まれる。

運転情報取得部２２ｊは、自車両の運転情報を取得する。運転情報は、自車両が運転中であるか否かを示す情報であり、例えば、自車両のシフトレバーがＤレンジに位置しているか否かを示す情報である。画像輝度設定部２２ｈは、運転情報取得部２２ｊで取得された運転情報に基づいて自車両が運転中であると判定した場合に、特定顔特徴量に基づいて周辺画像輝度を制御する。以上のような本変形例２に係る表示制御装置１によれば、運転中外には、特定顔特徴量に基づく周辺画像輝度の制御を抑制することができる。

＜変形例３＞
ＤＭＳ２１が、複数の運転者を互いに識別可能に構成されている場合には、実施の形態２で説明した第１テーブルは、運転者ごとに予め規定されてもよい。そして、運転情報取得部２２ｊは、ＤＭＳ２１で識別された運転者に基づいて、周辺画像輝度の制御に用いる第１テーブルを変更してもよい。

＜その他の変形例＞
上述した図１の取得部１１及び制御部１２を、以下「取得部１１等」と記す。取得部１１等は、図１０に示す処理回路８１により実現される。すなわち、処理回路８１は、車両の運転者の顔の画像に基づく顔特徴量を取得する取得部１１と、運転者が周辺画像を見ていないときに取得部１１で取得された顔特徴量である特定顔特徴量に基づいて、周辺画像輝度を制御する制御部１２と、を備える。処理回路８１には、専用のハードウェアが適用されてもよいし、メモリに格納されるプログラムを実行するプロセッサが適用されてもよい。プロセッサには、例えば、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、ＤＳＰ（Digital Signal Processor）などが該当する。

処理回路８１が専用のハードウェアである場合、処理回路８１は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）、またはこれらを組み合わせたものが該当する。取得部１１等の各部の機能それぞれは、処理回路を分散させた回路で実現されてもよいし、各部の機能をまとめて一つの処理回路で実現されてもよい。

処理回路８１がプロセッサである場合、取得部１１等の機能は、ソフトウェア等との組み合わせにより実現される。なお、ソフトウェア等には、例えば、ソフトウェア、ファームウェア、または、ソフトウェア及びファームウェアが該当する。ソフトウェア等はプログラムとして記述され、メモリに格納される。図１１に示すように、処理回路８１に適用されるプロセッサ８２は、メモリ８３に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、表示制御装置１は、処理回路８１により実行されるときに、車両の運転者の顔の画像に基づく顔特徴量を取得するステップと、運転者が周辺画像を見ていないときに取得された顔特徴量である特定顔特徴量に基づいて周辺画像輝度を制御するステップと、が結果的に実行されることになるプログラムを格納するためのメモリ８３を備える。換言すれば、このプログラムは、取得部１１等の手順や方法をコンピュータに実行させるものであるともいえる。ここで、メモリ８３は、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）などの、不揮発性または揮発性の半導体メモリ、ＨＤＤ（Hard Disk Drive）、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤ（Digital Versatile Disc）、そのドライブ装置等、または、今後使用されるあらゆる記憶媒体であってもよい。

以上、取得部１１等の各機能が、ハードウェア及びソフトウェア等のいずれか一方で実現される構成について説明した。しかしこれに限ったものではなく、取得部１１等の一部を専用のハードウェアで実現し、別の一部をソフトウェア等で実現する構成であってもよい。例えば、取得部１１については専用のハードウェアとしての処理回路８１、インターフェース及びレシーバなどでその機能を実現し、それ以外についてはプロセッサ８２としての処理回路８１がメモリ８３に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。

以上のように、処理回路８１は、ハードウェア、ソフトウェア等、またはこれらの組み合わせによって、上述の各機能を実現することができる。

また、以上で説明した表示制御装置１は、ＰＮＤ（Portable Navigation Device）及びナビゲーション装置などの車両装置と、携帯電話、スマートフォン及びタブレットなどの携帯端末を含む通信端末と、車両装置及び通信端末の少なくとも１つにインストールされるアプリケーションの機能と、サーバとを適宜に組み合わせてシステムとして構築される表示制御システムにも適用することができる。この場合、以上で説明した表示制御装置１の各機能あるいは各構成要素は、前記システムを構築する各機器に分散して配置されてもよいし、いずれかの機器に集中して配置されてもよい。

図１２は、本変形例に係るサーバ９１の構成を示すブロック図である。図１２のサーバ９１は、通信部９１ａと制御部９１ｂとを備えており、車両９２のナビゲーション装置などの車両装置９３と無線通信を行うことが可能となっている。

取得部である通信部９１ａは、車両装置９３と無線通信を行うことにより、車両９２の運転者の顔の画像に基づく顔特徴量を受信する。

制御部９１ｂは、サーバ９１の図示しないプロセッサなどが、サーバ９１の図示しないメモリに記憶されたプログラムを実行することにより、図１の制御部１２と同様の機能を有している。つまり、制御部９１ｂは、運転者が周辺画像を見ていないときに取得部１１で取得された顔特徴量である特定顔特徴量に基づいて、車両装置９３に表示される周辺画像の輝度である周辺画像輝度を制御するための制御信号を生成する。そして、通信部９１ａは、制御部９１ｂで生成された制御信号を車両装置９３に送信する。このように構成されたサーバ９１によれば、実施の形態１で説明した表示制御装置１と同様の効果を得ることができる。

図１３は、本変形例に係る通信端末９６の構成を示すブロック図である。図１３の通信端末９６は、通信部９１ａと同様の通信部９６ａと、制御部９１ｂと同様の制御部９６ｂとを備えており、車両９７の車両装置９８と無線通信を行うことが可能となっている。なお、通信端末９６には、例えば車両９７の運転者が携帯する携帯電話、スマートフォン、及びタブレットなどの携帯端末が適用される。このように構成された通信端末９６によれば、実施の形態１で説明した表示制御装置１と同様の効果を得ることができる。

なお、本発明は、その発明の範囲内において、各実施の形態及び各変形例を自由に組み合わせたり、各実施の形態及び各変形例を適宜、変形、省略したりすることが可能である。

本発明は詳細に説明されたが、上記した説明は、すべての態様において、例示であって、本発明がそれに限定されるものではない。例示されていない無数の変形例が、本発明の範囲から外れることなく想定され得るものと解される。

１ 表示制御装置、１１ 取得部、１２ 制御部、３２ 表示装置。

Claims (7)

1. 車両周辺を撮像して得られた周辺画像を表示する表示装置を制御する表示制御装置であって、
   前記車両の運転者の顔の画像に基づく顔特徴量を取得する取得部と、
   前記運転者が前記周辺画像を見ていないときに前記取得部で取得された前記顔特徴量である特定顔特徴量に基づいて、前記表示装置に表示される前記周辺画像の輝度である周辺画像輝度を制御する制御部と
   を備える、表示制御装置。
2. 請求項１に記載の表示制御装置であって、
   前記特定顔特徴量は、前記運転者が前記車両の外部を見ているときに前記取得部で取得された前記顔特徴量を含む、表示制御装置。
3. 請求項１に記載の表示制御装置であって、
   前記制御部は、
   前記特定顔特徴量と予め対応付けられた輝度に前記周辺画像輝度を合わせる制御を行う、表示制御装置。
4. 請求項１に記載の表示制御装置であって、
   前記取得部は、前記車両の運転情報さらに取得し、
   前記制御部は、
   前記取得部で取得された前記運転情報に基づいて前記車両が運転中であると判定した場合に、前記特定顔特徴量に基づいて前記周辺画像輝度を制御する、表示制御装置。
5. 請求項１に記載の表示制御装置であって、
   前記取得部は、前記表示装置の照度をさらに取得し、
   前記制御部は、
   前記特定顔特徴量が特定の条件を満たさない場合に、前記取得部で取得された前記照度に基づいて前記周辺画像輝度を制御する、表示制御装置。
6. 請求項１に記載の表示制御装置であって、
   前記顔特徴量は、前記運転者の瞳孔径、前記運転者の顔に当たっている光の強度、及び、前記運転者の開眼度、のうちの少なくとも１つを含む、表示制御装置。
7. 車両周辺を撮像して得られた周辺画像を表示する表示装置を制御する表示制御方法であって、
   前記車両の運転者の顔の画像に基づく顔特徴量を取得し、
   前記運転者が前記周辺画像を見ていないときに取得された前記顔特徴量である特定顔特徴量に基づいて、前記表示装置に表示される前記周辺画像の輝度である周辺画像輝度を制御する、表示制御方法。

Images