JP6999231B2 - 表示制御装置、表示制御方法及びカメラモニタリングシステム - Google Patents

Description

本発明は、表示制御装置、表示制御方法及びカメラモニタリングシステムに関する。

従来より、車両にカメラモニタリングシステムを搭載し、車両後方の撮影画像を表示装置等に表示することで、当該表示装置等を電子ミラーとして機能させる表示制御技術が知られている。かかるカメラモニタリングシステムの場合、一般的なミラーとは異なり、夜間等のように車両の周辺環境が暗い状況下では、後方車両のヘッドライトに起因してハレーションが発生するため、一時的に視認性が低下することがある。

これに対して、例えば、予め異なるゲインを用いて撮影を行い、ハレーションの発生に応じて、適宜、撮影画像を切り替えて表示する構成とすることが考えられる。

特許第３９７０９０３号

しかしながら、撮影画像を切り替えて表示する構成とした場合、適切なタイミングで切り替えが行われない限り、車両の運転者は、電子ミラーの視認性が低下した状態で、運転を継続することになる。

本発明は上記課題に鑑みてなされたものであり、車両運転中の電子ミラーの視認性を向上させることを目的とする。

一態様によれば、撮像装置に接続される表示制御装置は、
前記撮像装置が車両の後方を第１ゲインで撮影した第１画像データと、前記撮像装置が車両の後方を該第１ゲインよりも低い第２ゲインで撮影した第２画像データと、を取得する取得部と、
前記第１画像データにおいて所定の輝度値を有する第１領域と、前記第２画像データにおいて前記所定の輝度値を有する第２領域との位置関係から、該第１領域内に含まれる該第２領域の数をカウントし、カウント結果に応じて表示する画像データを切り替える切替部とを有する。

車両運転中の電子ミラーの視認性を向上させることができる。

第１の実施形態におけるカメラモニタリングシステムのシステム構成の一例を示す図である。 撮像装置のハードウェア構成の一例を示す図である。 表示装置の配置例を示す図である。 表示制御装置のハードウェア構成の一例を示す図である。 表示制御装置の機能構成の一例を示す図である。 第１の実施形態における表示制御処理の流れを示すフローチャートである。 表示制御処理の具体例を示す第１の図である。 表示制御処理の具体例を示す第２の図である。 表示装置の表示例を示す図である。 第２の実施形態における表示制御処理の流れを示すフローチャートである。 第３の実施形態におけるカメラモニタリングシステムのシステム構成の一例を示す図である。

以下、各実施形態について添付の図面を参照しながら説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複した説明を省く。

［第１の実施形態］
＜カメラモニタリングシステムのシステム構成＞
はじめに、車両に搭載されるカメラモニタリングシステムのシステム構成について説明する。図１は、第１の実施形態におけるカメラモニタリングシステムのシステム構成の一例を示す図である。図１（ａ）に示すように、カメラモニタリングシステム１００は、撮像装置１１０と、表示制御装置１２０と、表示装置１３０とを有する。なお、本実施形態において、カメラモニタリングシステム１００は、車両のイグニッションスイッチがＯＮ状態になることで起動し、ＯＦＦ状態になることで停止するものとする。ただし、カメラモニタリングシステム１００の起動、停止のタイミングはこれに限定されず、例えば、車両のイグニッションスイッチがＯＮ状態になった後で、車両の運転者の指示に基づいて起動、停止するように構成してもよい。

撮像装置１１０は車両後方を撮影し、撮影画像を左右反転した画像データを表示制御装置１２０に送信する。なお、撮像装置１１０は、異なる２種類のパラメータを用いて撮影を行い、表示制御装置１２０に対して、第１画像データと第２画像データとを送信するものとする。ここでいうパラメータとは、ゲインや露光時間等、撮影画像の輝度値に影響を与える因子またはそれらの因子の組み合わせを指す。ただし、第１の実施形態では説明の簡略化のため、異なる２種類のパラメータは、異なる２種類のゲインを指すものとして説明する。

表示制御装置１２０は、撮像装置１１０より送信された第１画像データ及び第２画像データを処理することで表示画像データを生成し、表示装置１３０に送信する。なお、図１（ｂ）に示すように、表示制御装置１２０は、表示画像データを表示する表示モードとして、２種類のモード（通常モード１４０、ＰＬＳ（Point Light Source）モード１５０）を有する。そして、表示制御装置１２０は、表示モードを自動及び手動で切り替えられるように構成されている。

通常モード１４０の場合、表示制御装置１２０は、表示画像データとして、第１画像データと第２画像データとを合成した通常モード画像データを表示装置１３０に送信する。一方、ＰＬＳモード１５０の場合、表示制御装置１２０は、表示画像データとして、第２画像データであるＰＬＳ画像データを表示装置１３０に送信する。

表示装置１３０は出力装置の一例であり、第１の実施形態においては液晶表示装置により構成され、表示制御装置１２０より送信された表示画像データ（通常モード１４０の場合は通常モード画像データ、ＰＬＳモード１５０の場合はＰＬＳ画像データ）を表示する。

＜撮像装置のハードウェア構成＞
次に、撮像装置１１０のハードウェア構成について説明する。図２は、撮像装置のハードウェア構成の一例を示す図である。図２に示すように、撮像装置１１０は、ＣＣＤ（Charge Coupled Device）イメージセンサ２０１、ＡＦＥ（Analog Front End）２０２、ＤＳＰ（Digital Signal Processor）２０３を有する。また、撮像装置１１０は、ＣＰＵ２０４、ＲＯＭ２０５、ＲＡＭ２０６を有する。

ＣＣＤイメージセンサ２０１は、所定の露光時間で撮影を行い、撮影画像をＡＦＥ２０２に送信する。ＡＦＥ２０２は、ゲインコントロール、Ａ／Ｄ変換等の処理を行う。上述したとおり、第１の実施形態では、異なる２種類のゲインを用いて撮影画像を処理するため、ＡＦＥ２０２からは、第１ゲインで処理された第１画像データと、第１画像データよりも低い第２ゲインで処理された第２画像データとが出力される。

ＤＳＰ２０３は、第１画像データ及び第２画像データに対して各種処理（ノイズ除去、左右反転等）を行い、表示制御装置１２０に送信する。なお、ＣＰＵ２０４、ＲＯＭ２０５、ＲＡＭ２０６は、撮像装置１１０全体の動作（ＣＣＤイメージセンサ２０１、ＡＦＥ２０２、ＤＳＰ２０３の動作を含む）を制御する。

＜表示装置の配置例＞
次に、表示装置１３０の配置例について説明する。図３は、表示装置の配置例を示す図である。図３に示すように、表示装置１３０は、例えば、車両の室内後写鏡の位置（フロントウィンドウの手前側の中央位置）に配置され、室内後写鏡を代替する電子ミラーとして機能する。

＜表示制御装置のハードウェア構成＞
次に、表示制御装置１２０のハードウェア構成について説明する。図４は、表示制御装置のハードウェア構成の一例を示す図である。図４に示すように、表示制御装置１２０は、ＣＰＵ（Central Processing Unit）４０１、ＲＯＭ（Read Only Memory）４０２、ＲＡＭ（Random Access Memory）４０３を有する。また、表示制御装置１２０は、ＧＰＵ（Graphic Processing Unit）４０４、Ｉ／Ｆ（Interface）装置４０５を有する。なお、表示制御装置１２０の各部は、バス４０６を介して相互に接続されている。

ＣＰＵ４０１は、ＲＯＭ４０２にインストールされている各種プログラム（例えば、表示制御プログラム等）を実行するデバイスである。ＲＯＭ４０２は、不揮発性メモリであり、ＣＰＵ４０１によって実行される各種プログラムを格納する、主記憶デバイスとして機能する。ＲＡＭ４０３は、ＤＲＡＭ（Dynamic Random Access Memory）やＳＲＡＭ（Static Random Access Memory）等の揮発性メモリである。ＲＡＭ４０３は、ＲＯＭ４０２にインストールされている各種プログラムがＣＰＵ４０１によって実行される際に展開される作業領域を提供する、主記憶デバイスとして機能する。

ＧＰＵ４０４は、画像処理を行う専用の集積回路であり、第１の実施形態では、表示制御プログラムを実行するＣＰＵ４０１からの指示に基づき、表示装置１３０に表示される表示画像データの生成等を行う。Ｉ／Ｆ装置４０５は、撮像装置１１０及び表示装置１３０と、表示制御装置１２０とを接続するための接続デバイスである。

＜表示制御装置の機能構成＞
次に、表示制御装置１２０の機能構成について説明する。図５は、第１の実施形態における表示制御装置の機能構成の一例を示す図である。上述したとおり、表示制御装置１２０には、表示制御プログラムがインストールされており、カメラモニタリングシステム１００が起動することで、表示制御装置１２０は、表示制御プログラムを実行する。これにより、表示制御装置１２０は、第１画像データ取得部５１０、第１画像データ解析部５１１、第２画像データ取得部５２０、第２画像データ解析部５２１、合成部５３０、判定部５４０として機能する。

第１画像データ取得部５１０は取得部の一例であり、撮像装置１１０より送信された第１画像データを取得する。第１画像データ取得部５１０は、取得した第１画像データを第１画像データ解析部５１１、合成部５３０に送信する。

第１画像データ解析部５１１は、第１画像データを解析し、所定の輝度値以上の画素を抽出する。また、第１画像データ解析部５１１は、抽出した画素のうち、隣接する画素同士をブロック化し、白色領域を生成する。更に、第１画像データ解析部５１１は、生成した白色領域を含む矩形領域を特定し、ハレーション領域（第１領域）として判定部５４０に通知する。

第２画像データ取得部５２０は取得部の一例であり、撮像装置１１０より送信された第２画像データを取得する。第２画像データ取得部５２０は、取得した第２画像データを第２画像データ解析部５２１、合成部５３０に送信する。

第２画像データ解析部５２１は、第２画像データを解析し、所定の輝度値以上の画素を抽出する。また、第２画像データ解析部５２１は、抽出した画素のうち、隣接する画素同士をブロック化し、白色領域を生成する。また、第２画像データ解析部５２１は、生成した白色領域を含む矩形領域を特定し、点光源領域（第２領域）として判定部５４０に通知する。更に、第２画像データ解析部５２１は、第２画像データを、ＰＬＳモード画像データとして判定部５４０に送信する。

合成部５３０は、第１画像データと第２画像データとを合成し、通常モード画像データを生成する。また、合成部５３０は、生成した通常モード画像データを、判定部５４０に送信する。

判定部５４０は切替部の一例である。判定部５４０は、第１画像データ解析部５１１より通知されたハレーション領域と、第２画像データ解析部５２１より通知された点光源領域との位置関係を比較する。また、判定部５４０は、比較した位置関係から、ハレーション領域内に含まれる点光源領域の数をカウントする。

判定部５４０は、カウント結果が所定数未満（例えば、２未満）であった場合、通常モード１４０を継続すると判定し、合成部５３０より送信された通常モード画像データを、表示画像データとして表示装置１３０に送信する。一方、カウント結果が所定数以上（例えば、２以上）であった場合、判定部５４０は、ＰＬＳモードに切り替えると判定し、第２画像データ解析部５２１より送信されたＰＬＳモード画像データを、表示画像データとして表示装置１３０に送信する。

＜表示制御処理の流れ＞
次に、表示制御装置１２０による表示制御処理の流れについて説明する。図６は、第１の実施形態における表示制御処理の流れを示すフローチャートである。カメラモニタリングシステム１００が起動することにより、表示制御装置１２０では、図６に示す表示制御処理を実行する。

ステップＳ６０１において、第１画像データ取得部５１０は、第１画像データを取得し、第１画像データ解析部５１１及び合成部５３０に送信する。また、第２画像データ取得部５２０は、第２画像データを取得し、第２画像データ解析部５２１及び合成部５３０に送信する。これにより、第１画像データ解析部５１１は、第１画像データにおいてハレーション領域を特定し、第２画像データ解析部５２１は、第２画像データにおいて点光源領域を特定する。

ステップＳ６０２において、合成部５３０は、第１画像データと第２画像データとを合成することで、通常モード画像データを生成し、判定部５４０に送信する。また、第２画像データ解析部５２１は、第２画像データを、ＰＬＳモード画像データとして、判定部５４０に送信する。

ステップＳ６０３において、判定部５４０は、通常モード１４０とＰＬＳモード１５０との切り替えが、手動で行われるように設定されているか自動で行われるように設定されているかを判定する。ステップＳ６０３において、手動で行われるように設定されている場合には（ステップＳ６０３においてＮｏの場合には）、ステップＳ６１０に進む。

ステップＳ６１０において、判定部５４０は、現在の表示モードが通常モード１４０に設定されているのか、ＰＬＳモードに設定されているのかを判定し、判定した表示モードに応じて、表示装置１３０に表示画像データを送信する。具体的には、現在の表示モードが通常モード１４０に設定されている場合には、判定部５４０は、表示画像データとして、通常モード画像データを表示装置１３０に送信する。また、現在の表示モードがＰＬＳモード１５０に設定されている場合には、判定部５４０は、表示画像データとして、ＰＬＳモード画像データを表示装置１３０に送信する。

一方、ステップＳ６０３において、自動で行われるように設定されている場合には（ステップＳ６０３においてＹｅｓの場合には）、ステップＳ６０４に進む。ステップＳ６０４において、判定部５４０は、第１画像データにおいてハレーション領域が特定されたか否かを判定する。

第１画像データ解析部５１１において、所定の輝度値以上の画素が抽出されなかった場合、または、ブロック化された白色領域が所定の画素数未満であった場合、第１画像データ解析部５１１は、判定部５４０に対してハレーション領域を通知しない。この場合、判定部５４０では、第１画像データでハレーション領域が特定されなかったと判定し（ステップＳ６０４においてＮｏと判定し）、ステップＳ６０９に進む。そして、ステップＳ６０９において、判定部５４０は、通常モードを維持すると判定し、表示画像データとして、通常モード画像データを表示装置１３０に送信する。

一方、第１画像データ解析部５１１において、所定の輝度値以上の画素が抽出され、かつ、ブロック化された白色領域が所定の画素数以上であった場合には、第１画像データ解析部５１１は、判定部５４０に対してハレーション領域を通知する。この場合、判定部５４０では、第１画像データでハレーション領域が特定されたと判定し（ステップＳ６０４においてＹｅｓと判定し）、ステップＳ６０５に進む。

ステップＳ６０５において、判定部５４０は、第２画像データ解析部５２１より通知された点光源領域と、ハレーション領域との位置関係を比較する。そして、判定部５４０は、比較した位置関係から、ハレーション領域内に含まれる点光源領域の数をカウントする。

ステップＳ６０６において、判定部５４０は、カウントした点光源領域の数が２以上であるか否かを判定する。ステップＳ６０６において、２以上でないと判定された場合には（ステップＳ６０６においてＮｏの場合には）、ステップＳ６０９に進む。一方、ステップＳ６０６において、２以上であると判定された場合には（ステップＳ６０６においてＹｅｓの場合には）、ステップＳ６０７に進む。

ステップＳ６０７において、判定部５４０は、表示モードを通常モードからＰＬＳモードに切り替えると判定する。ステップＳ６０８において、判定部５４０は、表示画像データとして、ＰＬＳ画像データを表示装置１３０に送信する。

ステップＳ６１１において、判定部５４０は表示制御処理を終了するか否かを判定する。ステップＳ６１１において、表示制御処理を継続すると判定した場合には（ステップＳ６１１においてＮｏの場合には）、ステップＳ６０１に戻る。一方、ステップＳ６１１において、表示制御処理を終了すると判定した場合には（ステップＳ６１１においてＹｅｓの場合には）、表示制御処理を終了する。

＜表示制御処理の具体例＞
次に、通常モード１４０とＰＬＳモード１５０との切り替えが自動で行われるように設定されている場合の、表示制御装置１２０による表示制御処理の具体例（ＰＬＳモード１５０の具体例、通常モード１４０の具体例）について説明する。

（１）ＰＬＳモードの具体例
図７は、表示制御処理の具体例を示す第１の図である。図７に示すように、第１画像データ７１０には、後方車両のヘッドライトに起因して発生したハレーションに基づく白色領域７４１（所定の輝度値以上の画素がブロック化された領域）が含まれる。

一方、第２画像データ７２０は、第１画像データ７１０と同じタイミングで撮影された画像データである。第２画像データ７２０の場合、第１画像データ７１０よりも低いゲインで撮影が行われているため、後方車両のヘッドライトが白色領域７５１、７５２として含まれることになる。

第１画像データ７１０は、第１画像データ解析部５１１により解析され、白色領域７４１を含む矩形領域である、ハレーション領域７４２が特定される。また、第２画像データ７２０は、第２画像データ解析部５２１により解析され、白色領域７５１、７５２を含む矩形領域である、点光源領域７５３、７５４が特定される。更に、第１画像データ７１０及び第２画像データ７２０は、合成部５３０により合成され、通常モード画像データ７３０が生成される。

ここで、判定部５４０では、ハレーション領域７４２と、点光源領域７５３、７５４との位置関係を比較し、ハレーション領域７４２内に含まれる点光源領域の数をカウントする。図７の例では、点光源領域７５３、７５４がいずれもハレーション領域７４２内に含まれるため（図７の右上参照）、判定部５４０では、ハレーション領域７４２内に含まれる点光源領域の数を"２"と判定する。

上述したとおり、ハレーション領域に含まれる点光源領域の数が２以上の場合、判定部５４０では、表示モードを通常モード１４０からＰＬＳモード１５０に切り替える。このため、判定部５４０では、ＰＬＳモード画像データである第２画像データ７２０を表示装置１３０に送信する。

（２）通常モードの具体例
図８は、表示制御処理の具体例を示す第２の図である。図８に示すように、第１画像データ８１０には、後方車両のヘッドライトに起因する白色領域８０１、８０２が含まれる。

第２画像データ７２０は、第１画像データ８１０と同じタイミングで撮影された画像データである。第２画像データ７２０の場合、第１画像データ８１０よりも低いゲインで撮影されているため、後方車両のヘッドライトが白色領域７５１、７５２として含まれることになる。

第１画像データ８１０は、第１画像データ解析部５１１により解析され、白色領域８０１、８０２をそれぞれ含む矩形領域である、ハレーション領域８１１、８１２が特定される。また、第２画像データ７２０は、第２画像データ解析部５２１により解析され、白色領域７５１、７５２を含む矩形領域である、点光源領域７５３、７５４が特定される。更に、第１画像データ８１０及び第２画像データ７２０は、合成部５３０により合成され、通常モード画像データ８３０が生成される。

ここで、判定部５４０では、ハレーション領域８１１、８１２と、点光源領域７５３、７５４との位置関係を比較し、ハレーション領域８１１、８１２内にそれぞれ含まれる点光源領域の数をカウントする。図８の例では、点光源領域７５３、７５４がハレーション領域８１１、８１２内にそれぞれ含まれるため（図８の右上参照）、判定部５４０では、ハレーション領域８１１、８１２内に含まれる点光源領域の数を"１"と判定する。

上述したとおり、ハレーション領域に含まれる点光源領域の数が２未満の場合、判定部５４０では、表示モードを通常モード１４０のまま維持する。このため、判定部５４０では、通常モード画像データ８３０を表示装置１３０に送信する。

＜表示装置の表示例＞
次に、表示装置１３０に表示される表示画像データの表示例について説明する。図９は、表示装置の表示例を示す図である。このうち、図９（ａ）は、後方車両のヘッドライトに起因して第１画像データにハレーションが発生した状態において、表示装置１３０に、通常モード画像データが表示された様子を示している。

表示モードの切り替えが適切なタイミングで行われなかった場合、車両の運転者は、表示装置１３０に、図９（ａ）に示す表示画像データが表示された状態のまま、運転を継続することになる。一方、第１の実施形態におけるカメラモニタリングシステム１００では、第１画像データにハレーションが発生したタイミングで、ＰＬＳモードに切り替えることができる。この結果、表示装置１３０には、ＰＬＳモード画像データである第２画像データが送信され、表示装置１３０には、図９（ｂ）に示す表示画像データが表示されることになる。

＜まとめ＞
以上の説明から明らかなように、第１の実施形態に係る表示制御装置は、
・撮像装置が車両後方を第１ゲインで撮影した第１画像データと、撮像装置が車両後方を該第１ゲインよりも低い第２ゲインで撮影した第２画像データと、を取得する。
・第１画像データにおいて特定したハレーション領域と、第２画像データにおいて特定した点光源領域との位置関係から、ハレーション領域内に含まれる点光源領域の数をカウントする。
・カウント結果に応じて表示モードを切り替えることで、表示装置に送信する表示画像データを切り替える。

これにより、第１の実施形態に係る表示制御装置では、後方車両のヘッドライトに起因するハレーションが発生したタイミングで、表示画像データを切り替えることが可能となる。この結果、車両の運転者は、電子ミラーの視認性が低下した状態で、運転を継続するといった事態を回避することができる。つまり、第１の実施形態に係る表示制御装置によれば、車両運転中の電子ミラーの視認性を向上させることができる。

［第２の実施形態］
上記第１の実施形態では、表示モードを切り替えるか否かを判定するにあたり、ハレーション領域と点光源領域との位置関係を比較する構成とした。これに対して、第２の実施形態では、更に、点光源領域の位置座標を参照して、表示モードを切り替えるか否かを判定する。以下、第２の実施形態について、上記第１の実施形態との相違点を中心に説明する。

＜表示制御処理の流れ＞
図１０は、第２の実施形態における表示制御処理の流れを示すフローチャートである。図６との相違点は、ステップＳ１００１である。ステップＳ１００１において、判定部５４０は、点光源領域の位置座標を参照し、位置座標が所定の条件を満たすか否かを判定する。第２画像データにおいて、後方車両のヘッドライトが描画される位置は所定の範囲に限定される。このため、判定部５４０は、点光源領域が、所定の範囲に含まれるか否か（つまり、点光源領域の位置座標が所定の条件を満たすか否か）を判定し、所定の条件を満たすと判定した場合に（ステップＳ１００１においてＹｅｓの場合に）、ステップＳ６０７に進む。

一方、ステップＳ１００１において、点光源領域の位置座標が所定の条件を満たさないと判定した場合には（ステップＳ１００１においてＮｏの場合には）、ステップＳ６０９に進む。これにより、判定部５４０では、後方車両のヘッドライト以外の点光源領域を、後方車両のヘッドライトの点光源領域と誤って特定し、ＰＬＳモード１５０に切り替えてしまうといった事態を回避することができる。

＜まとめ＞
以上の説明から明らかなように、第２の実施形態に係る表示制御装置は、
・撮像装置が車両後方を第１ゲインで撮影した第１画像データと、撮像装置が車両後方を該第１ゲインよりも低い第２ゲインで撮影した第２画像データと、を取得する。
・第１画像データにおいて特定したハレーション領域と、第２画像データにおいて特定した点光源領域との位置関係から、ハレーション領域に含まれる点光源領域の数をカウントする。
・カウントした結果、所定数以上含まれると判定した場合であって、点光源領域の位置座標が所定の条件を満たすと判定した場合に、表示モードをＰＳＬモードに切り替えることで、表示装置に送信する表示画像データをＰＬＳモード画像データに切り替える。

これにより、第２の実施形態に係る表示制御装置では、後方車両のヘッドライトに起因するハレーションが発生したタイミングで、表示画像データを切り替えることが可能となる。また、後方車両のヘッドライト以外の要因でハレーションが発生したことで表示画像データが切り替えられてしまうといった事態を回避することが可能となる。

この結果、車両の運転者は、車両運転中、適切な表示モードの表示画像データを視認することができる。つまり、第２の実施形態に係る表示制御装置によれば、車両運転中の電子ミラーの視認性を向上させることができる。

［第３の実施形態］
上記第１及び第２の実施形態では、室内後写鏡の位置に表示装置１３０を配置し、表示装置１３０を電子ミラーとして機能させるカメラモニタリングシステム１００について説明した。しかしながら、カメラモニタリングシステムの構成はこれに限定されない。例えば、室内後写鏡の位置に投影用のミラーを配置し、プロジェクタを介して当該投影用のミラーに対して表示画像データを投影することで、当該投影用のミラーを電子ミラーとして機能させる構成としてもよい。

図１１は、第３の実施形態におけるカメラモニタリングシステムのシステム構成の一例を示す図である。図１１（ａ）に示すカメラモニタリングシステム１１００の図１との相違点は、出力装置として表示装置１３０に代えて、プロジェクタ（画像投影装置）１１１０が配されている点である。なお、カメラモニタリングシステム１１００の場合、表示画像データは投影用のミラーに投影され、投影用のミラーにおいて光学的に左右反転されるため、撮像装置１１０において撮影画像を左右反転させる必要はない。したがって、表示制御装置１２０からプロジェクタ１１１０に送信される表示画像データは、撮影画像が左右反転されていない表示画像データとなる。

図１１（ｂ）は、プロジェクタ１１１０と投影用のミラー１１２０との関係を示した図である。本実施形態において、プロジェクタ１１１０は車内の天井部分に配置されるものとする。図１１（ｂ）に示すように、天井部分に配置されたプロジェクタ１１１０より出射された表示画像データは、室内後写鏡の位置に配置された投影用のミラー１１２０に投影される。これにより、車両の運転者は、投影用のミラー１１２０を介して表示画像データを視認することができる。

［その他の実施形態］
上記第１乃至第３の実施形態では、２種類のパラメータのもとで第１画像データと第２画像データとを撮影するものとして説明したが、３種類以上のパラメータのもとで３種類以上の画像データを撮影するように構成してもよい。

また、上記第１乃至第３の実施形態では、第１画像データと第２画像データとを合成することで通常モード画像データを生成するものとして説明したが、第１画像データ自体を通常モード画像データとして送信してもよい。

また、上記第１乃至第３の実施形態では、第１画像データと第２画像データとをそれぞれ並行して撮影するものとして説明したが、第１画像データと第２画像データとは、交互に撮影するように構成してもよい。あるいは、所定のタイミングごとに切り替えて撮影するように構成してもよい。更に、上記第１乃至第３の実施形態では、固定のパラメータで撮影を行うものとして説明したが、可変のパラメータで撮影を行ってもよい。

また、上記第１乃至第３の実施形態では、表示装置１３０を室内後写鏡の位置に配置する場合について説明したが、表示装置１３０の配置は、これに限定されず、例えば、左右のドアや、センタコンソール等に配置してもよい。

また、上記第１乃至第３の実施形態では、ハレーション領域内に含まれる点光源領域の数が２以上であるか否かに基づいて、表示モードを切り替えるものとして説明したが、表示モードの切り替え条件は、これに限定されない。更に、上記第１乃至第３の実施形態では、白色領域を含む矩形領域を、ハレーション領域または点光源領域としたが、ハレーション領域または点光源領域は、矩形領域に限定されず、円形領域であってもよい。あるいは、白色領域自体を、ハレーション領域または点光源領域としてもよい。

なお、上記実施形態に挙げた構成等に、その他の要素との組み合わせ等、ここで示した構成に本発明が限定されるものではない。これらの点に関しては、本発明の趣旨を逸脱しない範囲で変更することが可能であり、その応用形態に応じて適切に定めることができる。

１００ ：カメラモニタリングシステム
１１０ ：撮像装置
１２０ ：表示制御装置
１３０ ：表示装置
１４０ ：通常モード
１５０ ：ＰＬＳモード
５１０ ：第１画像データ取得部
５１１ ：第１画像データ解析部
５２０ ：第２画像データ取得部
５２１ ：第２画像データ解析部
５３０ ：合成部
５４０ ：判定部
７１０ ：第１画像データ
７２０ ：第２画像データ
７３０ ：通常モード画像データ
７４２ ：ハレーション領域
７５３、７５４ ：点光源領域
８２０ ：第２画像データ
８５２ ：点光源領域
１１００ ：カメラモニタリングシステム
１１１０ ：プロジェクタ
１１２０ ：投影用のミラー

Claims (8)

1. 撮像装置に接続される表示制御装置であって、
   前記撮像装置が車両の後方を第１ゲインで撮影した第１画像データと、前記撮像装置が車両の後方を該第１ゲインよりも低い第２ゲインで撮影した第２画像データと、を取得する取得部と、
   前記第１画像データにおいて所定の輝度値を有する第１領域と、前記第２画像データにおいて前記所定の輝度値を有する第２領域との位置関係から、該第１領域内に含まれる該第２領域の数をカウントし、カウント結果に応じて、表示する画像データを切り替える切替部と
   を有することを特徴とする表示制御装置。
2. 前記切替部は、
   前記第１領域内に含まれる前記第２領域の数が、所定数以上であった場合、前記表示する画像データを、前記第２画像データに切り替えることを特徴とする請求項１に記載の表示制御装置。
3. 前記切替部は、
   前記第１領域内に含まれる前記第２領域の数が、所定数以上であり、かつ、前記第２領域の位置を示す位置座標が、所定の条件を満たす場合に、前記表示する画像データを、前記第２画像データに切り替えることを特徴とする請求項２に記載の表示制御装置。
4. 前記切替部は、
   前記第１領域内に含まれる前記第２領域の数が、所定数未満であった場合、前記表示する画像データを、前記第１画像データに基づく画像データに切り替えることを特徴とする請求項１乃至３のいずれか１項に記載の表示制御装置。
5. 前記切替部は、
   前記第１領域内に含まれる前記第２領域の数が、所定数以上であり、かつ、前記第２領域の位置を示す位置座標が、所定の条件を満たさない場合に、前記表示する画像データを、前記第１画像データに基づく画像データに切り替えることを特徴とする請求項３に記載の表示制御装置。
6. 前記第１画像データに基づく画像データは、前記第１画像データ、または、前記第１画像データと前記第２画像データとを合成することで生成される画像データ、のいずれかであることを特徴とする請求項４または５に記載の表示制御装置。
7. 表示制御装置の表示制御方法であって、
   撮像装置が車両の後方を第１ゲインで撮影した第１画像データと、前記撮像装置が車両の後方を該第１ゲインよりも低い第２ゲインで撮影した第２画像データと、を取得する取得工程と、
   前記第１画像データにおいて所定の輝度値を有する第１領域と、前記第２画像データにおいて前記所定の輝度値を有する第２領域との位置関係から、該第１領域内に含まれる該第２領域の数をカウントし、カウント結果に応じて、表示する画像データを切り替える切替工程と
   を有することを特徴とする表示制御方法。
8. 車両の後方を撮影する撮像装置と、
   前記撮像装置で撮影された画像データを処理する表示制御装置と、
   前記表示制御装置に接続された出力装置と、を有するカメラモニタリングシステムであって、
   前記表示制御装置は、
   前記撮像装置が車両の後方を第１ゲインで撮影した第１画像データと、前記撮像装置が車両の後方を該第１ゲインよりも低い第２ゲインで撮影した第２画像データと、を取得する取得部と、
   前記第１画像データにおいて所定の輝度値を有する第１領域と、前記第２画像データにおいて前記所定の輝度値を有する第２領域との位置関係から、該第１領域内に含まれる該第２領域の数をカウントし、カウント結果に応じて、表示する画像データを切り替える切替部と
   を有することを特徴とするカメラモニタリングシステム。

Images