JP6816476B2

JP6816476B2 - 車両用表示装置および表示方法

Info

Publication number: JP6816476B2
Application number: JP2016232537A
Authority: JP
Inventors: 祐樹和田; 俊也遠藤; 山崎　武志; 武志山崎; 広樹高橋
Original assignee: JVCKenwood Corp
Current assignee: JVCKenwood Corp
Priority date: 2016-11-30
Filing date: 2016-11-30
Publication date: 2021-01-20
Anticipated expiration: 2036-11-30
Also published as: JP2018089998A

Description

本発明は、車両用表示装置に関し、特に、車両の後方を撮影した映像を表示する車両用表示装置および表示方法に関する。

自動車などの車両後方の景色を表示する装置として、光学式のリヤビューミラーに代えて、リヤビューモニタが提案されている。リヤビューモニタは、車両後部などに設置したカメラを使って後方を撮影し、その画像を画面に表示する。リヤビューモニタは、リヤビューミラーに比べて、車両後方の様子をより広範囲かつ的確に表示できるという利点を持つ。反面、リヤビューモニタは、リヤビューミラーのように車室内の様子を映すことができない。この課題を解決するために、リヤビューモニタの液晶表示パネルの前面にハーフミラーを配備し、運転者の操作でモニタ表示モードとミラーモードとを切り替える、表示機能付きルームミラーが考案されている（例えば特許文献１参照）。

特開２０１６−５５７８２号公報

運転者は、モニタ表示モードで車両後方が表示されているときは、後部座席の同乗者と会話によるコミュニケーションは可能であるがアイコンタクトや表情、仕草が見えないために、違和感を感じることがある。本発明は、こうした課題に鑑みてなされたものであり、その目的は、リヤビューモニタ機能を用いながら同乗者と適切なコミュニケーションをとることができる技術を提供することにある。

上記課題を解決するために、本発明のある態様の車両用表示装置は、車両の後方を撮影した映像を表示する装置であって、ミラーとして機能する構造を有する表示面をもつ表示部と、前記車両における後部座席の左右それぞれについて同乗者の有無を判断する判断部と、前記後部座席の左右のいずれかに同乗者が存在すると判断されたときは、前記表示部に表示する映像の表示における左右方向の一部分を非表示にする表示制御部と、を備える。前記表示面のうち映像が非表示にされた部分が、ミラーとして機能する。

本発明の別の態様は、表示方法である。これは、車両の後方を撮影した映像を表示する方法であって、前記車両における後部座席の左右それぞれについて同乗者の有無を判断し、前記後部座席の左右いずれかに同乗者が存在すると判断されたときは、ミラーとして機能する構造を有する表示面をもつ表示部に表示する映像の表示における左右方向の一部分を非表示とする。これにより、前記表示面のうち映像が非表示にされた部分をミラーとして機能させる。

なお、本発明の表現を方法、装置、システム、記憶媒体、コンピュータプログラム等の間で変換したものもまた、本発明の態様として有効である。

第１の実施形態の構成要素であるリヤビューモニタを含む車室内の構成を示す外観図である。図１のリヤビューモニタの内部構成を示す側面断面図である。図２のバックライトの構成を示す正面図である。図２のバックライトの他の構成を示す正面図である。第１の実施形態に係る車両用表示装置の機能ブロック図である。バックライトの下側光源部を消灯したときのリヤビューモニタの画面を表す図である。バックライトの上側光源部を消灯したときのリヤビューモニタの画面を表す図である。バックライトの左側光源部を消灯したときのリヤビューモニタの画面を表す図である。バックライトの右側光源部を消灯したときのリヤビューモニタの画面を表す図である。図５の車両用表示装置による処理手順を示すフローチャートである。図５の車両用表示装置による処理手順を示すフローチャートである。第２の実施形態に係る車両用表示装置の機能ブロック図である。図１２の車両用表示装置による処理手順を示すフローチャートである。図１２の車両用表示装置による処理手順を示すフローチャートである。第３の実施形態に係る車両用表示装置の機能ブロック図である。図１５の車両用表示装置による処理手順を示すフローチャートである。図１５の車両用表示装置による処理手順を示すフローチャートである。第４の実施形態に係る車両用表示装置の機能ブロック図である。図１８の車両用表示装置による処理手順を示すフローチャートである。図１８の車両用表示装置による処理手順を示すフローチャートである。第５の実施形態に係る車両用表示装置の機能ブロック図である。図２１の車両用表示装置による処理手順を示すフローチャートである。図２１の車両用表示装置による処理手順を示すフローチャートである。

（第１の実施形態）
図１は、第１の実施形態の構成要素であるリヤビューモニタを含む車室内の構成を示す。リヤビューモニタ１１０は、従来の光学式リヤビューミラーであるルームミラーが搭載されていた位置に搭載される。運転席（図示しない）の前方にクラスターパネル２０３、ステアリングホイール２０２があり、クラスターパネル２０３の前方にダッシュボード２０４がある。ダッシュボード２０４の中央下部にセンターコンソール２０５が設置される。ダッシュボード２０４から上に向かってウィンドシールド２０６が設けられる。ウィンドシールド２０６の上部中央にリヤビューモニタ１１０が配置される。リヤビューモニタ１１０は、車両後端やルーフ後端などに後向きに設置されたカメラで撮影した車両後方の映像を表示する。

図２は、リヤビューモニタ１１０の内部構成を示す側面断面図である。図２の右側が車両の前方を示し、左側が車両の後方、すなわち車室側を示す。図２において、筐体１１１は、車両の前方側、上方側、および下方側を主に覆い、車両の後方側に向かって開口する。表示パネル１１４は、バックライト１１２と液晶パネル１１３とを含む。液晶パネル１１３は、バックライト１１２から光を照射されると、映像を表示面１１５に表示する。表示パネル１１４は、筐体の１１１の開口部分の奥側に配置される。ハーフミラー１１６は、表示パネル１１４の前面を覆って配置される。ハーフミラー１１６は、暗い側から見るときは透明ガラスのような透過素材として機能し、明るい側から見るときはミラーのような反射素材として機能する。ハーフミラー１１６の表面または裏面には、薄い金属膜が蒸着され、ハーフミラー１１６が反射素材として機能するときに、この金属膜がミラー面１１７となる。ミラー面１１７は、リヤビューモニタ１１０がミラーとして機能するとき、外部から入射した光を反射する面である。なお、表示パネル１１４は、ハーフミラー１１６の後方から発光して、表示映像を形成するものであれば、液晶パネルとバックライトとの組み合わせに限らず、有機ＥＬ（ＥｌｅｃｔｒｏＬｕｍｉｎｅｓｃｅｎｃｅ）パネルなどの自光式表示パネルであってもよい。

図３と図４は、バックライト１１２の構成を車室側から見たときの正面図である。図３のバックライト１１２は、正面から見て上下方向に並ぶ三つの光源部、すなわち、上側光源部１１２ａと、中央光源部１１２ｂと、下側光源部１１２ｃとして機能する。一方、図４のバックライト１１２は、正面から見て横方向に並ぶ三つの光源部、すなわち、左側光源部１１２ｄと、中央光源部１１２ｅと、右側光源部１１２ｆとして機能する。これらの光源部は、独立して点灯および消灯できる構成である。各々の光源部は、ＬＥＤ（ＬｉｇｈｔＥｍｉｔｔｉｎｇＤｉｏｄｅ）等の光源と導光パネルの組み合わせが独立して設けられていてもよく、複数並べて配置されたＬＥＤ等の光源を区画毎に制御することで実現してもよい。これにより、液晶パネル１１３の画面は、バックライト１１２の各光源部がある位置ごとに表示面１１５の表示、非表示を選択できる。

バックライト１１２が点灯しているときは、図２の筐体１１１の内部は明るい側となり、筐体１１１の外部は暗い側となる。従ってハーフミラー１１６を介してミラー面１１７の外部から液晶パネル１１４に表示された映像を見ることができる。これにより、表示面１１５に表示された映像は、ハーフミラー１１６を透過して運転者の目に達する。

一方、バックライトが消灯しているときは、筐体１１１の内部は暗い側となり、筐体１１１の外部は明るい側となる。従ってハーフミラー１１６を介してミラー面１１７の外部から反射面１１７の内側は殆ど見えず、ミラー面１１７の外部からハーフミラー１１６に入射した光の大部分は、ミラー面１１７で反射される。つまり、表示面１１５は後方の映像を表示するとともにミラーとしても機能する。これにより、表示部であるリヤビューモニタ１１０を、運転者が後部座席に着座した同乗者を含む後方を見るためのリヤビューミラーとして使用することができる。

図５は、第１の実施形態に係る車両用表示装置１００の機能ブロック図である。車両用表示装置１００は、リヤビューモニタ１１０と、リヤビューモニタ制御部１２０とを備える。前述の通り、リヤビューモニタ１１０は、表示パネル１１４とハーフミラー１１６とを備える。

リヤビューモニタ制御部１２０は、表示制御部１２１、判断部１２２、撮影制御部１２３、および同乗者情報取得部１２４ａを備える。リヤビューモニタ制御部１２０は、各種データの処理を行うＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）やＤＳＰ（ＤｉｇｉｔａｌＳｉｇｎａｌＰｒｏｃｅｓｓｏｒ）、メモリ等、および制御プログラムにより構成される。リヤビューモニタ制御部１２０は、リヤビューモニタ１１０に内蔵されていてもよく、ナビゲーション装置や車載コンピュータなどの制御機能の一部として実現されていてもよい。

撮影制御部１２３は、車両後方の映像データをカメラ３００から受信し、この映像データを表示制御部１２１に伝達する。撮影制御部１２３はまた、撮影範囲や撮影角度などを調整するための信号をカメラ３００に送信する。

同乗者情報取得部１２４ａは、後部座席における乗員の有無を判断する材料になる信号を車両に設置された着座センサ４１０から受信し、この信号を判断部１２２に渡す。着座センサ４１０が左右の後部座席に各々設けられている左側着座センサ４１０ａおよび右側着座センサ１４０ｂとして構成されている場合は、左側着座センサ４１０ａおよび右側着座センサ１４０ｂから後部座席における左右の乗員の有無を判断する材料になる信号を受信する。

着座センサ４１０は、後部座席の座面等に設置されており、圧力や荷重などにより後部座席における乗員の有無を検知する。着座センサ４１０は、左右の後部座席に各々設けられていてもよく、その場合は、左側着座センサ４１０ａおよび右側着座センサ４１０ｂを備える。これらのセンサは、乗員の有無に関する信号をリヤビューモニタ制御部１２０の同乗者情報取得部１２４ａに送信する。

後部座席における乗員の有無を検知する装置としては、着座センサの他に、後部座席のシートベルトのＯＮ／ＯＦＦ信号を検出するシートベルト着用センサや、後部座席を撮影するカメラなどを利用してもよい。これらの場合においても、左右の後部座席の乗員を各々検出する形態であってもよい。

判断部１２２は、同乗者情報取得部１２４ａから受信した信号から後部座席の乗員の有無または左右の後部座席における乗員の有無を判断し、その結果を表示制御部１２１に通知する。

表示制御部１２１は、映像データを撮影制御部１２３から受信するとともに、後部座席の同乗者有無の判断結果を判断部１２２から取得する。表示制御部１２１は、映像データと、後部座席の同乗者の有無に応じた表示の仕方を指示する信号とをリヤビューモニタ１１０に送信する。

表示の仕方について具体的に説明する。後部座席に同乗者がいない場合、表示制御部１２１は、バックライト１１２のすべての光源を点灯することを命じる信号をリヤビューモニタ１１０に送信する。これにより、図３のタイプのバックライトでは、上側光源部１１２ａ、中央光源部１１２ｂ、下側光源部１１２ｃのすべてが点灯する。一方、図４のタイプのバックライトでは、左側光源部１１２ｄ、中央光源部１１２ｅ、右側光源部１１２ｆのすべてが点灯する。これを受け、カメラ３００が撮影した車両後方の映像は、リヤビューモニタ１１０の画面全体を使って表示される。この表示の仕方は、従来の一般的なリヤビューモニタと同じである。以後、この表示の仕方を「モニタ表示モード」と呼ぶ。

一方、後部座席に同乗者がいる場合は、表示制御部１２１は、バックライト１１２の一部分を消灯することを命じる信号をリヤビューモニタ１１０に送信する。図３のタイプのバックライトでは、例えばユーザの指示に基づき、バックライト１１２の上側光源部１１２ａ、下側光源部１１２ｃのいずれかの消灯を命じる。一方、図４のタイプのバックライトでは、バックライト１１２の左側光源部１１２ｄ、右側光源部１１２ｆのうち、同乗者がいる側の消灯を命じる。これを受け、カメラ３００が撮影した映像は、リヤビューモニタ１１０の画面で、バックライト１１２の光源部が点灯している部分のみで表示される。リヤビューモニタ１１０の画面のうち、映像が表示されてない部分は、リヤビューミラーとなって後部座席を含む車室内の様子が映るため、後部座席に着座している同乗者が映る。以後、この表示の仕方を「混合モード」と呼ぶ。混合モードでは、リヤビューモニタ１１０の上側と下側、または左側と右側の部分が、後部座席同乗者の有無に応じて映像の表示および非表示が制御される一方、リヤビューモニタ１１０の中央部分は、常に映像を表示する。また、混合モードにおいて非表示となる部分においては、光源部の消灯のみであってもよく、表示パネル１１４における非表示部分に対応する表示範囲の表示も停止してもよい。混合モードにおいて非表示となる部分においては、バックライト１１２を全面発光させた状態で、非表示とする範囲に対応する液晶パネル１１３の表示を黒表示としてもよい。

図６に、図３のタイプのバックライト１１２の下側光源部１１２ｃを消灯し、中央光源部１１２ｂと上側光源部１１２ａを点灯したときのリヤビューモニタ１１０の画面を示す。リヤビューモニタ１１０の下側部分２２１ｂには、リヤビューミラーに映った後部座席の車室内の様子が表示され、中央および上側部分２２１ａには、カメラ３００が撮影した車両後方の映像が表示される。図６においては、カメラ３００が撮影した車両後方の映像を下側部分２２１ｂの範囲の分、上方にシフトさせて表示している。図７に、図３のタイプのバックライト１１２の上側光源部１１２ａを消灯し、中央光源部１１２ｂと下側光源部１１２ｃを点灯したときのリヤビューモニタ１１０の画面を示す。リヤビューモニタ１１０の上側部分２２２ａには、リヤビューミラーに映った後部座席の車室内の様子が表示され、中央および下側部分２２２ｂには、カメラ３００が撮影した車両後方の映像が表示される。図７においては、上側部分２２２ａはカメラ３００が撮影した車両後方映像において、地平線より上方や空などが撮影されることが多い範囲であるため、車両後方の映像のシフトは行わずに表示させる。

図８に、図４のタイプのバックライト１１２の左側光源部１１２ｄを消灯し、中央光源部１１２ｅと右側光源部１１２ｆを点灯したときのリヤビューモニタ１１０の画面を示す。リヤビューモニタ１１０の左側部分２２３ａには、リヤビューミラーに映った後部座席の車室内の様子が表示され、中央および右側部分２２３ｂには、カメラ３００が撮影した車両後方の映像が表示される。図９に、図４のタイプのバックライト１１２の右側光源部１１２ｆを消灯し、中央光源部１１２ｅと左側光源部１１２ｄを点灯したときのリヤビューモニタ１１０の画面を示す。リヤビューモニタ１１０の中央および左側部分２２４ａには、カメラ３００が撮影した車両後方の映像が表示され、右側部分２２４ｂには、リヤビューミラーに映った後部座席の車室内の様子が表示される。

図１０は、第１の実施形態に係る車両用表示装置１００による処理手順を示すフローチャートである。表示制御部１２１は、初期状態としてモニタモードに設定されていてもよい（Ｓ１０１）。その場合、続いて表示制御部１２１は、同乗者情報取得部１２４ａからの信号をもとに、後部座席の同乗者の有無を判断する（Ｓ２０１）。後部座席に人がいない場合（Ｓ２０１のＮｏ）、表示制御部１２１は、リヤビューモニタ１１０にモニタモードでの表示を継続または開始させる。

一方、後部座席に人がいる場合（Ｓ２０１のＹｅｓ）、表示制御部１２１は、バックライト１１２の光源部のいずれかを消灯する。すなわち、図３のタイプのバックライト１１２を用いた場合、上側光源部１１２ａ、下側光源部１１２ｃのいずれかを消灯する。図４のタイプのバックライト１１２を用いた場合は、左側光源部１１２ｄ、右側光源部１１２ｆのいずれかを消灯する。これにより、リヤビューモニタ１１０の表示は、後部座席を映す混合モードに設定される（Ｓ１１１）。

図１１は、第１の実施形態に係る車両用表示装置１００による他の処理手順を示すフローチャートである。表示制御部１２１は、初期状態としてモニタモードに設定されていてもよい（Ｓ１０１）。その場合、続いて表示制御部１２１は、同乗者情報取得部１２４ａからの信号をもとに、左右の後部座席のいずれかの同乗者の有無を判断する（Ｓ２０１）。左右いずれの後部座席にも人がいない場合（Ｓ２０１のＮｏ）、表示制御部１２１は、リヤビューモニタ１１０にモニタモードでの表示を継続または開始させる。

左右の後部座席いずれかに同乗者有りと判断されている場合（Ｓ２０１のＹｅｓ）、表示制御部１２１は、それが左右のいずれであるかを判断する（Ｓ２１１ａ）。後部座席の同乗者が左にいる場合（Ｓ２１１ａのＹｅｓ）、表示制御部１２１は、バックライト１１２の左側光源部１１２ｄを消灯する。一方、後部座席の同乗者が右にいる場合（Ｓ２１１ａのＮｏ）、表示制御部１２１は、バックライト１１２の右側光源部１１２ｆを消灯する。これにより、リヤビューモニタ１１０の表示は、同乗者がいる側を映す混合モードに設定される（Ｓ１１１ａ、Ｓ１１１ｂ）。

簡易的には、モニタモードに設定する条件を「同乗者の有無」のみとし、同乗者が左右どちらにいるかは考慮しないという変形技術も可能である。この場合、同乗者情報取得部１２４ａは、左右の着座センサ４１０ａ、４１０ｂのいずれかから同乗者がいることを示す信号を受信すると、同乗者の存在を示す信号のみを判断部１２２に通知する。混合モードでリヤビューモニタ１１０の左右どちら側をミラーとして機能させるかは予め決めておき、表示制御部１２１は、図６または図７に示すように、当該部分のバックライトを消灯する。すなわち、この変形技術では、混合モードでミラーとなる部分は固定的であり、ここに左右両方の後部座席が映るよう広い画角を設定しておく。

この変形技術は、処理手順が簡便であり、実施も容易である。また、同乗者が左右両方にいる場合、運転者がそれらの人たちを同時に見ることができる利点がある。

また、リヤビューモニタ１１０のバックライト１１２を、図３に示す分割動作および図４に示す分割動作との双方を実現可能な分割駆動を可能とし、後部座席における同乗者が左または右の場合は、左側光源部１１２ｄまたは右側光源部１１２ｆを消灯し、後部座席における同乗者が左右双方である場合は、下側光源部１１２ｃまたは上側光源部１１２ａを消灯するようにしてもよい。また、後部座席における中央に同乗者が存在する場合に下側光源部１１２ｃまたは上側光源部１１２ａを消灯するようにしてもよい。

以上、本実施形態によれば、後部座席に同乗者がいないときは、モニタモードを使って車両後方を広範囲に見ることができる。一方、後部座席に同乗者がいるときは、運転者は混合モードにより、リヤビューモニタ機能を用いながら同乗者と適切なコミュニケーションをとることができる。

（第２の実施形態）
図１２は、第２の実施形態に係る車両用表示装置１００の機能ブロック図である。車両用表示装置１００のリヤビューモニタ制御部１２０は、第１の実施形態の同乗者情報取得部１２４ａに代えて音声検出部１２４ｂを備える。車両用表示装置１００のその他の構成は、第１の実施形態のものと同じである。

マイクロフォン４２０は、後部座席付近に設置され、後部座席付近で集音した音声信号を音声検出部１２４ｂに送信する。マイクロフォン４２０は、左右の後部座席付近に各々設けられていてもよく、その場合、マイクロフォン４２０ａ、４２０ｂが、それぞれ後部座席の左右に設置され、左右の後部座席付近で集音した音声信号を音声検出部１２４ｂに送信する。音声検出部１２４ｂは、受信した音声信号のレベルを判断部１２２に伝える。判断部１２２は、音声検出部１２４ｂから受け取ったレベルにより、モニタモードにするか、混合モードにするかを判断し、その結果を表示制御部１２１に通知する。

判断部１２２は、予め定めた音量レベルの閾値と、会話終了判定時間とを記憶している。判断部１２２は、モニタモードのときに、マイクロフォン４２０が集音した音量のレベルをこの閾値と比較する。音量レベルが閾値以上になったときは、当該マイクロフォンが設置された後部座席の同乗者から発話があったと判断して、モニタモードを混合モードに変更する。この場合の混合モードは、図３に示す下側光源部１１２ｃまたは上側光源部１１２ａを消灯することで後方を確認する混合モードである。

また、判断部１２２は、モニタモードのときに、マイクロフォン４２０ａまたは４２０ｂが集音した音量のレベルを閾値と比較し、音量レベルが閾値以上となった側の後部座席の同乗者から発話があったと判断して、モニタモードを混合モードに変更する。この場合の混合モードは、図４に示す左側光源部１１２ｄまたは右側光源部１１２ｆのうち、同乗者が存在する側を消灯することで後方を確認する混合モードである。また混合モードのときに、後部座席付近で集音した音量レベルが左右ともに閾値を下回った場合は、その下回った状態の継続時間を計測する。この継続時間が会話終了判定時間を越えた場合、後部座席の同乗者との会話が終了したと判断して、混合モードをモニタモードに戻す。

他の態様として、音声検出部１２４ｂは、マイクロフォン４２０が集音した信号の音声認識処理を行い、発話成分が含まれている音声を検出する。音声認識処理は、既存の音声認識処理を用いることができる。音声認識処理の具体例としては、マイクロフォン４２０が集音した信号から音響モデルに基づいた音素を抽出し、言語モデルに基づき発話であると判断する。

判断部１２２は、音声検出部１２４ｂが発話成分を検出したことに基づき、後部座席からの発話音声が有ると判断する。この場合においても、判断部１２２は、予め定めた音量レベルの閾値を記憶し、閾値以上の音量による発話である場合に、後部座席からの発話音声が有ると判断してもよい。

図１３は、第２の実施形態に係る車両用表示装置１００の他の処理手順を示すフローチャートである。表示制御部１２１は、第１の実施形態と同様、初期状態として、リヤビューモニタ１１０の表示をモニタモードに設定する（Ｓ１０１）。音声検出部１２４ｂが後部座席付近から一定の音量レベルの音声信号を検出しないときは（Ｓ２０２のＮｏ）、表示制御部１２１は、モニタモードでの表示を継続する。一方、音声検出部１２４ｂが後部座席付近からの音声信号を検出した場合（Ｓ２０２のＹｅｓ）、表示制御部１２１は、後部座席を映す混合モードに設定する（Ｓ１１１）。

混合モード中に前述の会話終了判定の手順を用いて後部座席の同乗者との会話の終了が判定されると（Ｓ２０３のＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示をモニタモードに戻す（Ｓ１０３）。

図１４は、第２の実施形態に係る車両用表示装置１００の他の処理手順を示すフローチャートである。表示制御部１２１は、第１の実施形態と同様、初期状態として、リヤビューモニタ１１０の表示をモニタモードに設定する（Ｓ１０１）。音声検出部１２４ｂが左右いずれの後部座席付近からも一定の音量レベルの音声信号を検出しないときは（Ｓ２０２のＮｏ）、表示制御部１２１は、モニタモードでの表示を継続する。一方、音声検出部１２４ｂが後部座席付近からの音声信号を検出した場合（Ｓ２０２のＹｅｓ）、表示制御部１２１は、音声が左右どちらから発せられたかを判断した上で（Ｓ２１２ａ）、音声を発した側の後部座席を映す混合モードに設定する（Ｓ１１１ａ，Ｓ１１１ｂ）。

混合モード中に前述の会話終了判定の手順を用いて後部座席左右いずれかの同乗者との会話の終了が判定されると（Ｓ２０３ａ、Ｓ２０３ｂ）、表示制御部１２１は、リヤビューモニタ１１０の表示をモニタモードに戻す（Ｓ１０３）。

簡易的には、モニタモードに設定する条件を「同乗者の有無」のみとし、同乗者が左右どちらにいるかは考慮しないという変形技術も可能である。この場合、後部座席に設置するマイクロフォンは一つのみでもよい。音声検出部１２４ｂは、左右のマイクロフォン４２０ａ、４２０ｂのいずれかから同乗者が発話したことを示す信号を受信すると、同乗者の発話を示す信号のみを判断部１２２に通知する。混合モードでリヤビューモニタ１１０の左右どちら側をミラーとして機能させるかは予め決めておき、表示制御部１２１は、図６または図７に示すように、当該部分のバックライトを消灯する。すなわち、この変形技術では、混合モードでミラーとなる部分は固定的であり、ここに左右両方の後部座席が映るよう広い画角を設定しておく。

この変形技術も、第１の実施形態の変形技術と同じく、混合モードでミラー表示する部分は、リヤビューモニタの左右に限らず、上下としてもよい。

この変形技術は、マイクロフォンを二つ必要としないためコスト的に有利である。さらに、処理手順が簡便であり、実施も容易である。また、同乗者が左右両方に存在する場合、運転者がそれらの人たちを同時に見ることができる利点がある。

表示制御部１２１は、音声検出部１２４ｂが後部座席からの音声信号を検出した場合（Ｓ２０２のＹｅｓ）、所定時間音声信号または発話が継続したことを判断してから混合モードに移行してもよい。例えば、１０秒間以上、音声信号また発話が継続した場合である。

以上のように、この実施形態は、同乗者が発した音声を用いて混合モードの設定および終了判断を行う。この実施形態は、後部座席の同乗者と会話するときにのみ混合モードを使いたい場合などに特に有効である。

（第３の実施形態）
図１５は、第３の実施形態に係る車両用表示装置１００の機能ブロック図である。車両用表示装置１００のリヤビューモニタ制御部１２０は、第１の実施形態のものに加え、混合モード開始／終了命令取得部１２５を備える。車両の運転席付近には、スイッチなどの操作インタフェース５００が設置されている。それ以外は第１の実施形態と同じである。

操作インタフェース５００は、運転者が混合モード開始または終了を命令する操作を受け付ける。操作インタフェース５００は、運転者の操作がされると、その操作による命令を混合モード開始／終了命令取得部１２５に送信する。

混合モード開始／終了命令取得部１２５は、運転者の命令を操作インタフェース５００から取得すると、それを混合モード開始／終了信号として判断部１２２に通知する。

判断部１２２は、モニタモードのときに、後部座席に同乗者があり、かつ、混合モード開始信号を受け取った場合、モードを混合モードに変える。すなわち判断部１２２は、モニタモードのとき、混合モード開始信号を受け取っても同乗者がない場合や、同乗者がいても混合モード開始信号を受け取らない場合は、モニタモードを継続する。また、判断部１２２は、混合モードのときに混合モード終了信号を受け取ると、表示をモニタモードに変える。

図１６は、第３の実施形態に係る車両用表示装置１００の処理手順を示すフローチャートである。Ｓ２０１までのフローは第１の実施形態と同じであり、説明を省略する。後部座席に同乗者が存在することが分かると（Ｓ２０１のＹｅｓ）、表示制御部１２１は、ユーザからの開始操作を待つ状態になる。このときはまだモニタモードである。混合モード開始信号を受信すると（Ｓ２２１のＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示を後部座席を映す混合モードに設定する（Ｓ１１１）。

混合モード中は、混合モード開始／終了命令取得部１２５から混合モード終了信号を受信しない限り、表示制御部１２１は混合モードを継続する（Ｓ２２２のＮｏ）。混合モード終了信号を受信すると（Ｓ２２２のＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示をモニタモードに戻す（Ｓ１０３）。

図１７は、第３の実施形態に係る車両用表示装置１００の他の処理手順を示すフローチャートである。Ｓ２１１ａまでのフローは第１の実施形態と同じであり、説明を省略する。後部座席に同乗者がいて（Ｓ２０１のＹｅｓ）、それが左右どちらにいるかが分かると（Ｓ２１１ａ）、表示制御部１２１は、ユーザからの開始操作を待つ状態になる。このときはまだモニタモードである。混合モード開始信号を受信すると（Ｓ２２１ａのＹｅｓ、Ｓ２２１ｂのＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示を同乗者が存在する側の後部座席を映す混合モードに設定する（Ｓ１１１ａ，Ｓ１１１ｂ）。

混合モード中は、混合モード開始／終了命令取得部１２５から混合モード終了信号を受信しない限り、表示制御部１２１は混合モードを継続する（Ｓ２２２ａのＮｏ、Ｓ２２２ｂのＮｏ）。混合モード終了信号を受信すると（Ｓ２２２ａのＹｅｓ、Ｓ２２２ｂのＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示をモニタモードに戻す（Ｓ１０３）。

簡易的には、モニタモードに設定する条件を「同乗者の有無」のみとし、同乗者が左右どちらにいるかは考慮しないという変形技術も可能である。この場合、同乗者情報取得部１２４ａは、左右の着座センサ４１０ａ、４１０ｂのいずれかから同乗者がいることを示す信号を受信すると、同乗者の存在を示す信号のみを判断部１２２に通知する。以下、構成や作用効果は先の実施形態の変形技術と同じである。

この実施形態では、運転者は、後部座席に同乗者が存在するときであっても、モニタモードまたは混合モードのどちらも自由に選択することができる。特に、後部座席に同乗者が存在するときであっても、モニタモードを優先させたい場合などに有効である。

（第４の実施形態）
図１８は、第４の実施形態に係る車両用表示装置１００の機能ブロック図である。車両用表示装置１００のリヤビューモニタ制御部１２０は、第１の実施形態のものに加え、走行速度情報取得部１２６を備える。車両には、ＣＡＮ（ＣｏｎｔｒｏｌｌｅｒＡｒｅａＮｅｔｗｏｒｋ）やナビゲーションシステムなど、車両の走行速度をモニタする、走行速度情報追跡部６００が配備されている。それ以外は第１の実施形態と同じである。

走行速度情報取得部１２６は、走行速度情報追跡部６００から走行速度情報を取得し、その情報を判断部１２２に通知する。判断部１２２は、モニタモードのときに、後部座席に同乗者がいて、かつ、走行速度が所定の速度未満であれば、モニタモードを混合モードに変える。一方、混合モードのときに走行速度が所定の速度以上になると、モードをモニタモードへ戻す。判断部１２２は、この所定の速度として、予め定めた判定値を記憶している。予め定めた判定値の例としては、３０ｋｍ／ｈなどである。

図１９は、第４の実施形態に係る車両用表示装置１００の処理手順を示すフローチャートである。Ｓ２０１までのフローは第１の実施形態と同じであり、説明を省略する。後部座席に同乗者が存在していることが分かると（Ｓ２０１）、判断部１２２は、走行速度情報取得部１２６からの信号に基づいて、現在の走行速度が判定値未満であるか否かを判断する（Ｓ２３１）。

現在の走行速度が判定値以上であれば（Ｓ２３１のＮｏ）、モニタモードを継続する。走行速度が判定値未満になると（Ｓ２３１のＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示を後部座席を映す混合モードに設定する（Ｓ１１１）。混合モード中に、走行速度が判定値未満である間は（Ｓ２３２のＮｏ）、表示制御部１２１は混合モードを継続する。走行速度が判定値以上になると（Ｓ２３２ａのＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示をモニタモードに戻す（Ｓ１０３）。

図２０は、第４の実施形態に係る車両用表示装置１００の他の処理手順を示すフローチャートである。Ｓ２１１ａまでのフローは第１の実施形態と同じであり、説明を省略する。後部座席に同乗者が存在していて（Ｓ２０１のＹｅｓ）、それが左右どちらにいるかが分かると（Ｓ２１１ａ）、判断部１２２は、走行速度情報取得部１２６からの信号に基づいて、現在の走行速度が判定値未満であるか否かを判断する（Ｓ２３１ａ、Ｓ２３１ｂ）。

現在の走行速度が判定値以上であれば（Ｓ２３１ａのＮｏ、Ｓ２３１ｂのＮｏ）、モニタモードを継続する。走行速度が判定値未満になると（Ｓ２３１ａのＹｅｓ、Ｓ２３１ｂのＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示を同乗者がいる側の後部座席を映す混合モードに設定する（Ｓ１１１ａ，Ｓ１１１ｂ）。混合モード中に、走行速度が判定値未満である間は（Ｓ２３２ａのＮｏ、Ｓ２３２ｂのＮｏ）、表示制御部１２１は混合モードを継続する。走行速度が判定値以上になると（Ｓ２３２ａのＹｅｓ、Ｓ２３２ｂのＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示をモニタモードに戻す（Ｓ１０３）。

簡易的には、モニタモードに設定する条件を「同乗者の有無」のみとし、同乗者が左右どちらにいるかは考慮しないという変形技術も可能である。このための構成や作用効果は先の実施形態の変形技術と同じである。

この実施形態では、高速走行中は混合モードにならず、運転者はモニタモードを使って広く後方を確認できるため、特に安全性を確保することができる。

（第５の実施形態）
図２１は、第５の実施形態に係る車両用表示装置１００の機能ブロック図である。車両用表示装置１００のリヤビューモニタ制御部１２０は、第１の実施形態に加え、モーション情報取得部１２７を備える。車両の運転席付近には、運転者のモーションとその方向を検知する、モーションセンサ７００が設置されている。それ以外は第１の実施形態と同じである。

モーション情報取得部１２７は、モーションセンサ７００から、運転者のジェスチャに基づくモーション情報を取得し、それをモーション信号として表示制御部１２１に通知する。

モーションセンサ７００は、例えば複数のフォトダイオードの組み合わせにより構成され、運転者のジェスチャによるモーションを検知する。すなわち左側フォトダイオードＬと右側フォトダイオードＲを左右に並べて構成したモーションセンサ７００において、それぞれの出力値ＯＬとＯＲを常時観察する。

フォトダイオードの前を物体が横切ると、フォトダイオードからの出力値が低下する。モーションセンサ７００の前で、物体が左右に動かなければ、ＯＬ−ＯＲの値はほぼゼロである。物体がフォトダイオードの前を左から右に動いた場合、ＯＬ−ＯＲの値がゼロ、負、正、ゼロの順に変化する。したがって、運転者が手を右から左、または左から右に動かしたとき、その方向を検知することができる。

表示制御部１２１は、モニタモードのとき、後部座席に同乗者がいて、かつ、モーション信号を受信すると、同乗者がいる側の後部座席をモーションの方向の側の画面に映す混合モードに設定する。具体的には、表示制御部１２１は、左側に同乗者がいて、右から左の方向のモーション信号を受信すると、左後部座席をリヤビューモニタ１１０の左側に映す混合モードを設定する。表示制御部は、左側に同乗者がいて、左から右の方向のモーション信号を受信すると、右後部座席をリヤビューモニタ１１０の右側に映す混合モードを設定する。右側に同乗者がいる場合も同様である。

表示制御部１２１は、混合モードのとき、後部座席が映っている側と反対側の方向のモーション信号を受信すると、モードをモニタモードに戻す。具体的には、表示制御部１２１は、左右いずれかの後部座席がリヤビューモニタ１１０の左側に映っているとき、左から右の方向のモーション信号を受信すると、モードをモニタモードに戻す。逆に、右から左の方向のモーション信号を受信した場合は、表示制御部１２１は、混合モードを継続させる。後部座席が右側に映っている場合も同様である。

図２２は、第５の実施形態に係る車両用表示装置１００の処理手順を示すフローチャートである。Ｓ２０１までのフローは第１の実施形態と同じであり、説明を省略する。

後部座席に同乗者が存在することが分かると（Ｓ２０１のＹｅｓ）、表示制御部１２１は、モニタモードを継続しつつ、運転者のジェスチャを待つ状態になる。モーション情報取得部１２７がモーション信号を受信すると（Ｓ２４１のＹｅｓ）、表示制御部１２１は、モーションの方向が下から上か、上から下かを判断する（Ｓ２４２ａ、Ｓ２４２ｂ）。

表示制御部１２１は、モーションの方向と反対側の画面に後部座席を映す混合モードに設定する。すなわち、モーションが下から上であれば（Ｓ２４２ａのＹｅｓ）、後部座席を下方に映す混合モード（Ｓ１２１ａ）に設定し、モーションが上から下であれば（Ｓ２４２ｂのＹｅｓ）、後部座席を上方に映す混合モード（Ｓ１２１ｂ）に設定する。なおモーションの方向が下から上、上から下のいずれでもない場合は（Ｓ２４２ｂのＮｏ）、モニタモードを継続する。

混合モード中は、モーション情報取得部１２７からモーション信号を受信しない限り、表示制御部１２１は混合モードを継続する（Ｓ２４３ａのＮｏ、Ｓ２４３ｂのＮｏ）。モーション信号を受信すると（Ｓ２４３ａのＹｅｓ、Ｓ２４３ｂのＹｅｓ）、表示制御部１２１は、モーションの方向が上から下か、下から上かを判断する（Ｓ２４５ａ、Ｓ２４５ｂ）。モーションの方向が、後部座席が映っている側と同じでなければ、そのまま混合モードを継続する（Ｓ２４５ａのＮｏ、Ｓ２４５ｂのＮｏ）。しかし、同じであれば（Ｓ２４５ａのＹｅｓ、Ｓ２４５ｂのＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示をモニタモードに戻す（Ｓ１０３）。

図２３は、第５の実施形態に係る車両用表示装置１００の他の処理手順を示すフローチャートである。Ｓ１０１までのフローは第１の実施形態と同じであり、説明を省略する。

表示制御部１２１は、モニタモード中は、運転者のジェスチャを待つ状態にある。モーション情報取得部１２７がモーション信号を受信すると（Ｓ２４１のＹｅｓ）、表示制御部１２１は、モーションの方向が右から左か、左から右かを判断する（Ｓ２４６ａ、Ｓ２４６ｂ）。モーションの方向が右から左、左から右のいずれでもない場合は（Ｓ２４６ｂのＮｏ）、モニタモードを継続する。

モーションの方向が右から左、左から右のいずれかである場合（Ｓ２４６ａのＹｅｓ、Ｓ２４６ｂのＹｅｓ）表示制御部１２１は、モーションの方向の先の側の後部座席に同乗者が存在するかを判断する（Ｓ２４７ａ、Ｓ２４７ｂ）。モーションの方向の先の側の後部座席に同乗者がいる場合（Ｓ２４７ａのＹｅｓ、Ｓ２４７ｂのＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示をそちら側の後部座席を映す混合モードに設定する。すなわち、右から左の方向のモーションを検出し（Ｓ２４６ａのＹｅｓ）、同乗者が左後部座席にいた場合（Ｓ２４７ａのＹｅｓ）、左後部座席を映す混合モード（Ｓ１２１ｃ）に設定する。逆に、左から右の方向のモーションを検出し（Ｓ２４６ｂのＹｅｓ）、同乗者が右後部座席にいた場合（Ｓ２４７ｂのＹｅｓ）、右後部座席を映す混合モード（Ｓ１２１ｄ）に設定する。上記のいずれにも該当しない場合（Ｓ２４７ａのＮｏ、Ｓ２４７ｂのＮｏ）、モニタモードを継続する。

混合モード中は、モーション情報取得部１２７からモーション信号を受信しない限り（Ｓ２４３ａのＮｏ、Ｓ２４３ｂのＮｏ）、表示制御部１２１は混合モードを継続する。モーション信号を受信すると（Ｓ２４３ａのＹｅｓ、Ｓ２４３ｂのＹｅｓ）、表示制御部１２１は、モーションの方向が右から左か、左から右かを判断する（Ｓ２４８ａ、Ｓ２４８ｂ）。モーションの方向が、後部座席が映っている側と同じであれば（Ｓ２４８ａのＮｏ、Ｓ２４８ｂのＮｏ）、そのまま混合モードを継続する。しかし、逆であれば（Ｓ２４８ａのＹｅｓ、Ｓ２４８ｂのＹｅｓ）、表示制御部１２１は、リヤビューモニタ１１０の表示をモニタモードに戻す（Ｓ１０３）。

この構成により、混合モードでミラーとして機能させる側を好みや状況に応じて自由に設定できる。また、スワイプ操作のような直感的な感覚でミラー表示位置を設定したり、混合モードを終了したりすることができる。本実施形態におけるモーション検出方向と混合モードにおけるミラーとして機能させる方向は、モーション検出方向をミラーとして機能させてもよく、モーション検出方向にモニタとしての表示が退避してモーション検出方向の反対方向をミラーとして機能させてもよい。さらには、ミラー面１１７に操作インターフェース５００としてのタッチパネルが配置されており、タッチパネルへの同様の操作に対応させて、混合モードの制御を行ってもよい。

以上、本発明を実施の形態をもとに説明した。この実施の形態は例示であり、各構成要素や処理プロセスの組合せには種々の変形例を適用できること、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。

たとえば、各実施形態において、後部座席に同乗者がいるときは、定期的にモニタモードと混合モードを切り替えてもよい。このために、表示制御部１２１の内部にインターバルタイマー（図示せず）を設け、モード切り替えのタイミングを計測する構成とすればよい。本変形例によれば、運転者は、定期的に後部座席の状況を確認できる。

各実施形態において、混合モードへの切り替えとともに、リヤビューモニタ１１０が表示する映像をシフトまたは縮小してもよい。混合モードでは、表示される映像の一部が欠ける。例えば、リヤビューモニタ１１０の左側部分をミラーとして機能させた場合、モニタの映像の左部分が欠ける。ここで表示映像を右にシフトすることにより表示映像の左右のバランスの悪化を改善することができる。このために、表示制御部１２１の中に映像変換部（図示せず）を設け、ここで映像のシフトないし縮小処理をすればよい。また映像を縮小表示することにより、表示範囲を拡大してもよい。本変形例によれば、混合モード時の映像表示範囲の縮小を改善できる。

１１０リヤビューモニタ、１２０リヤビューモニタ制御部、１２１表示制御部、１２３撮影制御部、１２４ａ同乗者情報取得部、１２４ｂ音声検出部、１２５混合モード開始／終了命令取得部、１２６走行速度情報取得部、１２７モーション情報取得部

Claims

車両の後方を撮影した映像を表示する装置であって、
ミラーとして機能する構造を有する表示面をもつ表示部と、
前記車両における後部座席の左右それぞれについて同乗者の有無および前記後部座席の同乗者の発話の有無を判断する判断部と、
前記後部座席の左右のいずれかに同乗者が存在し、前記同乗者が発話していると判断されたときは、前記表示部に表示する映像の表示における左右方向いずれかの一部分を非表示にする表示制御部と、
を備え、前記表示面のうち映像が表示されている部分は前記車両の後方を撮影した映像を表示し、前記表示面のうち映像が非表示にされた部分が、前記後部座席の左右いずれかの同乗者を含む後方を見るためのミラーとして機能することを特徴とする車両用表示装置。
前記表示部は、液晶パネルと、前記液晶パネルの左右方向に分割して点灯および消灯が可能なバックライトとを有し、前記表示制御部は前記バックライトの左右方向の一部を消灯することにより、映像の表示の一部分を非表示にすることを特徴とする請求項１に記載の車両用表示装置。
前記判断部は、前記後部座席の左右にそれぞれ設置された着座センサからの情報を利用して同乗者の有無を判断することを特徴とする請求項１または２に記載の車両用表示装置。
前記判断部は、前記後部座席の左右にそれぞれ設置されたマイクロフォンからの音声情報を利用して同乗者の有無および発話の有無を判断することを特徴とする請求項１または２に記載の車両用表示装置。
前記車両の走行速度情報を取得する取得部をさらに備え、
前記表示制御部は、前記判断部の判断に加えて、走行速度が所定速度未満であるときは映像の表示の一部分を非表示にすることを特徴とする請求項１から４のいずれかに記載の車両用表示装置。
車両の後方を撮影した映像を表示する方法であって、
前記車両における後部座席の左右それぞれについて同乗者の有無および前記後部座席の同乗者の発話の有無を判断し、
前記後部座席の左右いずれかに同乗者が存在し、前記同乗者が発話していると判断されたときは、ミラーとして機能する構造を有する表示面をもつ表示部に表示する映像の表示における左右方向いずれかの一部分を非表示とすることで、前記表示面のうち映像が表示されている部分に前記車両の後方を撮影した映像を表示させ、前記表示面のうち映像が非表示にされた部分を前記後部座席の左右いずれかの同乗者を含む後方を見るためのミラーとして機能させる、表示方法。