JP2020199969A - 表示制御装置、表示システム、および、表示制御方法 - Google Patents

Abstract

【課題】表示装置によって視界が遮られる場合でも、適切に視界を確保することができる技術を提供する。【解決手段】表示制御装置は、移動体内に配置される表示装置を制御する表示制御装置であって、前記移動体の外の状況を撮影した撮影画像を取得する画像取得部と、前記表示装置により遮られる視界を補う補足画像を前記撮影画像に基づき生成する画像生成部と、前記補足画像を前記表示装置の表示画面に表示させる表示処理部と、を備える。【選択図】図１

Description

本発明は、表示制御装置、表示システム、および、表示制御方法に関する。

特許文献１には、所定のディスプレイに投影される画像データを制御する表示制御装置が開示される。表示制御装置は、情報取得部と、判定部と、制御部とを有する。情報取得部は、第１のタイミングで第１の所定の情報を取得し、第１のタイミングより後の第２のタイミングで第２の所定の情報を取得する。判定部は、第１の所定の情報と第２の所定の情報との間に所定の変化があるか否かを判定する。制御部は、所定の変化がある場合、ディスプレイにおいて画像データに含まれる表示情報の投影が制限される領域である制限領域の位置、サイズ、または形状のうち少なくとも１つを、第１の所定の情報に対応付けられたものから第２の所定の情報に対応付けられたものへ変更するように画像データを制御する。

特許文献１の表示制御装置によれば、所定の状況に応じて、情報を表示できる領域を確保しつつ、ユーザの前方視界が遮られることを防止することができる。

特開２０１５−９２２３７号公報

車両等の移動体の室内には、光を透過しないタイプの表示装置が配置されることがある。このような表示装置を大型化しようとした場合、例えば、表示装置の一部が車両の窓と重なって、運転者の視界を狭めることが懸念される。この場合には、特許文献１のような制限領域の態様を変更するといった技術では対応できないために、運転者の視界を確保するための他の技術が必要となる。

本発明は、上記の課題に鑑み、表示装置によって視界が遮られる場合でも、適切に視界を確保することができる技術を提供することを目的とする。

上記目的を達成するために本発明の表示制御装置は、移動体内に配置される表示装置を制御する表示制御装置であって、前記移動体の外の状況を撮影した撮影画像を取得する画像取得部と、前記表示装置により遮られる視界を補う補足画像を前記撮影画像に基づき生成する画像生成部と、前記補足画像を前記表示装置の表示画面に表示させる表示処理部と、を備える構成（第１の構成）になっている。

また、上記第１の構成の表示制御装置において、前記表示処理部は、前記表示画面における表示範囲を切り替えて前記補足画像を表示させる構成（第２の構成）であってよい。

また、上記第２の構成の表示制御装置において、切替え可能な前記表示範囲の設定には、前記表示画面に前記補足画像の表示が行われない表示範囲無しが含まれる構成（第３の構成）であってよい。

また、上記第２又は第３の構成の表示制御装置は、前記表示範囲を設定する設定部を更に備え、前記表示処理部は、前記設定部の設定結果に応じて前記表示範囲を切り替えて前記補足画像を表示させる構成（第４の構成）であってよい。

また、上記第４の構成の表示制御装置において、前記設定部は、前記移動体の運転主体を示す運転モードと、前記移動体の周辺状況と、前記移動体を運転する者の状況とのうちの少なくともいずれか一つに基づき、前記表示範囲の設定を行う構成（第５の構成）であってよい。

また、上記第１から第５のいずれかの構成の表示制御装置において、前記表示処理部は、所定の条件を満たす場合と満たさない場合とで、異なる画質の前記補足画像を前記表示画面に表示させる構成（第６の構成）であってよい。

また、上記目的を達成するための本発明の表示システムは、上記第１から第６のいずれかの構成の表示制御装置と、前記移動体に搭載され、前記撮影画像を撮影する撮影装置と、前記表示装置と、を備える構成（第７の構成）になっている

また、上記目的を達成するために本発明の表示制御方法は、移動体内に配置される表示装置を制御する表示制御方法であって、前記移動体の外の状況を撮影した撮影画像を取得する画像取得工程と、前記表示装置により遮られた視界を補う補足画像を前記撮影画像に基づき生成する画像生成工程と、前記補足画像を前記表示装置の表示画面に表示させる表示処理工程と、を備える構成（第８の構成）になっている。

本発明によれば、表示装置によって視界が遮られる場合でも、適切に視界を確保することができる。

表示システムの構成を示す図 車室内の表示装置の周辺を示す図 表示装置の表示画面に表示される補足画像の一例を示す図 表示制御装置の動作例を示すフローチャート 設定部による補足画像の表示範囲の設定処理を例示するフローチャート 補足画像の表示範囲が表示画面全体に設定された場合の表示例を示す図 補足画像の表示範囲が表示画面全体に設定された場合の別の表示例を示す図 補足画像の表示範囲がゼロに設定された場合の表示例を示す図 補足画像の表示範囲が表示画面の一部に設定された場合の表示例を示す図 運転モードが自動運転モードである場合の表示例を示す図 運転モードが自動運転モードである場合の表示例を示す図 表示処理部の表示処理の際に、補足画像の画質処理が行われる手順を示すフローチャート 表示装置の表示画面に表示される補足画像の他の例を示す図

以下、本発明の例示的な実施形態について、図面を参照しながら詳細に説明する。なお、以下では、本発明が車両に適用される場合を例に挙げて説明する。本発明が適用される車両は、詳細には自動車であってよい。ただし、本発明は、車両に限らず、人が乗ることができる移動体に広く適用可能である。

＜１．表示システム＞
図１は、本発明の実施形態に係る表示システム１００の構成を示す図である。図１に示すように、表示システム１００は、表示制御装置１と、表示装置２と、撮影装置３と、を備える。

表示制御装置１は、表示装置２を制御する。詳細には、表示制御装置１は、表示装置２の表示を制御する。表示制御装置１は、表示装置２と別個のものであってもよいが、表示装置２の一部として表示装置２内に組み込まれてもよい。また、表示制御装置１は、撮影装置３と有線又は無線で接続され、撮影装置３から情報を取得する。表示制御装置１の詳細については後述する。

表示装置２は、画像を表示する。表示装置２は、画像を表示する表示画面を有する。表示画面は、例えば液晶表示パネル、有機ＥＬパネル、プラズマ表示パネル等で構成されてよい。表示装置２は、車両（移動体）内に配置される。表示装置２の表示画面は、車室内に臨む。本実施形態において、表示装置２は、例えばＣＩＤ（Center Information Display）等の車載表示装置である。表示装置２は、例えばナビゲーション機能やオーディオ機能等を備えてよい。表示装置２は、例えば地図の表示、映像コンテンツの表示、各種の操作を行うためのメニュー表示等が可能な装置であってよい。

図２は、車室内の表示装置２の周辺を示す図である。本実施形態では、表示装置２は、窓４を有する車両内に配置される。窓４は、車両の外を見ることができるように設けられた開口部であり、当該開口部には、例えばガラスや樹脂等で構成される透明部材５が配置されている。本実施形態では、窓４は、車両の前方に設けられるフロントウィンドウである。透明部材５は、フロントガラスである。

本実施形態では、表示装置２はダッシュボード６に取り付けられる。表示装置２は大型であり、上辺２ａがフロントウィンドウ４の下辺４ａより高くなっている。表示装置２は、窓４からの視界の一部を遮る。ここで言う視界は、車両の乗員の視界であり、例えば車両を運転する運転者等の視界である。本実施形態では、表示装置２は、少なくとも運転者の視界の一部を遮る。

撮影装置３は、車両（移動体）に搭載され、車両の外の状況を撮影する。本実施形態では、撮影装置３は車両の前方を撮影するカメラである。本実施形態では、撮影装置３は車両の室外に配置される。撮影装置３は、車両の前端部（例えばフロントバンパ等）に配置される。ただし、撮影装置３は、車両の室内に配置されてもよい。撮影装置３は、撮影した画像（撮影画像）を表示制御装置１に出力する。

本構成の表示システム１００によれば、撮影装置３で撮影した撮影画像を用いて表示装置２によって遮られた視界を補うことができる。すなわち、本実施形態によれば、視界を十分に確保して移動体の運転の安全性を確保することができる。

その他、本実施形態においては、表示制御装置１には、車両情報、環境情報、および、運転者情報が入力される。車両情報は、表示装置２が搭載される車両に関する情報である。車両情報には、例えば車両の速度や運転モード等が含まれてよい。運転モードは、車両の運転主体を示し、手動運転モードと自動運転モードとが含まれる。手動運転モードは、人が運転するモードであり、自動運転モードは、車両に備えられる自動運転装置が運転を行うモードである。車両情報は、例えばＣＡＮ（Controller Area Network）などの車載ネットワークを介して表示制御装置１に入力されてよい。

環境情報は、車両の周辺状況を知らせる情報である。環境情報は、例えば、車両に搭載されるカメラ、レーダ、超音波センサ等から取得されてよい。運転者情報は、車両を運転する運転者に関する情報である。運転者情報には、例えば、運転者の心拍や発汗量等を測定するセンサから取得される情報や、運転者の姿勢や行動を監視するカメラから取得される情報等であってよい。心拍等の生体情報を得るためのセンサは例えばハンドル等に配置されてよい。

＜２．表示制御装置＞
図１に示すように、表示制御装置１は、制御部１１と記憶部１２とを備える。制御部１１は、表示制御装置１の全体を制御する。制御部１１は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、及び、ＲＯＭ（Read Only Memory）などを備えるコンピュータで構成される。記憶部１２は、制御部１１が動作するために必要なコンピュータプログラムおよびデータを不揮発的に記憶する。記憶部１２としては、例えば、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）、フラッシュメモリ等を用いることができる。

図１に示す画像取得部１１１、画像生成部１１２、表示処理部１１３、および、設定部１１４は、記憶部１２に記憶されるコンピュータプログラムの実行により実現される制御部１１の機能である。換言すると、表示制御装置１は、画像取得部１１１と、画像生成部１１２と、表示処理部１１３と、設定部１１４とを備える。

なお、制御部１１が備える各機能部１１１〜１１４の少なくともいずれか１つは、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等のハードウェアで構成されてもよい。また、制御部１１が備える各機能部１１１〜１１４は、概念的な構成要素である。１つの構成要素が実行する機能を複数の構成要素に分散させたり、複数の構成要素が有する機能を１つの構成要素に統合させたりしてよい。

画像取得部１１１は、車両（移動体）の外の状況を撮影した撮影画像を取得する。詳細には、画像取得部１１１は、車両の前方を撮影する撮影装置３で撮影した撮影画像を取得する。画像取得部１１１は、撮影装置３からアナログ又はデジタルの撮影画像を所定の周期で時間的に連続して取得する。そして、取得した時間的に連続した撮影画像がアナログの場合には、画像取得部１１１は、そのアナログの撮影画像をデジタルの撮影画像に変換（Ａ／Ｄ変換）する。

画像生成部１１２は、表示装置２により遮られる視界を補う補足画像を、画像取得部１１１で取得された撮影画像に基づき生成する。画像生成部１１２は、表示装置２に表示させることを想定して補足画像を生成する。すなわち、補足画像は、表示装置２による表示用の画像である。補足画像は、表示装置２に遮られる視界の少なくとも一部を補うことができる画像であればよい。補足画像は、フロントウィンドウ４越しに見える風景の画像（風景画像）を含む。補足画像は、表示装置２に遮られた視界を補うための画像以外の画像を含んでもよい。

本実施形態では、画像生成部１１２は、運転者のフロントウィンドウ４越しの視界のうち、表示装置２に遮られる領域を補うための画像を含む補足画像を、撮影装置３で撮影された撮影画像に基づき生成する。画像生成部１１２は、運転者の視界が表示装置２に遮られる領域について、表示装置２が無かったとした場合にフロントウィンドウ４越しに見える風景の画像を撮影装置３で撮影された撮影画像から取得して、補足画像を生成する。画像生成部１１２は、表示装置２が無かったとした場合にフロントウィンドウ４越しに見える風景が表示装置２の表示画面に重なるように、補足画像を生成する。

ところで、運転者の視界が表示装置２に遮られる領域は、運転者の目の位置により変化する。このために、補足画像を生成するに際しては、運転者の運転時の目の位置を設定する必要がある。運転者の運転時の目の位置は、例えば車両の室内に設置されるカメラ等のセンサから得られる情報によって自動的に設定されてよい。また、運転者の運転時の目の位置は、運転者の入力操作により手動で設定されてもよい。例えば、運転者の入力操作に対応して運転者の目の位置を変えた場合の補足画像が表示装置２の表示画面に切り替えて表示される構成とし、運転者が切り替えて表示される補足画像を見ながら運転時の目の位置の好ましい設定を決定してもよい。

本実施形態では、サイズが既知の表示装置２が車両の所定位置に固定配置されている。このために、運転者の運転時の目の位置が設定されると、運転者の視界が表示装置２によって遮られる領域が決定される。また、撮影装置３も予め決められた位置に固定配置されている。このために、運転者の視界が表示装置２に遮られる領域について、表示装置２が無かったとした場合にフロントウィンドウ４越しに見える風景が撮影装置３における撮影画像に映る位置を特定することができる。したがって、画像生成部１１２は、運転者の視界が表示装置２に遮られる領域について、表示装置２が無かったとした場合にフロントウィンドウ４越しに見える風景の画像を撮影装置３で撮影された撮影画像から取得して、補足画像を生成することができる。

なお、画像生成部１１２は、撮影装置３で撮影された撮影画像の画質を調整して、画質調整された撮影画像に基づいて補足画像を生成してもよい。例えば、画像生成部１１２は、車両の外部に設けられる照度センサによる照度の測定結果に応じて、撮影画像の色味やコントラストを肉眼で見るフロントウィンドウ４越しの風景に近い値に補正し、当該補正した撮影画像に基づいて補足画像の生成を行ってよい。画質の調整処理は、画像生成部１１２で行われずに、例えば画像取得部１１１で行われてもよい。

表示処理部１１３は、補足画像を表示装置２の表示画面に表示させる。表示処理部１１３は、表示装置２を制御して画像生成部１１２で生成した補足画像を表示させる処理を行う。図３は、本発明の実施形態に係る表示処理部１１３の制御処理の下、表示装置２の表示画面に表示される補足画像２００の一例を示す図である。図３においては、補足画像２００について理解しやすいように、フロントウィンドウ４越しに見える実風景３００も一緒に示している。

図３に示すように、表示画面に表示される補足画像２００は、フロントウィンドウ４越しに見える実風景３００にほぼ繋がって見える。本実施形態によれば、表示装置２によって視界が遮られているにもかかわらず、それを補う画像（風景画像）が表示装置２の表示画面に表示される。このために、本実施形態によれば、視界を遮る表示装置２が存在するにもかかわらず、適切に視界を確保することができる。

なお、図３に示す例では、補足画像２００は、表示装置２により遮られた領域に対応する画像以外の画像を含む。詳細には、補足画像２００は、ボンネット等の車両のボディの死角になって本来は見えない部分の画像も含む。これにより、運転者の視界を広げることができる。補足画像２００は、表示装置２により遮られた領域に対応する画像のみで構成されてもよい。この場合には、補足画像２００は、表示装置２の表示画面の一部にのみ表示されてよい。

本実施形態では、表示処理部１１３は、表示装置２の表示画面における表示範囲を切り替えて補足画像２００を表示させる。これによれば、例えば車両周辺の状況や、運転者の状況等を加味して、補足画像２００の表示範囲を変えることができ、表示画面を効率良く使用することができる。

なお、本実施形態では、切替え可能な表示範囲の設定には、表示装置２の表示画面に補足画像２００の表示が行われない表示範囲無し（表示範囲ゼロ）が含まれる。これによれば、必要に応じて補足画像以外の画像を表示画面の全体に表示することが可能であり、表示装置２の利用態様の幅が広がる。表示範囲の設定に関する詳細については後述する。

設定部１１４は、補足画像２００の表示画面における表示範囲を設定する。表示処理部１１３は、設定部１１４の設定結果に応じて表示範囲を切り替えて補足画像２００を表示させる。これによれば、例えば車両周辺の状況や、運転者の状況等に応じて自動的に補足画像２００の表示範囲を変更することができる。

設定部１１４は、車両（移動体）の運転主体を示す運転モードと、車両の周辺状況と、車両を運転する者の状況との少なくともいずれか一つに基づき、表示範囲の設定を行うことが好ましい。これによれば、表示装置２の表示画面に危険の有無に応じた適切な画像を表示させることができる。

なお、表示範囲を自動的に設定する設定部１１４は設けられなくてもよい。例えば、補足画像２００の表示範囲は切替え不能であってもよく、この場合には設定部１１４は不要である。また、補足画像２００の表示範囲は、運転者等の車両の乗員により手動で切り替えられてもよく、手動での切替えが可能な場合には設定部１１４は設けられなくてよい。設定部１１４によって自動的に表示範囲が切り替えられるモードと、手動によって表示範囲が切り替えられるモードとが選択可能に設けられてもよい。

次に、以上のように構成される表示制御装置１の動作例について説明する。図４は、本発明の実施形態に係る表示制御装置１の動作例を示すフローチャートである。表示制御装置１の動作は、例えば車両の電源（ＡＣＣ等）がオンされた場合、表示装置２の電源がオンされた場合、イグニッションがオンされた場合等に開始される。

なお、表示制御装置１は、図４に示す処理の開始前に補足画像２００の表示処理に必要となる初期設定を行ってよい。初期設定には、上述した運転者の運転時の目の位置の設定が含まれてよい。この場合、当該目の位置の設定は、自動的に行われてもよいし、表示制御装置１の要求に応じて運転者等が手動で設定してもよい。また、運転時の目の位置は、最初に設定されるのではなく、例えば、各補足画像の生成の前に毎回設定される構成であってもよい。

ステップＳ１では、画像取得部１１１が撮影装置３により撮影された撮影画像を取得する。本実施形態では、画像取得部１１１は、所定の周期で撮影画像を取得するが、これは例示にすぎない。画像取得部１１１は、必要に応じて撮影画像を撮影装置３から取得する構成であってもよい。画像取得部１１１による撮影画像の取得が完了すると、次のステップＳ２に処理が進められる。

ステップＳ２では、画像生成部１１２が画像取得部１１１で取得した撮影画像に基づき補足画像２００を生成する。本実施形態では、画像取得部１１１で撮影画像を取得するごとに補足画像２００を生成する。ただし、これは例示にすぎず、補足画像２００は、例えば、表示装置２の表示画面に補足画像を表示する必要がある場合にのみ生成される構成であってもよい。補足画像２００の生成が完了すると、次のステップＳ３に処理が進められる。

ステップＳ３では、設定部１１４が補足画像２００の表示範囲の設定を行う。設定部１１４は、例えば、補足画像２００の表示範囲を表示画面の全体に設定するか、表示範囲をゼロに設定するかのいずれかとする。表示範囲の設定の選択肢には、表示範囲を表示画面の一部に設定する構成が含まれてもよい。補足画像２００の表示範囲の設定処理例については後述する。設定部１１４による補足画像２００の表示範囲の設定処理が完了すると、次のステップＳ４に処理が進められる。

ステップＳ４では、表示処理部１１３が、補足画像２００の表示範囲の設定結果にしたがって、表示装置２の表示画面に補足画像２００を表示させる。設定部１１４によって表示範囲が表示画面全体に設定された場合、例えば図３に示すように、補足画像２００が表示画面の全体に表示される。設定部１１４によって表示範囲がゼロに設定された場合、表示処理部１１３は、表示画面に補足画像２００とは別の画像が表示させる処理を行うか、表示画面に画像を表示させない。表示処理部１１３による表示処理が完了すると、次のステップＳ５に処理が進められる。

ステップＳ５では、制御部１１は動作終了イベントが発生したか否かを確認する。動作終了イベントは、例えば表示装置２の電源オフ指令等により発生する。動作終了イベントが発生した場合（ステップＳ５でＹｅｓ）、表示制御装置１の動作が終了する。動作終了イベントが発生していない場合（ステップＳ５でＮｏ）、ステップＳ１の処理に戻る。

なお、ステップＳ５を実施する代わりに、表示制御装置１の動作終了イベントが発生しているか否かを表示制御装置１がフローチャートの動作中常時監視し、表示制御装置１の終了イベントが発生すれば直ちにフローチャートの動作を終了するようにしてもよい。

図５は、設定部１１４による補足画像２００の表示範囲の設定処理を例示するフローチャートである。ステップＳ３１では、設定部１１４は、車両の周辺に危険因子があるか否かを判断する。危険因子としては、例えば、道路上における障害物の存在、側溝の存在、他車両の接近、道幅の減少等が挙げられる。危険因子の発見には、例えば、車両に搭載されるカメラ、レーダ、超音波センサ等が利用される。設定部１１４は、危険因子があると判断した場合には（ステップＳ３１でＹｅｓ）、ステップＳ３２に処理を進める。設定部１１４は、危険因子がないと判断した場合には（ステップＳ３１でＮｏ）、ステップＳ３３に処理を進める。

ステップＳ３２では、設定部１１４は、補足画像２００の表示範囲を表示画面全体に設定する。危険因子が存在するために、運転者の視界を広く確保するためである。図６は、補足画像２００の表示範囲が表示画面全体に設定された場合の表示例を示す図である。図６に示す例では、道路上に障害物７があるために、設定部１１４で危険因子が存在すると判断され、補足画像２００の表示範囲が表示画面全体に設定されている。

図７は、補足画像２００の表示範囲が表示画面全体に設定された場合の別の表示例を示す図である。上述の図６に示す例では、道路上に障害物７が存在し、補足画像２００内に障害物７が映る。このような場合には、運転者に注意を喚起するために、障害物７を目立たせることが好ましい。図７に示す例では、表示処理部１１３による表示処理の際に障害物７を目立たせるための処理が施されている。詳細には、障害物７を枠８で囲って目立たせている。枠８の色は、例えば赤色等の目立つ色が好ましい。障害物７を目立たせることができればよいために、例えばマーキング処理や拡大処理等の枠８で囲む以外の処理が施されてもよい。

なお、運転者に注意を喚起する対象には、道路上の障害物７に限らず、運転に危険をもたらす危険因子が広く含まれてよい。危険因子には、例えば、路面に形成された穴や側溝等が含まれてよい。また、運転者に注意を喚起するための処理は、補足画像２００の表示範囲が表示画面の一部である場合に行われてもよい。

ステップＳ３３では、設定部１１４は、運転者に余裕があるか否かを判断する。運転者に余裕があるか否かの判断には、例えば、心拍数や発汗量等をセンサにて測定するバイタルセンシングが利用されてよい。また、運転者に余裕があるか否かは、運転者を撮影するカメラの映像に基づいて判断されてもよい。設定部１１４は、運転者に余裕がないと判断した場合には（ステップＳ３３でＮｏ）、上述のステップＳ３２に処理を進める。設定部１１４は、運転者に余裕があると判断した場合には（ステップＳ３３でＹｅｓ）、ステップＳ３４に処理を進める。なお、ステップＳ３３の処理とステップＳ３１の処理とは、順番が入れ替られてもよい。

ステップＳ３４では、設定部１１４は、補足画像２００の表示範囲をゼロに設定する。図８は、補足画像２００の表示範囲がゼロに設定された場合の表示例を示す図である。図８に示す例では、表示装置２の表示画面には、車両の存在位置近傍の地図情報が表示されている。ただし、表示画面に表示される画像は、地図以外でも勿論よく、例えばオーディオに関する情報や操作メニュー等であってもよい。

以上からわかるように、本実施形態では、注意を喚起すべき危険が生じているか否かによって、表示装置２の表示画面に補足画像２００が表示されるか否かが切り替わる。換言すると、注意を喚起すべき危険が生じているか否かによって、補足画像２００の表示範囲が切り替わる。注意を喚起すべき危険が生じている場合には、表示画面に補足画像２００が表示される。注意を喚起すべき危険が生じていない場合には、表示画面に補足画像２００が表示されない。

また、以上では、補足画像２００の表示範囲の設定が、画面全体であるか、表示なしかの２種類のみである例を示したが、これは例示にすぎない。例えば、補足画像２００の表示範囲の設定が、画面全体、画面の一部、および表示なしの３つから選択される構成等であってもよい。

図９は、補足画像２００の表示範囲が表示画面の一部に設定された場合の表示例を示す図である。図９に示す例では、表示装置２の表示画面のうち、上辺からフロントウィンドウ４の下辺４ａに相当する高さ位置までの範囲に補足画像２００が表示されている。補足画像２００の下には、一例としてオーディオの操作メニューが表示されている。ただし、表示画面の上部と下部を２つに分ける場合に、どのような割合で分けるかは適宜変更されてよい。また、上部と下部に表示される画像も必要に応じて変更されてよい。例えば、上部にオーディオの操作メニュー、下部に撮影装置３で撮影された撮影画像から生成される風景画像が表示される構成としてもよい。

また、設定部１１４は、運転モードが手動運転モードであるか、自動運転モードであるかに基づいて、補足画像２００の表示範囲を設定してよい。例えば、手動運転モードである場合には、設定部１１４は、図５に示すフローチャートにしたがって表示範囲を設定してよい。また、設定部１１４は、自動運転モードである場合には、運転者に余裕があるために補足画像２００の表示範囲をゼロとしてもよい。

図１０および図１１は、運転モードが自動運転モードである場合の表示例を示す図である。図１０および図１１に示す例では、フロントウィンドウ４と略同サイズのスクリーン９上に映画等のコンテンツ画像が表示されている。スクリーン９の代わりに、例えばフロントガラス５が利用されてよい。図１０および図１１においては、表示画面の上部はスクリーン９に隠れて見えない。

図１０においては、表示装置２の表示画面の下部に、一例として字幕および操作キーが表示されている。図１１においては、表示装置２の表示画面の下部に、一例として撮影装置３で撮影された撮影画像から生成される風景画像が表示されている。自動運転モードにおいても、運転者が外の状況を確認できるようにするためである。

なお、表示画面の上部が隠れていない場合には、表示画面の上部に例えばコンテンツ画像の一部が表示されてもよい。

＜３．留意事項＞
本明細書中に開示されている種々の技術的特徴は、上記実施形態のほか、その技術的創作の主旨を逸脱しない範囲で種々の変更を加えることが可能である。すなわち、上記実施形態は、全ての点で例示であって、制限的なものではないと考えられるべきであり、本発明の技術的範囲は、上記実施形態の説明ではなく、特許請求の範囲によって示されるものであり、特許請求の範囲と均等の意味及び範囲内に属する全ての変更が含まれると理解されるべきである。また、本明細書中に示される複数の実施形態及び変形例は可能な範囲で適宜組み合わせて実施されてよい。

例えば、表示処理部１１３は、所定の条件を満たす場合と満たさない場合とで、異なる画質の補足画像２００を表示画面に表示させてよい。画質の切替え処理自体は、表示処理部１１３で行われてもよいし、例えば画像生成部１１２等の他の機能部で行われてもよい。本構成によれば、例えば車両の乗員が不安や不快感等を抱きそうな画像を見え難くするといったことを行うことができ、車両の乗員に補足画像２００を快適に見せることが可能になる。図１２は、表示処理部１１３の表示処理の際に、補足画像２００の画質処理が行われる手順を示すフローチャートである。

ステップＳ４１では、表示処理部１１３は、車両の速度が所定速度以上であるか否かを確認する。車両の速度は、車載ネットワークを介して取得することができる。所定速度は、実験等を行うことで適宜決定されてよい。所定速度は、例えば、表示画面に映る補足画像２００を見る車両の乗員が恐怖感を感じ始める速度であってよい。例えば補足画像２００に車両に近い位置の路面が含まれる場合等に、車両の乗員が車両の速度が速くなることで恐怖感を抱き易くなることを考慮するものである。表示処理部１１３は、車両の速度が所定速度以上である場合には（ステップＳ４１でＹｅｓ）、ステップＳ４２に処理を進める。表示処理部１１３は、車両の速度が所定速度未満である場合には（ステップＳ４１でＮｏ）、ステップＳ４３に処理を進める。

ステップＳ４２では、表示処理部１１３は、画像生成部１１２で生成された補足画像２００にブラー（ぼかし）処理を実行し、ブラー処理後の補足画像２００を表示させる処理を行う。これにより、車両の速度が速くなった場合において、表示画面に映る補足画像２００を見た者に与える恐怖感を抑制することができる。ブラー処理に替えて、例えば、補足画像２００の画質を粗くする処理が行われてもよい。

ステップＳ４３では、表示処理部１１３は、画像生成部１１２で生成された補足画像２００に所定の画像が含まれるか否かを判断する。所定の画像は、例えば、道路上に存在する動物の死骸の画像等、人が見たくないと感じる画像である。補足画像２００に所定の画像が含まれる場合（ステップＳ４３でＹｅｓ）、上述のステップＳ４２に処理が進められる。これにより、補足画像２００を見る運転者等の乗員に不快感を与えられることを抑制できる。補足画像２００に所定の画像が含まれない場合（ステップＳ４３でＮｏ）、ステップＳ４４に処理が進められる。なお、ステップＳ４１の処理とステップＳ４３の処理とは入れ替えて実行されてよい。

ステップＳ４４では、表示処理部１１３は、画像生成部１１２で生成された補足画像２００にブラー（ぼかし）処理を行うことなく、補足画像２００を表示画面に表示させる処理を行う。すなわち、表示処理部１１３は、画像生成部１１２で生成された補足画像２００の画質を変更することなく、補足画像２００を表示画面に表示させる処理を行う。

また、以上においては、補足画像２００は、フロントウィンドウ４越しに見える実風景３００にほぼ繋がって見える構成とした（図３参照）。ただし、これは例示にすぎない。図１３は、表示装置２の表示画面に表示される補足画像２００の他の例を示す図である。図１３に示すように、補足画像２００は、表示装置２により遮られる視界を補う画像であればよいために、撮影装置３で撮影された画像をそのまま表示装置２の表示画面に表示させたものであってもよい。これによれば、撮影装置３で撮影された撮影画像に対して複雑な処理を行う必要がなく、制御部１１の処理負担を低減できる。

また、以上に示す例においては、補足画像２００は、表示装置２により遮られる運転者の視界を補足するものとした。これは例示にすぎない。補足画像２００は、表示装置２により遮られる運転者の視界を補足するものだけなく、表示装置２により遮られる運転者以外の乗員の視界も補足するものであってよい。この場合には、制御部１１は、例えば車室に設けられるカメラやＤＳＭ（Driver Status Monitor）等を利用して、表示装置２の表示画面を見ている者を特定する。そして、制御部１１は、表示装置２の表示画面を見ている者を基準に補足画像を生成する構成としてよい。

なお、表示装置２の表示画面を同時に見る者が複数居るといった事態が起こり得る。このような事態が起こった場合には、予め定めた優先順位が高い者を基準に補足画像が生成される構成としてよい。優先順位は、例えば運転者が最も高く設定される。

１・・・表示制御装置
２・・・表示装置
３・・・撮影装置
１００・・・表示システム
１１１・・・画像取得部
１１２・・・画像生成部
１１３・・・表示処理部
１１４・・・設定部
２００・・・補足画像

Claims (8)

1. 移動体内に配置される表示装置を制御する表示制御装置であって、
   前記移動体の外の状況を撮影した撮影画像を取得する画像取得部と、
   前記表示装置により遮られる視界を補う補足画像を前記撮影画像に基づき生成する画像生成部と、
   前記補足画像を前記表示装置の表示画面に表示させる表示処理部と、
   を備える、表示制御装置。
2. 前記表示処理部は、前記表示画面における表示範囲を切り替えて前記補足画像を表示させる、請求項１に記載の表示制御装置。
3. 切替え可能な前記表示範囲の設定には、前記表示画面に前記補足画像の表示が行われない表示範囲無しが含まれる、請求項２に記載の表示制御装置。
4. 前記表示範囲を設定する設定部を更に備え、
   前記表示処理部は、前記設定部の設定結果に応じて前記表示範囲を切り替えて前記補足画像を表示させる、請求項２又は３に記載の表示制御装置。
5. 前記設定部は、前記移動体の運転主体を示す運転モードと、前記移動体の周辺状況と、前記移動体を運転する者の状況とのうちの少なくともいずれか一つに基づき、前記表示範囲の設定を行う、請求項４に記載の表示制御装置。
6. 前記表示処理部は、所定の条件を満たす場合と満たさない場合とで、異なる画質の前記補足画像を前記表示画面に表示させる、請求項１から５のいずれか１項に記載の表示制御装置。
7. 請求項１から６のいずれか１項に記載の表示制御装置と、
   前記移動体に搭載され、前記撮影画像を撮影する撮影装置と、
   前記表示装置と、
   を備える、表示システム。
8. 移動体内に配置される表示装置を制御する表示制御方法であって、
   前記移動体の外の状況を撮影した撮影画像を取得する画像取得工程と、
   前記表示装置により遮られた視界を補う補足画像を前記撮影画像に基づき生成する画像生成工程と、
   前記補足画像を前記表示装置の表示画面に表示させる表示処理工程と、
   を備える、表示制御方法。

Images