JP2015092237A - 表示制御装置、表示制御方法、表示制御プログラムおよび投影装置 - Google Patents

Abstract

【課題】所定の状況に応じて、情報を表示できる領域を確保しつつ、ユーザの前方視界が遮られることを防止することができる表示制御装置を提供する。【解決手段】所定のディスプレイに投影される画像データを制御する表示制御装置１００であって、第１のタイミングで第１の所定の情報を取得し、第１のタイミングより後の第２のタイミングで第２の所定の情報を取得する情報取得部１１０と、第１の所定の情報と第２の所定の情報との間に所定の変化があるか否かを判定する判定部１２０と、所定の変化がある場合、ディスプレイにおいて画像データに含まれる表示情報の投影が制限される領域である制限領域の位置、サイズ、または形状のうち少なくとも１つを、第１の所定の情報に対応付けられたものから第２の所定の情報に対応付けられたものへ変更するように画像データを制御する制御部１３０と、を有する。【選択図】図２

Description

本開示は、車両等の乗員に対して提供される情報の表示を制御する表示制御装置、表示制御方法、表示制御プログラムおよび投影装置に関する。

近年、フロントウインドシールドに表示画像を投射することで、ユーザに虚像を視認させるヘッドアップディスプレイ装置の開発が盛んである。ユーザとは、車両等の乗員である。また、メガネ型のウェアラブル端末に表示画像を投射することで、ユーザに虚像を視認させるヘッドマウントディスプレイ装置の開発も盛んである。いずれも技術原理は同様である。

フロントウインドシールドに投射された表示画像の表示位置を制御する方法としては、例えば、特許文献１に開示された方法がある（以下、従来技術という）。

従来技術では、フロントウインドシールドが、表示画像の表示が許可された周辺の表示許可領域と、表示画像の表示が禁止された中央の表示禁止領域とに区画されている。そして、従来技術では、表示画像が乗員の意思によりフロントウインドシールド上で移動させられた場合において、当該表示画像の移動先が表示禁止領域であるとき、当該表示画像を当該移動先に最も近い表示許可領域に移動させる。

特開２０１１−２６６０号公報

Hye Sun Park, Min Woo Park, Kwang Hee Won, Kyong-Ho Kim, and Soon Ki Jung, "In-Vehicle AR-HUD System to Provide Driving-Safety Information", ETRI Journal, Volume 35, Number 6, December 2013.

しかしながら、従来技術では、乗員の前方視界を妨げないためには、表示禁止領域を広範囲に設定する必要があった。そのため、いかなる状況においても表示許可領域を充分に確保することが困難であった。

本開示の一態様は、所定の状況に応じて、情報を表示できる領域を確保しつつ、ユーザの前方視界が遮られることを防止することができる表示制御装置、表示制御方法、表示制御プログラムおよび投影装置を提供する。

本開示の一態様に係る表示制御装置は、所定のディスプレイに投影される画像データを制御する表示制御装置であって、第１のタイミングで第１の所定の情報を取得し、第１のタイミングより後の第２のタイミングで第２の所定の情報を取得する情報取得部と、第１の所定の情報と第２の所定の情報との間に所定の変化があるか否かを判定する判定部と、所定の変化がある場合、ディスプレイにおいて画像データに含まれる表示情報の投影が制限される領域である制限領域を、第１の所定の情報に対応付けられた制限領域から、第２の所定の情報に対応付けられた制限領域へ変更するように画像データを制御する制御部と、を有する。
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラム、または、記録媒体で実現されてもよく、システム、装置、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。

本開示に係る表示制御装置によれば、所定の状況に応じて、情報を表示できる領域を確保しつつ、ユーザの前方視界が遮られることを防止することができる。

本開示の実施の形態に係るシステムの一例を示す概念図 本開示の実施の形態に係る投影装置の構成例を示すブロック図 本開示の実施の形態に係る制限領域の一例を示す概念図 本開示の実施の形態に係る表示制御装置が判定する変化例１を説明する図 本開示の実施の形態に係る表示制御装置が判定する変化例２を説明する図 本開示の実施の形態に係る表示制御装置が判定する変化例３を説明する図 本開示の実施の形態に係る表示制御装置が判定する変化例４を説明する図 本開示の実施の形態に係る表示制御装置が判定する変化例５を説明する図 本開示の実施の形態に係る表示制御装置が判定に使用するテーブルの一例を示す図 本開示の実施の形態に係る画像データにおける制限領域とディスプレイにおける制限領域の対応例を示す概念図 本開示の実施の形態に係る表示制御装置の動作例を示すフローチャートを示す図 本開示の実施の形態に係る表示制御装置の変形例１を説明する概念図 本開示の実施の形態に係る表示制御装置の変形例５を説明する概念図 本開示の実施の形態に係る表示制御置のハードウェア構成例を示すブロック図 本開示の実施の形態に係るシステムの一例を示すブロック図

以下、本開示の実施の形態について、図面を参照して説明する。

（実施の形態）
本開示の実施の形態について説明する。

図１は、本実施の形態に係るシステム１の概念図である。図１において、システム１は、投影装置１０とディスプレイ２０とを有する。

投影装置１０は、プロジェクタ機能等を有し、内部で生成される画像データをディスプレイ２０に投影する。ディスプレイ２０は表示媒体ともいう。

表示媒体２０としては、例えば、ＨＵＤ（Ｈｅａｄ−Ｕｐ Ｄｉｓｐｌａｙ）、ＨＭＤ（Ｈｅａｄ−Ｍｏｕｎｔｅｄ ＤｉｓｐｌａｙまたはＨｅｌｍｅｔ−Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）、眼鏡型表示媒体（Ｓｍａｒｔ Ｇｌａｓｓｅｓ）が適用される。表示媒体は、例えば、車両のウインドシールド（Ｗｉｎｄｓｈｉｅｌｄ）であってもよいし、別途設けられるガラス面、プラスチック面などであってもよい。また、ウインドシールドは、例えば、フロント・ウインドシールドであってもよいし、車両のサイドガラスやリアガラスであってもよい。

また、ディスプレイは、虚像投影型、網膜投影型、光学透過型（光学シースルー型）、ビデオ透過型（ビデオシースルー型）、非透過型のいずれであっても良い。表示する表示画像は、虚像であっても良いし、実像であっても良い。光学透過型ディスプレイは、車載HUDとしての研究開発が進められている（非特許文献１）。光学透過型ディスプレイは、たとえば車両のウインドシールドの内側面に張り付けられてもよいし、また、車両のウインドシールドを成型する過程において、ウインドシールドの中に組み込まれてもよい。

以下の説明においてはディスプレイは虚像投影型のHUDとして説明するが、その限りではなく、上述した種々のディスプレイであってもよい。HUDの代わりに光学透過型ディスプレイを適用する場合には、ディスプレイに表示される表示情報は虚像ではなく実像としてユーザに視認される。

なお、本実施の形態に係る開示は、以下の説明ではＨＵＤを例とするが、ＨＭＤ、眼鏡型表示媒体の場合でも同様に適用可能である。また、ユーザは、ＨＵＤの場合は車両、船舶、航空機等の移動体の乗員であるが、ＨＭＤ、眼鏡型表示媒体の場合は車両等の乗員に限らず、当該表示デバイスを装着しているユーザであればよい。

また、ディスプレイが光学系透過型（光学シースルー型）などの場合には、表示部２００は、ディスプレイに画像データを表示する。以下、ディスプレイが虚像投影型など、または、光学透過型などの場合を含めて、説明の簡易化のために、画像データはディスプレイに表示されるものとして説明する場合もある。

図１に示すように、投影装置１０により投影または表示される画像データ５０は、車両の乗員４０（ユーザの一例）に提示するための表示情報３０を含む。画像データ（以下、単に画像ともいう）５０とは、投影装置１０内部で生成された画像データ（所定画像のデータ）が表示媒体２０に投影されたものをいう。また、表示情報３０とは、画像データ５０の一部として表示媒体２０に投影された、乗員４０に対する通知情報の内容を示す画像である。投影された表示情報３０は、虚像として乗員４０に視認される。表示媒体２０に投影された表示情報３０が虚像として乗員４０に視認される原理は、公知技術であるため、説明を省略する。なお、本実施の形態では、表示情報３０の一例をＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）の図形としているが、文字、記号等、または、図形を含めたそれらの組合せでもよい。

なお、投影装置１０は、上述した表示媒体２０を含む構成であってもよい。

図２は、本実施の形態に係る表示制御装置１００を含む投影装置１０の構成例を示すブロック図である。図２において、投影装置１０は、表示制御装置１００と、表示部２００とを有する。

表示制御装置１００は、表示部２００から投影される画像データを制御する。なお、画像データは表示部２００によって生成されるものとして説明するが、表示制御装置１００または図示しない他の構成要素によって生成されてもよい。なお、表示制御装置１００の各部１１０〜１３０については後述する。

表示部２００は、画像データを表示媒体２０へ表示する。表示部２００は、ＨＵＤの場合にはプロジェクタ機能を有し、画像データ５０を表示媒体２０へ直接投影する。なお、表示部２００は、プロジェクタ機能に代えて、例えば、表示機能を有する表示媒体２０に画像データを表示させてもよいし、または、ホログラムを用いて画像データを空間に投影してもよい。ホログラムを用いる場合、導光板の内部全反射条件を満たす平行光束群を内部全反射して導光する導光板を用いて、導光板を内部全反射して導光される平行光束群の一部を射出することで乗員に虚像を視認させる方式でもよい。

なお、導光板を用いた方式においては、プロジェクタのように画像データを直接的に投影するものではないが、説明の便宜上、プロジェクタ方式と同様に投影または投射する、という定義で説明する場合もある。

図３は、表示媒体２０に投影または表示される画像データ５０における制限領域６０の例を示す図である。例えば、車両の運転中、フロントウインドシールドを介した前景において乗員が注意を要する対象物（例えば、道路を横断する歩行者など）が存在する場合、その対象物に表示情報３０が重畳されると危険である。そのため、表示媒体２０において制限領域６０が設定される。制限領域６０とは、表示媒体上において、画像データ５０に含まれる表示情報３０の投影が制限される領域である。本実施の形態では、表示制御装置１００は、交通環境、車両の状態、および乗員４０の状態等に応じて、制限領域６０の態様を変更することを特徴とする。制限領域６０の態様とは、具体的には、位置、サイズ、または形状等のうち少なくとも１つである。これにより、表示情報の投影位置の自由度が高まり、乗員に対して表示媒体（例えば、ＨＵＤ、または、ＨＭＤ等）の利便性を提供できる。

以下、図２および図３を用いて、表示制御装置１００の構成について説明する。

図２に示すように、表示制御装置１００は、情報取得部１１０、判定部１２０、制御部１３０を有する。なお、図２に示す表示制御装置１００の構成は一例であり、後述の図１５に示す構成であってもよい。図２に示す構成と、図１５に示す構成とは、判定部１２０および制御部１３０を備え、作用および効果は共通である。

まず、各部１１０〜１３０の概要について説明する。情報取得部１１０は、第１のタイミングで第１の所定の情報を取得し、第１のタイミングより後の第２のタイミングで第２の所定の情報を取得する。判定部１２０は、第１の所定の情報と第２の所定の情報との間に所定の変化があるか否かを判定する。制御部１３０は、所定の変化がある場合、表示媒体２０において画像データ５０に含まれる表示情報の投影または表示が制限される領域である制限領域を、第１の所定の情報に対応付けられた領域から、第２の所定の情報に対応付けられた領域へ変更するように画像データを制御する。

次に、各部１１０〜１３０の詳細について説明する。

（情報取得部１１０）
情報取得部１１０は、所定の情報を取得する。所定の情報とは、例えば、車両の内部情報および車両の外部情報のうち少なくとも一方を含む車両情報である。情報取得部１１０は、車両情報を、例えば、図示しないセンシングカメラ、ドライバモニタリングカメラ、各種センサ等の周辺機器、または、ＣＡＮ（Controller Area Network）、ＬＩＮ（Local Interconnect Network）等の車内ＬＡＮ（Local Area Network）から取得する。または、情報取得部１１０は、車両情報を、例えば、クラウド・サーバから取得してもよく、車内に持ち込まれたスマートフォン等の携帯端末、乗員によって入力される音声情報、交通道路に設置された情報端末、カーナビゲーション等の車載端末から取得してもよい。情報取得部１１０と、周辺機器等との間では、有線または無線で情報の授受が行われる。情報取得部１１０は、図１５の検知部１５０と機能が同じである。なお、車両情報の詳細については、後述する。

情報取得部１１０が車両情報を取得するタイミングは、予め定められた時間間隔で周辺機器または車内ＬＡＮから能動的に取得してもよいし、また、周辺機器または車内ＬＡＮが車両情報を生成するごとに周辺機器等から受動的に取得してもよい。情報取得部１１０は、第１のタイミングで第１の所定の情報を取得し、第１のタイミングより後の第２のタイミングで第２の所定の情報を取得する。

例えば、第２のタイミングは、情報取得部１１０が予め定められた時間間隔で能動的に車両情報を取得する場合、第１のタイミングの後に車両情報が取得されるタイミングである。また、例えば、第２のタイミングは、情報取得部１１０が周辺機器等から受動的に車両情報を取得する場合、第１のタイミングの後に周辺機器等から車両情報が送信されてくるタイミングである。なお、第２のタイミングは、装置がリアルタイムに動作するという観点からは、第１のタイミング後の複数のタイミングのうち第１のタイミングの次のタイミングであることが望ましいが、必ずしもそうである必要はなく、装置の仕様に基づいて設定されればよい。

ここで、車両情報の詳細について説明する。

車両の内部情報とは、乗員の状態を示す情報、車両の状態を示す情報等である。具体的には、車両の内部情報は、例えば、乗員の覚醒の度合、運転モード（自動運転モードまたはマニュアル運転モード）、ウインカーのオン／オフ、車両の速度、ジャイロの計測値等を示す情報である。乗員の覚醒の度合は、乗員の顔および姿勢のうち少なくとも一方を撮影するカメラにより取得される画像に対して画像解析を行うことで推定される。また、自動運転モードは、乗員が運転から解放される程度に応じて、レベル１からレベル４に分類されてもよい。例えば、自動運転モードのレベルは、自動運転システムの介入度合に応じて、レベル０（No-Automation）からレベル４（Full Self-Driving Automation）に分類されてもよい。

一方、車両の外部情報とは、交通環境を示す情報等である。具体的には、車両の外部情報は、道路の形状（直線またはカーブ）、道路の勾配、天候、信号機の表示等を示す情報である。

本実施の形態において、車両情報は、１つまたは複数の要素で構成される。例えば、車両情報が「自動運転モード」である場合、その車両情報は、「自動運転モード」という１つの要素により構成される。また、例えば、車両情報が「マニュアル運転モード、左カーブ、運転者の覚醒度合：高」である場合、その車両情報は、「マニュアル運転モード」、「左カーブ」、「運転者の覚醒度合：高」という３つの要素により構成される。車両情報が含む要素の数は、装置の仕様に基づいて設定されればよい。車両情報が含む要素は、後述する判定部１２０の判定に用いられる。なお、要素は、説明の便宜上用いられるものであって、車両情報であることに変わりはない。

情報取得部１１０は、取得した車両情報を判定部１２０に出力する。

（判定部１２０）
判定部１２０は、第１のタイミングで情報取得部１１０によって取得された第１の所定の情報（例えば、車両情報）と、第１のタイミングより後の第２のタイミングで取得された第２の所定の情報（例えば、車両情報）との間に所定の変化があるか否かを判定する。

所定の変化の有無は、車両情報に含まれる要素単位で行われる。車両情報に含まれる要素が１つの場合は、当該１つの要素の変化にのみ着目すればよい。かかる場合、要素という概念は不要である。車両情報に含まれる１つまたは複数の要素のうち、いずれか１つでも所定の変化があった場合、判定部１２０は、第１の車両情報と、第２の車両情報との間に所定の変化があったと判定する。

所定の変化とは、交通環境の特定の変化、車両状態の特定の変化、もしくは乗員状態の特定の変化、またはそれらの組合せである。換言すれば、所定の変化とは、制限領域６０の態様（位置、サイズ、形状のうち少なくともいずれか１つ）を変更する必要がある、交通環境、車両状態、もしくは乗員状態、またはそれらの組合せの変化である。

例えば、所定の変化としては、車両の直進走行とカーブ走行との間の変化、マニュアル運転モードと自動運転モードとの間の変化、自動運転モードのレベル間の変化、信号機の表示の変化、乗員の覚醒度合の変化、道路の勾配の変化、道路の形状の変化、天候の変化等が挙げられる。道路形状の変化は、登り坂と下り坂との間の変化、直進道路とＴ字路との間の変化等である。なお、これらはあくまで例示列挙であり、装置へ随時追加されてもよい。その場合、プログラムのアップデートをもって実行される。

所定の変化は、装置の仕様に基づいて定められる。例えば、「マニュアル運転モード、カーブ走行」という第１の車両情報から、「自動運転モード（レベル４：完全自動運転）、カーブ走行」という第２の車両情報へ変化した場合、運転モードが変化しているため、判定部１２０は、所定の変化ありと判定してもよい。または、車両情報に「自動運転モード」という要素が含まれている場合は、他の要素（例えば、「カーブ走行」）が変化していたとしても、所定の変化なしと判定されてもよい。いずれも設計仕様に基づくものであり、本実施の形態にかかる内容を限定するものではない。

また、例えば、車両情報が「運転者の覚醒の度合」の要素を含む場合、運転者の覚醒の度合がどの程度変化した場合に所定の変化があったと判定するかについては、装置の仕様に基づく。例えば、覚醒度合が「極めて低／低／中／高／極めて高」といった５段階に分類されている場合において、「覚醒度合：中」から「覚醒度合：低」へ変化したときは、所定の変化ありと判定されるが、「覚醒度合：中」から「覚醒度合：高」へ変化したときは、所定の変化なしと判定されてもよい。

以下、判定部１２０における所定の変化の各例について、説明する。

（所定の変化例１）
本例は、第１の車両情報「直進走行」から第２の車両情報「左カーブ走行」へ変化する場合が、所定の変化として設定されている例である。図４Ａは、道路を走行する車両を真上から見た図である。図４Ｂおよび図４Ｃは、表示媒体２０における制限領域６０を示す図である。以下、図４を用いて、所定の変化例１を説明する。

図４Ａは、車両が、時刻Ｔ１（第１のタイミングの一例）のときに直進走行しており、時刻Ｔ１の後の時刻Ｔ２（第２のタイミングの一例）のときに左カーブ走行している様子を示す。この場合、情報取得部１１０は、時刻Ｔ１において、車両が直進走行している旨を示す第１の車両情報「直進走行」を取得し、時刻Ｔ２において、車両がカーブ走行している旨を示す第２の車両情報「左カーブ走行」を取得する。そして、判定部１２０は、これら２つの車両情報を比較し、「直進走行」から「左カーブ走行」へ変化していることに基づいて、所定の変化ありと判定する。

上記のとおり、車両が直進走行している状態から車両がカーブ走行している状態への変化を所定の変化とする理由は、双方の状態において乗員が肉眼で視認すべき範囲が変化するからである。すなわち、車両が直進走行している場合、乗員は正面方向を視認すべきであるため、図４Ｂに示すとおり、制限領域６０は、運転席（右ハンドルの場合）の正面に位置することが望ましい。一方、車両が左カーブ走行している場合、乗員はカーブの先の方向を視認すべきであるため、図４Ｃに示すとおり、制限領域６０は、運転席の左斜め前に位置することが望ましい。このようなことから、判定部１２０により車両情報が「直進走行」から「左カーブ走行」へ変化したと判定された場合、後述する制御部１３０は、制限領域６０の位置を図４Ｂから図４Ｃに示す位置へ変更するように画像データ５０を制御する。これにより、カーブ走行の際、表示情報を表示できる領域を確保しつつ、視認すべき方向に表示情報が表示されて前方視界が遮られることを防止できる。

なお、本例では、右ハンドルの場合について説明したが、左ハンドルの場合であっても同様である。例えば、左ハンドルの場合、直進走行の状態から右カーブ走行の状態への変化が所定の変化と判定される。これについては、下記の説明においても同様である。

また、車両の走行状態（直進走行またはカーブ走行）を示す車両情報は、車内ＬＡＮからのステアリング情報、地図情報、ジャイロセンサ等の各種センサ、車外を撮影するカメラによって生成される画像情報等、またはＧＰＳ情報等の位置情報等に基づいて生成されたものである。車両の走行状態を示す車両情報は、図示しない他の構成要素が、必要に応じて、判断または生成してもよい。また、例えば、判定部１２０は、画像情報やナビゲーション情報に基づいて車両がカーブに接近していることを判定し、今後発生する所定の変化を判定してもよい。

（所定の変化例２）
本例は、第１の車両情報「道路：直進」から、第２の車両情報「道路：Ｔ字路」へ変化する場合が、所定の変化として設定されている例である。図５Ａは、道路を走行する車両を真上から見た図である。図５Ｂおよび図５Ｃは、表示媒体２０における制限領域６０を示す図である。以下、図５を用いて、所定の変化例２を説明する。

図５Ａは、車両が、時刻Ｔ１（第１のタイミングの一例）のときに直進道路を走行しており、時刻Ｔ１の後の時刻Ｔ２（第２のタイミングの一例）のときにＴ字路で右折または左折しようとしている様子を示す。この場合、情報取得部１１０は、時刻Ｔ１において、車両が直進道路を走行している旨を示す第１の車両情報「道路：直進」を取得し、時刻Ｔ２において、車両がＴ字路で右折または左折しようとしている旨を示す第２の車両情報「道路：Ｔ字路」を取得する。そして、判定部１２０は、これら２つの車両情報を比較し、「道路：直進」から「道路：Ｔ字路」へ変化していることに基づいて、所定の変化ありと判定する。

上記のとおり、車両が直進道路を走行している状態から車両がＴ字路で右折または左折しようとしている状態への変化を所定の変化とする理由は、双方の状態において乗員が直視する範囲が変化するからである。すなわち、車両が直進道路を走行している場合、乗員は原則として正面方向を直視し、周辺については周辺視により認知するため、図５Ｂに示すとおり、制限領域６０は、運転席（右ハンドルの場合）の正面に位置することが望ましい。一方、車両がＴ字路で右折または左折しようとしている場合、乗員は右方向および左方向を交互に直視しながら交通環境に気を配る必要があるため、図５Ｃに示すとおり、制限領域６０は、その横幅を、表示媒体２０の横幅とほぼ同じにすることが望ましい。このようなことから、判定部１２０により車両情報が「道路：直進」から「道路：Ｔ字路」へ変化したと判定された場合、後述する制御部１３０は、制限領域６０の位置を図５Ｂから図５Ｃに示す位置へ変更するように画像データ５０を制御する。これにより、右折または左折の際、表示情報を表示できる領域を確保しつつ、視認すべき方向に表示情報が表示されて前方視界が遮られることを防止できる。

なお、車両が走行している交通環境を示す車両情報は、車内ＬＡＮから取得されるステアリング情報、地図情報、ジャイロセンサ等の各種センサ、車外を撮影するカメラによって生成される画像情報等、またはＧＰＳ情報等の位置情報等に基づいて生成されたものである。また、車両の走行状態を示す車両情報は、図示しない他の構成要素が、必要に応じて、判断または生成してもよい。また、例えば、判定部１２０は、画像情報に基づいて、一時停止標識や一時停止線を認識することで、所定の変化を判定してもよい。かかる場合、所定の変化は「標識検出なし」から「標識検出あり」への変化である。

また、本例ではＴ字路において右折または左折している状態をもって所定の変化としたが、例えば、乗員によって行われるウインカー操作（左折／右折）に基づいて車両が右折または左折しようとしている状態であると判定してもよい。その場合、ウインカー無からウインカー有の変化が所定の変化となる。よって、Ｔ字路以外における右折または左折の場合でも、所定の変化ありと判定でき、制限領域６０を変更できる。なお、カーナビゲーション情報のルート情報を用いて、Ｔ字路や交差点の接近していることを判定し、車両情報が変化すると判定しても良い。

（所定の変化例３）
本例は、第１の車両情報「信号：赤」から第２の車両情報「信号：青」へ変化する場合が、所定の変化として設定されている例である。図６Ａは、道路を走行する車両を真上から見た図である。図６Ｂおよび図６Ｃは、表示媒体２０における制限領域６０を示す図である。以下、図６を用いて、所定の変化例３を説明する。

図６Ａは、車両が、時刻Ｔ１（第１のタイミングの一例）のとき、信号機６００の赤信号によって停車しており、時刻Ｔ１の後の時刻Ｔ２（第２のタイミングの一例）のとき、信号機６００の赤信号から青信号への変化により走行を開始した様子を示す。この場合、情報取得部１１０は、時刻Ｔ１において、信号機６００が赤信号である旨を示す第１の車両情報「信号：赤」を取得し、時刻Ｔ２において、信号機６００が青信号である旨を示す第２の車両情報「信号：青」を取得する。そして、判定部１２０は、これら２つの車両情報を比較し、「信号：赤」から「信号：青」へ変化していることに基づいて、所定の変化ありと判定する。

上記のとおり、赤信号から青信号への変化を所定の変化とする理由は、双方の状態において乗員が視認すべき範囲が変化するからである。すなわち、信号機６００が赤信号である場合、乗員は運転から解放されているため、図６Ｂに示すとおり、制限領域６０は、運転席の前面において狭い範囲で位置しても問題ない。一方、信号機６００が赤信号から青信号に変化した場合、乗員は運転を開始する必要があるため、図６Ｃに示すとおり、制限領域６０は、運転席の前面において広い範囲で位置することが望ましい。このようなことから、判定部１２０により車両情報が「信号：赤」から「信号：青」へ変化したと判定された場合、後述する制御部１３０は、制限領域６０の位置を図６Ｂから図６Ｃに示す位置へ変更するように画像データ５０を制御する。これにより、青信号により走行を開始した際、表示情報を表示できる領域を確保しつつ、視認すべき方向に表示情報が表示されて前方視界が遮られることを防止できる。

なお、車両用の信号機６００の変化を示す車両情報は、車外を撮影するカメラによって生成される画像情報、交差点に設置された情報端末から送信される情報、クラウド・サーバからの送信される情報等に基づいて生成されたものである。また、車両用の信号機６００の変化を示す車両情報は、図示しない他の構成要素が、必要に応じて、判断または生成してもよい。

なお、本例では、車両用の信号機６００が変化する場合について説明したが、歩行者用の信号機が変化する場合も同様である。すなわち、歩行者用の信号機において青から赤への変化が所定の変化と判定される。そして、制限領域６０が図６Ｂに示す範囲から図６Ｃに示す範囲に変更される。

（所定の変化例４）
本例は、第１の車両情報「マニュアル運転モード」から、第２の車両情報「自動運転モード」へ変化する場合が、所定の変化として設定されている例である。図７Ａは、道路を走行する車両を真上から見た図である。図７Ｂおよび図７Ｃは、表示媒体２０における制限領域６０を示す図である。以下、図７を用いて、所定の変化例４を説明する。

なお、自動運転モードにおける自動運転レベルは、自動運転システムの介入度合に応じて、レベル０（No-Automation）からレベル４（Full Self-Driving Automation）に分類されるが、本例における自動運転モードはレベル４（完全自動運転）として説明する。

図７Ａは、車両が、時刻Ｔ１（第１のタイミングの一例）のときに乗員によるマニュアル運転により走行しており、時刻Ｔ１の後の時刻Ｔ２（第２のタイミングの一例）のときに完全自動運転により走行している様子を示す。この場合、情報取得部１１０は、時刻Ｔ１において、車両がマニュアル運転で走行している旨を示す第１の車両情報「マニュアル運転モード」を取得し、時刻Ｔ２において、車両が自動運転で走行している旨を示す第２の車両情報を取得する。そして、判定部１２０は、これら２つの車両情報を比較し、「マニュアル運転モード」から「自動運転モード」へ変化していることに基づいて、所定の変化ありと判定する。

上記のとおり、マニュアル運転から自動運転への変化を所定の変化とする理由は、双方の状態において乗員が視認すべき範囲が変化するからである。すなわち、マニュアル運転である場合、乗員は前方を視認する必要があるため、図７Ｂに示すとおり、制限領域６０が存在する。一方、完全自動運転である場合、乗員は運転から解放されるため、図７Ｃに示すとおり、制限領域６０がなくてもよい。このようなことから、判定部１２０により車両情報が「マニュアル運転モード」から「自動運転モード」へ変化したと判定された場合、後述する制御部１３０は、図７Ｂに示すように表示していた制限領域６０を図７Ｃに示すように消去するように画像データ５０を制御する。これにより、自動運転モードでの走行の際、表示情報の表示位置の自由度が高まる。

なお、車両の運転モードを示す車両情報は、車内ＬＡＮ等から取得される情報等に基づいて生成されたものである。また、車両の運転モードを示す車両情報は、図示しない他の構成要素が、必要に応じて、判断または生成してもよい。

（所定の変化例５）
本例は、第１の車両情報「乗員の覚醒度合：高」から第２の車両情報「乗員の覚醒度合：低」へ変化する場合が、所定の変化として設定されている例である。図８Ａは、車両を運転する乗員の様子を示す図である。図８Ｂおよび図８Ｃは、表示媒体２０における制限領域６０を示す図である。以下、図８を用いて、所定の変化例５を説明する。

図８Ａは、時刻Ｔ１（第１のタイミングの一例）のときに乗員の覚醒度合が高い状態であり、時刻Ｔ２（第２のタイミングの一例）のときに乗員の覚醒度合が時刻Ｔ１のときより低い状態である様子を示す。この場合、情報取得部１１０は、時刻Ｔ１において、乗員の覚醒度合が高い旨を示す第１の車両情報「乗員の覚醒度合：高」を取得し、時刻Ｔ２において、乗員の覚醒度合が低い旨を示す第２の車両情報「乗員の覚醒度合：低」を取得する。そして、判定部１２０は、これら２つの車両情報を比較し、乗員の覚醒度合いが「高」から「低」へ変化していることに基づいて、所定の変化ありと判定する。

上記のとおり、乗員の覚醒度合が高い状態から乗員の覚醒度合が低い状態への変化を所定の変化とする理由は、下記のとおりである。一般に、覚醒度の低下に伴い、乗員の注視点は前方方向に集中し、周囲の変化に気づきにくくなるという傾向がある。このため、判定部１２０により車両情報が「乗員の覚醒度合：高」から「乗員の覚醒度合：低」へ変化したと判定された場合、後述する制御部１３０は、図８Ｂに示す制限領域６０の範囲を図８Ｃに示す制限領域６０の範囲へ広げるように画像データ５０を制御する。これにより、乗員の注視点の遠方への集中を防ぎ、広範囲の安全確認を促進することができる。

なお、乗員の覚醒度合を示す車両情報は、例えば、乗員を撮影するドライバモニタリングカメラから瞼の開閉度合を検出することで覚醒度合を推定してもよいし、乗員の頭部の目尻付近に設置される電極等から得られる電気信号を分析から瞼の開閉度合を検出することで覚醒度合いを推定してもよい。

以上、所定の変化例１〜５について説明した。

判定部１２０は、所定の変化ありと判定した場合、その旨を示す情報を制御部１３０に出力する。

（制御部１３０）
制御部１３０は、判定部１２０において所定の変化があると判定された場合、表示媒体２０において制限領域６０を、第１の所定の情報に対応付けられた制限領域から、第２の所定の情報に対応付けられた制限領域へ変更するように画像データを制御する。すなわち、制御部１３０は、制限領域６０の態様（位置、サイズ、または形状のうち少なくとも１つ）を、第１の車両情報に対応付けられた位置、サイズ、または形状の少なくとも１つから、第２の車両情報に対応付けられた位置、サイズ、または形状の少なくとも１つへ変更するように画像データ５０を制御する。換言すれば、制御部１３０は、表示媒体に画像が表示される際、第２の所定状態に予め対応づけられ、第１の制限領域と位置、サイズ、数、または形状のうち少なくとも１つが異なる領域である第２の制限領域以外の領域（制限領域の外側の領域である表示が許可された領域）に通知情報を示す画像３０を表す、所定画像を生成して表示媒体に投影するように表示部２００を制御する。

以下、制御部１３０について具体的に説明する。まず、制御部１３０は、所定の変化がある旨を示す情報を判定部１２０から受け取ると、少なくとも第２の車両情報を判定部１２０から取得する。なお、制御部１３０は、第２の車両情報とともに第１の車両情報を判定部１２０から取得してもよい。

制御部１３０は、現状の制限領域６０の位置、サイズ、または形状（第１の車両情報に対応付けられた位置、サイズ、または形状）の少なくとも１つを、第２の車両情報に対応付けられた位置、サイズ、または形状の少なくとも１つに変更するように、画像データ５０を制御する。ここで、車両情報と、制限領域６０の位置、サイズ、および形状とは、予め対応付けられており、記憶装置（例えば、図１４参照）に保持されている。この対応付けの例については、図９を用いて後述する。なお、記憶装置は、例えばシステム１と通信可能なサーバ装置（図示せず）に格納されてもよい。

図９は、車両情報と、制限領域６０の位置およびサイズ（形状については図示略）とを対応付けたテーブルの一例を示す。なお、制限領域６０の位置とは、例えば、制限領域６０の中心座標のことである。なお、制限領域６０の位置は、制限領域６０における基準点であればいずれの点（例えば左上でもよい）でもよく、本実施の形態が開示する内容を限定するものではない。

図９において、例えば、車両情報「自動運転モード」に対しては、制限領域６０のサイズが「ゼロ」（表示なし）に設定されている。その一方で、車両情報「マニュアル運転モード」に対しては、制限領域６０のサイズが「全画面の１／２」と設定されている。全画面とは、例えば、画像データ５０の全領域のことであるが、表示媒体２０の全画面のことであってもよい。いずれの場合も、制限領域６０の位置については規定していない（図中のハイフンは「規定なし」を意味する）例としているが、例えば、制限領域６０の位置が「正面（Ｘ１、Ｙ１）」と設定されていてもよい。このような対応付けにより、上述した所定の変化例４で説明した図７Ｂから図７Ｃへの変更が実現されることになる。

また、図９において、例えば、車両情報「道路：直進」に対しては、制限領域６０のサイズが「全画面の１／２」に設定されている。その一方で、車両情報「道路：Ｔ字路」に対しては、制限領域６０のサイズが「全画面の２／３」と設定されている。いずれの場合も、制限領域６０の位置については規定していない例としている。このような対応付けにより、上述した所定の変化例２で説明した図５Ｂから図５Ｃへの変更が実現されることになる。

また、図９において、例えば、車両情報「乗員の覚醒度合：高」および「乗員の覚醒度合：中」に対しては、制限領域６０のサイズが「全画面の１／２」に設定されている。その一方で、車両情報「乗員の覚醒度合：低」に対しては、制限領域６０のサイズが「全画面の２／３」と設定されている。いずれの場合も、制限領域６０の位置については規定していない例としている。このような対応付けにより、上述した所定の変化例５で説明した図８Ｂから図８Ｃへの変更が実現されることになる。

また、図９において、例えば、車両情報「直進走行」に対しては、制限領域６０の位置が「正面（Ｘ_１、Ｙ_１）」と設定されている。その一方で、車両情報「右カーブ走行」に対しては、制限領域６０の位置が「右側：座標（Ｘ_Ｒ、Ｙ_Ｒ）」と設定され、また、車両情報「左カーブ走行」に対しては、制限領域６０の位置が「左側：座標（Ｘ_Ｌ、Ｙ_Ｌ）」と設定されている。いずれの場合も、制限領域６０のサイズについては規定していない例としているが、例えば、制限領域６０のサイズが「全画面の１／２」と設定されていてもよい。このような対応付けにより、上述した所定の変化例１で説明した図４Ｂから図４Ｃへの変更が実現されることになる。

なお、車両情報「右カーブ走行」および「左カーブ走行」に対しては、カーブの程度（曲率）に応じて制限領域６０の位置が変化するように設定されていてもよい。

また、図９において、例えば、車両情報「信号：赤」に対しては、制限領域６０の位置が「上側（Ｘ_Ｕ、Ｙ_Ｕ）」、制限領域６０のサイズが「全画面の１／６」と設定されている。その一方で、車両情報「信号：青」に対しては、制限領域６０の位置が「正面（Ｘ_２、Ｙ_２）」、制限領域６０のサイズが「全画面の１／２」と設定されている。いずれの場合も、制限領域の位置およびサイズを設定している。このような対応付けにより、上述した所定の変化例３で説明した図６Ｂから図６Ｃへの変更が実現されることになる。

また、図９において、例えば、車両情報「右折／左折（ウィンカー操作）」に対しては、制限領域６０のサイズが「全画面の２／３」と設定されている。また、制限領域６０の位置については規定していない例としている。このような対応付けにより、上述した所定の変化例２で説明した図５Ｂから図５Ｃへの変更が実現されることになる。

このように、図９において、各車両情報に対して、制限領域６０の位置のみが規定されたり、制限領域６０のサイズのみが規定されたり、制限領域６０の位置およびサイズの両方が規定されたりする。ただし、いずれも装置の設計仕様に基づき、本実施の形態の開示範囲を限定するものではない。

制御部１３０は、図９に示すテーブルに基づいて、制限領域６０の位置、サイズ、または形状の少なくとも１つを変更するように、画像データ５０を制御する。すなわち、制御部１３０は、制限領域６０に表示情報３０が含まれない画像データ５０を生成する。なお、車両情報に複数の要素が含まれる場合、複数の要素に対応付けられた制限領域６０の位置および／またはサイズを組み合せたものに基づいて制御を行う。以下、制御部１３０が行う制御の各例について説明する。なお、以下の各例では、図９のテーブルに基づく制御について説明するため、制限領域６０の制御対象を位置とサイズに限定して説明する。

（制御例１）
例えば、第１の車両情報が「マニュアル運転モード、直進走行」である場合、制御部１３０は、画像データ５０において、制限領域６０を「正面（Ｘ_１、Ｙ_１）」の位置、かつ、「全画面の１／２」のサイズに制御する。その後、第１の車両情報から、第２の車両情報「マニュアル運転モード、右カーブ走行」へ変化したとする。この場合、車両情報の２つの要素のうち１つが変化したことになる。よって、制御部１３０は、画像データ５０において、制限領域６０の位置を「右側：座標（Ｘ_Ｒ、Ｙ_Ｒ）」に変更するとともに、制限領域６０のサイズを「全画面の１／２」のまま維持する。

（制御例２）
例えば、第１の車両情報が「マニュアル運転モード、直進走行」である場合、制御部１３０は、画像データ５０において、制限領域６０を「正面（Ｘ_１、Ｙ_１）」の位置、かつ、「全画面の１／２」のサイズに制御する。その後、第１の車両情報から、第２の車両情報「自動運転モード、左カーブ走行」へ変化したとする。この場合、車両情報の２つの要素のうち２つが変化したことになる。よって、制御部１３０は、画像データ５０において、制限領域６０の位置を「左側：座標（Ｘ_Ｌ、Ｙ_Ｌ）」に変更するとともに、制限領域６０のサイズを「ゼロ」に変更する。なお、車両情報に「自動運転モード」が含まれている場合は、他の要素に関する制御を行わない設計仕様としてもよい。

（制御例３）
例えば、第１の車両情報が「マニュアル運転モード、道路：直進、信号：青」である場合、制御部１３０は、画像データ５０において、制限領域６０を「正面（Ｘ_２、Ｙ_２）」の位置、かつ、「全画面の１／２」のサイズに制御する。その後、第１の車両情報から、第２の車両情報「マニュアル運転モード、道路：Ｔ字路、信号：赤」へ変化したとする。この場合、車両情報の３つの要素のうち２つが変化したことになる。よって、制御部１３０は、画像データ５０において、制限領域６０の位置を「上側（Ｘ_Ｕ、Ｙ_Ｕ）」に変更する。その一方で、車両情報の３つの要素にそれぞれ対応付けられた制限領域６０のサイズは異なる。すなわち、「マニュアル運転モード」に対しては「全画面の１／２」が、「道路：Ｔ字路」に対しては「全画面の２／３」が、「信号：赤」に対しては「全画面の１／６」がそれぞれ対応付けられている。ここで、いずれの位置、サイズを採用するかについては装置の設計仕様に基づくため、本実施の形態に開示される範囲を限定しないが、安全な車両運転という観点からは、もっとも安全性の高い位置、サイズを選定するのが望ましい。すなわち、上記の場合には、制限領域６０のサイズとして、「道路：Ｔ字路」に対応付けられた「全画面の２／３」が選択されるのが望ましい。

以上、制御部１３０の制御例について説明したが、上記各例に限定されない。また、制御部１３０は、画像データ５０において、制限領域６０の制御のみならず、例えば、画像データに５０含まれる表示情報３０（例えば、注意喚起情報、ナビ情報、エンタメ情報などの文字情報など）も制御する。具体的には、制御部１３０は、画像データ５０に含まれる表示情報３０の位置、大きさ、範囲、輝度、色、および／または透明度などを制御する。

なお、本実施の形態において、表示媒体２０上での制限領域６０と、画像データ１０００上での制限領域６０に対応する領域とは、予めキャリブレーションされている。ここでいう画像データ１０００とは、表示媒体２０に投影される前の画像データである。すなわち、図１０に示すように、表示媒体２０における制限領域６０と、画像データ１０００において制限領域６０に対応する領域１００１とは、予めキャリブレーションされている。なお、制限領域６０と領域１００１との対応付けおよびキャリブレーション方法は、公知技術であるため、それらの説明は省略する。

また、本実施の形態では、制限領域６０の形状を矩形としたが、矩形に限定するものではなく、制限領域６０の形状は、円形、楕円形、または、その他任意の形状であってもよい。

また、上述したとおり、図示は省略しているが、図９のテーブルにおいて、各車両情報に対して制限領域６０の形状が設定されていてもよい。その場合、制御部１３０は、制限領域６０の位置および／または形状とともに、または、単独で、制限領域６０の形状を変更するように画像データ５０を制御してもよい。例えば、第１の車両情報と第２の車両情報との間に所定の変化があった場合、制御部１３０は、第１の車両情報に対応付けられた制限領域６０の形状（例えば、矩形）から、第２の車両情報に対応付けられた制限領域６０の形状（例えば、楕円形）へ変更するように画像データ５０を制御する。

以上、本実施の形態の表示制御装置１００の構成について説明した。以下、表示制御装置１００の動作例について、図１１のフローチャートを用いて説明する。

ステップＳ１１０において、情報取得部１１０は、第１のタイミング（例えば、上記時刻Ｔ１）で第１の車両情報を取得し、第１のタイミングより後の第２のタイミング（例えば、上記時刻Ｔ２）で第２の車両情報を取得する。

ステップＳ１１１において、判定部１２０は、第１の車両情報と第２の車両情報との間に所定の変化（例えば、上記変化例１〜５のいずれか）があるか否かを判定する。判定の結果、所定の変化がない場合（ステップＳ１１１：Ｎｏ）、フローはステップＳ１１０へ戻る。一方、判定の結果、所定の変化がある場合（ステップＳ１１１：Ｙｅｓ）、フローはステップＳ１１２へ進む。

ステップＳ１１２において、制御部１３０は、表示媒体２０において画像データ５０に含まれる表示情報３０の投影が制限される領域である制限領域６０の位置、サイズ、または形状のうち少なくとも１つを変更するように、画像データ５０を制御する。すなわち、制御部１３０は、第１の車両情報に対応付けられた位置、サイズ、または形状の少なくとも１つから、第２の車両情報に対応付けられた位置、サイズ、または形状の少なくとも１つへ変更するように、画像データ５０を制御する。

以上説明したように、本実施の形態の表示制御装置１００は、時系列に取得した車両情報間に所定の変化がある場合、先に取得した第１の車両情報に予め対応付けられた制限領域６０の位置、サイズ、または形状の少なくとも１つを、後に取得した第２の車両情報に予め対応付けられた制限領域６０の位置、サイズ、または形状の少なくとも１つに変更することを特徴とする。この特徴により、表示制御装置１００は、状況に応じて、情報を表示できる領域を確保しつつ、ユーザの前方視界が遮られることを防止することができる。

なお、本実施の形態の表示制御装置１００は、図２に示す構成として説明したが、その限りではない。たとえば、図１５に示すように、表示制御システム２は、取得部１４０、検知部１５０、表示制御装置１５００、表示部２００を有し、表示制御装置１５００は、判定部１２０、制御部１３０を有する構成であってもよい。なお、前述のとおり、検知部１５０の機能は、情報取得部１１０の機能と同じである。

図１５において、表示制御システム２は、車両の乗員４０に通知する通知情報を取得する取得部１４０と、車両及び乗員４０のうち少なくとも一方の所定状態を検知する検知部１５０と、取得部１４０において取得された通知情報に基づいた所定画像（画像データ）を生成して表示媒体２０に投影する表示部２００と、それらに接続される表示制御装置１５００と、を構成する。

表示制御装置１５００において、制御部１３０は、検知部１５０が第１のタイミングで第１の所定状態を検知した場合、表示媒体２０（不図示）に所定画像を表示する際、表示媒体２０のうち第１の所定状態に予め対応づけられた領域である第１の制限領域６０以外の領域に通知情報を示す画像３０を表す、所定画像を生成して表示媒体２０に投影するように表示部２００を制御する。また、判定部１２０は、検知部１５０が第１のタイミングより後の第２のタイミングで第１の所定状態と異なる第２の所定状態を検知した場合、第１の所定状態と、第２の所定状態との間に所定の変化があったか否かを判定する。そして、制御部１３０は、判定部１２０において所定の変化があったと判定された場合、表示媒体２０に所定画像を表示する際、第２の所定状態に予め対応づけられ、第１の制限領域６０と位置、サイズ、数、または形状のうち少なくとも１つが異なる領域である第２の制限領域６０以外の領域に通知情報を示す画像３０を表す、所定画像を生成して表示媒体２０に投影するように表示部２００を制御する。ここで、制限領域６０は、表示媒体２０において通知情報の表示が制限される領域である。また、制限領域以外の領域は、表示媒体２０において、制限領域６０の外側領域において、表示が許可された領域（許可領域）である。

以下、各部の機能について説明する。

取得部１４０は、車両の乗員４０に通知する通知情報を取得する。通知情報は、車両の乗員４０に提示するための表示情報３０である。すなわち、通知情報は画像データ５０の一部として乗員４０に虚像として視認される。通知情報は、たとえば、前方車両との衝突注意喚起のメッセージ、前方歩行者への注意喚起のメッセージ、エンターテインメント情報、車両の速度情報等の車両情報、前方障害物もしくは目的地等へのＡＲ表示、または、ナビゲーション情報等である。通知情報は図形でもよく、文字、記号等、または、図形を含めたそれらの組合せでもよい。

検知部１５０は、車両及び乗員４０のうち少なくとも一方の所定状態を検知する。検知部１５０は、情報取得部１１０と同じ機能を有する。

制御部１３０は、前述のとおり、検知部１５０が第１のタイミングで第１の所定状態を検知した場合、表示媒体２０（不図示）に表示されたときに通知情報を示す画像３０を表す、所定画像を生成して表示媒体２０に投影するように表示部２００を制御する。通知情報は、表示媒体２０上のおいて第１の所定状態に予め対応づけられた領域である第１の制限領域６０以外の領域に表示されているように、乗員４０に虚像として視認される。

また、制御部１３０は、判定部１２０において所定の変化があると判定された場合、表示媒体２０に表示されたときに、第２の所定状態に予め対応づけられ、第１の制限領域６０と位置、サイズ、数、または形状のうち少なくとも１つが異なる領域である第２の制限領域６０以外の領域に通知情報を示す画像３０を表す、所定画像を生成して表示媒体２０に投影するように表示部２００を制御する。制御部１３０に関する具体的な説明は前述のとおりである。

判定部１２０は、検知部１５０が第１のタイミングより後の第２のタイミングで第１の所定状態と異なる第２の所定状態を検知した場合、第１の所定状態と、第２の所定状態との間に所定の変化があったか否かを判定する。そして、判定部１２０は、所定の変化があったと判定した場合、所定の変化がある旨を示す情報を制御部１３０へ出力する。

所定の変化とは、前述したとおり、交通環境の特定の変化、車両状態の特定の変化、もしくは乗員状態の特定の変化、またはそれらの組合せである。すなわち、所定の変化とは、制限領域６０の態様を変更する必要がある、交通環境、車両状態、もしくは乗員状態、またはそれらの組合せの変化である。

ここで、第１の制限領域６０以外の領域に表示された第１の通知情報を示す画像３０が、第２の所定状態が検知部１５０において検知されたことによって、第２の制限領域６０に含まれることとなった場合、制御部１３０は、第１の通知情報を示す画像３０が、第２の制限領域６０から、第２の制限領域６０以外の領域へ移動するように、所定画像を生成して表示媒体２０に投影するように表示部を制御してもよい。

また、検知部１５０が第２のタイミングより後の第３のタイミングで第２の所定状態と異なる第３の所定状態を検知した場合、判定部１２０は、第２の所定状態と、第３の所定状態との間に所定の変化があったか否かを判定し、制御部１３０は、判定部１２０において所定の変化があったと判定された場合、表示媒体２０に表示されたときに、第３の所定状態に予め対応づけられ、第２の制限領域６０と位置、サイズ、数、または形状のうち少なくとも１つが異なる領域である第３の制限領域６０以外の領域に第１の通知情報を示す画像３０を表す、所定画像を生成して表示媒体２０に投影するように表示部を制御してもよい。さらに、第１のタイミングにおいて第１の通知情報を示す画像３０が表示媒体２０に表示された位置が、第３の制限領域６０以外の領域である場合には、制御部１３０は、判定部１２０において所定の変化があったと判定された場合、表示媒体２０に表示されたときに、第１のタイミングにおいて第１の通知情報を示す画像３０が表示された位置に第１の通知情報を示す画像３０を表す、所定画像を生成して表示媒体２０に投影するように表示部を制御してもよい。

また、第２の制限領域６０の大きさが、表示媒体２０の大きさと実質的に等しい場合、制御部１３０は、第１の通知情報を示す画像３０が表示媒体２０に表示されないように、所定画像を生成して表示媒体２０に投影するように表示部を制御してもよい。

また、取得部１４０が、第１の通知情報、および、第１の通知情報と異なる第２の通知情報を取得した場合において、制御部１３０は、表示媒体２０に表示されたときに、第１の制限領域６０以外の領域に第１の通知情報を示す画像３０、および、第２の通知情報を示す画像３０を表す所定画像を生成して表示媒体２０に投影するように表示部を制御してもよい。また、第１のタイミングにおいて第１の通知情報を示す画像３０、および、第２の通知情報を示す画像３０がそれぞれ表示媒体２０に表示された位置が、第２の制限領域６０に含まれる場合、制御部１３０は、判定部１２０において所定の変化があったと判定された場合、表示媒体２０に表示されたときに、第２の制限領域６０以外の領域に第１の通知情報を示す画像３０を表し、第１のタイミングにおいて第２の通知情報を示す画像３０が表示媒体２０に表示された位置に第２の通知情報を示す画像３０を表す所定画像を生成して表示媒体２０に投影するように表示部を制御してもよい。

また、表示媒体２０に表示されたときに、第１のタイミングにおいて第２の通知情報を示す画像３０が表示媒体２０に表示された位置に、色、透明度、および輝度のうち少なくとも１つが変更された第２の通知情報を示す画像３０を表す所定画像を生成して表示媒体２０に投影するように表示部を制御してもよい。

また、所定状態は、車両の自動運転レベルであり、自動運転レベルは、車両の運転手が運転に必要な全ての操作を行うレベルから、車両の運転手が運転に必要な全ての操作を行わずに自動運転できるレベルまでの間に複数のレベルが規定されており、第１の自動運転レベルと、第２の自動運転レベルとの間の所定の変化は、複数のレベルの間の推移であってもよい。

なお、制限領域６０は、表示媒体２０において、実線、点線、は線、鎖線、または波線で投影されてもよい。

以上、表示制御システム２０の説明を終わる。

なお、システム１に含まれる表示媒体２０が眼鏡型表示媒体であって、ユーザが眼鏡型装置としてシステム１を装着して歩行しているときには、情報取得部１１０は、歩行者の進行方向の前景の情報を取得する。そして、判定部は、第１のタイミングで取得された第１の所定の情報と、第２のタイミングで取得された第２の所定の情報とを比較する。ここで、所定の情報とは、たとえば歩行者の進行方向の前景の情報である。判定部１２０において、第１の所定の情報と、第２の所定の情報との間に所定の変化があったとき、制御部１３０は、眼鏡型表示媒体において、制限領域６０の態様を変更するように画像データを制御する。ここで、眼鏡型表示媒体を用いた場合における所定の変化とは、たとえば、前方から自転車が所定の速度以上で近づいている場合、前方から対向して通行する他人と衝突する可能性があった場合などである。

本開示は、上記実施の形態に限定されず、その趣旨を逸脱しない範囲において、変形することができる。以下、各種変形例について説明する。

（変形例１）
本例では、第１の車両情報に対応する制限領域６０から第２の車両情報に対応する制限領域６０に変更された結果、変更後の制限領域６０に表示情報３０が含まれることになる場合、制御部１３０は、表示情報３０を変更後の制限領域６０の範囲外へ投影するように画像データ５０を制御する。例えば、制限領域６０が図１２Ａに示す状態から図１２Ｂに示す状態へ拡大された場合、図１２Ａの表示情報３０の投影位置がそのまま維持されると、表示情報３０は図１２Ｂの制限領域６０に含まれることになる。その結果、乗員４０の前方視界が遮られてしまう。そこで、本例では、制御部１３０は、図１２Ａの制限領域６０の拡大に伴い、その拡大した方向（図中では左）へ表示情報３０を押し出すように制御する（以下、移動制御という）。押し出された表示情報３０は、図１２Ｂに示すように、制限領域６０の範囲外へ投影される。したがって、乗員４０の前方視界が表示情報３０により遮られることを防止できる。なお、表示情報３０が押し出される方向については、制限領域６０の拡大方向に限定されない。また、上記では、制限領域６０のサイズが拡大する例としたが、制限領域６０の位置や形状が変化する場合も、上記同様に制御が行われる。

（変形例２）
本例は、変形例１の移動制御の後の動作に関する。例えば、制限領域６０および表示情報３０が図１２Ａに示す状態から図１２Ｂに示す状態に制御された後において、第１の車両情報と同じ内容の第３の車両情報が第３のタイミングで取得された場合、制御部１３０は、変更後の制限領域６０外に投影されていた表示情報３０を第３の車両情報に対応付けられた投影位置（すなわち、第１の車両情報に対応付けられた元の投影位置）へ戻すように画像データ５０を制御する。第３のタイミングは、上記第２のタイミングより後のタイミングである。すなわち、図１２Ｂに示す状態において第３の車両情報が取得された場合、制御部１３０は、制限領域６０および表示情報３０を、図１２Ｂに示す状態から図１２Ａに示す状態へ変更する。

（変形例３）
本例は、変形例１の移動制御の代わりに、表示情報３０を投影しない制御（以下、消去制御という）を行う。すなわち、第１の車両情報に対応する制限領域６０から第２の車両情報に対応する制限領域６０に変更された結果、変更後の制限領域６０に表示情報３０が含まれることになる場合、制御部１３０は、表示媒体２０に投影されていた表示情報３０を消去するように画像データ５０を制御する。なお、この表示情報３０の消去の後、上記第３の車両情報が取得された場合の動作は、変形例２の制御が実行されてもよい。

（変形例４）
制限領域６０の外形（outline）は、乗員４０が視認可能に投影されてもよい。例えば、制限領域６０は、実線、点線、破線、鎖線、または波線で表示される。

（変形例５）
変形例１の移動制御または変形例３の消去制御の対象となる表示情報を、属性で分類してもよい。例えば、予め、表示情報の種類に応じて、移動制御の対象となる表示情報を第１分類、移動制御の対象とならない表示情報を第２分類として設定しておく。第１分類とされる表示情報としては、例えば、エンターテイメント情報、ナビゲーション情報等の緊急性を要しないものが挙げられる。一方、第２分類とされる表示情報としては、例えば、注意喚起情報、警報情報等の緊急性を要するものが挙げられる。

例えば、第１の車両情報が取得された際の表示媒体２０の表示例を図１３Ａに示す。図１３Ａに示すように、制限領域６０外に表示情報３０、３１が投影されている。表示情報３０は第１分類に属する情報であり、表示情報３１は第２分類に属する情報である。この図１３Ａの状態において、第１の車両情報と第２の車両情報との間に所定の変化ありと判定されると、制御部１３０は、制限領域６０を左方向へ拡大する制御を行うことになる。ここで、変更後の制限領域６０に表示情報３０、３１が含まれることになるため、制御部１３０は、投影中の表示情報３０、３１がそれぞれ第１分類であるかまたは第２分類であるかを判定する。

判定の結果、表示情報３０は第１分類に属するため、制御部１３０は、表示情報３０に対して移動制御を行う。これにより、表示情報３０は、変形例１と同様に、制限領域６０が拡大した左方向へ押し出され、図１３Ｂに示すように、制限領域６０の範囲外へ投影される。

一方、判定の結果、表示情報３１は第２分類に属するため、制御部１３０は、表示情報３１に対して移動制御を行わず、図１３Ｂに示すように、制限領域６０内に留めておく。

なお、表示情報３０についての第１分類、第２分類という分類の基準は、情報の種類に限定されない。例えば色、輝度などの、運転者の注意を引きつける属性によって分類されてもよい。

（変形例６）
本例は、変形例５の動作に関する。制御部１３０は、表示情報３０が第２分類に属する情報である場合、表示情報３０の色、透明度、または輝度のうち少なくとも１つを変更するように画像データ５０を制御してもよい。

（変形例７）
制御部１３０は、判定部１２０により所定の変化ありと判定された場合、制限領域６０を複数の領域に分割するように画像データ５０を制御してもよい。例えば、第１の車両情報「信号：青」から第２の車両情報「信号：赤」へ変化した場合、制御部１３０は、乗員４０の正面に位置している制限領域６０を、全体の面積を変えずに表示媒体２０の左右に分割してもよい。

（変形例８）
制御部１３０は、判定部１２０により所定の変化ありと判定された場合、表示情報３０の移動速度（表示情報が移動する速度）、応答速度（表示情報の移動が開始するタイミング）といった制御方法を、制限領域の変化前、変化後の位置またはサイズの相関関係に基づいて設定してもよい。具体的には、制限領域のサイズが相対的に大きく変化する場合には、カーブまたはＴ字路に接近した場合のように、乗員４０が周辺環境に注意を払う必要がある状況であるため、表示情報の移動速度を速く、または、応答速度を短く設定する。一方、制限領域のサイズが相対的に小さく変化する場合には、カーブまたはＴ字路を通過した場合のように、注意を払う必要がある状況を通過したと想定される。このような場合は、表示情報３０を高速、または短い応答で移動させることにより、ドライバに視覚的な煩わしさを与えることになる。そのため、制限領域のサイズが相対的に小さく変化する場合には、表示情報３０の移動速度を遅く、または、応答速度を長く設定することで、乗員４０に視覚的な煩わしさを与えることなく、表示情報の制御が可能となる。

以上、本開示の実施の形態および各種変形例について図面を参照して詳述してきたが、上述した表示制御装置１００の各部の機能は、コンピュータプログラムにより実現され得る。

図１４は、各装置の機能をプログラムにより実現するコンピュータのハードウェア構成を示す図である。このコンピュータ１０００は、キーボードやマウス、タッチパッドなどの入力装置１００１、表示媒体２０やスピーカーなどの出力装置１００２、ＣＰＵ（Central Processing Unit）１００３、ＲＯＭ（Read Only Memory）１００４、ＲＡＭ（Random Access Memory）１００５、ハードディスク装置やＳＳＤ（Solid State Drive）などの記憶装置１００６、ＤＶＤ−ＲＯＭ（Digital Versatile Disk Read Only Memory）やＵＳＢ（Universal Serial Bus）メモリなどの記録媒体から情報を読み取る読取装置１００７、ネットワークを介して通信を行う送受信装置１００８を備え、各部はバス１００９により接続される。

そして、読取装置１００７は、上記各装置の機能を実現するためのプログラムを記録した記録媒体からそのプログラムを読み取り、記憶装置１００６に記憶させる。あるいは、送受信装置１００８が、ネットワークに接続されたサーバ装置と通信を行い、サーバ装置からダウンロードした上記各装置の機能を実現するためのプログラムを記憶装置１００６に記憶させる。

そして、ＣＰＵ１００３が、記憶装置１００６に記憶されたプログラムをＲＡＭ１００５にコピーし、そのプログラムに含まれる命令をＲＡＭ１００５から順次読み出して実行することにより、上記各装置の機能が実現される。また、プログラムを実行する際、ＲＡＭ１３０５や記憶装置１３０６には、各実施の形態で述べた各種処理で得られた情報が記憶され、適宜利用される。

本開示は、ユーザ（例えば、車両等の乗員、または、表示デバイスを装着したユーザ等）に対して提供される情報の表示を制御する表示制御装置、表示制御方法、表示制御プログラムおよび投影装置に有用である。

１ システム
２ 表示制御システム
１０ 投影装置
２０ 表示媒体
３０、３１ 表示情報
４０ 乗員
５０ 画像データ
６０ 制限領域
１００ 表示制御装置
１１０ 情報取得部
１２０ 判定部
１３０ 制御部
１４０ 取得部
１５０ 検知部
２００ 表示部
１５００ 表示制御装置

Claims (21)

1. 所定の表示媒体に表示される画像データを制御する表示制御装置であって、
   第１のタイミングで第１の所定の情報を取得し、前記第１のタイミングより後の第２のタイミングで第２の所定の情報を取得する情報取得部と、
   前記第１の所定の情報と前記第２の所定の情報との間に所定の変化があるか否かを判定する判定部と、
   前記所定の変化があった場合、前記画像データの表示を、前記第１の所定の情報に対応付けられた第１の制限領域から、前記第２の所定の情報に対応付けられた第２の制限領域へ変更するよう制御し、前記第１の制限領域と前記第２の制限領域はそれぞれ前記表示媒体において前記画像データに含まれる表示情報の表示が制限される領域である、制御部と、有し、
   前記第２の制限領域は、前記第１の制限領域の位置、サイズ、および形状のうち少なくとも１つが異なる、
   表示制御装置。
2. 前記制御部は、
   前記第１の制限領域が変更されて、前記第２の制限領域内に前記表示情報が表示される場合、前記表示情報を前記第２の制限領域の外側である許可領域に表示するように前記画像データを制御する、
   請求項１記載の表示制御装置。
3. 前記制御部は、
   前記第１の所定の情報と同じ内容の第３の所定の情報が取得された場合、前記第２の制限領域の外側である許可領域に表示されていた前記表示情報を前記第１の所定の情報の表示位置に戻すように前記画像データを制御する、
   請求項２記載の表示制御装置。
4. 前記制御部は、
   前記第１の制限領域が変更されて、前記第２の制限領域内に前記表示情報が表示される場合、前記表示情報を前記表示媒体上から消去するように前記画像データを制御する、
   請求項１記載の表示制御装置。
5. 前記制御部は、
   前記表示媒体に対して、前記制限領域の外形を実線、点線、破線、鎖線、または波線のいずれか１つで表示するように前記画像データを制御する、
   請求項１記載の表示制御装置。
6. 前記表示情報は、第１分類または第２分類のいずれかに属する情報であり、
   前記制御部は、
   前記第１の制限領域が変更されて、前記第２の制限領域内に前記表示情報が表示されることになる場合において、前記表示情報が前記第１分類に属する情報であるときは、前記表示情報を前記第２の制限領域の外側である許可領域へ表示するように前記画像データを制御し、前記表示情報が前記第２分類に属する情報であるときは、前記表示情報の表示位置を維持するように前記画像データを制御する、
   請求項１記載の表示制御装置。
7. 前記制御部は、
   前記表示情報が前記第２分類に属する情報であるときは、前記表示情報の色、透明度、または輝度のうち少なくとも１つを変更するように前記画像データを制御する、
   請求項６記載の表示制御装置。
8. 前記制御部は、
   前記所定の変化がある場合、前記第１の制限領域を複数の領域に分割するように前記画像データを制御する、
   請求項１記載の表示制御装置。
9. 所定の表示媒体に表示される画像データを制御する表示制御方法であって、
   第１のタイミングで第１の所定の情報を取得し、前記第１のタイミングより後の第２のタイミングで第２の所定の情報を取得し、
   前記第１の所定の情報と前記第２の所定の情報との間に所定の変化があるか否かを判定し、
   前記所定の変化がある場合、前記画像データの表示を、前記第１の所定の情報に対応付けられた第１の制限領域から、前記第２の所定の情報に対応付けられた第２の制限領域へ変更するように制御し、前記第１の制限領域と前記第２の制限領域はそれぞれ前記表示媒体において前記画像データに含まれる表示情報の表示が制限される領域であり、
   前記第２の制限領域は、前記第１の制限領域の位置、サイズ、および形状のうち少なくとも１つが異なる、
   表示制御方法。
10. 車両の乗員に通知する第１の通知情報を取得する取得部と、前記車両及び前記乗員のうち少なくとも一方の所定状態を検知する検知部と、前記取得部において取得された前記第１の通知情報に基づいた所定画像を生成して表示媒体に表示する表示部と、を含む表示システムにおける表示制御装置であって、
    前記検知部が第１のタイミングで第１の所定状態を検知した場合、前記表示媒体のうち第１の制限領域の外側の領域に、前記第１の通知情報を示すための第１の所定画像を生成して、前記第１の所定画像を前記表示媒体に表示するように前記表示部を制御し、前記第１の制限領域は、前記第１の所定状態に予め対応づけられた領域である、制御部と、
    前記検知部が前記第１のタイミングより後の第２のタイミングで前記第１の所定状態と異なる第２の所定状態を検知した場合、前記第１の所定状態と、前記第２の所定状態との間に所定の変化があったか否かを判定する判定部と、
    を備え、
    前記制御部は、前記判定部において前記所定の変化があったと判定された場合、前記表示媒体のうち第２の制限領域の外側の領域に、前記第１の通知情報を示すための第２の所定画像を生成して、前記第２の所定画像を前記表示媒体に表示するように前記表示部を制御し、前記第２の制限領域は、前記第２の所定状態に予め対応づけられた領域であり、前記第１の制限領域とは位置、サイズ、数、または形状のうち少なくとも１つが異なる、
    表示制御装置。
11. 請求項１０記載の表示制御装置と、前記表示部とを備える、投影装置。
12. 車両の乗員に通知する第１の通知情報を取得する取得部と、前記車両及び前記乗員のうち少なくとも一方の所定状態を検知する検知部と、前記取得部において取得された前記第１の通知情報に基づいた所定画像を生成して表示媒体に表示する表示部と、を含む表示システムにおけるコンピュータに実行させる表示制御プログラムであって、
    前記コンピュータに対して、
    前記検知部が第１のタイミングで第１の所定状態を検知した場合、前記表示媒体のうち第１の制限領域の外側の領域に、前記第１の通知情報を示すための第１の所定画像を生成して、前記第１の所定画像を前記表示媒体に表示するように前記表示部を制御する処理と、前記第１の制限領域は、前記第１の所定状態に予め対応づけられた領域であり、
    前記検知部が前記第１のタイミングより後の第２のタイミングで前記第１の所定状態と異なる第２の所定状態を検知した場合、前記第１の所定状態と、前記第２の所定状態との間に所定の変化があったか否かを判定する処理と、
    前記所定の変化があったと判定された場合、前記表示媒体のうち第２の制限領域の外側の領域に、前記第１の通知情報を示すための第２の所定画像を生成して、前記第２の所定画像を前記表示媒体に表示するように前記表示部を制御する処理と、を実行させ、
    前記第２の制限領域は、前記第２の所定状態に予め対応づけられた領域であり、前記第１の制限領域とは位置、サイズ、数、または形状のうち少なくとも１つが異なる、
    表示制御プログラム。
13. 前記検知部で前記第２の所定状態が検知されたことにより、前記第１の制限領域の外側の領域に表示された前記第１の通知情報を示すための第１の所定画像が、前記第２の制限領域に含まれることとなった場合、
    前記コンピュータに対して、
    前記第１の通知情報を示す画像が、前記第２の制限領域から、前記第２の制限領域の外側の領域へ移動するように、前記第１の通知情報を示すための第２の所定画像を前記表示媒体に表示するように前記表示部を制御する処理、を実行させる、
    請求項１２に記載の表示制御プログラム。
14. 前記検知部が前記第２のタイミングより後の第３のタイミングで前記第２の所定状態と異なる第３の所定状態を検知した場合、
    前記コンピュータに対して、
    前記第２の所定状態と、前記第３の所定状態との間に所定の変化があったか否かを判定する処理と、
    前記所定の変化があったと判定された場合、第３の制限領域の外側の領域に前記第１の通知情報を示すための第３の所定画像を生成して前記表示媒体に表示するように前記表示部を制御する処理と、を実行させ、前記第３の制限領域は、前記第３の所定状態に予め対応づけられた領域であり、前記第１の制限領域とは位置、サイズ、数、または形状のうち少なくとも１つが異なる、
    請求項１２に記載の表示制御プログラム。
15. 前記第１のタイミングにおいて前記第１の通知情報を示す画像が前記表示媒体に表示された位置が、前記第３の制限領域の外側の領域である場合において、
    前記所定の変化があったと判定された場合、前記コンピュータに対して、前記第１のタイミングにおいて前記第１の通知情報を示す画像が表示された位置に前記第１の通知情報を示す画像を表す、第３の所定画像を生成して前記表示媒体に表示するように前記表示部を制御する処理を、実行させる、
    請求項１４に記載の表示制御プログラム。
16. 前記制限領域は、前記表示媒体において、実線、点線、は線、鎖線、または波線のいずれか１つで表示する、
    請求項１２に記載の表示制御プログラム。
17. 前記第２の制限領域の大きさが、前記表示媒体の大きさと実質的に等しい場合、
    前記コンピュータに対して、前記第１の通知情報を示す画像を前記表示媒体上から消去するように前記表示部を制御する処理、を実行させる、請求項１２に記載の表示制御プログラム。
18. 前記取得部が、前記第１の通知情報、および、前記第１の通知情報と異なる第２の通知情報を取得した場合において、
    前記コンピュータに対して、
    前記第１の通知情報を示す画像および前記第２の通知情報を示す画像をそれぞれ前記第１の制限領域の外側の領域に表示するための第３の所定画像を生成して、前記表示媒体に表示するように前記表示部を制御する処理と、
    前記第１のタイミングにおいて、前記第１の通知情報を示す画像および前記第２の通知情報を示す画像がそれぞれ前記表示媒体に表示された位置が、前記第２の制限領域に含まれる場合において、
    前記所定の変化があったと判定された場合、前記第２の制限領域の外側の領域に前記第１の通知情報を示す画像を表示し、かつ、前記第１のタイミングにおいて前記第２の通知情報を示す画像が前記表示媒体に表示された位置に前記第２の通知情報を示す画像を表示するための第４の所定画像を生成して、前記表示媒体に表示するように前記表示部を制御する処理、を実行させる、
    請求項１２に記載の表示制御プログラム。
19. 前記第４の所定画像の所定画像のうち、前記第２の通知情報を示す画像は、色、透明度、および輝度のうち少なくとも１つが変更される、
    請求項１８に記載の表示制御プログラム。
20. 前記所定状態は、前記車両の自動運転レベルであり、前記自動運転レベルは、前記車両の運転手が運転に必要な全ての操作を行うレベルから、前記車両の運転手が運転に必要な全ての操作を行わずに自動運転できるレベルまでの間に複数のレベルが規定されており、
    第１の自動運転レベルと、第２の自動運転レベルとの間の前記所定の変化は、前記複数のレベルの間の推移である、
    請求項１２に記載の表示制御プログラム。
21. 車両の乗員に通知する第１の通知情報を取得する取得部と、
    前記車両及び前記乗員のうち少なくとも一方の所定状態を検知する検知部と、
    前記取得部において取得された前記第１の通知情報に基づいた所定画像を生成して表示媒体に表示する表示部と、
    を含む表示システムにおける表示制御方法であって、
    前記検知部が第１のタイミングで第１の所定状態を検知した場合、前記表示媒体のうち第１の制限領域の外側の領域に、前記第１の通知情報を示すための第１の所定画像を生成して、前記第１の所定画像を前記表示媒体に表示するように前記表示部を制御し、前記第１の制限領域は前記第１の所定状態に予め対応づけられた領域であり、
    前記検知部が前記第１のタイミングより後の第２のタイミングで前記第１の所定状態と異なる第２の所定状態を検知した場合、前記第１の所定状態と、前記第２の所定状態との間に所定の変化があったか否かを判定し、
    前記所定の変化があったと判定された場合、前記表示媒体のうち第２の制限領域の外側の領域に、前記第１の通知情報を示すための第２の所定画像を生成して、前記第２の所定画像を前記表示媒体に表示するように前記表示部を制御し、前記第２の制限領域は、前記第２の所定状態に予め対応づけられ、前記第１の制限領域と位置、サイズ、数、または形状のうち少なくとも１つが異なる、
    表示制御方法。

Images