JP2023114273A - 画像表示装置及び画像表示方法 - Google Patents

Abstract

【課題】現実空間に対してユーザに応じた情報を重畳して表示させることが可能な画像表示装置及び画像表示方法を提供する。【解決手段】仮想画像が景色に重畳するように、仮想画像を含む重畳画像を表示機器に表示させる画像表示部と、景色から、重畳画像において仮想画像が表示される表示領域を検出する領域検出部と、表示機器に関連付けられた、ユーザに関するユーザ情報を取得するユーザ情報取得部とを備え、画像表示部は、ユーザ情報に応じた仮想画像を表示機器に表示させる画像表示装置。【選択図】図１

Description

本発明は、画像表示装置及び画像表示方法に関するものである。

従来より、広告用車両を用いた広告システムが知られている（特許文献１）。広告用車両は、車体全体を覆うように取り付けられるボディー部と、ボディー部の表面に形成される面状の広告部を備えている。また、この広告システムは、画像又は動画を撮像する撮像手段と、撮像手段で撮像された画像中又は動画中に写った空間上の座標位置を示す座標ポイントを検出する検出手段と、検出手段によって検出された座標ポイントに基づいて、画像内又は動画内の空間座標及び立体形状を特定する解析手段と、解析手段が特定した空間座標及び立体形状に合致させてコンピューターグラフィックを画像又は動画に合成する合成手段と、合成手段が合成した画像又は動画を表示する表示手段とを備えている。また、この広告システムにおいて、広告用車両のボディー部の外表面又は広告部には、ボディー部表面上に複数の座標ポイントが表示され、広告コンテンツとしては、商社名や社名等のテキストデータや、３Ｄデータ等が配信される。

特開２０１７－１８１８４２号公報

従来技術での広告コンテンツは、ユーザの特性や状況に応じて変わるものではないため、従来技術では、広告用車両という現実空間に対して、ユーザの特性や状況に応じて変わる情報を重畳して表示させることができない、という問題がある。

本発明が解決しようとする課題は、現実空間に対してユーザに応じた情報を重畳して表示させることが可能な画像表示装置及び画像表示方法を提供することである。

本発明は、景色から、表示機器に表示される重畳画像において仮想画像が表示される表示領域を検出し、表示機器に関連付けられた、ユーザに関するユーザ情報を取得し、ユーザ情報に応じた仮想画像が景色に重畳するように、仮想画像を含む重畳画像を表示機器に表示させることにより、上記課題を解決する。

本発明によれば、現実空間に対してユーザに応じた情報を重畳して表示させることができる。

図１は、第１実施形態に係る画像表示システムの構成概略図である。 図２は、図１に示すコントローラの機能を説明するための図である。 図３は、仮想画像の表示対象領域である表示領域を説明するための図である。 図４は、第１実施形態に係る非透過型表示機器が表示する重畳画像において、広告画像の表示位置及び大きさを説明するための図である。 図５は、図４に示す非透過型表示機器に表示される広告画像の例を説明するための図である。 図６は、図１に示すコントローラにより実行される画像表示方法の手順の一例を示すフローチャートである。 図７は、第２実施形態に係る画像表示システムの構成概略図である。 図８は、第２実施形態に係る透過型表示機器が表示する重畳画像において、広告画像の表示位置及び大きさを説明するための図である。 図９は、第３実施形態に係る画像表示システムの構成概略図である。

以下、本発明に係る画像表示装置及び画像表示方法の実施の形態を図面に基づいて説明する。

≪第１実施形態≫
図１は、第１実施形態に係る画像表示システム１００の構成概略図である。図１に示すように、画像表示システム１００は、車両１０に搭載されたシステムである。図１の例では、車両１０に二人の人間（ユーザＡ、Ｂ）が乗車している。本実施形態に係る画像表示システム１００は、ユーザＡが携帯する携帯機器１と、車載機器２と、画像表示装置３を含む。画像表示システム１００の各構成間は、所定の有線の通信規格（例えば、ＣＡＮ）又は無線の通信規格（例えば、Bluetooth（登録商標））により通信可能となっており、構成間で情報の送受信が可能なように構成されている。なお、車両１０は、図１に示す構成に限られず、例えばエンジン、モータ等の駆動類、車両１０の室内を撮像する車内カメラ、車両１０の室内に設けられた収音マイク及び車載スピーカーなどの補器類、及びバッテリ等を有している。また以降の説明において、現在地の周辺を表す「現在地周辺」の用語は、現在地を含む所定の範囲内という意味で用いられ、所定の範囲での現在地の場所や所定の範囲の大きさなどは特に限定されるものではない。例えば、所定の範囲の大きさは、ユーザの移動手段に応じて適宜変更することが可能である。また例えば、現在地が移動した場合、現在地周辺も移動先の現在地に応じて変わる。

本発明に係る画像表示装置及び画像表示方法は、情報の付加により現実空間を拡張する技術として知られている、拡張現実（拡張現実：ＡＲ：Augmented Reality）の分野に利用される。従来から、拡張現実の実現方法としては、非透過型表示機器を用いて拡張現実を実現するビデオシースルー方式と、透過型表示機器を用いて拡張現実を実現するシースルー方式とが知られている。本実施形態では、ビデオシースルー方式として、画像表示装置３が携帯機器１の表示機器に仮想画像を重畳して表示させる例を説明する。仮想画像とは、現実空間に存在しない仮想の画像である。また本実施形態では、仮想画像を視認するユーザとして、携帯機器１を介して仮想画像を視認するユーザＡを例に挙げて説明する。また本実施形態では、図１に示すように、車両１０にはユーザＡの他に、ユーザＢが乗車している場合を例に挙げて説明する。なお、ユーザＡ、Ｂは、車両１０のドライバー及びドライバー以外のその他の乗員のいずれであってもよい。仮想画像の画像内容については後述する。

携帯機器１は、少なくとも、撮像装置（以降、携帯カメラともいう）と、ユーザーインターフェース（例えば、タッチパネル式ディスプレイ等）と、ＣＰＵ、メモリ、記憶装置等を備えるコンピュータとを含むように構成されている。携帯機器１は、ユーザが携帯可能な機器であって、車両１０とは別体の機器である。携帯カメラは、携帯機器１の所定の位置に設けられ、レンズが向く方向を撮像する。本実施形態において、携帯カメラにより撮像可能な画像は、少なくとも、静止画及び動画のうち何れか一つであればよい。携帯カメラにより撮像された撮像画像は、所定周期ごとに、画像情報として画像表示装置３に出力される。ユーザーインターフェースは、非透過型表示機器（以降、携帯ディスプレイともいう）を含む。携帯機器１としては、例えば、スマートフォン、タブレット等が挙げられる。

例えば、ユーザＡが携帯機器１の拡張現実用アプリケーションを起動させると、携帯ディスプレイは、非透過型表示機器として機能する。携帯カメラにより撮像された景色の撮像画像（以降、景色画像ともいう）は、画像表示装置３に出力される。そして、後述する画像表示装置３での処理が終了して、画像表示装置３から景色画像及び仮想画像を含む重畳画像の情報が携帯機器１に入力されると、携帯ディスプレイには重畳画像が表示される。重畳画像は、現実空間を映しだす景色画像に対して仮想画像が重畳した画像である。ユーザは、携帯ディスプレイを介して、仮想画像が現実空間に重畳しているような感覚を感じる。ビデオシースルー方式の拡張現実により、ユーザは現実空間を認識するとともに、仮想画像により示される情報を認識することができる。

車載機器２は、画像表示システム１００に関する車両１０の搭載機器である。図１に示すように、車載機器２は、位置検出装置２１、経路案内装置２２、通信装置２３、及びデータベース２４を含む。

位置検出装置２１は、車両１０の現在地を検出するための装置であり、例えばＧＰＳ機器を用いることができる。本実施形態では、例えば、上述した携帯機器１において拡張現実機能が有効に設定されると、位置検出装置２１は、拡張現実機能が有効に設定されたときの車両１０の位置情報を取得する。位置検出装置２１により取得された車両１０の位置情報は、ユーザＡの位置情報として画像表示装置３に出力される。また本実施形態では、位置検出装置２１は、所定の期間ごとに車両１０の位置情報を取得し、車両１０の位置情報を経路案内装置２２に出力する。

経路案内装置２２は、車両１０の乗員に経路案内するための装置であり、例えばカーナビゲーション装置を用いることができる。経路案内装置２２には、位置検出装置２１から車両１０の位置情報が所定周期ごとに入力される。経路案内装置２２は、車両１０の現在地から車両１０の目的地（例えば、乗員により設定された目的地）までの車両１０の走行経路を生成し、生成した走行経路を乗員に案内する。例えば、経路案内装置２２は、車載スピーカーを介して音声にて車両１０の走行経路を案内し、又は経路案内装置２２に備わる車載ディスプレイを介して画面表示にて車両１０の走行経路に乗員に案内する。経路案内装置２２により生成された車両１０の走行経路は、ユーザＡの移動手段を示す移動手段情報として画像表示装置３に出力される。

通信装置２３は、車両１０の外部との間で無線により情報を送受信する無線通信機能を備えた装置であって、例えば、テレマティクスコントロールユニット（TCU：Telematics Control Unit）が挙げられる。通信装置２３は、無線通信機能により、例えば、４Ｇ／ＬＴＥ、Ｗｉｆｉ（登録商標）等の通信規格を利用して、インターネットに接続し、車両１０の外部に設けられたサーバーやシステムとの間で様々な情報の送受信を行う。本実施形態では、通信装置２３は、車両１０の現在地周辺の天気に関する情報（以降、天気情報ともいう）、現在時刻の情報（以降、時間情報ともいう）を車両１０の外部から取得する。通信装置２３により取得された天気情報及び時間情報は、画像表示装置３に出力される。

データベース２４は、画像表示システム１００に関する様々な情報を格納する。本実施形態では、データベース２４は、情報のカテゴリが異なる、ユーザ情報、広告情報、及び車両情報をそれぞれ格納する。ユーザ情報は、ユーザの特性及び状況のうち少なくとも何れか一つを示す情報であって、ユーザ情報としては、例えば、ユーザの性別を示す性別情報、ユーザの年齢を示す年齢情報、ユーザの嗜好を示す嗜好情報、ユーザを識別可能な個人識別情報、ユーザがインターネット経由で購入した物品又はサービスの購買履歴（以降、購買履歴情報ともいう）が挙げられる。本実施形態では、データベース２４は、ユーザ情報として、上述した各種情報の例のうち少なくとも何れか一つを格納していればよい。データベース２４から画像表示装置３には、画像表示装置３からの要求信号に応じた各種情報が出力される。例えば、ユーザが携帯機器１にユーザ情報の各項目を予め入力することで、携帯機器１からデータベース２４にユーザ情報が出力され、データベース２４にはユーザ情報が格納される。

広告情報は、ユーザに広告を提示するために画像表示装置３で用いられる情報であって、本実施形態では、地図情報に基づく広告の位置情報（以降、広告位置情報ともいう）と、広告内容に関する情報（以降、広告内容情報ともいう）を含む。広告の位置情報は、現存する看板広告の位置情報と、拡張現実により仮想画像を表示させるためのマーカー（以降、ＡＲマーカーともいう）の位置情報とを含む。ＡＲマーカーは、後述する画像表示装置３の機能において、仮想画像の表示位置を示すマーカーとして用いられる表示位置認識用のマーカーである。看板広告としては、屋上看板、壁面看板、突き出し看板、電柱広告、野立て看板等が例示できる。本実施形態では、道路に設けられ、通行人や車両１０の乗員に店舗や企業などをＰＲ、案内、誘導するための野点看板を例に挙げて説明する。広告内容情報は、画像表示装置３によって現実空間に対して重畳して表示される仮想画像の情報である。仮想画像は、図形の画像、文字の画像、及びこれらの組み合わせの画像を含む。本実施形態では、仮想画像として、店舗が広告するための広告画像を例に挙げて説明する。例えば、広告画像は、通信装置２３により車両１０の外部から予め取得された後、データベース２４に格納される。

車両情報は、車両１０の状態を示す情報であって、本実施形態では、車両１０の駆動源の残量（ガソリン自動車やハイブリッド自動車の場合におけるガソリンの残量、電気自動車におけるバッテリの残量）を示す情報を含む。データベース２４に格納される車両１０の駆動源の残量情報は、駆動源の残量を管理する車載コンピュータ（図示しない）により所定の周期で更新される。

次に、画像表示装置３について説明する。画像表示装置３は、ハードウェア及びソフトウェアを備えたコンピュータにより構成され、プログラムを格納したＲＯＭ（Read Only Memory）と、このＲＯＭに格納されたプログラムを実行するＣＰＵ（Central Processing Unit）と、アクセス可能な記憶装置として機能するＲＡＭ（Random Access Memory）とから構成されている。図１に示すように、画像表示装置３は、コントローラ３１を備えている。コントローラ３１は、上述したコンピュータに相当する。

図２は、図１に示すコントローラ３１の機能を説明するための図である。図２に示すように、コントローラ３１には、広告情報取得部３２と、ユーザ位置情報取得部３３と、ユーザ情報取得部３４と、同伴者認識部３５と、表示領域検出部３６と、表示情報判断部３７と、画像表示部３８が含まれる。これらのブロックは、ＲＯＭに確立されたソフトウェアによって、後述する各機能を実現する。

広告情報取得部３２は、車載機器２から、広告位置情報及び広告内容情報を含む広告情報を取得する。本実施形態では、広告情報取得部３２は、データベース２４に格納される広告位置情報から、広告位置が車両１０の現在地周辺を示す広告位置情報を抽出する。また広告情報取得部３２は、データベース２４に格納される広告内容情報から、車両１０の現在地周辺に位置する店舗の広告内容情報を抽出する。広告情報取得部３２により取得された広告情報は、表示情報判断部３７に出力される。

ユーザ位置情報取得部３３は、車載機器２からユーザ位置情報を取得する。本実施形態では、ユーザ位置情報取得部３３は、ユーザＡの現在地の情報として、位置検出装置２１から車両１０の現在地を取得する。またユーザ位置情報取得部３３は、通信装置２３を介して、車両１０の現在地周辺の天気情報と、現在の時刻の情報を取得する。ユーザ位置情報取得部３３により取得されたユーザ位置情報は、表示情報判断部３７に出力される。なお、本実施形態では、ユーザ位置情報取得部３３により取得されるユーザ位置情報として、ユーザＡの現在地の情報、ユーザＡの現在地周辺の天気情報、及び現在の時刻の情報を例に挙げて説明するが、ユーザ位置情報は、少なくとも、ユーザＡの位置情報を含んでいればよい。また、ユーザ位置情報取得部３３によるユーザＡの位置情報の取得元は、位置検出装置２１に限られず、例えば、携帯機器１が位置検出装置２１と同等の機能（例えば、ＧＰＳ機能）を備えている場合、ユーザ位置情報取得部３３は、ユーザＡの現在地の情報として、携帯機器１から携帯機器１の現在地を取得してもよい。

ユーザ情報取得部３４は、表示機器に関連付けられたユーザ情報を取得する。本実施形態では、ユーザ情報取得部３４は、車載機器２から、携帯機器１を携帯するユーザＡに関するユーザ情報を取得する。ユーザ情報取得部３４は、データベース２４に格納されるユーザＡの性別、年齢、嗜好、個人識別情報、及び購買履歴情報を取得し、また経路案内装置２２から車両１０の走行経路を取得する。ユーザ情報取得部３４により取得されたユーザ情報は、表示情報判断部３７に出力される。なお、本実施形態では、ユーザ情報取得部３４に取得されるユーザ情報として、ユーザＡの性別情報、ユーザＡの年齢情報、ユーザＡの嗜好情報、ユーザＡの個人識別情報、ユーザＡの購買履歴情報、及びユーザＡの移動手段情報を例に挙げて説明するが、ユーザ情報は、性別情報、年齢情報、嗜好情報、個人識別情報、購買履歴情報、及び移動手段情報のうち少なくとも何れか一つ含んでいればよい。また、ユーザ情報取得部３４によるユーザ情報の取得元は、車載機器２に限られず、例えば、携帯機器１にユーザ情報が登録されている場合、ユーザ情報取得部３４は、携帯機器１からユーザ情報を取得してもよい。また例えば、拡張現実用アプリケーションを使用するために、ユーザ情報を含むユーザアカウント等の登録が必要な場合、ユーザ情報取得部３４は、通信装置２３を介して、拡張現実用アプリケーションのアカウントを管理するサーバーから、ユーザ情報を取得してもよい。

また、ユーザ情報取得部３４は、携帯機器１を携帯するユーザＡを識別するために、携帯機器１から携帯機器１の登録情報（アカウント等のユーザＩＤ）を取得する。そして、ユーザ情報取得部３４は、データベース２４に格納される情報から、携帯機器１に登録されたユーザＡに関するユーザ情報を検索して取得する。これにより、ユーザ情報取得部３４は、ユーザＢではなく、携帯機器１に関連付けられた、ユーザＡのユーザ情報を取得することができる。またユーザ情報取得部３４は、重畳画像の提示対象として、携帯機器１に登録されているユーザＡを、提示対象ユーザとして特定する。

同伴者認識部３５は、ユーザ情報取得部３４により認識された提示対象ユーザから、所定の範囲内に位置する同伴者を認識する。本実施形態では、同伴者認識部３５は、車内カメラから、車両１０の室内の様子を示す撮像画像を取得し、撮像画像に対して画像認識処理を実行することで、提示対象ユーザには同伴者が存在するか否かを判定する。同伴者認識部３５により判定された同伴者の存否結果は、表示情報判断部３７に出力される。図１の例では、同伴者認識部３５は、車両１０の室内の様子を示す撮像画像から、ユーザＢを提示対象ユーザ（ユーザＡ）の同伴者として認識し、同伴者が存在すると判定する。

表示領域検出部３６は、ユーザが視認する景色から、非透過型表示機器が表示する重畳画像において、仮想画像が表示される表示領域を検出する。表示領域検出部３６は、表示機器の種別に応じた撮像装置から、画像情報を取得し、取得した画像情報に対して画像認識処理を実行する。例えば、本実施形態では、ユーザが携帯機器１の拡張現実用アプリケーションを起動させると、表示領域検出部３６は、携帯機器１の携帯カメラから、撮像画像（携帯カメラが向むけられた方向の景色が写る撮像画像）を取得する。また、表示領域検出部３６は、データベース２４から、広告看板の位置又はＡＲマーカーの位置が車両１０の現在地周辺の位置を示す広告位置情報を取得する。

次に、図３を用いて、表示領域検出部３６による表示領域の検出方法について説明する。図３は、仮想画像の表示対象領域である表示領域を説明するための図である。図３は、携帯カメラにより撮像された撮像画像の一例である。撮像画像には、車両１０の前方景色が写されている。例えば、図３に示すように、車両１０の前方には、野立て看板Ａ１（以降、単に看板Ａ１ともいう）と、ＡＲマーカー用の看板Ｍ１（以降、単に看板Ｍ１ともいう）が存在したとする。看板Ａ１には、店舗による広告Ａを表示する広告板Ａ２が設けられている。また看板Ｍ１には、ＡＲマーカーＭを表示するＡＲマーカー用板Ｍ２が設けられている。

図３の例において、表示領域検出部３６は、撮像画像に対して画像認識処理を実行することで、重畳画像全体において仮想画像が表示される表示領域を検出する。例えば、表示領域検出部３６は、まず、撮像画像に写る看板Ａ１を認識すると、看板Ａ１における広告板Ａ２の位置（撮像画像上での広告板Ａ２の高さ）を検出する。表示領域検出部３６は、次に、広告板Ａ２が占有する大きさの領域を、仮想画像が表示される表示領域として検出する。また例えば、表示領域検出部３６部は、まず、撮像画像に看板Ｍ１を認識すると、看板Ｍ１におけるＡＲマーカー用板Ｍ２の位置（撮像画像上でのＡＲマーカー用板Ｍ２の高さ）を検出する。表示領域検出部３６は、次に、ＡＲマーカー用板Ｍ２を特定することで、ＡＲマーカーＭを、仮想画像が表示される表示領域として検出する。図３の例では、表示領域検出部３６による処理の結果、広告Ａの位置及び大きさに相当する領域と、ＡＲマーカーＭの位置及び大きさに相当する領域は、それぞれ、表示領域として検出される。表示領域検出部３６により検出された表示領域の情報は、図２に示す表示情報判断部３７及び画像表示部３８に出力される。なお、表示領域検出部３６による画像認識処理は、本願出願時に知られた画像認識処理を適用できるものとする。また表示領域検出部３６は、所定周期ごとに、表示領域の検出処理を実行する。これにより、例えば、車両１０の移動に伴い、撮像画像に写る看板Ａ１及び看板Ｂの位置及び／又はその大きさが変化しても、撮像画像における表示領域の大きさ及び位置を検出することができる。

図２に戻り、コントローラ３１の機能について説明する。表示情報判断部３７は、ユーザの特性及びユーザの状況のうち少なくとも何れか一つに基づき、非透過型表示機器に表示させる情報（以降、表示情報ともいう）を判断し、判断結果に基づき、ユーザに応じた仮想画像を生成する。

図２に示すように、表示情報判断部３７には、広告情報取得部３２から広告情報が入力され、ユーザ位置情報取得部３３からユーザ位置情報が入力され、ユーザ情報取得部３４からユーザ情報が入力され、同伴者認識部３５から同伴者の存否結果が入力され、表示領域検出部３６から表示領域情報が入力される。本実施形態では、表示情報判断部３７は、入力される各種情報からユーザの特性及び状況を判定し、ユーザの特性及びユーザの状況に応じた広告画像を選択する。選択された広告画像の例については後述する。

画像表示部３８は、表示情報判断部３７から入力されたユーザ情報に応じた仮想画像が、ユーザが視認する景色に重畳するように、仮想画像を含む重畳画像を表示機器に表示させる。本実施形態では、例えば、ユーザＡが携帯機器１の拡張現実用アプリケーションを起動させると、画像表示部３８は、ユーザＡのユーザ情報に応じた広告画像が携帯カメラにより撮像された景色画像に重畳するように、広告画像及び景色画像を含む重畳画像を携帯ディスプレイに表示させる。

図４は、携帯ディスプレイ（非透過型表示機器）が表示する重畳画像において、広告画像の表示位置及び大きさを説明するための図である。図４は、携帯機器１の携帯ディスプレイに、図３に示す車両１０の前方景色が表示された様子を表す図である。図４に示すように、図３に示す車両１０の前方景色が写る景色画像に対して、図３の広告Ａに対応した位置には広告Ｂの広告画像Ｂ１が表示され、図３のＡＲマーカーＭに対応した位置には、広告Ｃの広告画像Ｃ１が表示されている。現実空間においてユーザＡが携帯ディスプレイを介して視認する広告の位置に、広告画像Ｂ１、Ｃ１が表示されているため、ユーザＡは、広告画像の表示位置に対して違和感を覚えることなく、広告画像Ｂ１、Ｃ１を視認できる。また現実空間においてユーザＡが携帯ディスプレイを介して視認する広告の大きさに対応した広告画像Ｂ１、Ｃ１が表示されるため、ユーザＡは、広告画像Ｂ１、Ｃ１の大きさに対して違和感を覚えることなく、広告画像Ｂ１、Ｃ１を視認できる。

図５は、図４に示す携帯ディスプレイに表示される広告画像の例を説明するための図である。図５において、左側の広告Ａは、現存する広告看板の広告であり、例えば、図３に示す広告Ａに対応する。上述したコントローラ３１の処理によって、図３に示す広告Ａに対して、ユーザ情報に応じて異なる広告画像が表示される。なお、図５に示すユーザＤ～ユーザＦは、図１に示すユーザＡのように、携帯機器１を携帯して車両１０に乗車しているユーザとする。

例えば、ユーザＤのユーザ情報が「性別：男性、年齢：４０歳、同伴者なし、移動手段：車両」を示し、現在時刻が正午前後の場合、コントローラ３１は、男性が一人で昼食をとることが可能な飲食店の情報を表示情報として判断する。そして、コントローラ３１は、ユーザＤの現在地周辺に位置するラーメン屋の広告画像Ｄ１を、図３に示す広告Ａの位置に表示させる。また例えば、ユーザＥのユーザ情報が「性別：女性、年齢:３５歳、同伴者あり、移動手段：車両」を示し、現在時刻が午後３時前後であり、天気が雨の場合、コントローラ３１は、女性が同伴者（図１に示すユーザＢを参照）と一緒に休憩可能な飲食店の情報を表示情報として判断する。そして、コントローラ３１は、ユーザＥの現在地周辺に位置する喫茶店の広告画像Ｅ１を、図３に示す広告Ａの位置に表示させる。また例えば、ユーザＦのユーザ情報が「性別：女性、年齢:２５歳、同伴者あり、移動手段：車両」を示し、車両１０の駆動源の残量（ガソリンの残量）が所定量以下の場合、コントローラ３１は、給油するためにガソリンスタンドの情報を表示情報として判断する。そして、コントローラ３１は、ユーザＦの現在地周辺に位置するガソリンスタンドの広告画像Ｆ１を、図３に示す広告Ａの位置に表示させる。このように、同じ広告Ａの位置に表示される広告画像であっても、ユーザの特性及びユーザの状況に応じて異なる広告画像Ｄ１～広告画像Ｆ１が表示される。

図６は、図１に示すコントローラ３１により実行される画像表示方法の手順の一例を示すフローチャートである。ステップＳ１では、コントローラ３１は、ＡＲ情報を提示するか否かを判定する。ＡＲ情報とは、現実空間に存在しない情報であって、本実施形態では、広告画像に相当する。例えば、コントローラ３１は、携帯機器１から、ユーザＡが携帯機器１の拡張現実用アプリケーションを起動させたことを示すユーザＡの操作信号を取得した場合、ＡＲ情報を提示すると判定する。一方、コントローラ３１は、携帯機器１から上記ユーザＡの操作信号を取得できない場合、ＡＲ情報を提示しないと判定する。コントローラ３１により肯定的な判定がされた場合、ステップＳ２に進み、否定的な判定がされた場合、コントローラ３１は、図６に示す処理を終了させる。

ステップＳ２では、コントローラ３１は、ＡＲ情報を表示させるために必要な各種情報を取得する。本実施形態では、コントローラ３１は、車載機器２から、広告情報と、ユーザ位置情報と、天気情報と、時間情報と、ユーザ情報を取得する。またコントローラ３１は、ユーザＡを識別するために、携帯機器１から携帯機器１の登録情報を取得する。またコントローラ３１は、ユーザＡの同伴者の存否を判定するために、車内カメラから車両１０の室内の撮像画像を取得する。

ステップＳ３では、コントローラ３１は、ステップＳ２で取得した広告位置情報から、非透過型表示機器に表示される重畳画像において、広告画像が表示される表示領域を検出する。例えば、コントローラ３１は、ユーザＡの現在地周辺に設けられた看板広告又はＡＲマーカーを抽出する。またコントローラ３１は、携帯機器１により撮像された撮像画像に対して画像処理を実行することで、撮像画像に含まれる看板広告又はＡＲマーカーを認識する。コントローラ３１は、撮像画像に含まれる看板広告の領域を表示領域として検出する。またコントローラ３１は、撮像画像に含まれるＡＲマーカーの領域を表示領域として検出する。

ステップＳ４では、コントローラ３１は、ステップＳ２で取得した広告情報、ユーザ位置情報、ユーザ情報、及びステップＳ３で検出した表示領域に基づき、非透過型表示機器に表示させる表示情報を判断する。例えば、図５を用いて説明したように、コントローラ３１は、ユーザの性別、年齢、嗜好、同伴者の存否、及び移動手段（車両情報を含む）に応じて表示情報を判断する。本実施形態では、コントローラ３１は、判断された表示情報に基づく広告画像を選択する。

ステップＳ５では、コントローラ３１は、ステップＳ４で判断された表示情報に基づき、非透過型表示機器に表示させる重畳画像を生成する。本実施形態では、コントローラ３１は、携帯カメラにより撮像された景色画像及びステップＳ４で選択した広告画像を含む重畳画像を生成する。コントローラ３１は、ステップＳ３で検出した表示領域に広告画像が表示されるように、重畳画像を生成する。

ステップＳ６では、コントローラ３１は、ステップＳ５で生成した重畳画像を非透過型表示機器に出力する。本実施形態では、コントローラ３１は、ユーザ情報に応じた広告画像が景色画像に重畳するように、広告画像及び景色画像を含む重畳画像を非透過型表示機器に表示させる。

ステップＳ７では、コントローラ３１は、ＡＲ情報の提示を継続するか否かを判定する。このステップは、ステップＳ１に対応するため、コントローラ３１による処理内容については、ステップＳ１での説明を援用する。コントローラ３１により肯定的な判定がされた場合、ステップＳ２に戻り、否定的な判定がされた場合、コントローラ３１は、図６に示す処理を終了させる。ステップＳ２に戻ると、ステップＳ７で否定的な判定がされるまで、ステップＳ２～ステップＳ６の処理が繰り返し実行され、非透過型表示機器にはＡＲ情報が表示し続ける。

以上のように、本実施形態に係る画像表示装置３は、広告画像が景色に重畳するように、広告画像を含む重畳画像を非透過型表示機器に表示させる画像表示部３８と、携帯カメラにより撮像された景色画像から、重畳画像において広告画像が表示される表示領域を検出する表示領域検出部３６と、非透過型表示機器に関連付けられた、ユーザに関するユーザ情報を取得するユーザ情報取得部３４とを備える。画像表示部３８は、ユーザ情報に応じた広告画像が景色画像に重畳するように、広告画像及び景色画像を含む重畳画像を非透過型表示機器に表示させる。これにより、現実空間にユーザに応じた広告画像の情報を重畳して表示させることができる。

また本実施形態では、ユーザ情報は、携帯ディスプレイに表示される画像を視認するユーザの特性及び状況のうち少なくとも何れか一方を示す情報である。これにより、ユーザの特性や状況に適した広告画像を表示させることができる。

また本実施形態では、ユーザ情報は、ユーザの個人識別情報、ユーザの移動手段情報、ユーザの嗜好情報、及びユーザの購買履歴情報のうち少なくとも何れか一つを含む。これにより、ユーザの特性や状況にあわせて、表示領域に広告画像の情報を表示させることができる。例えば、ユーザ個人の特性に特化した広告画像の情報、ユーザの移動手段や状況に応じた広告画像の情報、ユーザの嗜好に合わせた広告画像の情報、ユーザの購買履歴に合わせた広告画像の情報等をユーザに提示することができる。

また本実施形態では、現実空間に存在しない仮想画像は広告画像であり、広告画像が表示される表示領域は、景色の中にある看板の領域である。これにより、現存する看板の部分に広告画像の情報が表示されるため、ユーザは広告画像の情報があたかも現存する看板の情報に錯覚する。その結果、広告画像の表示位置に対するユーザの違和感を低減させることができる。ユーザは現実空間も同時に視認できるため、ユーザの視界を確保しつつ広告画像の情報をユーザに提示することができる。

また本実施形態では、表示領域検出部３６は、景色画像から仮想画像の表示位置を示すＡＲマーカーを特定することで、表示領域を検出する。これにより、表示領域の位置及び範囲を精度よく検出できる。また、表示領域とそれ以外の領域との識別が容易にできる。

また本実施形態に係る画像表示装置３は、ＡＲマーカーの位置に関するマーカー位置情報を取得する広告情報取得部３２と、ユーザの位置に関するユーザ位置情報を取得するユーザ位置情報取得部３３とを備える。表示領域検出部３６は、マーカー位置情報及びユーザ位置情報に基づいて、ユーザから所定の範囲内に位置するＡＲマーカーを特定する。これにより、ユーザが携帯機器を介して視認可能なＡＲマーカーを特定することができる。

また本実施形態に係る画像表示装置３は、ユーザから所定の範囲内に位置するユーザの同伴者を認識する同伴者認識部３５を備える。画像表示部３８は、同伴者が認識された場合、ユーザＡと同伴者であるユーザＢとの組み合わせに応じた広告画像を非透過型表示機器に表示させる。これにより、ユーザの同伴者を考慮した広告画像の情報をユーザに提示することができる。例えば、図５を用いて説明したように、同伴者と一緒に休憩可能な喫茶店の広告画像の情報を、ユーザに提示することができる。

また本実施形態では、非透過型表示機器に表示される重畳画像を視認するユーザは、車両１０の乗員である。これにより、ユーザが車両１０で移動する状況においても、ユーザに適した広告画像を表示させることができる。

≪第２実施形態≫
図７は、第２実施形態に係る画像表示システム２００の構成概略図である。上述した第１実施形態では、携帯機器１を用いたビデオシースルー方式を説明したが、本実施形態では、シースルー方式として、画像表示装置３が車両１０のフロントガラスに仮想画像を重畳して表示させる例を説明する。画像表示システム２００は、車載機器２と、車両１０のフロントガラスと一体的に構成されるヘッドアップディスプレイ４と、画像表示装置３を含む。図７において、画像表示システム１００と同様の構成については、図１に示す符号と同様の符号を付している。画像表示システム１００と同じ構成については既述の説明を援用し、画像表示システム１００と異なる点を説明する。

ヘッドアップディスプレイ４は、例えば、車両１０のフロントガラスの下部位置に設けられ、灯光器によりフロントガラスに画像を表示する機器である。ヘッドアップディスプレイ４において、フロントガラスは、透過型表示機器として機能する。ヘッドアップディスプレイ４は、少なくとも、ＣＰＵ、メモリ、記憶装置等を備えるコンピュータを含むように構成されている。

例えば、ユーザＡがヘッドアップディスプレイの拡張現実機能が有効となるように設定すると、後述する撮像装置２５により撮像された画像は、ユーザＡが車両１０の前方を視認する範囲の画像（ユーザＡの視界相当の画像）として、画像表示装置３に出力される。そして、後述する画像表示装置３での処理が終了して、画像表示装置３から仮想画像を含む重畳画像の情報がヘッドアップディスプレイ４に入力されると、フロントガラスには重畳画像が表示される。ユーザＡは、フロントガラスを介して、フロントガラスに対して自身と反対側に位置する現実空間を認識することができる。フロントガラスに画像表示装置３からの重畳画像が表示された場合、ユーザＡは、仮想画像が現実空間に重畳しているような感覚を感じる。シースルー方式の拡張現実により、ユーザＡは現実空間を認識するとともに、仮想画像により示される情報を認識することができる。また本実施形態では、ユーザＡ及びユーザＢに視認可能なヘッドアップディスプレイを用いたシースルー方式のため、ユーザＡだけでなく、ユーザＢも現実空間を認識するとともに、仮想画像により示される情報を認識することができる。

図７に示すように、本実施形態では、車載機器２は、位置検出装置２１、経路案内装置２２、通信装置２３、データベース２４、及び撮像装置２５を含む。

撮像装置２５は、車両１０の室外を撮像する車外カメラ、及び車両１０の室内を撮像する車内カメラを含む。車外カメラは、例えば、車両１０の前方の所定位置に設けられ、車両１０の前方を撮像する。また車内カメラは、車両１０の室内の所定位置に設けられ、車両１０の室内を撮像する。本実施形態において、撮像装置２５により撮像可能な画像は、静止画及び動画のうち少なくとも何れか一つであればよい。車外カメラより撮像された撮像画像は、所定周期ごとに、画像情報として画像表示装置３に出力される。また車内カメラにより撮像された撮像画像は、乗車人数情報として画像表示装置３に出力される。なお、撮像装置２５の種類、数、及び設置位置は特に限定されない。

次に、本実施形態に係る画像表示装置３の機能のうち、第１実施形態に係る画像表示装置３の機能と異なる点を説明する。

本実施形態では、ユーザ情報取得部３４は、車載機器２から、ヘッドアップディスプレイ４を視認するユーザに関するユーザ情報を取得する。また、ユーザ情報取得部３４は、ヘッドアップディスプレイ４を視認するユーザを識別するために、データベース２４から車両１０の登録情報（車両の所有者を示すＩＤ等）を取得する。そして、ユーザ情報取得部３４は、データベース２４に格納される情報から、車両１０の所有者に関するユーザ情報を検索して取得する。これにより、ユーザ情報取得部３４は、ヘッドアップディスプレイ４に関連付けられたユーザ情報を取得することができる。図７の例では、ユーザ情報取得部３４は、ユーザＢではなく、車両１０の所有者であるユーザＡに関するユーザ情報を取得する。またユーザ情報取得部３４は、仮想画像を含む重畳画像の提示対象として、車両１０の所有者であるユーザＡを、提示対象ユーザとして特定する。

本実施形態に係る同伴者認識部３５は、上述した第１実施形態と同様に、車内カメラから、車両１０の室内の様子が写る撮像画像を取得し、撮像画像に対して画像認識処理を実行することで、提示対象ユーザには同伴者が存在するか否かを判定する。図７の例では、同伴者認識部３５は、車両１０の室内が写る撮像画像から、ユーザＢを提示対象ユーザであるユーザＡの同伴者として認識し、同伴者が存在すると判定する。

本実施形態では、表示領域検出部３６は、ユーザが視認する景色から、透過型表示機器が表示する重畳画像において、仮想画像が表示される表示領域を検出する。例えば、ユーザＡがヘッドアップディスプレイ４の拡張現実機能が有効となるように設定すると、表示領域検出部３６は、撮像装置２５により撮像された撮像画像（車両１０の前方景色が写る撮像画像）を取得する。

本実施形態では、表示情報判断部３７は、ユーザの特性及びユーザの状況のうち少なくとも何れか一つに基づき、透過型表示機器に表示させる表示情報を判断し、判断結果に基づき、ユーザに応じた広告画像を選択する。

本実施形態では、画像表示部３８は、表示情報判断部３７から入力された仮想画像が、ユーザが視認する景色に重畳するように、仮想画像を含む重畳画像を表示機器に表示させる。例えば、ユーザＡがヘッドアップディスプレイ４の拡張現実機能が有効となるように設定すると、画像表示部３８は、ユーザＡのユーザ情報に応じた広告画像が、ユーザＡが視認する車両１０の前方景色に重畳するように、広告画像を含む重畳画像をフロントガラスに表示させる。

図８は、フロントガラス（透過型表示機器）が表示する重畳画像において、広告画像の表示位置及び大きさを説明するための図である。図８は、フロントガラスに、図３に示す車両１０の前方景色が表示された様子を表す図である。図８に示すように、図３に示す車両１０の前方景色に対して、図３の広告Ａに対応した位置には広告Ｂの広告画像Ｂ１が表示され、図３のＡＲマーカーＭに対応した位置には、広告Ｃの広告画像Ｃ１が表示されている。現実空間においてユーザＡがフロントガラスを介して視認する広告の位置に、広告画像Ｂ１、Ｃ１が表示されている。また現実空間においてユーザＡがフロントガラスを介して視認する広告の大きさに対応した広告画像Ｂ１、Ｃ１が表示される。このため、第１実施形態において、図４を用いて説明した効果と同様の効果を得ることができる。

以上のように、本実施形態に係る画像表示部３８は、ユーザ情報に応じた広告画像がフロントガラスを介したユーザの視界に重畳するように、広告画像を含む重畳画像を、車両１０の前方に設けられたフロントガラスに表示させる。これにより、ユーザが車両１０で移動する状況においても、ユーザに適した広告画像を車両の前方に表示させることができる。

≪第３実施形態≫
図９は、第３実施形態に係る画像表示システム３００の構成概略図である。上述した第２実施形態では、ヘッドアップディスプレイ４を用いたシースルー方式を説明したが、本実施形態では、シースルー方式として、画像表示装置３がＡＲ機器５の表示機器に仮想画像を重畳して表示させる例を説明する。画像表示システム３００は、車載機器２と、ユーザＡが装着しているＡＲ機器５と、画像表示装置３を含む。図９において、画像表示システム１００、２００と同様の構成については、図１又は図７に示す符号と同様の符号を付している。画像表示システム１００、２００と同じ構成については既述の説明を援用し、画像表示システム１００、２００と異なる点を説明する。

ＡＲ機器５は、ユーザが装着可能な形態を有した機器（ウエアラブル機器ともいう）であって、車両１０とは別体の機器である。ＡＲ機器５は、少なくとも、撮像装置（以降、ＡＲカメラともいう）と、透過型表示機器（以降、ＡＲディスプレイともいう）と、ＣＰＵ、メモリ、記憶装置等を備えるコンピュータとを含むように構成されている。ＡＲカメラは、ユーザの頭部が向く方向を撮像する外向きカメラと、ユーザの眼球を撮像する内向きカメラを含む。本実施形態において、ＡＲカメラにより撮像可能な画像は、少なくとも、静止画及び動画のうち何れか一つであればよい。ＡＲカメラにより撮像された撮像画像は、所定周期ごとに、画像情報として画像表示装置に出力される。ＡＲ機器５としては、例えば、ユーザの頭部に装着可能な眼鏡形状の機器（ＡＲグラスともいう）が挙げられる。本実施形態では、ＡＲグラスを例に挙げて説明するが、ＡＲ機器５の形状は眼鏡形状に限定されない。ＡＲ機器５の形状は、例えば、ユーザの頭部を覆う帽子形状又はヘルメット形状、ユーザの両目を覆うゴーグル形状であってもよい。

例えば、ユーザＡがＡＲ機器５を装着した状態で拡張現実機能が有効となるように設定すると、外向きカメラにより撮像された画像は、ユーザＡの視界相当の画像として、画像表示装置３に出力される。そして、後述する画像表示装置３での処理が終了して、画像表示装置３から仮想画像を含む重畳画像の情報がＡＲ機器５に入力されると、ＡＲディスプレイには重畳画像が表示される。ユーザＡは、ＡＲディスプレイを介して、ＡＲディスプレイに対して自身と反対側に位置する現実空間を認識することができる。ＡＲディスプレイに画像表示装置３からの重畳画像が表示された場合、ユーザＡは、仮想画像が現実空間に重畳しているような感覚を感じる。シースルー方式の拡張現実により、本実施形態でも、ヘッドアップディスプレイ４を用いた第２実施形態の場合と同様の効果を得ることができる。

次に、本実施形態に係る画像表示装置３の機能のうち、第１、２実施形態に係る画像表示装置３の機能と異なる点を説明する。

本実施形態では、ユーザ情報取得部３４は、車載機器２から、ＡＲディスプレイを視認するユーザに関するユーザ情報を取得する。また、ユーザ情報取得部３４は、ＡＲディスプレイを視認するユーザを識別するために、データベース２４からＡＲ機器５の登録情報を取得する。そして、ユーザ情報取得部３４は、データベース２４に格納される情報から、ＡＲ機器５を使用するユーザＡに関するユーザ情報を検索して取得する。これにより、ユーザ情報取得部３４は、ＡＲディスプレイに関連付けられたユーザ情報を取得することができる。図９の例では、ユーザ情報取得部３４は、ユーザＢではなく、ＡＲ機器５を装着するユーザＡに関するユーザ情報を取得する。またユーザ情報取得部３４は、仮想画像を含む重畳画像の提示対象として、ＡＲ機器５を装着するユーザＡを、提示対象ユーザとして特定する。

本実施形態では、表示領域検出部３６及び画像表示部３８は、第２実施形態に係る表示領域検出部３６及び画像表示部３８と同じ機能を有する。例えば、ユーザＡがＡＲ機器５を装着した状態で拡張現実機能が有効となるように設定すると、表示領域検出部３６は、外向きカメラにより撮像された撮像画像（ユーザＡの頭部の向く方向の景色が写る撮像画像）を取得する。また画像表示部３８は、ユーザＡのユーザ情報に応じた広告画像が、ユーザＡが視認する景色に重畳するように、広告画像を含む重畳画像をＡＲディスプレイに表示させる。

以上のように、本実施形態に係る画像表示部３８は、ユーザ情報に応じた広告画像がＡＲディスプレイを介したユーザの視界に重畳するように、広告画像を含む重畳画像をＡＲディスプレイに表示させる。これにより、ユーザはＡＲ機器を介してユーザに適した広告画像を視認することができる。

なお、以上に説明した実施形態及び変形例は、本発明の理解を容易にするために記載されたものであって、本発明を限定するために記載されたものではない。したがって、上記の実施形態に開示された各要素は、本発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。

例えば、上述した実施形態では、画像表示装置３が車両１０に搭載されている場合を例に挙げて説明したが、画像表示装置３が設けられる場所は車両１０以外であってもよい。例えば、画像表示装置３は、車両１０の外部に設けられたサーバーであって、携帯機器１、ＡＲ機器５又は車両１０と通信可能なサーバーに設けられてもよい。この場合、画像表示装置３は、携帯機器１、ＡＲ機器５、又は車両１０との間で無線通信により情報の授受を行う。また例えば、上述した実施形態では、仮想画像を視認するユーザとして車両の乗員を例に挙げて説明したが、仮想画像を視認するユーザは車両に乗車していることに限定されない。本発明に係る画像表示装置及び画像表示方法は、例えば、歩道に位置するユーザにも適用することができる。なお、上述した実施形態と同様、本発明に係る画像表示装置及び画像表示方法は、ユーザが移動している状態か否かに関わらず、歩道に位置するユーザに適用できる。

また例えば、上述した実施形態では、撮像画像内のＡＲマーカーの個数が一つの場合を例に挙げて説明したが、複数のＡＲマーカーが存在する場合について説明する。表示領域検出部３６は、ユーザから所定の範囲内に複数のＡＲマーカーが存在する場合、ＡＲマーカーの種類を判別することで、複数のＡＲマーカーのそれぞれを特定する。例えば、表示領域検出部３６は、ＡＲマーカーごとに付された識別情報に基づき、ＡＲマーカーの種類を判別する。複数のＡＲマーカーそれぞれを識別して表示領域として特定することができるため、ユーザに合わせた広告画像の情報を複数の表示領域に表示させることができる。

また例えば、上述した実施形態では、車両情報として、車両の駆動源の残量情報を例に挙げて説明したが、車両情報はこれに限られず、例えば、車両情報は、車両の走行履歴の情報であってもよい。またユーザ情報取得部３４は、経路案内装置２２に格納された車両１０の走行履歴から、ユーザ情報を特定してもよい。例えば、ユーザ情報取得部３４は、車両１０の走行履歴に含まれ、ユーザが経路案内装置２２に入力した周辺地域の検索結果から、ユーザが検索する傾向にあるカテゴリ（駐車場、飲食店、遊園地）をユーザ情報として特定する。これにより、後段の表示情報判断部３７は、ユーザが検索する傾向にあるカテゴリの情報を考慮して表示情報を判断するため、ユーザが検索する傾向にあるカテゴリの店舗の広告画像が表示機器に表示される。

１…携帯機器
２…車載機器
２１…位置検出装置
２２…経路案内装置
２３…通信装置
２４…データベース
２５…撮像装置
３…画像表示装置
３１…コントローラ
３２…広告情報取得部
３３…ユーザ位置情報取得部
３４…ユーザ情報取得部
３５…同伴者認識部
３６…表示領域検出部
３７…表示情報判断部
３８…画像表示部
４…ヘッドアップディスプレイ
５…ＡＲ機器
１０…車両
１００、２００、３００…画像表示システム

Claims (14)

1. 仮想画像が景色に重畳するように、前記仮想画像を含む重畳画像を表示機器に表示させる画像表示部と、
   前記景色から、前記重畳画像において前記仮想画像が表示される表示領域を検出する領域検出部と、
   前記表示機器に関連付けられた、ユーザに関するユーザ情報を取得するユーザ情報取得部と、を備え、
   前記画像表示部は、前記ユーザ情報に応じた前記仮想画像を前記表示機器に表示させる画像表示装置。
2. 前記表示機器は、前記ユーザが携帯可能な携帯機器に備わる非透過型表示機器であり、
   前記景色は、前記携帯機器により撮像された前記景色の景色画像であり、
   前記画像表示部は、前記ユーザ情報に応じた前記仮想画像が前記景色画像に重畳するように、前記仮想画像及び前記景色画像を含む前記重畳画像を前記表示機器に表示させる請求項１に記載の画像表示装置。
3. 前記表示機器は、前記ユーザの頭部に装着可能な装着機器に備わる透過型表示機器であり、
   前記景色は、前記表示機器を介した前記ユーザの視界であり、
   前記画像表示部は、前記ユーザ情報に応じた前記仮想画像が前記景色に重畳するように、前記仮想画像を含む前記重畳画像を前記表示機器に表示させる請求項１に記載の画像表示装置。
4. 前記ユーザ情報は、前記表示機器に表示される画像を視認する前記ユーザの特性及び状況のうち少なくとも何れか一方を示す情報である請求項１～３の何れかに記載の画像表示装置。
5. 前記ユーザ情報は、前記ユーザを識別する識別情報、前記ユーザの移動手段を示す移動手段情報、前記ユーザの嗜好を示す嗜好情報、及び前記ユーザの購買履歴を示す購買履歴情報のうち少なくとも何れか一つを含む請求項４に記載の画像表示装置。
6. 前記仮想画像は、広告画像であり、
   前記表示領域は、前記景色の中にある看板の領域である請求項１～５の何れかに記載の画像表示装置。
7. 前記領域検出部は、前記景色から前記仮想画像の表示位置を示すマーカーを特定することで、前記表示領域を検出する請求項１～６の何れかに記載の画像表示装置。
8. 前記マーカーの位置に関するマーカー位置情報を取得する第１位置情報取得部と、
   前記ユーザの位置に関するユーザ位置情報を取得する第２位置取得部を備え、
   前記領域検出部は、前記マーカー位置情報及び前記ユーザ位置情報に基づいて、前記ユーザから所定の範囲内に位置する前記マーカーを特定する請求項７に記載の画像表示装置。
9. 前記領域検出部は、前記ユーザから所定の範囲内に複数の前記マーカーが存在する場合、前記マーカーの種類を判別することで、前記複数のマーカーのそれぞれを特定する請求項８に記載の画像表示装置。
10. 前記ユーザから所定の範囲内に位置する前記ユーザの同伴者を認識する同伴者認識部を備え、
    前記画像表示部は、前記同伴者が認識された場合、前記ユーザと前記同伴者との組み合わせに応じた前記仮想画像を前記表示機器に表示させる請求項１～９の何れかに記載の画像表示装置。
11. 前記ユーザは、車両の乗員である請求項１～１０の何れかに記載の画像表示装置。
12. 前記表示機器は、前記車両の前方に設けられた透過型表示機器であり、
    前記景色は、前記表示機器を介した前記ユーザの視界であり、
    前記画像表示部は、前記ユーザ情報に応じた前記仮想画像が前記景色に重畳するように、前記仮想画像を含む前記重畳画像を前記表示機器に表示させる請求項１１に記載の画像表示装置。
13. 前記ユーザ情報取得部は、前記車両の走行履歴を含む前記車両に関する情報から、前記ユーザ情報を特定する請求項１１又は１２に記載の画像表示装置。
14. コントローラが、重畳画像を表示機器に表示させる画像表示方法であって、
    景色から、前記重畳画像において仮想画像が表示される表示領域を検出し、
    前記表示機器に関連付けられた、ユーザに関するユーザ情報を取得し、
    前記ユーザ情報に応じた前記仮想画像が前記景色に重畳するように、前記仮想画像を含む前記重畳画像を前記表示機器に表示させる画像表示方法。

Images