WO2023112587A1

WO2023112587A1 - 情報処理装置

Info

Publication number: WO2023112587A1
Application number: PCT/JP2022/042545
Authority: WO
Inventors: 志織安江; 弘行藤野
Original assignee: 株式会社Ｎｔｔドコモ
Priority date: 2021-12-14
Filing date: 2022-11-16
Publication date: 2023-06-22

Abstract

情報提供サーバにおいて、特定部は、ユーザの視界に存在する物体の種別を特定し、当該特定した種別を示す種別情報を出力する。選択部は、種別情報と物体に関連する関連情報とに基づいて、複数のメッセージ情報の中から一のメッセージ情報を選択する。供給部は、一のメッセージ情報をウェアラブル装置に供給する。関連情報は、物体が存在する位置における環境に関する環境情報および特定部が物体の種別を特定した時刻を示す時刻情報のうち少なくとも一つの情報と、物体が存在する位置を示す位置情報を含む。

Description

情報処理装置

　本発明は、情報処理装置に関する。

　従来、ＡＲ（Ａｕｇｍｅｎｔｅｄ　Ｒｅａｌｉｔｙ）、ＶＲ（ｖｉｒｔｕａｌ　ｒｅａｌｉｔｙ）およびＭＲ（Ｍｉｘｅｄ　Ｒｅａｌｉｔｙ）に代表されるＸＲ技術を適用したＸＲグラスが普及している。例えば、下記特許文献１は、携帯型端末装置とＡＲ画像の表示認証を行う認証装置とを含むＡＲ表示管理システムを開示する。携帯型端末装置は、当該装置の位置を示す位置情報と撮像部の撮像方向を示す方向情報とを取得する。携帯型端末装置は、ＡＲ画像の表示認証要求電文を認証装置へ送信する。表示認証要求電文はＡＲ画像の識別子と位置情報と方向情報とを含む。認証装置は、受信した表示認証要求電文に含まれる識別子と位置情報と方向情報とに基づいて、識別子に対応するＡＲ画像の表示を許可するか否かを認証し、その認証結果を含む応答電文を携帯型端末装置へ送信する。携帯型端末装置は、受信した応答電文に基づいて、ＡＲ画像の表示が可能であるか否かを判定し、その表示が可能であると判定した場合に、表示部に表示された撮像画像上にＡＲ画像を重ねて表示させる。

特開２０１９－８７０９１号公報

　しかし、従来の技術では、ユーザの周囲の現実空間に多数のＡＲ画像が仮想的に配置されている場合、ユーザは多数のＡＲ画像を目にすることになる。この結果、ユーザがＸＲグラスから見ることのできる現実空間の表示エリアが減少するといった問題がある。また、不要な情報が多くなることでユーザの注意が散漫になる可能性がある。

　本発明の目的は、ユーザに対して有益な情報を提供することにある。

　本発明の一態様に係る情報処理装置は、ユーザの視界に存在する物体の種別を特定し、当該特定した種別を示す種別情報を出力する特定部と、前記種別情報と前記物体に関連する関連情報とに基づいて、複数のメッセージ情報の中から一のメッセージ情報を選択する選択部と、前記選択された一のメッセージ情報を出力装置に供給する供給部と、を備え、前記関連情報は、前記物体が存在する位置における環境に関する環境情報および前記特定部が前記物体の種別を特定した時刻を示す時刻情報のうち少なくとも一つの情報と、前記物体が存在する位置を示す位置情報を含む。

　本発明の一態様によれば、ユーザに対して有益な情報が提供される。

実施形態に係る情報処理システム１の全体構成を示すブロック図である。ＡＲグラス３０の外観を示す説明図である。ＡＲグラス３０の構成を示すブロック図である。端末装置４０の構成を示すブロック図である。情報提供サーバ２０の構成を示すブロック図である。物体特定用データベースＤＢ１の一例を示す説明図である。メッセージ情報データベースＤＢ２の一例を示す説明図である。処理装置２０６の動作を示すフローチャートである。メッセージ情報データベースＤＢ２の一例を示す説明図である。商品名Ｂとユーザとの相対位置を模式的に示す説明図である。処理装置４０６の動作を示すフローチャートである。メッセージ情報Ｍの出力態様の一例を示す説明図である。メッセージ情報Ｍの出力態様の一例を示す説明図である。

Ａ．第１実施形態
　以下、本発明の第１実施形態に係る情報処理装置を含む情報処理システム１の構成について説明する。

Ａ－１．システム構成
　図１は、実施形態に係る情報処理システム１の全体構成を示すブロック図である。情報処理システム１は、ウェアラブル装置１０と、情報提供サーバ２０とを備える。情報提供サーバ２０は、情報処理装置の一例である。

　本実施形態において、情報処理システム１は、後述のＡＲグラス３０を装着したユーザに対して、ＡＲ技術を用いて各種情報を提示するシステムである。ここで、ＡＲ技術とは、例えば、透過型のヘッドマウントディスプレイ等の装置において、現実世界の座標空間に仮想オブジェクトを重ね合わせて表示することで、当該装置を着用したユーザに仮想オブジェクトが示す情報を視認可能とする技術である。なお、ＡＲグラス３０においては、仮想オブジェクトが表示されるとともに、例えば音声情報等の他の種類の情報が出力されてもよい。これらＡＲグラス３０を用いてユーザに提供される情報を「メッセージ情報Ｍ」という。

　メッセージ情報Ｍは、例えば静止画像、動画、３ＤＣＧモデルおよびテキスト等である。本実施形態では、メッセージ情報Ｍは、主に店舗で販売される商品Ｐの販売促進のために表示される情報であるものとする。商品Ｐは物体の一例である。メッセージ情報Ｍは、商品Ｐの種別を示す情報、例えば商品名Ｂの説明を示す画像情報または商品名Ｂの説明を示す音声情報、であってもよい。

　ウェアラブル装置１０および情報提供サーバ２０は、通信網Ｎを介して互いに通信可能に接続される。なお、図１では、ウェアラブル装置１０を１台のみ図示しているが、当該台数はあくまで一例であって、情報処理システム１は、任意の台数のウェアラブル装置１０を備えることが可能である。

　ウェアラブル装置１０は、ユーザがメッセージ情報Ｍを知覚するために身に着ける装置である。ウェアラブル装置１０は、ＡＲグラス３０と、端末装置４０とを備える。ＡＲグラス３０と端末装置４０とは互いに通信可能に接続される。端末装置４０は、情報提供サーバ２０と互いに通信可能に接続することにより、情報提供サーバ２０から、ＡＲグラス３０で出力するメッセージ情報Ｍを取得する。また、端末装置４０は、情報提供サーバ２０から取得したメッセージ情報Ｍを、ＡＲグラス３０から出力させる。端末装置４０は、例えばスマートフォン、およびタブレット等の携帯端末装置であることが好適である。

Ａ－２．ＡＲグラス３０
　ＡＲグラス３０は、ユーザの頭部に装着される透過型のヘッドマウントディスプレイである。ＡＲグラス３０は、端末装置４０の制御に基づいて、両眼用のレンズ３１０Ａ，３１０Ｂの各々に設けられた表示パネルに仮想オブジェクトを表示させる。なお、表示装置として、例えば、ＡＲグラス３０が有する機能と同様の機能を有する、ゴーグル形状の透過型ヘッドマウントディスプレイを用いてもよい。

　図２は、ＡＲグラス３０の外観を示す説明図である。ＡＲグラス３０は、テンプル３０１および３０２と、ブリッジ３０３と、フレーム３０４および３０５と、リム３０６および３０７と、レンズ３１０Ａおよび３１０Ｂと、撮像レンズＬＥＮと、送受光部ＳＥＮが、外観において視認される。

　ブリッジ３０３には、図３に示される撮像装置３２４を構成する撮像レンズＬＥＮと、３Ｄスキャナ３２５を構成する送受光部ＳＥＮが配置されている。

　フレーム３０４には、左眼用の表示パネルと左眼用の光学部材が設けられている。表示パネルは、例えば、液晶パネルまたは有機ＥＬ（Ｅｌｅｃｔｒｏ　Ｌｕｍｉｎｅｓｃｅｎｃｅ）パネルである。左眼用の表示パネルは、例えば、後述する端末装置４０からの制御に基づいて画像を表示する。左眼用の光学部材は、左眼用の表示パネルから射出された光をレンズ３１０Ａに導光する光学部材である。また、フレーム３０４には、後述するスピーカ３２２が設けられる。

　フレーム３０５には、右眼用の表示パネルと右眼用の光学部材が設けられている。右眼用の表示パネルは、例えば、端末装置４０からの制御に基づいて画像を表示する。右眼用の光学部材は、右眼用の表示パネルから射出された光をレンズ３１０Ｂに導光する光学部材である。また、フレーム３０５には、後述するスピーカ３２２が設けられる。

　リム３０６は、レンズ３１０Ａを保持する。また、リム３０７は、レンズ３１０Ｂを保持する。

　レンズ３１０Ａおよび３１０Ｂの各々は、ハーフミラーを有する。レンズ３１０Ａが有するハーフミラーは、現実空間を表す光を透過させることによって、現実空間を表す光をユーザの左眼に導く。また、レンズ３１０Ａが有するハーフミラーは、左眼用の光学部材によって導光された光をユーザの左眼に反射する。レンズ３１０Ｂが有するハーフミラーは、現実空間を表す光を透過させることによって、現実空間を表す光をユーザの右眼に導く。また、レンズ３１０Ｂが有するハーフミラーは、右眼用の光学部材によって導光された光をユーザの右眼に反射する。

　ユーザがＡＲグラス３０を装着したとき、レンズ３１０Ａおよび３１０Ｂは、ユーザの左眼および右眼の前に位置する。ＡＲグラス３０を装着したユーザは、レンズ３１０Ａおよび３１０Ｂを透過した光が表す現実空間と、後述する投影装置３２１が投影する画像とを重ね合わせて視認できる。

　図３は、ＡＲグラス３０の構成を示すブロック図である。ＡＲグラス３０は、上述したテンプル３０１および３０２と、ブリッジ３０３と、フレーム３０４および３０５と、リム３０６および３０７と、レンズ３１０Ａおよび３１０Ｂと、撮像レンズＬＥＮと、送受光部ＳＥＮとの他、投影装置３２１と、スピーカ３２２と、通信装置３２３と、撮像装置３２４と、３Ｄスキャナ３２５と、ＧＰＳ装置３２６と、記憶装置３２７と、処理装置３２８と、バス３２９とを備える。投影装置３２１およびスピーカ３２２は、出力装置の一例である。

　図３に示す各構成は、例えばフレーム３０４および３０５に格納されている。投影装置３２１と、スピーカ３２２と、通信装置３２３と、撮像装置３２４と、３Ｄスキャナ３２５と、記憶装置３２７と、処理装置３２８とは、情報を通信するためのバス３２９によって相互に接続される。バス３２９は、単一のバスを用いて構成されてもよいし、装置等の要素間ごとに異なるバスを用いて構成されてもよい。

　投影装置３２１は、レンズ３１０Ａ、左眼用の表示パネル、左眼用の光学部材、レンズ３１０Ｂ、右眼用の表示パネル、および右眼用の光学部材を含む。投影装置３２１は、ユーザの目と物体との間に配置される透過型ディスプレイとして機能する。投影装置３２１は、端末装置４０からの制御に基づいて、画像を表示する。本実施形態において、投影装置３２１が表示する画像とは、例えばメッセージ情報Ｍとして表示される画像情報等である。

　スピーカ３２２は、ユーザに音を出力する。スピーカ３２２は、フレーム３０４および３０５の各々に位置する。スピーカ３２２は、フレーム３０４および３０５の各々に位置せずに、例えば、フレーム３０４および３０５の一方、テンプル３０１および３０２の少なくとも一方、またはブリッジ３０３に位置してもよい。スピーカ３２２は、端末装置４０によって直接的に、またはＡＲグラス３０の処理装置３２８を介して制御される。スピーカ３２２は、例えばメッセージ情報Ｍとして出力される音声情報等を出力する。スピーカ３２２は、ＡＲグラス３０に含まれずに、ＡＲグラス３０とは別体でもよい。

　通信装置３２３は、無線通信または有線通信を用いて端末装置４０と通信する。本実施形態において、通信装置３２３は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）のような近距離無線通信を用いて端末装置４０の通信装置４０３（図４参照）と通信する。

　撮像装置３２４は、被写体を撮像し、撮像した画像（以下「撮像画像」という）を示す撮像画像情報を出力する。本実施形態では、撮像装置３２４の撮像範囲は、例えばユーザの視界と一致する、またはユーザの視界の全領域を含む。よって、撮像画像情報には、ユーザの視界に存在する物体（物理オブジェクト）の外観の情報が含まれる。例えば、ユーザが店舗にいる場合には、ユーザの前にあるラックに並んだ商品、またはユーザが手にした商品等が撮像される。

　撮像装置３２４で生成された撮像画像は、撮像画像情報として通信装置３２３を介して端末装置４０に送信される。撮像画像は、第１画像の一例である。撮像装置３２４は、所定の撮像間隔で撮像を繰り返し、撮像の都度、生成した撮像画像情報を端末装置４０に送信する。

　撮像装置３２４は、例えば、撮像光学系および撮像素子を有する。撮像光学系は、少なくとも１つの撮像レンズＬＥＮ（図２参照）を含む光学系である。例えば、撮像光学系は、プリズム等の各種の光学素子を有してもよいし、ズームレンズまたはフォーカスレンズ等を有してもよい。撮像素子は、例えば、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサーまたはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　ＭＯＳ）イメージセンサー等である。

　３Ｄスキャナ３２５は、ユーザの近傍にある物体の３次元形状を測定した結果を示す測定形状情報を出力する。３Ｄスキャナ３２５は、測定装置の一例である。３Ｄスキャナ３２５の測定範囲は、例えばユーザの視界と一致する、またはユーザの視界の全領域を含む。よって、測定形状情報には、ユーザの視界に存在する物体の３次元形状の情報が含まれる。

　本実施形態では、３Ｄスキャナ３２５は、送受光部ＳＥＮに設けられた光源から測定範囲に光を照射する。光源から照射される光は、例えば縞模様などのパターンを有するパターン光である。また、３Ｄスキャナ３２５は、送受光部ＳＥＮに設けられた受光部で反射光を受光する。光の照射から反射光の受光までの時間は、光が反射した物体までの距離に比例する。３Ｄスキャナ３２５は、測定範囲内の各点について上記受光までの時間を測定し、測定範囲内の各点までの距離を算出する。また、物体の表面に写るパターンの歪みに起因して物体の凹凸が認識される。このようにして、３Ｄスキャナ３２５は、物体表面の３次元座標を得て、物体の３次元形状を示す測定形状情報を生成することができる。

　３Ｄスキャナ３２５で生成された測定形状情報は、通信装置３２３を介して端末装置４０に送信される。３Ｄスキャナ３２５は、所定の測定間隔で測定を繰り返し、測定の都度、生成した測定形状情報を端末装置４０に送信する。

　なお、物体の形状は、３Ｄスキャナ３２５が測定するのではなく、撮像装置３２４で撮像された撮像画像から検出してもよい。この場合、例えば撮像装置３２４は複数台のカメラを有するステレオカメラであり、異なる角度から物体を撮像する。処理装置３２８は、異なる角度から撮像された複数の撮像画像を用いて物体の３次元的な形状を算出する。

　ＧＰＳ装置３２６は、複数の衛星からの電波を受信し、受信した電波から位置情報を生成する。位置情報は、ＡＲグラス３０の位置を示す。位置情報は、位置を特定できるのであれば、どのような形式であってもよい。本実施形態では、位置情報は、例えばＡＲグラス３０の緯度と経度とを示す。なお、位置情報はＧＰＳ装置３２６以外の手段を用いて得られてもよい。例えば、施設に設けられたビーコン等によって、ＡＲグラス３０が位置する施設名を特定する情報が受信されてもよい。本実施形態においては、ＡＲグラス３０の位置を、ウェアラブル装置１０の位置とする。ＧＰＳ装置３２６は、端末装置４０に設けられていてもよい。この場合、ＧＰＳ装置３２６は、端末装置４０の位置を示す位置情報を生成する。また、ウェアラブル装置１０の位置は、端末装置４０の位置となる。

　記憶装置３２７は、処理装置３２８が読み取り可能な記録媒体である。記憶装置３２７は、例えば、不揮発性メモリーと揮発性メモリーとを含む。不揮発性メモリーは、例えば、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）およびＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ　Ｅｒａｓａｂｌｅ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）である。揮発性メモリーは、例えば、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）である。記憶装置３２７は、プログラムＰＧ１を記憶する。プログラムＰＧ１は、ＡＲグラス３０を動作させるためのプログラムである。

　処理装置３２８は、１または複数のＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）を含む。１または複数のＣＰＵは、１または複数のプロセッサの一例である。プロセッサおよびＣＰＵの各々は、コンピュータの一例である。

　処理装置３２８は、記憶装置３２７からプログラムＰＧ１を読み取る。処理装置３２８は、プログラムＰＧ１を実行することによって、動作制御部３３０として機能する。動作制御部３３０は、ＤＳＰ（Ｄｉｇｉｔａｌ　Ｓｉｇｎａｌ　Ｐｒｏｃｅｓｓｏｒ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）、ＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ　Ｌｏｇｉｃ　Ｄｅｖｉｃｅ）およびＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）等の回路によって構成されてもよい。

　動作制御部３３０は、ＡＲグラス３０の動作を制御する。例えば、動作制御部３３０は、通信装置３２３が端末装置４０から受信した画像表示用の制御信号を投影装置３２１に提供する。投影装置３２１は、画像表示用の制御信号が示す画像を表示する。また、動作制御部３３０は、通信装置３２３が端末装置４０から受信した音声出力用の制御信号をスピーカ３２２に提供する。スピーカ３２２は、音声出力用の制御信号が示す音を放音する。また、動作制御部３３０は、撮像装置３２４が撮像した撮像画像情報、３Ｄスキャナ３２５が測定した測定形状情報、およびＧＰＳ装置３２６が生成した位置情報を、端末装置４０に送信する。

Ａ－３．端末装置４０
　図４は、端末装置４０の構成を示すブロック図である。端末装置４０は、タッチパネル４０１と、通信装置４０３と、記憶装置４０５と、処理装置４０６と、バス４０７とを含む。タッチパネル４０１と、通信装置４０３と、記憶装置４０５と、処理装置４０６は、情報を通信するためのバス４０７によって相互に接続される。バス４０７は、単一のバスを用いて構成されてもよいし、装置間ごとに異なるバスを用いて構成されてもよい。

　タッチパネル４０１は、ユーザに各種の情報を表示するとともに、ユーザのタッチ操作を検出する。タッチパネル４０１は、入力装置と出力装置とを兼ねている。例えば、タッチパネル４０１は、液晶表示パネルまたは有機ＥＬ表示パネル等の各種の表示パネルとカバーガラスとの間に、タッチ操作を検出可能なタッチセンサユニットが貼り合わされて構成される。例えば、タッチパネル４０１は、ユーザの指がタッチパネル４０１に接触している場合に、ユーザの指のタッチパネル４０１における接触位置を周期的に検出し、検出した接触位置を示すタッチ情報を処理装置４０６に送信する。

　通信装置４０３は、無線通信または有線通信を用いてＡＲグラス３０と通信する。本実施形態において、通信装置４０３は、ＡＲグラス３０の通信装置３２３と同方式の近距離無線通信を用いて通信装置３２３（図３参照）と通信する。また、通信装置４０３は、無線通信または有線通信を用いて情報提供サーバ２０と通信する。本実施形態において、通信装置４０３は、通信網Ｎに接続可能なインターフェースを備え、通信網Ｎを介して情報提供サーバ２０の通信装置２０３（図５参照）と通信する。

　記憶装置４０５は、処理装置４０６が読み取り可能な記録媒体である。記憶装置４０５は、例えば、不揮発性メモリーと揮発性メモリーとを含む。不揮発性メモリーは、例えば、ＲＯＭ、ＥＰＲＯＭおよびＥＥＰＲＯＭである。揮発性メモリーは、例えば、ＲＡＭである。記憶装置４０５は、プログラムＰＧ２を記憶する。プログラムＰＧ２は、端末装置４０を動作させるためのプログラムである。

　処理装置４０６は、１または複数のＣＰＵを含む。１または複数のＣＰＵは、１または複数のプロセッサの一例である。プロセッサおよびＣＰＵの各々は、コンピュータの一例である。

　処理装置４０６は、記憶装置４０５からプログラムＰＧ２を読み取る。処理装置４０６は、プログラムＰＧ２を実行することによって、動作制御部４１０として機能する。動作制御部４１０は、ＤＳＰ、ＡＳＩＣ、ＰＬＤおよびＦＰＧＡ等の回路によって構成されてもよい。

　動作制御部４１０は、端末装置４０の動作を制御する。本実施形態では、動作制御部４１０は、ＡＲグラス３０から受信した撮像画像情報、測定形状情報および位置情報を、情報提供サーバ２０に送信する。

Ａ－４．情報提供サーバ２０
　図５は、情報提供サーバ２０の構成を示すブロック図である。情報提供サーバ２０は、入力装置２０１と、表示装置２０２と、通信装置２０３と、記憶装置２０５と、処理装置２０６と、バス２０７とを含む。入力装置２０１と、表示装置２０２と、通信装置２０３と、記憶装置２０５と、処理装置２０６とは、情報を通信するためのバス２０７によって相互に接続される。バス２０７は、単一のバスを用いて構成されてもよいし、装置間ごとに異なるバスを用いて構成されてもよい。

　入力装置２０１は、情報処理システム１の管理者が行う操作を受け付ける機器である。例えば、入力装置２０１は、キーボード、タッチパッド、タッチパネルまたはマウス等のポインティングデバイスを含んで構成される。入力装置２０１がタッチパネルを含む場合、入力装置２０１は表示装置２０２を兼ねてもよい。

　表示装置２０２は、画像を表示するデバイスである。表示装置２０２は、処理装置２０６の制御のもとで各種の画像を表示する。画像は文字情報を含んでもよい。例えば、液晶表示パネルおよび有機ＥＬ表示パネル等の各種の表示パネルが表示装置２０２として好適に利用される。

　通信装置２０３は、無線通信または有線通信を用いて端末装置４０（図１および図４参照）と通信する。本実施形態において、通信装置２０３は、通信網Ｎに接続可能なインターフェースを備え、通信網Ｎを介して端末装置４０と通信する。

　記憶装置２０５は、処理装置２０６が読み取り可能な記録媒体である。記憶装置２０５は、例えば、不揮発性メモリーと揮発性メモリーとを含む。不揮発性メモリーは、例えば、ＲＯＭ、ＥＰＲＯＭおよびＥＥＰＲＯＭである。揮発性メモリーは、例えば、ＲＡＭである。記憶装置２０５は、プログラムＰＧ３と、物体特定用データベースＤＢ１と、メッセージ情報データベースＤＢ２とを記憶する。これらデータベースの詳細は後述する。図５中、「データベース」の語を「ＤＢ」と表記する。プログラムＰＧ３は、情報提供サーバ２０を動作させるためのプログラムである。

　処理装置２０６は、１または複数のＣＰＵを含む。１または複数のＣＰＵは、１または複数のプロセッサの一例である。プロセッサおよびＣＰＵの各々は、コンピュータの一例である。

　処理装置２０６は、記憶装置２０５からプログラムＰＧ３を読み取る。処理装置２０６は、プログラムＰＧ３を実行することによって、取得部２１０、特定部２１１、選択部２１２および供給部２１３として機能する。取得部２１０、特定部２１１、選択部２１２および供給部２１３のうち少なくとも１つは、ＤＳＰ、ＡＳＩＣ、ＰＬＤおよびＦＰＧＡ等の回路によって構成されてもよい。取得部２１０、特定部２１１、選択部２１２および供給部２１３の詳細は後述する。

Ａ－５．物体特定用データベースＤＢ１
　次に、物体特定用データベースＤＢ１について説明する。物体特定用データベースＤＢ１は、後述する特定部２１１が行う商品名Ｂの特定に利用される。物体特定用データベースＤＢ１は、測定形状情報または撮像画像情報の少なくとも一方と、商品名Ｂとを対応付けるデータベースである。物体特定用データベースＤＢ１には、少なくともメッセージ情報データベースＤＢ２に商品名Ｂが登録されている商品Ｐが登録されているものとする。後述する図７のメッセージ情報データベースＤＢ２の例に従えば、物体特定用データベースＤＢ１には、少なくとも「ＡＡソーダ」に関する情報と「ＢＢスナック」に関する情報が含まれる。

　図６は、物体特定用データベースＤＢ１の一例と示す説明図である。物体特定用データベースＤＢ１は、複数のレコードＥを有する。図６に示す物体特定用データベースＤＢ１は、３つのレコードＥ１～Ｅ３を含む。１つのレコードＥは、商品名Ｂと、基準形状情報５０２または基準画像情報５０４の少なくとも一方とを対応付ける。１つのレコードＥにおいて、商品名Ｂに対して、基準形状情報５０２または基準画像情報５０４のいずれか一方のみが対応付けられていてもよい。

　商品名Ｂは、商品Ｐの種別を示す種別情報である。商品Ｐは物体の一例であり、商品名Ｂは物体の種別を示す種別情報の一例である。具体的には、レコードＥ１の商品名Ｂは「ＡＡソーダ」であり、レコードＥ２の商品名Ｂは「ＢＢスナック」であり、レコードＥ３の商品名Ｂは「ＧＧジュース」である。本実施形態では、商品Ｐの種別は商品名Ｂで識別される。これに限らず、例えば英数字等が配列されたコードによって商品Ｐの種別が識別されてもよい。

　基準形状情報５０２は、商品名Ｂごとに定められた基準物体の３次元形状を示す情報である。基準形状情報５０２は、例えば３Ｄスキャナを用いて基準物体を３Ｄスキャンした結果を示す。図６では、基準形状情報５０２は、所定の方式で基準物体を３次元スキャンした結果、出力されたデータのデータ名を示している。例えばレコードＥ１の基準形状情報５０２である「ａａａ．ｓｔｐ」は、工場で生産されたＡＡソーダの中から１本を基準物体として選択し、３Ｄスキャナで３Ｄスキャンした結果、出力されたデータである。

　基準画像情報５０４は、商品名Ｂごとに定められた基準物体の外観を撮像して得られた画像である。基準画像情報５０４は、第２画像の一例である。図６では、基準画像情報５０４は、基準物体を撮像した結果、出力されたデータのデータ名を示している。なお、基準画像情報５０４は、基準物体を異なる方向から撮像した複数の画像を含んでいてもよい。例えばレコードＥ１の基準画像情報５０４である「ａａａ．ｊｐｇ」は、工場で生産されたＡＡソーダの中から１本を基準物体として選択し、撮像装置で撮像した結果、出力されたデータである。

　後述する特定部２１１は、基準形状情報５０２と測定形状情報、および、基準画像情報５０４と撮像画像情報とを照合して、測定形状情報および撮像画像情報が示す商品Ｐの商品名Ｂを特定する。本実施形態のように、撮像画像情報と測定形状情報とを用いて物体を識別することによって、商品Ｐの種別の特定精度が向上する。例えば、撮像画像情報のみではポスターに写る商品Ｐが実物の商品Ｐと誤認識される可能性がある。測定形状情報を用いることで、ポスター画像のような平面状の像は商品Ｐ（物体）として認識されなくなり、例えばメッセージ情報Ｍが不適切な状況で出力されるのを防止することができる。また、例えば商品Ｐの形状が識別力のない形状（例えば汎用的なピロー包装袋など）の場合、測定形状情報のみでは物体の識別情報を得るのは困難である。この場合も、測定形状情報とともに撮像画像情報を用いることによって商品Ｐの種別が正確に特定される。一方で、物体特定用データベースＤＢ１において、商品名Ｂに基準形状情報５０２または基準画像情報５０４のうちいずれか一方のみが対応付けられている場合がある。商品名Ｂに対応付けられているのが基準形状情報５０２の場合、特定部２１１は、基準形状情報５０２と測定形状情報とを用いて商品名Ｂを特定する。商品名Ｂに対応付けられているのが基準画像情報５０４の場合、特定部２１１は、基準画像情報５０４と撮像画像情報とを用いて商品名Ｂを特定する。

　なお、例えば飲料のように複数のサイズを有する商品Ｐの場合は、サイズ別に商品名Ｂが設定されてもよい。例えば「ＡＡソーダ」に、５００ＭＬペットボトル入りの商品Ｐと、２Ｌペットボトル入りの商品Ｐとがあるものとする。この場合、２つの商品Ｐに対して、「ＡＡソーダ　５００ＭＬペットボトル」と「ＡＡソーダ　２Ｌペットボトル」のような別々の商品名Ｂが設定されてもよいし、２つの商品Ｐをまとめて「ＡＡソーダ」の商品名Ｂが設定されてもよい。

　また、例えば同一カテゴリに属する複数の商品Ｐに対して１つの種別情報（商品名Ｂ）が設定されてもよい。例えば「ＡＡソーダ」の基準形状情報５０２および基準画像情報５０４と、「ＧＧジュース」の基準形状情報５０２および基準画像情報５０４とが、「清涼飲料水」という種別情報に対応付けられてもよい。

Ａ－６．メッセージ情報データベースＤＢ２
　次に、メッセージ情報データベースＤＢ２の詳細について説明する。メッセージ情報データベースＤＢ２は、後述する選択部２１２が行うメッセージ情報Ｍの選択に利用される。メッセージ情報データベースＤＢ２は、商品名Ｂと、関連情報Ｒと、メッセージ情報Ｍとを対応付ける。メッセージ情報データベースＤＢ２に記憶されている商品名Ｂは、ＡＲグラス３０でメッセージ情報Ｍを出力するトリガーとなる商品Ｐ（物体）の種別を示す。

　一般的なＡＲ技術では、商品名Ｂとメッセージ情報Ｍとが１対１で対応付けられる。これに対して、本実施形態では、商品名Ｂと関連情報Ｒとの組に対してメッセージ情報Ｍが対応付けられている。関連情報Ｒは、商品Ｐが存在する位置における環境に関する環境情報および後述する特定部２１１が商品Ｐの種別を特定した時刻を示す時刻情報のうち少なくとも一つの情報と、商品Ｐが存在する位置を示す位置情報とを含む。商品名Ｂと関連情報Ｒとに対してメッセージ情報Ｍが対応付けられることによって、メッセージ情報Ｍを出力する際の条件がより詳細に設定され得る。よって、ユーザに対してより有益な情報が提供され得る。

　なお、本実施形態では、商品Ｐが存在する位置は、商品Ｐが視界に入っているユーザが装着するウェアラブル装置１０の位置、すなわちＧＰＳ装置３２６を有するＡＲグラス３０の位置に近似される。

　図７は、メッセージ情報データベースＤＢ２の一例を示す説明図である。メッセージ情報データベースＤＢ２は、複数のレコードＤを有する。図７に示すメッセージ情報データベースＤＢ２は、６つのレコードＤ１～Ｄ６を含む。一つのレコードＤは、商品名Ｂ、位置情報６０１、出力条件情報６０２、およびメッセージ情報Ｍを対応付ける。位置情報６０１および出力条件情報６０２が、関連情報Ｒに対応する。

　商品名Ｂは、商品Ｐの種別を示す。具体的には、レコードＤ１～Ｄ４の商品名Ｂは「ＡＡソーダ」であり、レコードＤ５の商品名Ｂは「ＢＢスナック」である。

　位置情報６０１は、商品Ｐが位置する場所を特定する。図７の例では、位置情報として施設名が示されている。具体的には、レコードＤ１およびＤ２の位置情報６０１は「ＣＣマートＤＤ支店」であり、レコードＤ３～Ｄ５の位置情報６０１は「ＣＣマートＥＥ支店」である。「ＣＣマートＤＤ支店」と「ＣＣマートＥＥ支店」は、同一のチェーンに属する異なる支店であり、異なる場所に位置している。

　図７の例では、位置情報として施設名が示されている。これに限らず、位置情報は、例えば緯度経度情報であってもよい。

　出力条件情報６０２は、メッセージ情報Ｍを出力する条件を示す。第１実施形態では、出力条件情報６０２は、商品Ｐが存在する位置における環境に関する環境情報および後述する特定部２１１が商品Ｐの種別を特定した時刻を示す時刻情報のうち少なくとも一つの情報である。環境情報は、一例として、気象情報であってもよい。気象情報とは、晴れ、曇り等の天気、降水の有無、気温、湿度、風向風速などが挙げられる。商品Ｐが建物内に位置する場合、気温とは、商品Ｐが位置する建物内の室温であってもよいし、建物外の外気温であってもよい。

　また、時刻情報は、商品Ｐが存在する位置における時刻を示す。情報提供サーバ２０が置かれた位置における現地時刻と、商品Ｐが存在する位置における現地時刻とで時差が生じる場合があるが、本実施形態では、出力条件情報６０２における時刻情報は、商品Ｐが存在する位置における現地時刻を示すものとする。

　具体的には、レコードＤ１の出力条件情報６０２は、時刻情報である「時刻１０：００～１５：５９」である。レコードＤ２の出力条件情報６０２は、時刻情報である「時刻２２：００～５：５９」である。レコードＤ３の出力条件情報６０２は、環境情報（気象情報）である「気温３０℃以上」である。レコードＤ４の出力条件情報６０２は、環境情報である「気温１５℃未満」である。レコードＤ５の出力条件情報６０２は、他の出力条件に当てはまらない場合を示す「上記以外」である。レコードＤ６の出力条件情報６０２は、環境情報である「気温１５℃未満」である。

　図７では、出力条件情報６０２は１種類の条件で構成されているが、出力条件情報６０２に２種類以上の条件が含まれていてもよい。例えば、「時刻１０：００～１５：５９」かつ「気温３０℃以上」という時刻情報と気象情報とが掛け合わされた出力条件情報６０２であってもよい。また、出力条件情報６０２は、環境情報は気象情報に限らず、例えば周辺の混雑度合い等であってもよい。

　メッセージ情報Ｍは、ＡＲグラス３０で出力する情報である。図７では、メッセージ情報Ｍが、主にテキスト情報である場合を示している。テキスト情報は、例えば商品Ｐの購入特典、商品Ｐの栄養表示等であってもよい。また、メッセージ情報Ｍは、動画、静止画または音声情報等であってもよい。この場合、図７では動画、静止画または音声情報のファイル名を表記する。

　具体例には、レコードＤ１のメッセージ情報Ｍは「今なら１０％オフ」というテキスト情報である。テキスト情報は文字としてＡＲグラス３０に表示される。レコードＤ２のメッセージ情報Ｍは「ａａａ．ｍｐ４」である。レコードＤ２は、メッセージ情報Ｍとして動画データ「ａａａ．ｍｐ４」が再生されることを示す。レコードＤ３のメッセージ情報Ｍは「２本購入で１本プレゼント」というテキスト情報である。レコードＤ４のメッセージ情報Ｍは「ＢＢスナックと同時購入で５０円引き」というテキスト情報である。レコードＤ５のメッセージ情報Ｍは「原材料名・栄養表示．ｊｐｇ」である。レコードＤ５は、メッセージ情報Ｍとして原材料名の表示および栄養表示を含む静止画像が表示されることを示す。レコードＤ６のメッセージ情報Ｍは「ＡＡソーダと同時購入で５０円引き」というテキスト情報である。

　なお、メッセージ情報データベースＤＢ２には、メッセージ情報Ｍとともに、メッセージ情報Ｍを出力する際の設定情報が記憶されていてもよい。設定情報は、例えばメッセージ情報Ｍがテキスト情報である場合に、テキスト情報を表示するためのフォントの種類、フォントの大きさ、フォントの色などを指定する。また、設定情報は、ＡＲグラス３０を装着したユーザの視界におけるメッセージ情報Ｍの表示位置を含んでいてもよい。

　メッセージ情報データベースＤＢ２への各種情報の登録は、例えば商品Ｐの製造メーカーの営業担当者が行ってもよいし、商品Ｐを販売する販売店のオーナーまたは営業担当者が行ってもよい。メッセージ情報データベースＤＢ２への登録担当者は、例えば自身が使用する情報処理装置から通信網Ｎを介してメッセージ情報データベースＤＢ２にアクセスし、必要に応じてメッセージ情報データベースＤＢ２の内容を更新する。メッセージ情報データベースＤＢ２の更新により、ユーザに出力するメッセージ情報Ｍはリアルタイムに変更され得る。よって、例えばＡＲグラス３０を用いた商品Ｐの販売促進がより効果的に行われ得る。

Ａ－７．処理装置２０６の詳細
　上述のように、処理装置２０６は、プログラムＰＧ３を実行することによって、取得部２１０、特定部２１１、選択部２１２および供給部２１３として機能する。以下、各機能部の詳細について説明する。

　取得部２１０は、ＡＲグラス３０から撮像画像情報、測定形状情報および位置情報を取得する。上述のように、撮像画像情報、測定形状情報および位置情報は、ＡＲグラス３０から端末装置４０に送信され、更に端末装置４０から情報提供サーバ２０に送信される。取得部２１０は、通信装置２０３が受信した撮像画像情報、測定形状情報および位置情報を取得する。

　また、取得部２１０は、必要に応じて、ＡＲグラス３０の位置、すなわちＡＲグラス３０から取得した位置情報に対応する位置における気象情報を取得する。気象情報は、例えば図示しない気象情報提供サーバから取得されてもよい。気象情報提供サーバは、例えば各地に設置された気象観測所における観測値を、通信網Ｎを介して取得する。また、気象情報提供サーバは、各気象観測所における観測値に基づいて、任意の位置における気象状況を予測し、当該任意の位置における気象情報を情報提供サーバ２０等に提供する。また、取得部２１０は、ＡＲグラス３０で気象情報を検出可能な場合には、ＡＲグラス３０から気象情報を取得してもよい。ＡＲグラス３０で気象情報を検出可能な場合とは、例えばＡＲグラス３０に温度計、湿度計または風向風速計が搭載されている場合などである。

　また、取得部２１０は、必要に応じて、ＡＲグラス３０の位置、すなわちＡＲグラス３０から取得した位置情報に対応する位置における現在時刻、すなわち現地時刻情報を取得する。取得部２１０は、例えばＡＲグラス３０から取得した位置情報に基づいて現地時刻情報を算出してもよい。

　特定部２１１は、ユーザの視界に存在する商品Ｐの種別である商品名Ｂを特定し、当該特定した種別を示す商品名情報を出力する。本実施形態では、特定部２１１は、取得部２１０で取得された測定形状情報および撮像画像情報を用いて商品名Ｂを特定する。より詳細には、特定部２１１は、物体特定用データベースＤＢ１の各レコードＥの基準形状情報５０２と測定形状情報、および各レコードＥの基準画像情報５０４と撮像画像情報とを比較する。基準形状情報５０２と測定形状情報との一致度が第１所定値以上、かつ基準画像情報５０４と撮像画像情報との一致度が第２所定値以上となるレコードＥがある場合、当該レコードＥの商品名Ｂが、ユーザの視界に存在する商品Ｐの商品名Ｂであると特定する。

　以下、特定部２１１で検出された商品名Ｂを特定商品名ＢＸという。なお、特定部２１１は、ユーザの視界にある商品Ｐの商品名Ｂが検出できなかった場合には、「該当商品なし」を示す情報を出力する。

　すなわち、特定部２１１は、商品Ｐの３次元形状を測定した結果を示す測定形状情報と、商品名Ｂごとに定められた基準物体の３次元形状を示す基準形状情報５０２とを比較した第１比較結果に基づいて、商品Ｐの商品名Ｂを特定する。また、特定部２１１は、商品Ｐを撮像することにより得られた撮像画像情報と、基準物体の外観を撮像することにより得られた基準画像情報５０４を比較した第２比較結果とに基づいて、商品名Ｂを特定する。特定部２１１は、第１比較結果および第２比較結果の両方を用いて商品名Ｂを特定してもよい。また、特定部２１１は、第１比較結果または第２比較結果のいずれか一方を用いて商品名Ｂを特定してもよい。

　なお、特定部２１１は、ＡＩ（Ａｒｔｉｆｉｃｉａｌ　Ｉｎｔｅｌｌｉｇｅｎｃｅ）を用いて商品名Ｂの特定を行ってもよい。この場合、例えば記憶装置２０５に、商品Ｐに関する学習済みモデルを記憶しておく。学習済みモデルは、例えば畳み込みニューラルネットワークを用いたディープラーニングを用いて、商品Ｐの形状（例えば基準形状情報５０２に基づいて特定される形状）または外観（例えば基準画像情報５０４に基づいて特定される外観）の少なくとも一方と、商品名Ｂとを対応付けた学習モデルである。学習済みモデルは、入力情報として測定形状情報または撮像画像情報の少なくとも一方が入力されると、出力情報として商品名Ｂを出力する。

　選択部２１２は、特定商品名ＢＸと商品Ｐに関連する関連情報とに基づいて、複数のメッセージ情報Ｍの中から一のメッセージ情報Ｍを選択する。より詳細には、選択部２１２は、メッセージ情報データベースＤＢ２を参照して、特定商品名ＢＸを含むレコードＤを検索する。図７を例にすると、特定商品名ＢＸが「ＡＡソーダ」である場合、「ＡＡソーダ」を含むレコードＤはレコードＤ１～Ｄ５である。

　次に、選択部２１２は、特定商品名ＢＸを含むレコードＤの位置情報６０１を参照して、ＡＲグラス３０の位置情報と一致する、または、ＡＲグラス３０の位置情報を含むレコードＤがあるか否かを判断する。上述のように、ＡＲグラス３０の位置は、特定商品名ＢＸに基づいて識別される商品Ｐが存在する位置で近似される。

　図７を例にすると、特定商品名ＢＸである「ＡＡソーダ」に対応付けられているレコードＤ１～Ｄ５の位置情報６０１は、「ＣＣマートＤＤ支店」および「ＣＣマートＥＥ支店」である。ＡＲグラス３０の位置が「ＣＣマートＤＤ支店」または「ＣＣマートＥＥ支店」でない場合には、該当レコードはないので、選択部２１２は処理を終了する。この場合、メッセージ情報Ｍは選択されず、ＡＲグラス３０におけるメッセージ情報Ｍの出力は行われない。

　選択部２１２は、ＡＲグラス３０の位置情報と一致する位置情報６０１を含むレコードＤがある場合、当該レコードＤの出力条件情報６０２を参照し、出力条件が成立するか否かを判断する。出力条件が成立するか否かは、取得部２１０が取得した環境情報または特定部２１１が商品名Ｂを特定した時刻を示す時刻情報に基づいて判断される。選択部２１２は、必要に応じて取得部２１０に環境情報の取得を依頼する。

　出力条件が成立する場合には、当該出力条件情報６０２を含むレコードＤのメッセージ情報Ｍが、ウェアラブル装置１０に提供されるメッセージ情報Ｍとして特定される。また、出力条件が成立しない場合には、ウェアラブル装置１０に提供されるメッセージ情報Ｍが特定されず、ＡＲグラス３０におけるメッセージ情報Ｍの出力は行われない。

　図７を例にすると、例えば特定商品名ＢＸが「ＡＡソーダ」であり、ＡＲグラス３０が「ＣＣマートＤＤ支店」に位置する場合、レコードＤ１およびＤ２が判断対象となる。レコードＤ１およびＤ２における出力条件情報６０２は、時刻に関する条件なので、選択部２１２は、特定部２１１が商品名Ｂを特定した時刻（現在時刻とほぼ同視できる）に基づいて、出力条件が成立するかを判断する。例えば特定部２１１が商品名Ｂを特定した時刻が１０：００の場合には、レコードＤ１の出力条件と一致する。よって、レコードＤ１のメッセージ情報Ｍ（「今なら１０％オフ」）が選択される。一方、例えば特定部２１１が商品名Ｂを特定した時刻が９：５５の場合には、レコードＤ１およびＤ２のいずれの出力条件とも一致しない。よって、メッセージ情報Ｍは選択されない。なお、情報提供サーバ２０の位置における時刻と、商品Ｐが存在する位置における時刻とに時差がある場合、特定部２１１が商品名Ｂを特定した時刻は、商品Ｐが存在する位置における現地時刻に変換された上で出力条件が成立するかが判断される。

　供給部２１３は、選択部２１２が選択した一のメッセージ情報Ｍを出力装置に供給する。本実施形態において、出力装置はＡＲグラス３０の投影装置３２１およびスピーカ３２２である。よって供給部２１３は、ＡＲグラス３０を含むウェアラブル装置１０に、メッセージ情報Ｍを送信する。より詳細には、供給部２１３は、通信装置２０３を介して端末装置４０に対してメッセージ情報Ｍを送信する。端末装置４０は、供給部２１３から送信されたメッセージ情報Ｍを、通信装置４０３を介してＡＲグラス３０に送信する。ＡＲグラス３０の処理装置３２８は、受信したメッセージ情報Ｍに基づいて、投影装置３２１およびスピーカ３２２を制御し、メッセージ情報Ｍを出力する。メッセージ情報Ｍの出力態様の一例を、図１１に示す。

　なお、本実施形態において、一のメッセージ情報Ｍとは、メッセージ情報データベースＤＢ２に含まれる複数のレコードＤ１～Ｄ６のうち、１つのレコードＤのメッセージ情報Ｍ、との意味である。例えば、一のメッセージ情報Ｍに複数の文が含まれていたり、一のメッセージ情報Ｍにテキスト情報および動画など異なる種類の情報が含まれていたりしてもよい。

Ａ－８．処理装置２０６の動作
　図８は、処理装置２０６の動作を示すフローチャートである。処理装置２０６は、取得部２１０として機能し、ＡＲグラス３０から送信された測定形状情報、撮像画像情報および位置情報を取得する（ステップＳ１０１）。処理装置２０６は、特定部２１１として機能し、ユーザの視界に存在する商品Ｐの商品名Ｂを特定する（ステップＳ１０２）。具体的には、処理装置２０６は、物体特定用データベースＤＢ１に記憶された基準形状情報５０２と測定形状情報との照合、または物体特定用データベースＤＢ１に記憶された基準画像情報５０４と撮像画像情報との照合の少なくともいずれかを実行し、ユーザの視界に位置する商品Ｐの商品名Ｂを特定する。上述のように、特定部２１１が特定した商品名Ｂを特定商品名ＢＸという。なお、ユーザの視界に商品Ｐがない場合、処理装置２０６は、商品Ｐがユーザの視界に入るまで待機する。

　処理装置２０６は、選択部２１２として機能し、特定商品名ＢＸがメッセージ情報データベースＤＢ２に登録されているか否かを判断する（ステップＳ１０３）。具体的には、処理装置２０６は、メッセージ情報データベースＤＢ２の商品名Ｂに、特定商品名ＢＸを含むレコードＤがあるか否かを判断する。特定商品名ＢＸがメッセージ情報データベースＤＢ２に登録されていない場合（ステップＳ１０３：ＮＯ）、処理装置２０６は、ステップＳ１０１に処理を戻し、以降の処理を繰り返す。

　特定商品名ＢＸがメッセージ情報データベースＤＢ２に登録されている場合（ステップＳ１０３：ＹＥＳ）、処理装置２０６は、選択部２１２として機能し、特定商品名ＢＸを含むレコードＤに、ＡＲグラス３０の位置情報を含むレコードＤがあるか否かを判断する（ステップＳ１０４）。より詳細には、処理装置２０６は、特定商品名ＢＸを含むレコードＤの位置情報６０１を参照して、ＡＲグラス３０の位置情報と一致する、またはＡＲグラス３０の位置情報を含む位置情報を記憶するレコードＤがあるかを判断する。ＡＲグラス３０の位置情報を含むレコードＤがない場合（ステップＳ１０４：ＮＯ）、処理装置２０６は、ステップＳ１０１に処理を戻し、以降の処理を繰り返す。

　ＡＲグラス３０の位置情報を含むレコードＤがある場合（ステップＳ１０４：ＹＥＳ）、処理装置２０６は、取得部２１０として機能し、ＡＲグラス３０の位置情報を含むレコードＤの出力条件に対応する環境情報または時刻情報を取得する（ステップＳ１０５）。より詳細には、処理装置２０６は、ＡＲグラス３０の位置情報を含むレコードＤの出力条件情報６０２を参照して、出力条件の判定に必要な情報の種類（例えば、気温情報、時刻情報など）を判別し、必要な情報を取得する。

　環境情報または時刻情報を取得すると、処理装置２０６は、選択部２１２として機能し、環境情報または時刻情報が示す状態が、出力条件と一致するレコードＤがあるか否かを判断する（ステップＳ１０６）。出力条件と一致するレコードＤがない場合（ステップＳ１０６：ＮＯ）、処理装置２０６は、ステップＳ１０１に処理を戻し、以降の処理を繰り返す。

　出力条件と一致するレコードがある場合（ステップＳ１０６：ＹＥＳ）、処理装置２０６は、供給部２１３として機能し、出力条件と一致したレコードに対応するメッセージ情報Ｍを、ＡＲグラス３０に送信する（ステップＳ１０７）。メッセージ情報Ｍの送信を受けたＡＲグラス３０は、投影装置３２１およびスピーカ３２２を用いてメッセージ情報Ｍを出力する。その後、処理装置２０６は、ステップＳ１０１に処理を戻し、以降の処理を繰り返す。

　Ａ－９．第１実施形態のまとめ
　以上説明したように、第１実施形態によれば、情報提供サーバ２０は、ユーザの視界に存在する商品Ｐの商品名Ｂと、商品Ｐに関連する関連情報とに基づいて、複数のメッセージ情報Ｍの中から一のメッセージ情報Ｍを選択する。関連情報には、商品Ｐが存在する位置における環境に関する環境情報および商品名Ｂが特定された時刻を示す時刻情報のうち少なくとも一つの情報と、商品Ｐが存在する位置を示す位置情報が含まれる。よって、商品Ｐの位置情報を含む関連情報に合わせてメッセージ情報Ｍの内容が変更される。このため、商品名Ｂに対して単一のメッセージ情報Ｍが対応付けられている場合と比較して、ユーザにとってより有益な情報が提供され得る。

　また、第１実施形態によれば、情報提供サーバ２０は、商品Ｐの３次元形状を測定した結果を示す測定形状情報と、基準物体の３次元形状を示す基準形状情報５０２とを比較して商品名Ｂを特定する。よって、撮像画像情報のみが用いられるのと比較して、例えばポスターの写真を実際の物体として認識するような誤認識が防止され、不要な情報の表示が回避される。

　また、第１実施形態によれば、情報提供サーバ２０は、測定形状情報と基準形状情報５０２とを比較するとともに、ユーザの視界内にある商品Ｐを撮像した撮像画像情報と、基準物体の外観を撮像した基準画像情報５０４とを比較することで、商品名Ｂを特定する。よって、例えば商品Ｐが、袋入りのスナック菓子のように形状のみでは識別性のない物体である場合でも正しく検出される。

　また、第１実施形態によれば、情報提供サーバ２０は、ユーザの頭部に装着されたＡＲグラス３０が有する３Ｄスキャナ３２５から測定形状情報を取得し、ＡＲグラス３０にメッセージ情報Ｍを送信する。よって、ユーザの視野にある商品Ｐがリアルタイムかつ正確に検出されるとともに、ユーザ周辺の状態に適したメッセージ情報Ｍが提供される。

Ｂ．第２実施形態
　以下、本発明の第２実施形態について説明する。なお、以下の説明では、説明の簡略化のため、第１実施形態と同一の構成要素に対しては、同一の符号を用いるとともに、その機能の説明を省略することがある。また、以下の説明では、説明の簡略化のため、主として、第２実施形態が、第１実施形態に比較して相違する点について説明する。

　第１実施形態では、関連情報は、商品Ｐが存在する位置における環境に関する環境情報および特定部２１１が商品名Ｂを特定した時刻を示す時刻情報のうち少なくとも一つの情報と、商品Ｐが存在する位置を示す位置情報であった。第２実施形態では、関連情報が、上記情報に加えて、商品Ｐの表面のうちユーザが視認する領域に関する領域情報を含む場合について説明する。すなわち、第２実施形態では、商品Ｐの表面のうちユーザが視認する領域に関する領域情報、環境情報および時刻情報のうち少なくとも一つの情報と、位置情報とを含む。

　図１０は、商品Ｐの表面の領域を模式的に示す説明図である。図１０では、商品Ｐとして、商品名Ｂが「ＡＡソーダ」であるペットボトル飲料７０が例示されている。ペットボトル飲料７０は、蓋７２と本体７４とを有し、本体７４にラベル７８が貼付されている。ペットボトル飲料７０のラベル７８に全周に渡って同じ表示がなされることはほとんどない。よって、ユーザが視認するペットボトル飲料７０の表面の領域は、例えばラベル７８の表示に基づいて識別することができる。

　一般に、ペットボトル飲料７０のラベル７８には、商品名表示７０２が大きく表記された第１面７１０と、原材料、製造者、栄養成分表等の商品情報７０４およびバーコード表示７０６が表記された第２面７２０とを有する。ユーザが装着するＡＲグラス３０の撮像装置３２４の撮像画像に写るペットボトル飲料７０のラベル７８が第１面７１０を向いている場合、ユーザはペットボトル飲料７０の表面のうち第１領域Ｆ１を視認しているといえる。また、撮像画像に写るペットボトル飲料７０のラベル７８が第２面７２０を向いている場合、ユーザはペットボトル飲料７０の表面のうち第２領域Ｆ２を視認しているといえる。なお、ユーザが商品Ｐの表面のどの領域を視認しているかは、例えば撮像画像情報に基づいて判定され得る。

　なお、ユーザが視認するペットボトル飲料７０の表面の領域は、第１領域Ｆ１または第２領域Ｆ２に限られない。ユーザは、例えば第１面７１０と第２面７２０の境界を含む様々な角度からペットボトル飲料７０を視認可能であり、領域をより細かく定義してもよい。本実施形態では、説明の便宜上、ユーザが視認するペットボトル飲料７０の表面の領域が、第１領域Ｆ１または第２領域Ｆ２のいずれかであるものとして説明する。

　図９は、メッセージ情報データベースＤＢ２の一例を示す説明図である。第１実施形態と同様に、メッセージ情報データベースＤＢ２には、商品名Ｂと、位置情報６０１と、出力条件情報６０２と、メッセージ情報Ｍとが含まれる。図９に示すメッセージ情報データベースＤＢ２は、４つのレコードＤ１～Ｄ４を含む。

　図９に示すメッセージ情報データベースＤＢ２において、レコードＤ１～Ｄ４の商品名Ｂは「ＡＡソーダ」である。また、レコードＤ１およびＤ２の位置情報６０１は「ＣＣマートＤＤ支店」であり、レコードＤ３およびＤ４の位置情報６０１は「ＣＣマートＥＥ支店」である。

　また、第２実施形態では、出力条件情報６０２は、商品Ｐの表面のうちユーザが視認する領域に関する領域情報である。具体的には、レコードＤ１およびＤ３の出力条件情報６０２は「第１領域Ｆ１」であり、レコードＤ２およびＤ４の出力条件情報６０２は「第２領域Ｆ２」である。なお、第１実施形態と同様、出力条件情報として複数種類の状態を組み合わせてもよい。例えば、「第１領域Ｆ１」かつ「時刻１０：００～１５：５９」という出力条件が設定されてもよい。

　例えば、ユーザが「ＣＣマートＤＤ支店」において、ペットボトル飲料７０である「ＡＡソーダ」が視界に入ったものとする。この状態は、図９に示すメッセージ情報データベースＤＢ２のレコードＤ１またはＤ２に該当する。

　ユーザがペットボトル飲料７０のラベル７８の第１面７１０を見ると、ユーザが視認するペットボトル飲料７０の表面の領域は、第１領域Ｆ１となる。すなわち、レコードＤ１の出力条件が成立する。この場合、ＡＲグラス３０には、レコードＤ１に対応するメッセージ情報Ｍが送信され、ＡＲグラス３０は送信されたメッセージ情報Ｍを表示する。具体的には、図１１に示すように、「今なら１０％オフ」というテキストＣ１が表示される。

　また、ユーザがペットボトル飲料７０のラベル７８の第２面７２０を見ると、ユーザが視認するペットボトル飲料７０の表面の領域は、第２領域Ｆ２となる。すなわち、レコードＤ２の出力条件が成立する。この場合、ＡＲグラス３０には、レコードＤ２に対応するメッセージ情報Ｍが送信され、ＡＲグラス３０は送信されたメッセージ情報Ｍを表示する。具体的には、図１２に示すように、ＡＡソーダの原材料名および栄養表示を示すテキストＣ２が表示される。

　例えばユーザがラベル７８の第１面７１０を見ている場合、ユーザはその商品自体に興味を持っていると考えられる。このようなタイミングで、「１０％オフ」など購入の動機となる情報を出力することで、ユーザが商品Ｐを購入する可能性を高めることができる。また、例えばユーザがラベル７８の第２面７２０を見ている場合、その商品Ｐの原材料または栄養成分に興味を持っていると考えられる。このようなタイミングで、原材料および栄養成分を出力することで、ユーザは、商品選択の参考となる情報を得ることができる。よって、ユーザの利便性が向上する。

　以上説明したように、第２実施形態によれば、商品Ｐの表面のうちユーザが視認する領域に関する領域情報に基づいて、メッセージ情報Ｍが選択される。よって、ユーザが商品Ｐに対してどのような興味を持っているかを考慮した情報提供が行われ、ＡＲグラス３０で出力するメッセージ情報Ｍの有益性が向上する。

　なお、第１実施形態および第２実施形態では、ユーザの視界に存在する物体が商品Ｐである場合について説明したが、これに限らず、本発明は、大小様々な規模の物体に適用され得る。また、第１実施形態および第２実施形態では、メッセージ情報Ｍが、店舗で販売される商品Ｐの販売促進のために表示される情報であるものとしたが、メッセージ情報Ｍはこれに限らず、様々な情報が設定され得る。

　例えば、物体が、テーマパークにおけるアトラクションの構造物であってもよい。この場合、テーマパークにおいて１つの構造物をユーザが見た際に、ユーザの位置、時間帯または気象条件によって異なるメッセージ情報Ｍが表示される。メッセージ情報Ｍは、例えばアトラクションの待ち時間またはアトラクションの説明などのテキスト情報であってもよいし、アトラクション内またはアトラクションの周辺で行われるショーを映した動画などであってもよい。または、例えば現実空間における構造物と重畳して、他の時間帯における構造物の外観（例えば夜間にライトアップされた構造物の外観など）の画像をメッセージ情報Ｍとして表示してもよい。

　また、物体が、例えば博物館に展示された恐竜または動物の模型等であってもよい。この場合、ユーザが博物館において１つの模型を見た際に、ユーザの位置、時間帯または気象条件によって異なるメッセージ情報Ｍが表示される。メッセージ情報Ｍは、例えば模型が示す恐竜または動物の説明などのテキスト情報であってもよいし、模型が示す恐竜または動物の鳴き声などの音声情報などであってもよい。

　すなわち、本発明は、商品Ｐの販売促進に限らず、例えば観光地における観光案内、施設における施設案内、展示物に対する説明等、様々な用途に適用可能である。

　Ｃ：変形例
　上述の実施形態における変形の態様を以下に示す。以下の変形の態様から任意に選択された２以上の態様を、相互に矛盾しない範囲において適宜に併合してもよい。

　Ｃ１：第１変形例
　第１実施形態および第２実施形態では、ＡＲグラス３０と端末装置４０とが別体であった。これに限らず、例えばＡＲグラス３０が端末装置４０の機能を有していてもよい。すなわち、ＡＲグラス３０の通信装置３２３を通信網Ｎに接続可能とし、ＡＲグラス３０から情報提供サーバ２０に直接、位置情報、測定形状情報および撮像画像情報が送信されてもよい。なお、ＡＲグラス３０が端末装置４０の機能を有する場合、タッチパネル４０１に代えて、コントローラまたはハンドトラッキング等の、他のユーザ入出力装置または他のユーザ入出力装置機能を設けてもよい。

　第１変形例によれば、例えば、端末装置４０を用いずに、ユーザにメッセージ情報Ｍの提供を行うことができる。

　Ｃ２：第２変形例
　第１実施形態および第２実施形態では、情報提供サーバ２０が商品名Ｂの特定およびメッセージ情報Ｍの選択を行っていた。すなわち、情報提供サーバ２０が、特定部２１１、選択部２１２、物体特定用データベースＤＢ１およびメッセージ情報データベースＤＢ２を有していた。これに限らず、例えば特定部２１１および物体特定用データベースＤＢ１に対応する構成を備え商品名Ｂの特定を行う第１サーバと、選択部２１２およびメッセージ情報データベースＤＢ２に対応する構成を備えメッセージ情報Ｍの選択を行う第２サーバとが設けられてもよい。

　この場合、例えば端末装置４０は、測定形状情報および撮像画像情報を第１サーバに送信する。第１サーバは、測定形状情報および撮像画像情報を物体特定用データベースＤＢ１に照合し、商品名Ｂの特定を行う。第１サーバは、商品名Ｂを検出すると、端末装置４０に対して商品名Ｂを通知する。商品名Ｂの通知を受けた端末装置４０は、商品名ＢとＡＲグラス３０の位置情報とを第２サーバに送信する。第２サーバは、商品名ＢとＡＲグラス３０の位置情報とをメッセージ情報データベースＤＢ２に照合する。第２サーバは、商品名ＢとＡＲグラス３０の位置情報とが一致するレコードＤがある場合、当該レコードＤの出力条件情報に基づいて、ＡＲグラス３０の位置の環境情報または時刻情報を取得する。レコードＤの出力条件情報とＡＲグラス３０の位置の環境情報または時刻情報とが一致する場合には、当該レコードＤに対応するメッセージ情報Ｍを端末装置４０に送信する。

　第２変形例によれば、１つのサーバに処理負荷が集中するのを回避することができ、システムの安定性を向上させることができる。

　Ｃ３：第３変形例
　第１実施形態および第２実施形態では、情報提供サーバ２０が商品名Ｂの特定を行っていた。すなわち、情報提供サーバ２０が、特定部２１１および物体特定用データベースＤＢ１を有していた。これに限らず、例えば端末装置４０が特定部２１１および物体特定用データベースＤＢ１を備えていてもよい。

　第３変形例によれば、端末装置４０で商品名Ｂの特定を行うので、通信網Ｎを介して測定形状情報および撮像画像情報を送受信する必要がなくなり、システムにおける処理負荷を軽減することができる。

　Ｄ：その他
　（１）図３、図４、図５に例示された各機能は、ハードウェアおよびソフトウェアの任意の組み合わせによって実現される。各機能の実現方法は特に限定されない。各機能は、物理的または論理的に結合した１つの装置を用いて実現されてもよいし、物理的または論理的に分離した２つ以上の装置を直接的または間接的に（例えば、有線、無線などを用いて）接続することによって構成される装置を用いて実現されてもよい。各機能は、上記１つの装置または上記複数の装置にソフトウェアを組み合わせて実現されてもよい。

　（２）本明細書において、「装置」という用語は、回路、デバイスまたはユニット等の他の用語に読み替えられてもよい。

　（３）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において、記憶装置２０５、記憶装置３２７および記憶装置４０５は、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ　ＲＯＭ）などの光ディスク、ハードディスクドライブ、フレキシブルディスク、光磁気ディスク（例えば、コンパクトディスク、デジタル多用途ディスク、Ｂｌｕ－ｒａｙ（登録商標）ディスク）、スマートカード、フラッシュメモリー（例えば、カード、スティック、キードライブ）、フロッピー（登録商標）ディスク、磁気ストリップなどの少なくとも１つによって構成されてもよい。また、プログラムは、電気通信回線を介してネットワークから送信されてもよい。

　（４）第１実施形態、第２実施形態および第１変形例～第３変形例の各々は、ＬＴＥ（Ｌｏｎｇ　Ｔｅｒｍ　Ｅｖｏｌｕｔｉｏｎ）、ＬＴＥ－Ａ（ＬＴＡ－Ａｄｖａｎｃｅｄ）、ＳＵＰＥＲ　３Ｇ、ＩＭＴ－Ａｄｖａｎｃｅｄ、４Ｇ（４ｔｈ　ｇｅｎｅｒａｔｉｏｎ　ｍｏｂｉｌｅ　ｃｏｍｍｕｎｉｃａｔｉｏｎ　ｓｙｓｔｅｍ）、５Ｇ（５ｔｈ　ｇｅｎｅｒａｔｉｏｎ　ｍｏｂｉｌｅ　ｃｏｍｍｕｎｉｃａｔｉｏｎ　ｓｙｓｔｅｍ）、６ｔｈ　ｇｅｎｅｒａｔｉｏｎ　ｍｏｂｉｌｅ　ｃｏｍｍｕｎｉｃａｔｉｏｎ　ｓｙｓｔｅｍ（６Ｇ）、ｘｔｈ　ｇｅｎｅｒａｔｉｏｎ　ｍｏｂｉｌｅ　ｃｏｍｍｕｎｉｃａｔｉｏｎ　ｓｙｓｔｅｍ（ｘＧ）（ｘは、例えば整数または小数）、ＦＲＡ（Ｆｕｔｕｒｅ　Ｒａｄｉｏ　Ａｃｃｅｓｓ）、ＮＲ（ｎｅｗ　Ｒａｄｉｏ）、Ｎｅｗ　ｒａｄｉｏ　ａｃｃｅｓｓ（ＮＸ）、Ｆｕｔｕｒｅ　ｇｅｎｅｒａｔｉｏｎ　ｒａｄｉｏ　ａｃｃｅｓｓ（ＦＸ）、Ｗ－ＣＤＭＡ（登録商標）、ＧＳＭ（登録商標）、ＣＤＭＡ２０００、ＵＭＢ（Ｕｌｔｒａ　Ｍｏｂｉｌｅ　Ｂｒｏａｄｂａｎｄ）、ＩＥＥＥ　８０２．１１（Ｗｉ－Ｆｉ（登録商標））、ＩＥＥＥ　８０２．１６（ＷｉＭＡＸ（登録商標））、ＩＥＥＥ　８０２．２０、ＵＷＢ（Ｕｌｔｒａ－ＷｉｄｅＢａｎｄ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、その他の適切なシステムを利用するシステムおよびこれらに基づいて拡張、修正、作成、規定された次世代システムの少なくとも一つに適用されてもよい。また、複数のシステムが組み合わされて（例えば、ＬＴＥおよびＬＴＥ－Ａの少なくとも一方と５Ｇとの組み合わせ等）適用されてもよい。

　（５）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において例示した処理手順、シーケンス、またはフローチャート等は、矛盾のない限り、順序を入れ替えてもよい。例えば、本明細書において説明した方法については、例示的な順序において様々なステップの要素を提示しており、提示した特定の順序に限定されない。

　（６）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において、入出力された情報等は特定の場所（例えば、メモリー）に保存されてもよいし、管理テーブルを用いて管理されてもよい。入出力される情報等は、上書き、更新、または追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。

　（７）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において、判定は、１ビットによって表される値（０か１か）に基づいて行われてもよいし、真偽値（Ｂｏｏｌｅａｎ：ｔｒｕｅまたはｆａｌｓｅ）に基づいて行われてもよいし、数値の比較（例えば、所定の値との比較）に基づいて行われてもよい。

　（８）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において例示したプログラムは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコードまたはハードウェア記述言語と呼ばれるか、他の名称によって呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順または機能等を意味するよう広く解釈されるべきである。また、ソフトウェア、または命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、有線技術（同軸ケーブル、光ファイバケーブル、ツイストペアおよびデジタル加入者回線（ＤＳＬ）など）および無線技術（赤外線、マイクロ波など）の少なくとも一方を使用してウェブサイト、サーバ、または他のリモートソースから送信される場合、これらの有線技術および無線技術の少なくとも一方は、伝送媒体の定義内に含まれる。

　（９）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において説明した情報などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、情報などは、電圧、電流、電磁波、磁界、磁性粒子、光場、光子、またはこれらの任意の組み合わせにて表されてもよい。なお、本明細書において説明した用語および本明細書の理解に必要な用語は、同一のまたは類似する意味を有する用語と置き換えられてもよい。

　（１０）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において、「システム」および「ネットワーク」という用語は、互換的に使用される。

　（１１）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において、端末装置４０は、移動局でもよい。移動局は、当業者によって、加入者局、モバイルユニット、加入者ユニット、ワイヤレスユニット、リモートユニット、モバイルデバイス、ワイヤレスデバイス、ワイヤレス通信デバイス、リモートデバイス、モバイル加入者局、アクセス端末、モバイル端末、ワイヤレス端末、リモート端末、ハンドセット、ユーザエージェント、モバイルクライアント、クライアント、またはいくつかの他の適切な用語を用いて称される場合もある。

　（１２）移動局は、送信装置、受信装置または通信装置などと呼ばれてもよい。移動局は、移動体に搭載されたデバイス、または移動体自体などであってもよい。移動体は、移動可能な物体を意味する。移動体の移動速度は任意である。移動体は、停止可能である。移動体は、例えば、車両、輸送車両、自動車、自動二輪車、自転車、コネクテッドカー、ショベルカー、ブルドーザー、ホイールローダー、ダンプトラック、フォークリフト、列車、バス、リヤカー、人力車、船舶（ｓｈｉｐ　ａｎｄ　ｏｔｈｅｒ　ｗａｔｅｒｃｒａｆｔ）、飛行機、ロケット、人工衛星、ドローン（登録商標）、マルチコプター、クアッドコプター、気球、およびこれらに搭載される物を含み、またこれらに限らない。移動体は、運行指令に基づいて自律走行する移動体であってもよい。移動体は、乗り物（例えば、車、飛行機など）であってもよいし、無人で動く移動体（例えば、ドローン、自動運転車など）であってもよし、ロボット（有人型または無人型）であってもよい。移動局は、必ずしも通信動作時に移動しない装置も含む。例えば、移動局は、センサなどのＩｏＴ（Ｉｎｔｅｒｎｅｔ　ｏｆ　Ｔｈｉｎｇｓ）機器であってもよい。

　（１３）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において、「判断（ｄｅｔｅｒｍｉｎｉｎｇ）」または「決定（ｄｅｔｅｒｍｉｎｉｎｇ）」という用語は、多種多様な動作を包含する場合がある。「決定」は、例えば、判定（ｊｕｄｇｉｎｇ）、計算（ｃａｌｃｕｌａｔｉｎｇ）、算出（ｃｏｍｐｕｔｉｎｇ）、処理（ｐｒｏｃｅｓｓｉｎｇ）、導出（ｄｅｒｉｖｉｎｇ）、調査（ｉｎｖｅｓｔｉｇａｔｉｎｇ）、探索（ｌｏｏｋｉｎｇ　ｕｐ、ｓｅａｒｃｈ、ｉｎｑｕｉｒｙ）（例えば、テーブル、データベースまたは別のデータ構造での探索）、確認（ａｓｃｅｒｔａｉｎｉｎｇ）した事を「決定」したとみなす事などを含み得る。また、「決定」は、受信（ｒｅｃｅｉｖｉｎｇ）（例えば、情報を受信すること）、送信（ｔｒａｎｓｍｉｔｔｉｎｇ）（例えば、情報を送信すること）、入力（ｉｎｐｕｔ）、出力（ｏｕｔｐｕｔ）、アクセス（ａｃｃｅｓｓｉｎｇ）（例えば、メモリー中のデータにアクセスすること）した事を「判断」「決定」したとみなす事などを含み得る。また、「決定」は、解決（ｒｅｓｏｌｖｉｎｇ）、選択（ｓｅｌｅｃｔｉｎｇ）、選定（ｃｈｏｏｓｉｎｇ）、確立（ｅｓｔａｂｌｉｓｈｉｎｇ）、比較（ｃｏｍｐａｒｉｎｇ）などした事を「決定」したとみなす事を含み得る。つまり、「決定」は、何らかの動作を「決定」したとみなす事を含み得る。また、「決定」は、「想定する（ａｓｓｕｍｉｎｇ）」、「期待する（ｅｘｐｅｃｔｉｎｇ）」、「みなす（ｃｏｎｓｉｄｅｒｉｎｇ）」などで読み替えられてもよい。

　（１４）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において、「接続された（ｃｏｎｎｅｃｔｅｄ）」という用語、またはこれのあらゆる変形は、２またはそれ以上の要素間の直接的または間接的なあらゆる接続または結合を意味し、互いに「接続」または「結合」された２つの要素間に１またはそれ以上の中間要素が存在することを含むことができる。要素間の結合または接続は、物理的なものであっても、論理的なものであっても、或いはこれらの組み合わせであってもよい。例えば、「接続」は「アクセス」で読み替えられてもよい。本開示で使用する場合、２つの要素は、１またはそれ以上の電線、ケーブルおよびプリント電気接続の少なくとも一つを用いて、並びにいくつかの非限定的かつ非包括的な例として、無線周波数領域、マイクロ波領域および光（可視および不可視の両方）領域の波長を有する電磁エネルギーなどを用いて、互いに「接続」または「結合」されると考えることができる。

　（１５）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において、「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。

　（１６）本明細書において使用する「第１」および「第２」などの呼称を使用した要素へのいかなる参照も、それらの要素の量または順序を全般的に限定しない。これらの呼称は、２つ以上の要素間を区別する便利な方法として本明細書において使用され得る。したがって、第１および第２の要素への参照は、２つの要素のみが採用され得ることまたは何らかの形において第１要素が第２要素に先行しなければならないことを意味しない。

　（１７）第１実施形態、第２実施形態および第１変形例～第３変形例の各々において「含む（ｉｎｃｌｕｄｅ）」、「含んでいる（ｉｎｃｌｕｄｉｎｇ）」およびそれらの変形が、本明細書あるいは特許請求の範囲において使用されている場合、これら用語は、用語「備える（ｃｏｍｐｒｉｓｉｎｇ）」と同様に、包括的であることが意図される。更に、本明細書あるいは特許請求の範囲において使用されている用語「または（ｏｒ）」は、排他的論理和ではないことが意図される。

　（１８）本願の全体において、例えば、英語におけるａ、ａｎおよびｔｈｅのように、翻訳によって冠詞が追加された場合、本開示は、これらの冠詞の後に続く名詞が複数形であることを含んでもよい。

　（１９）本発明が本明細書中に説明した実施形態に限定されないことは当業者にとって明白である。本発明は、特許請求の範囲の記載に基づいて定まる本発明の趣旨および範囲を逸脱することなく修正および変更態様として実施できる。したがって、本明細書の記載は、例示的な説明を目的とし、本発明に対して何ら制限的な意味を有さない。また、本明細書に例示した態様から選択された複数の態様を組み合わせてもよい。

　１…情報処理システム、１０…ウェアラブル装置、２０…情報提供サーバ、３０…ＡＲグラス、４０…端末装置、２０１…入力装置、２０２…表示装置、２０３…通信装置、２０５…記憶装置、２０６…処理装置、２１０…取得部、２１１…特定部、２１２…選択部、２１３…供給部、３２１…投影装置、３２２…スピーカ、３２３…通信装置、３２４…撮像装置、３２５…３Ｄスキャナ、３２６…ＧＰＳ装置、３２７…記憶装置、３２８…処理装置、ＤＢ１…物体特定用データベース、ＤＢ２…メッセージ情報データベース、Ｎ…通信網。

Claims

　ユーザの視界に存在する物体の種別を特定し、当該特定した種別を示す種別情報を出力する特定部と、
　前記種別情報と前記物体に関連する関連情報とに基づいて、複数のメッセージ情報の中から一のメッセージ情報を選択する選択部と、
　前記選択された一のメッセージ情報を出力装置に供給する供給部と、を備え、
　前記関連情報は、前記物体が存在する位置における環境に関する環境情報および前記特定部が前記物体の種別を特定した時刻を示す時刻情報のうち少なくとも一つの情報と、前記物体が存在する位置を示す位置情報とを含む、
　情報処理装置。
　前記関連情報は、前記物体の表面のうち前記ユーザが視認する領域に関する領域情報、前記環境情報および前記時刻情報のうち少なくとも一つの情報と、前記位置情報とを含む請求項１に記載の情報処理装置。
　前記特定部は、前記物体の３次元形状を測定した結果を示す測定形状情報と、種別ごとに定められた基準物体の３次元形状を示す基準形状情報とを比較した第１比較結果に基づいて、前記物体の種別を特定する、
　請求項１または２に記載の情報処理装置。
　前記特定部は、
　前記第１比較結果と、
　前記物体を撮像することにより得られた第１画像と前記基準物体の外観を撮像することにより得られた第２画像とを比較した第２比較結果と、
　に基づいて、前記物体の種別を特定する、
　請求項３記載の情報処理装置。
　前記特定部は、測定装置から出力される前記測定形状情報を取得し、
　前記供給部は、前記出力装置に前記一のメッセージ情報を送信し、
　前記測定装置および前記出力装置は、前記ユーザの頭部に装着されるウェアラブル装置に設けられる、
　請求項３または４に記載の情報処理装置。
　前記メッセージ情報は、画像情報または音声情報の少なくとも一つを含み、
　前記出力装置は、前記ユーザの目と前記物体との間に配置される透過型ディスプレイおよび前記ユーザに音を出力するスピーカを含み、
　前記画像情報は、前記透過型ディスプレイから出力され、
　前記音声情報は、前記スピーカから出力される、
　請求項１から５のいずれか１項に記載の情報処理装置。