JP2012048648A - 情報サービスシステムおよび情報サービス方法 - Google Patents

Abstract

【課題】ユーザのそのときの状況等に応じて、柔軟に多彩な情報を出力する。
【解決手段】携帯端末が、被写体を撮像して画像を生成して表示部に順次表示し、自端末の位置を示す位置情報を生成し、撮像した画像を識別する画像識別情報と位置情報とをサーバ装置に送信し、サーバ装置が、定められた画像識別情報と定められた位置を示す位置情報とに対応付けられた出力情報を記憶し、携帯端末から送信された画像識別情報と位置情報とに対応する出力情報を読み出し、読み出した出力情報を、携帯端末に送信し、携帯端末が、サーバ装置から送信される出力情報を受信して、受信した出力情報を、表示部に順次表示されている画像に重ねて表示する。
【選択図】図１

Description

本発明は、いわゆるＡＲ技術を利用した情報サービスシステムおよび情報サービス方法に関する。

処理速度や記憶容量、通信帯域などが向上して高機能化するスマートフォン等の携帯端末を用いて、現実環境に情報を付加して表示するＡＲ（Augmented Reality：拡張現実、強化現実）技術が研究されている。例えば、携帯端末がＧＰＳ（Global Positioning System）機能等により位置情報を取得し、その位置に応じた情報（アノテーション）を撮像している画像に重ねて表示する。これにより、例えば、視覚的、感覚的に、店舗情報や道案内情報等を提供することができる。
ところで、特許文献１には、携帯端末から送信された位置情報に関連する店舗情報を提供する技術が示されている。特許文献２には、ある店舗を利用したユーザの嗜好に近い店舗情報を、他のユーザの購買傾向に基づいて提供する技術が示されている。

特開２００５−２４２４５９号公報 特開２００７−２８６９７４号公報

しかしながら、位置情報のみに応じた情報を表示する方法では、出力する情報の内容が固定的となり、必ずしもユーザにとって有用な情報を提供できていない場合があると考えられる。そこで、このようなＡＲ技術を用いて、ユーザのそのときの状況等に応じて、より柔軟に多彩な情報を提供することが望ましい。

本発明は、このような状況に鑑みてなされたもので、ＡＲ技術を用いて、ユーザのそのときの状況等に応じて、より柔軟に多彩な情報を出力する情報サービスシステムおよび情報サービス方法を提供する。

上述した課題を解決するために、本発明は、ユーザの携帯端末と、携帯端末とネットワークを介して接続されたサーバ装置とを備えた情報サービスシステムであって、携帯端末は、定められた画像と、画像を識別する画像識別情報とが対応付けられて記憶される画像識別情報記憶部と、被写体を撮像して画像を生成する撮像部と、撮像部によって撮像された画像が順次表示される表示部と、撮像部によって撮像された画像に対応付けられて画像識別情報記憶部に記憶されている画像識別情報を読み出す画像識別情報検索部と、自端末の位置を示す位置情報を生成する位置情報生成部と、画像識別情報検索部によって読み出された画像識別情報と、位置情報生成部によって生成された位置情報とをサーバ装置に送信する条件送信部と、条件送信部が送信した画像識別情報と位置情報とに応じて、サーバ装置から送信される出力情報を受信して、受信した出力情報を、表示部に順次表示されている画像に重ねて表示させる画像制御部と、を備え、サーバ装置は、定められた画像識別情報と定められた位置を示す位置情報とに対応付けられた出力情報が記憶されている出力情報記憶部と、携帯端末から送信された画像識別情報と位置情報とに対応する出力情報を、出力情報記憶部から読み出す出力情報検索部と、出力情報検索部によって読み出された出力情報を、携帯端末に送信する出力情報送信部と、を備えることを特徴とする。

また、本発明は、携帯端末が、撮像部によって生成された画像から定められた画像特徴点を抽出する画像特徴点抽出部を備え、画像識別情報記憶部には、定められた画像特徴点と位置情報とに対応付けられて出力情報が記憶されており、画像識別情報検索部は、撮像部によって生成された画像に基づいて画像特徴点抽出部によって検出された画像特徴点と、位置情報とに対応する出力情報を読み出すことを特徴とする。

また、本発明は、サーバ装置が、ユーザの属性を示す属性情報が含まれるユーザ情報が記憶されているユーザ情報記憶部を備え、出力情報記憶部には、出力情報に対応する属性情報が記憶されており、出力情報検索部は、画像と位置情報とを送信してきた携帯端末のユーザに対応するユーザ情報を、ユーザ情報記憶部から読み出し、読み出したユーザ情報に対応する出力情報を読み出すことを特徴とする。

また、本発明は、定められた画像と、画像を識別する画像識別情報とが対応付けられて記憶される画像識別情報記憶部を有するユーザの携帯端末と、携帯端末とネットワークを介して接続され、定められた画像識別情報と定められた位置を示す位置情報とに対応付けられた出力情報が記憶されている出力情報記憶部を有するサーバ装置とを備えた情報サービスシステムの情報サービス方法であって、携帯端末が、被写体を撮像して画像を生成するステップと、撮像した画像を表示部に順次表示させるステップと、撮像した画像に対応付けられて画像識別情報記憶部に記憶されている画像識別情報を読み出すステップと、自端末の位置を示す位置情報を生成するステップと、読み出した画像識別情報と、生成した位置情報とをサーバ装置に送信するステップと、サーバ装置が、携帯端末から送信された画像識別情報と位置情報とに対応する出力情報を、出力情報記憶部から読み出すステップと、読み出した出力情報を、携帯端末に送信するステップと、携帯端末が、サーバ装置から送信される出力情報を受信して、受信した出力情報を、表示部に順次表示されている画像に重ねて表示させるステップと、を備えることを特徴とする。

以上説明したように、本発明によれば、携帯端末が、被写体を撮像して画像を生成して表示部に順次表示し、自端末の位置を示す位置情報を生成し、撮像した画像を識別する画像識別情報と位置情報とをサーバ装置に送信し、サーバ装置が、定められた画像識別情報と定められた位置を示す位置情報とに対応付けられた出力情報を記憶し、携帯端末から送信された画像識別情報と位置情報とに対応する出力情報を読み出し、読み出した出力情報を、携帯端末に送信し、携帯端末が、サーバ装置から送信される出力情報を受信して、受信した出力情報を、表示部に順次表示されている画像に重ねて表示するようにしたので、ユーザのそのときの状況等に応じて、柔軟に多彩な情報を出力する情報サービスシステムおよび情報サービス方法を提供することができる。

本発明の一実施形態による情報サービスシステムの構成を示すブロック図である。 本発明の一実施形態による情報サービスの概要を説明する図である。 本発明の一実施形態による画像ＩＤ記憶部に記憶されるデータ例を示す図である。 本発明の一実施形態による出力情報記憶部に記憶されるデータ例を示す図である。 本発明の一実施形態による情報サービスシステムによる情報提供処理の動作例を示すフローチャートである。 本発明の一実施形態による様々な業種形態における情報サービスシステムの適用例を示す図である。 本発明の一実施形態によるパターンＡの適用例を示す図である。 本発明の一実施形態による情報サービスシステムの動作例を示すシーケンス図である。 本発明の一実施形態によるパターンＢの適用例を示す図である。 本発明の一実施形態によるパターンＣの適用例を示す図である。 本発明の一実施形態によるパターンＤの適用例を示す図である。 本発明の一実施形態によるパターンＥの適用例を示す図である。 本発明の一実施形態によるパターンＦの適用例を示す図である。 本発明の一実施形態によるパターンＧの適用例を示す図である。

以下、本発明の一実施形態について、図面を参照して説明する。
図１は、本実施形態による情報サービスシステム１の構成を示すブロック図である。情報サービスシステム１は、携帯端末１０と、携帯端末１０にネットワークを介して接続されたサーバ装置２０とを備えている。ここで、図２を参照して、本実施形態による情報サービスの概要を説明する。例えば、ユーザは、自身の携帯端末１０の、本実施形態による情報サービスを実行するアプリケーション（以下、アプリともいう）を起動させ、鉄道の駅に設置された鉄道のロゴを撮像するように携帯端末１０をかざす（符号ａ）。

携帯端末１０は、撮像した画像から符号ｂに示すようなロゴを抽出して、抽出したロゴに対応付けられて予め記憶している画像ＩＤ（識別情報）を読み出す。携帯端末１０は、読み出した画像ＩＤと、ＧＰＳ機能等によって生成した現在の位置情報との条件を、サーバ装置２０に送信する。サーバ装置２０は条件を受信し、符号ｃに示すような、画像認識により抽出したロゴ画像の画像ＩＤ、位置情報、付近にいる他のユーザの人数、予め登録されたユーザの嗜好、その時の天気・気温等の様々な要素を考慮して、そのユーザに対して提供する情報を決定する。ここで、例えば近辺に存在するアイスクリーム屋のロゴが検出されると、符号ｄに示すように、携帯端末１０のディスプレイに表示される画像に、アイスクリーム屋のロゴ（符号ｅ）が重ねられて（オーバーレイ）表示される。これにより、ユーザは、ユーザのそのときの状況等を示す様々な要素に応じた、有用な情報を知ることができる。

図１に戻り、携帯端末１０は、撮像部１１と、表示部１２と、位置情報生成部１３と、画像ＩＤ記憶部１４と、画像特徴点抽出部１５と、画像ＩＤ検索部１６と、条件送信部１７と、画像制御部１８とを備えている。携帯端末１０には、以下に説明するＡＲ動作の制御を行うプログラム（アプリ）が記憶されている。
撮像部１１は、被写体を撮像して画像を生成するカメラである。
表示部１２には、撮像部１１によって撮像された画像が順次表示される。すなわち、表示部１２には、撮像部１１によって撮像された画像が動画状態で表示される。
位置情報生成部１３は、自端末の位置を示す位置情報を生成する。例えば、位置情報生成部１３は、ＧＰＳ受信機の機能を備えており、ＧＰＳ衛星から送信される電波に基づいて、自端末の位置を示す緯度と経度との情報を生成する。

画像ＩＤ記憶部１４には、画像ＩＤに対応付けられて、定められた画像の画像特徴点が記憶されている。図３は、画像ＩＤ記憶部１４に記憶されるデータ例を示す図である。画像特徴点とは、ロゴマークやＪＡＮ（Japanese Article Number）コードのような画像（マーカー）を一意に特徴付ける情報である。具体的には、画像をＲＧＢ変換し、画像のコーナーや角を特定して比較するための情報である。例えば、画像中の全ての画素から、その画素の上下左右の画素の輝度値に一定以上の差が存在すると判定される場合には、その画素にエッジが存在すると判定できる。画像に含まれる全ての画素からこのようなエッジを検出することによって、画像のコーナーや角を検出することができる。このようなコーナーや角に基づく画像特徴点を、画像の傾斜等を補正して比較し、パターンマッチングを行うことにより、複数の画像同士が一致するか否かを判定することができる。画像ＩＤ記憶部１４には、出力情報を提供する条件であるロゴマークやＪＡＮコード等の画像の画像特徴点が、予め抽出されて記憶されている。また、本実施形態では、画像ＩＤ記憶部１４に記憶されている情報は、アプリの起動時にサーバ装置２０から読み出し、記憶されるものとする。

画像特徴点抽出部１５は、撮像部１１によって撮像された画像から、定められた画像特徴点を抽出する。例えば、画像特徴点抽出部１５は、上述のような、画像に含まれるエッジを抽出し、抽出したエッジに基づくコーナーや角の情報を画像特徴点として抽出する。
画像ＩＤ検索部１６は、画像特徴点抽出部１５によって抽出された画像特徴点に一致する画像特徴点を画像ＩＤ記憶部１４から検出し、検出した画像特徴点に対応付けられた画像ＩＤを読み出す。
条件送信部１７は、撮像部１１によって撮像された画像に基づいて画像ＩＤ検索部１６に読み出された画像ＩＤと、位置情報生成部１３によって生成された位置情報との条件をサーバ装置２０に送信する。ここで、撮像部１１に撮像される画像と、位置情報生成部１３に生成される位置情報とは時々刻々と変化するものであるため、条件送信部１７は、画像ＩＤと位置情報とを順次サーバ装置２０に送信する。

画像制御部１８は、撮像部１１によって撮像された画像を、表示部１２に表示させる。また、画像制御部１８は、条件送信部１７が送信した画像ＩＤと位置情報とに応じて、サーバ装置２０から送信される出力情報を受信して、受信した出力情報を、表示部１２に順次表示されている画像に重ねて表示させる。ここで、出力情報とは、例えば画像情報や動画情報、テキスト情報などであり、図２の符号ｅに示したような情報である。また、この出力情報には、その出力情報に関連する情報（店舗の詳細情報等）を取得するためのリンク（ＵＲＬ）が付されているようにして、リンクを押下することで出力情報に関する詳細な情報を取得できるようにすることができる。

サーバ装置２０は、画像ＩＤ記憶部２１と、画像ＩＤ送信部２２と、条件受信部２３と、出力情報記憶部２４と、ユーザ情報記憶部２５と、外部情報取得部２６と、出力情報検索部２７と、出力情報送信部２８とを備えている。
画像ＩＤ記憶部２１は、画像ＩＤ記憶部１４に記憶されている情報と同様のデータが記憶されている。
画像ＩＤ送信部２２は、携帯端末１０においてアプリが起動された際に、画像ＩＤ記憶部２１に記憶されている情報を読み出し、携帯端末１０に送信する。
条件受信部２３は、携帯端末１０から送信される条件を受信する。

出力情報記憶部２４には、定められた画像と定められた位置を示す位置情報とに対応付けられた出力情報が記憶されている。さらに、出力情報記憶部２４には、出力情報に対応する属性情報等の条件が記憶されている。図４は、出力情報記憶部２４に記憶されるデータ例を示す図である。出力情報記憶部２４には、位置情報と、画像ＩＤと、外部情報（天気、時間等）と、ユーザ情報（性別、お気に入り等）等の条件に対応付けられて、出力情報が記憶されている。位置情報は、緯度、経度を示す情報である。画像ＩＤは、画像ＩＤ記憶部２１に記憶されている画像特徴点に対応する情報である。外部情報は、例えば天気や時間などの情報であり、位置情報でも画像ＩＤでもユーザ情報でもない各種の情報が含まれる。ユーザ情報は、予め登録されたユーザ情報に含まれる属性情報である。例えば、ユーザ情報には、性別、年齢、住所、お気に入りの各種ジャンル等の情報が含まれる。これらの情報は、ユーザに提供する出力情報を検出するための条件である。これらの条件を示す情報は、一定の範囲をもつ値でも良い。例えば、位置情報である緯度、経度は、一点を示す情報ではなく、一定の範囲をもつ値でも良い。出力情報は、ＡＲ技術によってユーザの携帯端末１０のディスプレイにオーバーレイして表示させる画像や動画やテキスト等の情報である。

ここで、本実施形態では、画像ＩＤ記憶部２１に画像ＩＤと画像特徴点とが対応付けられて記憶され、出力情報記憶部２４に画像ＩＤと出力情報等とが対応付けられて記憶されることとしたが、出力情報記憶部２４に、画像ＩＤと、画像特徴点と、出力情報等とを対応付けて記憶するようにしても良い。

ユーザ情報記憶部２５には、携帯端末１０のユーザの属性を示す属性情報が含まれるユーザ情報が記憶されている。ユーザ情報は、専用アプリやウェブサイト等を用いて、ユーザによって予め登録された情報である。ユーザ情報には、例えば、ユーザを識別するユーザＩＤに対応付けて、ユーザの性別、年齢、住所、お気に入りの各種ジャンル等の属性情報が記憶されている。

外部情報取得部２６は、天気や時間等の情報を取得する。例えば、外部のサーバ等と接続して、ＡＰＩ（Application Program Interface）等により提供される現在の天気の情報や天気予報の情報等を取得して、自身の記憶領域に記憶する。あるいは、外部情報取得部２６は計時機能を備えており、現在時刻である時間を取得する。他にも、外部情報取得部２６は、季節、道路交通情報等の情報を取得して、自身の記憶領域に記憶することができる。

出力情報検索部２７は、携帯端末１０から送信された画像ＩＤと位置情報とに対応する出力情報を、出力情報記憶部２４から読み出す。この際、出力情報検索部２７は、画像ＩＤと位置情報とを送信してきた携帯端末１０のユーザに対応するユーザ情報をユーザ情報記憶部２５から読み出し、読み出したユーザ情報と、外部情報取得部２６が取得した外部情報とを条件として、これらの条件に対応する出力情報を読み出す。
出力情報送信部２８は、出力情報検索部２７によって読み出された出力情報を、携帯端末１０に送信する。

次に、本実施形態による情報サービスシステム１の動作例を説明する。図５は、情報サービスシステム１による情報提供処理の動作例を示すフローチャートである。
まず、携帯端末１０は、ユーザから入力される操作情報に基づいて、予め記憶されている、本実施形態によるＡＲ動作の制御を行うアプリを起動させる。サーバ装置２０の画像ＩＤ送信部２２は、画像ＩＤ記憶部２１に記憶されている情報を携帯端末１０に送信し、携帯端末１０の画像ＩＤ記憶部１４に記憶させる。携帯端末１０の撮像部１１は、被写体の撮像を開始する。画像制御部１８は、撮像部１１によって撮像された画像を表示部１２に順次表示させる（ステップＳ１）。

位置情報生成部１３は、ＧＰＳ機能に基づいて位置情報を生成する（ステップＳ２）。携帯端末１０の画像特徴点抽出部１５は、撮像部１１が撮像した画像から画像特徴点を抽出する（ステップＳ３）。画像ＩＤ検索部１６は、画像特徴点抽出部１５が抽出した画像特徴点に対応する画像ＩＤを、画像ＩＤ記憶部１４から読み出す。条件送信部１７は、画像ＩＤと位置情報との条件を、サーバ装置２０に送信する（ステップＳ４）。サーバ装置２０の条件受信部２３は、携帯端末１０から送信された条件を受信する。サーバ装置２０は、例えば携帯端末１０におけるアプリの起動時に、携帯端末１０からユーザＩＤを受信し、受信したユーザＩＤに対応するユーザ情報をユーザ情報記憶部２５から読み出す。外部情報取得部２６は、外部情報を取得する。

出力情報検索部２７は、携帯端末１０から送信された画像ＩＤおよび位置情報と、ユーザ情報記憶部２５から読み出したユーザ情報と、外部情報取得部２６によって取得された外部情報とを条件にして、出力情報記憶部２４に記憶されている出力情報を読み出す（ステップＳ５）。出力情報送信部２８は、ステップＳ４において読み出された出力情報を、携帯端末１０に送信する（ステップＳ６）。携帯端末１０が、サーバ装置２０から送信された出力情報を受信すると、画像制御部１８は、受信した出力情報を、撮像部１１が撮像した画像に重ねて表示部１２に表示させる（ステップＳ７）。

このような、携帯端末１０によって撮像される画像と位置情報とに応じて情報を提供する処理は、様々な場面に適用できる。例えば、図６は、様々な業種形態における情報サービスシステム１の適用例を示す図である。ここでは、本実施形態の適用が特に有効と思われる７つの適用パターン（パターンＡ、パターンＢ、パターンＣ、パターンＤ、パターンＥ、パターンＦ、パターンＧ）を示している。例えば、コンビニエンスストア（コンビニ）の情報を提供する場合には、パターンＡとパターンＢとが特に有効と思われる。

図７は、パターンＡの適用例を示す図である。パターンＡは、上述した実施形態の例と同様である。すなわち、（１）携帯端末１０のアプリが起動され、撮像部１１が鉄道のロゴマークに向けられると、（２）携帯端末１０は、ロゴマークの画像ＩＤと位置情報とをサーバ装置２０に送信する。（３）サーバ装置２０が、受信したロゴマークの画像ＩＤと位置情報とに対応する出力情報を携帯端末１０に送信すると、携帯端末１０は、サーバ装置２０から送信された出力情報を表示部１２に表示させる。（４）表示部１２上に表示された出力情報をタッチすると、ネットワークを介して詳細情報が取得され、表示される。

このようなサービスは、ランドマーク（ロゴマーク）付近の消費者や、小売店や飲食店の利用者にとって有用な情報を提供できる。例えば、ユーザがランドマーク付近に訪れた際に、近隣の小売店、飲食店等を探す際に有用である。これにより、ユーザにとっては、携帯端末１０を操作して検索サイト等を利用するような煩雑な操作を行うことなく、ランドマークに携帯端末１０のカメラを向けるだけで、近隣店舗の情報を得ることができる。店舗等にとっては、小売店、飲食店等の割引、お買い得情報を出力情報としてユーザの携帯端末１０に表示させることにより、顧客の新規獲得や囲い込みが期待できる。

ここで、例えば、携帯端末１０の通信会社において、予め許可された他のユーザの位置情報を検索するサービスを提供している場合には、このような位置情報サービスを用いて、同じエリアにいる複数のユーザ同士の人数に応じて提供する情報を出し分けるようにしても良い。図８は、このような適用例を示すシーケンス図である。ここでは、情報サービスシステム１は、店舗における割引情報等を出力情報として送信するコンテンツプロバイダシステム３０と、携帯端末１０の位置情報を管理する通信会社システム４０とにネットワークを介して接続されている。また、出力情報の提供を受けるユーザの端末を携帯端末１０−１、携帯端末１０−１のユーザの友人である他のユーザの端末を携帯端末１０−２として説明する。

通信会社システム４０は、携帯端末１０−２にポーリングを行って位置情報を取得し、サーバ装置２０に提供する（ステップＳ１１）。携帯端末１０−１は、サーバ装置２０に問い合わせと行い、携帯端末１０−２の位置情報を取得する。携帯端末１０−１が、マーカーを撮像すると（ステップＳ１３）、マーカーを解析して画像特徴点を抽出し（ステップＳ１４）、画像特徴点に対応する画像ＩＤを取得する（ステップＳ１５）。

携帯端末１０−１は、自身のユーザＩＤと、画像ＩＤとをサーバ装置２０に送信する（ステップＳ１６）。サーバ装置２０は、携帯端末１０−１のユーザＩＤに予め対応付けられて記憶されている携帯端末１０−２のユーザのユーザＩＤを抽出する（ステップＳ１７）。サーバ装置２０は、携帯端末１０−１のユーザと同じ位置に存在する他のユーザの数を、集団に分類する（ステップＳ１８）。サーバ装置２０は、画像ＩＤ、位置情報（緯度、経度）、時間、集団に対応する場所と業態とを抽出し（ステップＳ１９）、コンテンツプロバイダシステム３０に送信する（ステップＳ２０）。

コンテンツプロバイダシステム３０は、サーバ装置２０から送信された場所と業態とに対応する店舗情報を抽出し（ステップＳ２１）、サーバ装置２０に送信する（ステップＳ２２）。サーバ装置２０は、コンテンツプロバイダシステム３０から送信された店舗情報を、ＡＲ技術により表示させる出力情報に変換し（ステップＳ２３）、携帯端末１０−１に送信する（ステップＳ２４）。携帯端末１０−１は、受信した出力情報をＡＲ表示し、出力情報がクリックされると（ステップＳ２５）、店舗の詳細情報取得依頼を、コンテンツプロバイダシステム３０に送信する（ステップＳ２６）。コンテンツプロバイダシステム３０は、携帯端末１０−１から送信された店舗の詳細情報取得依頼に応じて、店舗詳細情報を携帯端末１０−１に送信する（ステップＳ２７）。

図９は、パターンＢの適用例を示す図である。パターンＢでは、（１）携帯端末１０のアプリが起動され、撮像部１１が小売店におけるＪＡＮコードに向けられると、（２）携帯端末１０は、撮像したＪＡＮコードの画像ＩＤと位置情報とをサーバ装置２０に送信する。（３）サーバ装置２０が、受信したＪＡＮコードの画像ＩＤと位置情報とに対応する出力情報を携帯端末１０に送信すると、携帯端末１０は、サーバ装置２０から送信された出力情報を表示部１２に表示させる。（４）表示部１２上に表示された出力情報をタッチすると、ネットワークを介して関連商品の情報が取得され、表示される。

このようなサービスは、小売店での商品購入者にとって有用な情報を提供できる。例えば、ユーザが商品を手に取った際に、その商品に関連する商品が表示される。あるいは、商品に関連したレシピが表示され、関連商品が表示される。これにより、ユーザにとっては、関連商品を提示されることにより、買い忘れを防ぐことができる。店舗等にとっては、位置情報により、店舗ごとに応じた商品を提示することができる。これにより、ユーザの追加購入を促すことができる。

図１０は、パターンＣの適用例を示す図である。パターンＣでは、（１）携帯端末１０のアプリが起動され、撮像部１１が小売店におけるＪＡＮコードに向けられると、（２）携帯端末１０は、撮像したＪＡＮコードの画像ＩＤと位置情報とをサーバ装置２０に送信する。（３）サーバ装置２０が、受信したＪＡＮコードの画像ＩＤと位置情報とに対応する出力情報を携帯端末１０に送信すると、携帯端末１０は、サーバ装置２０から送信された出力情報を表示部１２に表示させる。

このようなサービスは、小売店での商品の新規購入者や既存の利用者にとって有用な情報を提供できる。例えば、商品の情報を確認したい時に、商品に関する情報や、商品の使い方が表示される。これにより、ユーザにとっては、商品の情報を確認したい時に、その場ですぐに確認することができる。あるいは、利用した商品を使い切った場合、位置情報に基づいて、その商品を購入出来る周辺の店舗を探すことができる。店舗等にとっては、購入可能店舗を提示することで、店舗や商品の継続利用を促すことができる。

図１１は、パターンＤの適用例を示す図である。パターンＤでは、（１）携帯端末１０のアプリが起動され、撮像部１１がテーマパークにロゴマークに向けられると、（２）携帯端末１０は、撮像したロゴマークの画像ＩＤと位置情報とをサーバ装置２０に送信する。（３）サーバ装置２０が、受信したロゴマークの画像ＩＤと位置情報とに対応する出力情報を携帯端末１０に送信すると、携帯端末１０は、サーバ装置２０から送信された、施設の混雑状況等の出力情報を表示部１２に表示させる。（４）ユーザは、表示された情報に基づいて、施設に分散する。

このようなサービスは、テーマパークの利用者にとって有用な情報を提供できる。例えば、テーマパークを訪れた際に、施設の混雑状況を確認することができる。これにより、ユーザは、効率よくテーマパークの施設を回ることが可能となる。テーマパークにとっては、混雑状況に関する情報を提供することにより、施設の稼働率を効率化することができる。

図１２は、パターンＥの適用例を示す図である。パターンＥでは、（１）携帯端末１０のアプリが起動され、撮像部１１が飲食店にロゴマークに向けられると、（２）携帯端末１０は、撮像したロゴマークの画像ＩＤと位置情報とをサーバ装置２０に送信する。（３）サーバ装置２０が、受信したロゴマークの画像ＩＤと位置情報とに対応する出力情報を携帯端末１０に送信すると、携帯端末１０は、サーバ装置２０から送信された出力情報に基づいて店舗に関する掲示板情報を表示させる。

このようなサービスは、飲食店の利用者にとって有用な情報を提供できる。例えば、飲食店舗に関する掲示板、口コミ情報がＡＲ表示されることにより、ユーザは、訪問しようとしている飲食店の掲示板、口コミ情報をその場で直ぐに確認することができる。店舗にとっては、利用者の意見を把握することが可能となる。

図１３は、パターンＦの適用例を示す図である。パターンＦでは、（１）携帯端末１０のアプリが起動され、撮像部１１が缶ジュースのＪＡＮコードに向けられると、（２）携帯端末１０は、撮像したＪＡＮコードの画像ＩＤと位置情報とをサーバ装置２０に送信する。（３）サーバ装置２０が、受信したＪＡＮコードの画像ＩＤと位置情報とに対応する出力情報であるゲームのアイテム情報を携帯端末１０に送信すると、携帯端末１０は、サーバ装置２０から送信された出力情報を表示部１２に表示させる。（４）このように、ＡＲ技術に応じてゲームにおけるアイテムを収集して、ゲームを進行するようにすることができる。

このようなサービスは、小売店での商品購入者にとって有用な情報を提供できる。例えば、ユーザが商品を購入した後に、ＪＡＮコードを撮像し、ゲームのアイテムを獲得する。これにより、ユーザにとっては、ゲームの進行度合いにより、景品等が獲得できる。また、ゲーム上でユーザ間の交流ができる。店舗等にとっては、ユーザに商品を継続購入させることができる。さらに、位置情報により、地域毎でどの缶ジュースが好まれているかといったマーケティング情報を取得することができる。

図１４は、パターンＧの適用例を示す図である。パターンＧでは、（１）携帯端末１０のアプリが起動され、撮像部１１が定められたマーカーに向けられると、（２）携帯端末１０は、撮像したマーカーの画像ＩＤと位置情報とをサーバ装置２０に送信する。（３）サーバ装置２０が、受信したマーカーの画像ＩＤと位置情報とに対応する出力情報である家具の画像を携帯端末１０に送信すると、携帯端末１０は、サーバ装置２０から送信された出力情報を表示部１２に表示させる。（４）そして、画面上にＡＲ表示された家具の画像をタッチすることで、その家具の購入可能店舗を表示させる。

このようなサービスは、商品の購入予定者にとって有用な情報を提供できる。例えば、ユーザの商品購入検討の際、ＡＲ用マーカーを用いることで、商品配置のシミュレーションを行うことができる。これにより、ユーザにとっては、商品配置のシミュレーションにより、家具購入後のアンマッチをなくすことができる。店舗等にとっては、商品の返品等を軽減させることができる。あるいは、商品に店舗情報を付加することで、ユーザを店舗に誘導することができる。

なお、本発明における処理部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより情報提供を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境（あるいは表示環境）を備えたＷＷＷシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。

また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。

１ 情報サービスシステム
１０ 携帯端末
１１ 撮像部
１２ 表示部
１３ 位置情報生成部
１４ 画像ＩＤ記憶部
１５ 画像特徴点抽出部
１６ 画像ＩＤ検索部
１７ 条件送信部
１８ 画像制御部
２０ サーバ装置
２１ 画像ＩＤ記憶部
２２ 画像ＩＤ送信部
２３ 条件受信部
２４ 出力情報記憶部
２５ ユーザ情報記憶部
２６ 外部情報取得部
２７ 出力情報検索部
２８ 出力情報送信部
３０ コンテンツプロバイダシステム
４０ 通信会社システム

Claims (4)

1. ユーザの携帯端末と、当該携帯端末とネットワークを介して接続されたサーバ装置とを備えた情報サービスシステムであって、
   前記携帯端末は、
   定められた画像と、当該画像を識別する画像識別情報とが対応付けられて記憶される画像識別情報記憶部と、
   被写体を撮像して画像を生成する撮像部と、
   前記撮像部によって撮像された前記画像が順次表示される表示部と、
   前記撮像部によって撮像された前記画像に対応付けられて前記画像識別情報記憶部に記憶されている前記画像識別情報を読み出す画像識別情報検索部と、
   自端末の位置を示す位置情報を生成する位置情報生成部と、
   前記画像識別情報検索部によって読み出された前記画像識別情報と、前記位置情報生成部によって生成された前記位置情報とを前記サーバ装置に送信する条件送信部と、
   前記条件送信部が送信した前記画像識別情報と前記位置情報とに応じて、前記サーバ装置から送信される出力情報を受信して、受信した当該出力情報を、前記表示部に順次表示されている前記画像に重ねて表示させる画像制御部と、を備え、
   前記サーバ装置は、
   定められた画像識別情報と定められた位置を示す位置情報とに対応付けられた出力情報が記憶されている出力情報記憶部と、
   前記携帯端末から送信された前記画像識別情報と前記位置情報とに対応する前記出力情報を、前記出力情報記憶部から読み出す出力情報検索部と、
   前記出力情報検索部によって読み出された前記出力情報を、前記携帯端末に送信する出力情報送信部と、
   を備えることを特徴とする情報サービスシステム。
2. 前記携帯端末は、
   前記撮像部によって生成された前記画像から定められた画像特徴点を抽出する画像特徴点抽出部を備え、
   前記画像識別情報記憶部には、定められた画像特徴点と前記位置情報とに対応付けられて前記出力情報が記憶されており、
   前記画像識別情報検索部は、前記撮像部によって生成された前記画像に基づいて前記画像特徴点抽出部によって検出された前記画像特徴点と、前記位置情報とに対応する前記出力情報を読み出す
   ことを特徴とする請求項１に記載の情報サービスシステム。
3. 前記サーバ装置は、
   前記ユーザの属性を示す属性情報が含まれるユーザ情報が記憶されているユーザ情報記憶部を備え、
   前記出力情報記憶部には、前記出力情報に対応する属性情報が記憶されており、
   前記出力情報検索部は、前記画像と前記位置情報とを送信してきた前記携帯端末のユーザに対応する前記ユーザ情報を、前記ユーザ情報記憶部から読み出し、読み出したユーザ情報に対応する前記出力情報を読み出す
   ことを特徴とする請求項１また請求項２に記載の情報サービスシステム。
4. 定められた画像と、当該画像を識別する画像識別情報とが対応付けられて記憶される画像識別情報記憶部を有するユーザの携帯端末と、当該携帯端末とネットワークを介して接続され、定められた画像識別情報と定められた位置を示す位置情報とに対応付けられた出力情報が記憶されている出力情報記憶部を有するサーバ装置とを備えた情報サービスシステムの情報サービス方法であって、
   前記携帯端末が、
   被写体を撮像して画像を生成するステップと、
   撮像した画像を表示部に順次表示させるステップと、
   撮像した前記画像に対応付けられて前記画像識別情報記憶部に記憶されている前記画像識別情報を読み出すステップと、
   自端末の位置を示す位置情報を生成するステップと、
   読み出した前記画像識別情報と、生成した前記位置情報とを前記サーバ装置に送信するステップと、
   前記サーバ装置が、
   前記携帯端末から送信された前記画像識別情報と前記位置情報とに対応する前記出力情報を、前記出力情報記憶部から読み出すステップと、
   読み出した前記出力情報を、前記携帯端末に送信するステップと、
   前記携帯端末が、
   前記サーバ装置から送信される前記出力情報を受信して、受信した当該出力情報を、前記表示部に順次表示されている前記画像に重ねて表示させるステップと、
   を備えることを特徴とする情報サービス方法。

Images