JP2016014978A - エアタグ登録管理システム、エアタグ登録管理方法、エアタグ登録プログラム、エアタグ管理プログラム、エアタグ提供装置、エアタグ提供方法及びエアタグ提供プログラム - Google Patents

Abstract

【課題】原本中に特殊な記号を記載する必要がなく、原本を編集しなくてもＡＲ表示させることができるようにエアタグを登録し管理するエアタグ登録管理システムを提供する。
【解決手段】２次元媒体上に記載された画像を読み込むことにより画像データを取得する読み込み部１１と、取得された画像データを用いて画像を表示する表示部２１と、表示された画像中のエアタグ化する位置の指定をユーザーから受け付けて当該位置を示す位置情報を取得する位置受付部２２と、当該位置に関連付けする電子データの指定をユーザーから受け付けて電子データを示すデータ情報を取得するデータ受付部２３と、画像データと位置情報とデータ情報とを関連付けて記憶し管理する管理部３１とを備える。
【選択図】図１

Description

本発明は、エアタグを登録し管理するための技術、及び、エアタグを提供するための技術に関する。

人から見た現実世界に情報を付加するなどして、現実の一部をコンピューターにより拡張及び改変する拡張現実（Augmented Reality、略して「ＡＲ」）と呼ばれる技術が実用化されている。
例えば、「セカイカメラ（登録商標）」（２００９年９月１７日より商用サービスを開始、２０１４年１月２２日に全サービスを終了し、後継サービスに移行）というスマホ等の携帯端末で動作する拡張現実アプリがある。セカイカメラは、目の前の風景に向けて携帯機器に内蔵されたデジタルカメラをかざすと、ディスプレイ上に映し出された風景画像上の所々に、各々の場所や建物等に関連する「エアタグ」と呼ばれる文字や画像等の付加情報を重ねて表示することができる。

セカイカメラは、内蔵のＧＰＳを用いて現在位置を特定し、内蔵の電子コンパスによってカメラの向いている方角を認識し、その方向に貼り付けられているエアタグを表示する。セカイカメラでは、エアタグをユーザーが自由に付加することができ、付加されたエアタグはユーザー間で共有することができる。運営企業の発表によると、セカイカメラは約３００万回ダウンロードされ、エアタグの総投稿数は約１５０万件であったと公表されている。

セカイカメラ等において特定の場所に建てられた建物等にエアタグを付加する場合には、装置に内蔵されたＧＰＳを利用して撮影位置を特定し、電子コンパスを利用して撮影方向を特定することにより、建物等の位置を特定してサーバーに登録する方法がある（例えば、特許文献１、２参照）。
一方、用紙等の２次元媒体上に印刷されたＡＲマーカーを撮影し、対応するスポットコンテンツをＡＲマーカー上に表示させることができる拡張現実を利用した技術が開示されている（例えば、特許文献３参照）。

特開２０１３−１６１０９９号公報 特開２０１３−０２５６８９号公報 特開２０１２−０１４６０６号公報

上記従来の技術によれば、２次元媒体上に印刷された文章の一部にコンテンツ等をＡＲ表示させたい場合には、文章中にＡＲマーカーや２次元バーコード等の特殊な記号を記載しなければならないので、原本を編集する手間がかかってしまう。
さらに上記従来の技術によれば、特殊な記号を記載するためのスペースが必要なので、特に文章が隙間なく記載されている場合、原本が手書き文章等であってテキストデータが存在しない場合、及び、画像中にＡＲ表示させたい場合等においては、編集が困難であったり、大きな手間を要することになる。

本発明は、上述のような事情に鑑みてなされたものであって、原本中に特殊な記号を記載する必要がなく、原本を編集しなくてもＡＲ表示させることができるようにエアタグを登録し管理することができるエアタグ登録管理システム、エアタグ登録管理方法、エアタグ登録プログラム及びエアタグ管理プログラムと、特殊な記号を記載せずにエアタグを提供することができるエアタグ提供システム、エアタグ提供方法及びエアタグ提供プログラムとを提供することを目的とする。

上記目的を達成するため、本発明のエアタグ登録管理システムは、エアタグを登録し管理するエアタグ登録管理システムであって、２次元媒体上に記載された画像を読み込むことにより、画像データを取得する読み込み手段と、取得された前記画像データを用いて、画像を表示する表示手段と、表示された前記画像中のエアタグ化する位置の指定を、ユーザーから受け付けて、当該位置を示す位置情報を取得する位置受付手段と、前記位置に関連付けする電子データの指定を、ユーザーから受け付けて、当該電子データを示すデータ情報を取得するデータ受付手段と、前記画像データと、前記位置情報と、前記データ情報とを関連付けて記憶し管理する管理手段とを備えることを特徴とする。

ここで、前記エアタグ登録管理システムは、さらに、前記位置に関連付けする電子データの候補の所在を示す候補情報を記憶している記憶手段を備え、前記データ受付手段は、前記記憶手段に記憶されている前記候補情報により示される所在を用いて取得される電子データの中から、ユーザーに選択させることにより、前記電子データの指定を受け付けることができる。

ここで、前記エアタグ登録管理システムは、さらに、外部端末装置において２次元媒体上に記載された画像を撮影することにより得られた撮影データを、当該外部端末装置より受信する受信手段と、前記管理手段により管理されている前記画像データの中に、受信した前記撮影データに相当するものが存在するか否かを判断する判断手段と、相当する画像データが存在する場合に、当該画像データに関連付けて前記管理手段により管理されている前記位置情報と、前記データ情報又は当該データ情報により示される電子データとを、前記外部端末装置へ送信する送信手段とを備えることができる。

上記目的を達成するため、本発明のエアタグ提供装置は、２次元媒体上に記載された画像を撮影することにより、撮影データを取得する撮影手段と、２次元媒体上に記載された画像を読み込むことにより取得された画像データと、当該画像中のエアタグ化する位置を示す位置情報と、当該位置に関連付けされた電子データを示すデータ情報とを管理するエアタグサーバーへ、前記撮影データを送信する送信手段と、受信した前記撮影データに該当する画像データが、前記エアタグサーバーに管理されている場合に、当該画像データに関連付けて管理されている前記位置情報と、前記データ情報とを、前記エアタグサーバーから受信する受信手段と、前記撮影データに基づいて画像を表示し、受信された前記位置情報に基づいて当該画像中の一部にエアタグであることを知らしめるエアタグ表示を施し、受信された前記データ情報に基づいて当該エアタグ表示に対応付けてエアタグを提供する表示手段とを備えることを特徴とする。

ここで、前記エアタグサーバーは、前記位置情報を、エアタグ化する画像の範囲を示す情報として管理し、さらに、当該範囲内の部分画像データを関連付けて管理しており、前記受信手段は、さらに、前記部分画像データを、前記エアタグサーバーから受信し、前記表示手段は、さらに、前記撮影データ中における前記部分画像データに相当する画像の範囲を画像認識することにより、前記エアタグ表示の位置精度を高めることができる。

上記目的を達成するため、本発明のエアタグ登録管理方法であって、２次元媒体上に記載された画像を読み込むことにより、画像データを取得する読み込みステップと、取得された前記画像データを用いて、画像を表示する表示ステップと、表示された前記画像中のエアタグ化する位置の指定を、ユーザーから受け付けて、当該位置を示す位置情報を取得する位置受付ステップと、前記位置に関連付けする電子データの指定を、ユーザーより受け付けて、当該電子データを示すデータ情報を取得するデータ受付ステップと、前記画像データと、前記位置情報と、前記データ情報とを関連付けて記憶し管理する管理ステップとを含むことを特徴とする。

ここで、前記データ受付ステップは、前記位置に関連付けする電子データの候補の中から、ユーザーに選択させることにより、前記電子データの指定を受け付けることができる。
ここで、前記エアタグ登録管理方法は、さらに、外部端末装置において２次元媒体上に記載された画像を撮影することにより得られた撮影データを、当該外部端末装置より受信する受信ステップと、前記管理ステップにより管理されている前記画像データの中に、受信した前記撮影データに相当するものが存在するか否かを判断する判断ステップと、相当する画像データが存在する場合に、当該画像データに関連付けて前記管理ステップにより管理されている前記位置情報と、前記データ情報又は当該データ情報により示される電子データとを、前記外部端末装置へ送信する送信ステップとを含むことができる。

上記目的を達成するため、本発明のエアタグを提供するエアタグ提供方法は、２次元媒体上に記載された画像を撮影することにより、撮影データを取得する撮影ステップと、２次元媒体上に記載された画像を読み込むことにより取得された画像データと、当該画像中のエアタグ化する位置を示す位置情報と、当該位置に関連付けされた電子データを示すデータ情報とを管理するエアタグサーバーへ、前記撮影データを送信する送信ステップと、受信した前記撮影データに該当する画像データが、前記エアタグサーバーに管理されている場合に、当該画像データに関連付けて管理されている前記位置情報と、前記データ情報とを、前記エアタグサーバーから受信する受信ステップと、前記撮影データに基づいて画像を表示し、受信された前記位置情報に基づいて当該画像中の一部にエアタグであることを知らしめるエアタグ表示を施し、受信された前記データ情報に基づいて当該エアタグ表示に対応付けてエアタグを提供する表示ステップとを含む。

ここで、前記エアタグサーバーは、前記位置情報を、エアタグ化する画像の範囲を示す情報として管理し、さらに、当該範囲内の部分画像データを関連付けて管理しており、前記受信ステップは、さらに、前記部分画像データを、前記エアタグサーバーから受信し、前記表示ステップは、さらに、前記撮影データ中における前記部分画像データに相当する画像の範囲を画像認識することにより、前記エアタグ表示の位置精度を高めることができる。

上記目的を達成するため、本発明のエアタグを登録する処理を、エアタグ登録装置に実行させるエアタグ登録プログラムは、２次元媒体上に記載された画像を読み込むことにより生成された画像データを受信する受信ステップと、受信された前記画像データを用いて、画像を表示する表示ステップと、表示された前記画像中のエアタグ化する位置の指定を、ユーザーから受け付けて、当該位置を示す位置情報を取得する位置受付ステップと、前記位置に関連付けする電子データの指定を、ユーザーより受け付けて、当該電子データを示すデータ情報を取得するデータ受付ステップと、前記画像データと、前記位置情報と、前記データ情報とを関連付けて送信する送信ステップとを含むことを特徴とする。

ここで、前記データ受付ステップは、前記位置に関連付けする電子データの候補の中から、ユーザーに選択させることにより、前記電子データの指定を受け付けることができる。
上記目的を達成するため、エアタグ化する位置を示す位置情報に、前記位置に関連付けする電子データを示すデータ情報を関連付けて、対応する画像データの付加情報として記憶するエアタグ管理装置に、エアタグを管理する処理を実行させる本発明のエアタグ管理プログラムは、外部端末装置において２次元媒体上に記載された画像を撮影することにより得られた撮影データを、当該外部端末装置より受信する受信ステップと、前記エアタグ管理装置に、受信した前記撮影データに相当する画像データが管理されているか否かを判断する判断ステップと、相当する画像データが管理されている場合に、当該画像データに関連付けて記憶されている前記位置情報と、前記データ情報又は当該データ情報により示される電子データとを、前記外部端末装置へ送信する送信ステップとを含むことを特徴とする。

上記目的を達成するため、エアタグを提供する処理を、エアタグ提供装置に実行させるエアタグ提供プログラムは、２次元媒体上に記載された画像を撮影することにより、撮影データを取得する撮影ステップと、２次元媒体上に記載された画像を読み込むことにより取得された画像データと、当該画像中のエアタグ化する位置を示す位置情報と、当該位置に関連付けされた電子データを示すデータ情報とを管理するエアタグサーバーへ、前記撮影データを送信する送信ステップと、受信した前記撮影データに該当する画像データが、前記エアタグサーバーに管理されている場合に、当該画像データに関連付けて管理されている前記位置情報と、前記データ情報とを、前記エアタグサーバーから受信する受信ステップと、前記撮影データに基づいて画像を表示し、受信された前記位置情報に基づいて当該画像中の一部にエアタグであることを知らしめるエアタグ表示を施し、受信された前記データ情報に基づいて当該エアタグ表示に対応付けてエアタグを提供する表示ステップとを含むことを特徴とする。

ここで、前記エアタグサーバーは、前記位置情報を、エアタグ化する画像の範囲を示す情報として管理し、さらに、当該範囲内の部分画像データを関連付けて管理しており、前記受信ステップは、さらに、前記部分画像データを、前記エアタグサーバーから受信し、前記表示ステップは、さらに、前記撮影データ中における前記部分画像データに相当する画像の範囲を画像認識することにより、前記エアタグ表示の位置精度を高めることができる。

上記構成のエアタグ登録管理システム、エアタグ登録管理方法、エアタグ登録プログラム及びエアタグ管理プログラムによれば、画像中のユーザーが所望する点や範囲等の位置をエアタグとして登録することができるので、原本中に特殊な記号を記載する必要がなく、原本を編集しなくてもＡＲ表示させることができる。また上記構成のエアタグ提供装置、エアタグ提供方法及びエアタグ提供プログラムによれば、画像中の一部にエアタグ表示を施し、当該エアタグ表示に対応付けてエアタグを提供することができるので、特殊な記号を記載せずにエアタグを提供することができる。

本実施形態に係るエアタグ登録管理システム及びエアタグ提供装置の概要を示す図である。 画像読み込み装置のハードウェア構成の概要を示す図である。 エアタグ管理装置のハードウェア構成の概要を示す図である。 エアタグ提供装置のハードウェア構成の概要を示す図である。 エアタグ登録装置におけるエアタグ登録の際の表示画面の一例を示す図である。 エアタグ登録装置におけるエアタグ登録の際の表示画面の一例を示す図である。 エアタグを登録する処理を画像読み込み装置に実行させるエアタグ登録プログラムの処理手順を示す図である。 エアタグを登録する処理をエアタグ登録装置に実行させるアタグ登録用のアプリケーションソフトウェアの処理手順を示す図である。 エアタグを登録する処理をエアタグ管理装置に実行させるエアタグ登録プログラムの処理手順を示す図である。 エアタグ管理装置において記憶し管理される画像データ及び付加情報からなるセットの一例を示す図である。 エアタグ提供装置におけるエアタグ提供の際の表示画面の一例を示す図である。 エアタグを管理する処理をエアタグ管理装置に実行させるエアタグ管理プログラムの処理手順を示す図である。 エアタグを提供する処理をエアタグ提供装置に実行させるエアタグ提供プログラムの処理手順を示す図である。

＜実施形態＞
＜構成＞
図１は、本実施形態に係るエアタグ登録管理システム１００及びエアタグ提供装置２００の概要を示す図である。
エアタグ登録管理システム１００は、複数の装置が連携してエアタグを登録し管理するシステムであり、図１に示すように、画像読み込み装置１０、エアタグ登録装置２０及びエアタグ管理装置３０を備える。

画像読み込み装置１０は、例えばプリンター、スキャナー及びコピー機の機能を備えるＭＦＰ（プリンター複合機）であり、読み込み部１１及び画像データ送信部１２を備える。
読み込み部１１は、スキャナー等を用いて２次元媒体上に記載された画像を読み込むことにより、エアタグ登録したい画像の画像データを取得する。

画像データ送信部１２は、読み込み部１１により取得された画像データをエアタグ登録装置２０とエアタグ管理装置３０とに送信するとともに、エアタグ登録装置２０へエアタグ登録処理用のアプリケーションソフトウェアを起動するように指示を出す。
エアタグ登録装置２０は、パーソナルコンピューター等の汎用のコンピューターであり、アプリケーションソフトウェアを起動することにより、エアタグ登録処理用の端末として動作する。エアタグ登録装置２０は、表示部２１、位置受付部２２、データ受付部２３、候補情報記憶部２４及び付加情報送信部２５を備える。

表示部２１は、画像読み込み装置１０より画像データを受信し、当該画像データを用いて、モニター上に画像を表示する。
位置受付部２２は、モニター上に表示された画像中のエアタグ化したい点や範囲等の位置の指定を、ユーザーから受け付けて、受け付けた位置を示す位置情報を取得する。
データ受付部２３は、位置受付部２２により受け付けた位置に関連付けしたい電子データの指定をユーザーから受け付けて、当該電子データを示すデータ情報を取得する。なお、データ情報は、電子データそのものであってもよいし、ＵＲＬ等の電子データの所在を示す情報であってもよい。

候補情報記憶部２４は、ファイル名、ＵＲＬ等の、位置に関連付けする電子データの候補の所在を示す候補情報を記憶している。なおデータ受付部２３は、位置受付部２２により受け付けた位置に関連付けしたい電子データを、候補情報記憶部２４に記憶されている候補情報により示される所在を用いて取得される電子データの中から、ユーザーに選択させることにより、電子データの指定を受け付けることが好ましい。

付加情報送信部２５は、位置受付部２２により取得した位置情報に、データ受付部２３により取得したデータ情報を関連付けて、対応する画像データの付加情報としてエアタグ管理装置３０へ送信する。なお付加情報送信部２５は、画像データと位置情報とデータ情報とを関連付けてエアタグ管理装置３０へ送信してもよい。さらに、エアタグ表示の位置精度を高めるために、位置受付部２２が、エアタグ化する画像の範囲を示す位置情報を取得し、付加情報送信部２５は、エアタグ提供時に、当該範囲内の画像データである部分画像データを、付加情報に追加してエアタグ管理装置３０へ送信してもよい。

エアタグ管理装置３０は、エアタグを記憶するデータベースを備えエアタグを管理するエアタグサーバーであり、管理部３１、撮影データ受信部３２、判断部３３及び送信部３４を備える。
管理部３１は、画像読み込み装置１０より送信された画像データを記憶し、さらに、エアタグ登録装置２０より送信された付加情報を記憶し管理する。

撮影データ受信部３２は、エアタグ提供装置２００において２次元媒体上に記載された画像を撮影することにより得られた撮影データを、エアタグ提供装置２００より受信する。
判断部３３は、管理部３１により管理されている画像データの中に、撮影データ受信部３２により受信した撮影データに該当するものが存在するか否かを判断する。なお、判断部３３は、撮影データが、画像データの全部と一致せず一部と一致する場合であっても、該当すると判断することが好ましい。また、撮影データはカメラの撮影角度によって、傾き等の歪みを生じる場合があるので、判断部３３による判断の前に、既知の画像処理を用いて当該歪みを補正することが好ましい。

送信部３４は、判断部３３により該当する画像データが存在すると判断された場合に、当該画像データに関連付けて管理部３１により管理されている位置情報とデータ情報とを、エアタグ提供装置２００へ送信する。ここで、データ情報が電子データそのものである場合には、送信部３４は、データ情報をそのままエアタグ提供装置２００へ送信する。また、データ情報が電子データの所在を示す情報である場合には、送信部３４は、データ情報をそのままエアタグ提供装置２００へ送信してもよいが、データ情報をエアタグ提供装置２００へ送信する代わりに、データ情報により示される電子データを取得し、当該電子データそのものをエアタグ提供装置２００へ送信することが好ましい。なお、送信部３４は、さらに、エアタグ化する範囲内の画像データである部分画像データを、位置情報と共にエアタグ提供装置２００へ送信することが好ましい。

エアタグ提供装置２００は、内蔵カメラ及び内蔵モニターを備える携帯可能な外部端末装置であり、撮影部２０１、撮影データ送信部２０２、付加情報受信部２０３及び表示部２０４を備える。
撮影部２０１は、２次元媒体上に記載された画像を内蔵カメラで撮影することにより、撮影データを取得する。

撮影データ送信部２０２は、エアタグ管理装置３０へ、撮影部２０１により取得された撮影データを送信する。
付加情報受信部２０３は、受信した撮影データに該当する画像データがエアタグ管理装置３０に管理されている場合に、当該画像データの付加情報として管理されている位置情報とデータ情報とを、エアタグ管理装置３０から受信する。なお、付加情報受信部２０３は、さらに、部分画像データをエアタグ管理装置３０から受信することが好ましい。

表示部２０４は、撮影部２０１により取得された撮影データに基づいて内蔵モニター上に画像を表示し、付加情報受信部２０３により受信された位置情報に基づいて当該画像中の一部にエアタグであることを知らしめるエアタグ表示を施し、付加情報受信部２０３により受信されたデータ情報に基づいて当該位置に対応付けてエアタグを提供する。ここで、受信されたデータ情報が電子データそのものである場合には、表示部２０４は、当該電子データを上記位置に対応付けてエアタグを提供する。また受信されたデータ情報が電子データの所在を示す情報である場合には、表示部２０４は、データ情報により示される所在を用いて取得される電子データを取得し、当該電子データを上記位置に対応付けてエアタグを提供する。なお、表示部２０４は、さらに、撮影データ中における付加情報受信部２０３により受信された部分画像データに相当する画像の範囲を画像認識することにより、エアタグ表示の位置精度を高めることが好ましい。

また、画像読み込み装置１０、エアタグ登録装置２０及びエアタグ管理装置３０の各々の構成要素は、適宜統合及び分割することができ、例えば画像読み込み装置１０、エアタグ登録装置２０及びエアタグ管理装置３０を統合することが好ましい。
図２は、画像読み込み装置１０のハードウェア構成の概要を示す図である。
図２に示すように、画像読み込み装置１０は、ブリッジを介して、ＣＰＵ（セントラル・プロセッシング・ユニット）、ＤＲＡＭ（ダイナミック・ランダム・アクセス・メモリ）、ＥｔｈｅｎｅｔＰＨＹ（イーサネット物理層コントローラ）、ＨＤＤ（ハードディスクドライブ）、ＲＯＭ（リードオンリーメモリ）、Ｂｌｕｅｔｏｏｔｈ（ブルートゥース）、ＷｉＦｉルーター（ワイファイ ルーター）、画像制御ＩＣ及び機内制御ＩＣが接続されている。また、画像制御ＩＣにはスキャナー及びプリントエンジンが接続され、機内制御ＩＣには操作パネル、機内通信ポート及び機内ＩＯポートが接続されている。

エアタグ登録装置２０は、汎用のコンピューターなので、ハードウェア構成の概要の説明を省略する。
図３は、エアタグ管理装置３０のハードウェア構成の概要を示す図である。
図３に示すように、エアタグ管理装置３０は、ブリッジを介して、ＣＰＵ、ＤＲＡＭ、ＥｔｈｅｎｅｔＰＨＹ、ＨＤＤ、ＲＯＭ、Ｂｌｕｅｔｏｏｔｈ、無線ＬＡＮ（ローカル・エリア・ネットワーク）モジュール、ディスプレイ、キーボード、マウス、ＵＳＢ（ユニバーサル・シリアル・バス）ポート、ディスクドライブ及び入出力制御用ＩＣ（集積回路）が接続されている。また、入出力用制御ＩＣには機内ＩＯ（入出力）ポートが接続されている。

図４は、エアタグ提供装置２００のハードウェア構成の概要を示す図である。
図４に示すように、エアタグ提供装置２００は、ＣＰＵに、ＤＲＡＭ、ＲＯＭ、Ｂｌｕｅｔｏｏｔｈ、無線ＬＡＮモジュール及びディスプレイが接続されている。
なお、画像読み込み装置１０、エアタグ管理装置３０及びエアタグ提供装置２００の各構成要素は公知なので詳細な説明は省略する。
＜動作＞
以下に、図１を用いて、エアタグ登録管理システム１００における、エアタグ登録の際の動作の概要を説明する。

（１）画像読み込み装置１０の読み込み部１１が、用紙等の２次元媒体上に記載された画像を読み込む（図１中のＡ）。
（２）画像読み込み装置１０の画像データ送信部１２が、エアタグ管理装置３０へ取得した画像データを送信する（図１中のＢ）。
（３）画像読み込み装置１０の画像データ送信部１２が、エアタグ登録装置２０に対して、取得した画像データを送信するとともに、エアタグ登録用のアプリケーションソフトウェアを起動するように指示する（図１中のＣ）。

（４）指示されたアプリケーションソフトウェアがエアタグ登録装置２０において起動すると、エアタグ登録装置２０の表示部２１が、受信した画像データに基づいて画像を表示する。
（５）エアタグ登録装置２０の位置受付部２２が、モニター上に表示された画像中のエアタグ化する位置の指定をユーザーから受け付ける。

（６）エアタグ登録装置２０のデータ受付部２３が、（５）で受け付けた位置に関連付けする電子データの指定をユーザーから受け付ける。
（７）エアタグ登録装置２０の付加情報送信部２５が、（５）で指定された位置を示す位置情報と、当該位置内の部分画像データと、（６）で指定された電子データとを、エアタグ管理装置３０へ送信する（図１中のＤ）。

（８）エアタグ管理装置３０の管理部３１が、（７）で送信された位置情報及びデータ情報とを、（２）で送信された画像データの付加情報として記憶し管理する。
図５（ａ）〜（ｃ）、図６（ａ）〜（ｃ）は、エアタグ登録装置２０におけるエアタグ登録の際の表示画面の一例を示す図である。
（１）エアタグ登録装置２０が、画像読み込み装置１０からエアタグ登録用のアプリケーションソフトウェアを起動するように指示を受けると、エアタグ登録装置２０上で当該アプリケーションソフトウェアが起動し、画像読み込み装置１０より送信された画像データに基づいて、モニター上に画像が表示される（図５（ａ））。

（２）ユーザーが、マウスを用いた矩形範囲の選択機能等を用いて、モニター上に表示された画像中のエアタグ化したい範囲を指定する（図５（ｂ））。ここでは、「担当：高橋 納期 ３／７」と記載された範囲を選択している。
（３）引き続きユーザーが、例えばマウスで右クリックして操作メニューをポップアップ表示させ、操作メニュー中の「ファイル指定」をクリックする（図５（ｃ））。

（４）ファイル指定用の別ウィンドが開く（図６（ａ））。
（５）ユーザーが別ウィンド中に表示されたファイルの中の１つを指定し、別ウィンド中に表示された「開く」をクリックすると、指定されたファイルの識別子がデータ情報として登録される。
（６）一方、ユーザーが別ウィンド中に表示された「開いて特定場所を指定」をクリックすると、指定したファイルの内容が表示される（図６（ｂ））。

（７）ユーザーが表示されたファイルの内容中の関連付けしたい部分を指定して、例えばマウスで右クリックして操作メニューをポップアップ表示させ、操作メニュー中の「エアタグリンク」をクリックすると（図６（ｃ））、ファイルの識別子と、指定された部分の個所を示す情報がデータ情報として登録される。なお、データ情報は、キーボード等から直接入力する等、他の方法を用いて入力してもよい。

図７は、エアタグを登録する処理を画像読み込み装置１０に実行させるエアタグ登録プログラムの処理手順を示す図である。
以下に、図７に示すエアタグ登録プログラムの処理手順について説明する。
（１）通常スキャンを指示するボタンが押されたか否かを判断する（ステップＳ１）。
（２）通常スキャンを指示するボタンが押された場合には、用紙等の２次元媒体が読み取り用紙の置き場所に有るか否かを判断する（ステップＳ２）。用紙等が無い場合にはステップＳ１へ戻る。

（３）用紙等が有る場合には、通常スキャンを実行して、ステップＳ１へ戻る（ステップＳ３）。
（４）エアタグ登録を指示するボタンが押されたか否かを判断する（ステップＳ４）。
（５）エアタグ登録を指示するボタンが押された場合には、用紙等の２次元媒体が読み取り用紙の置き場所に有るか否かを判断する（ステップＳ５）。用紙等が無い場合にはステップＳ１へ戻る。

（６）用紙等が有る場合には、スキャンを実行する（ステップＳ６）。
（７）エアタグ登録装置２０とエアタグ管理装置３０とへ、ステップＳ６で得られた画像データを送信する（ステップＳ７）。
（８）エアタグ登録装置２０へ、エアタグ登録用のアプリケーションソフトウェアを起動するように指示して、ステップＳ１へ戻る（ステップＳ８）。

エアタグ登録装置２０が、画像読み込み装置１０から、エアタグ登録用のアプリケーションソフトウェアを起動するように指示を受けると、当該アプリケーションソフトウェアが起動する。
図８は、エアタグを登録する処理をエアタグ登録装置２０に実行させるエアタグ登録用のアプリケーションソフトウェアの処理手順を示す図である。

以下に、図８に示すアプリケーションソフトウェアの処理手順について説明する。
（１）画像読み込み装置１０より受信した画像データに基づいて、モニター上に画像を表示する（ステップＳ１１）。
（２）エアタグ登録を終了する指示を、ユーザーから受け付けたか否かを判断する（ステップＳ１２）。エアタグ登録を終了する指示を受け付けた場合には、ステップＳ１７へ行く。

（３）モニター上に表示された画像中のエアタグ化する範囲の指定を、ユーザーから受け付けたか否かを判断する（ステップＳ１３）。
（４）範囲の指定をユーザーから受け付けた場合には、受け付けた範囲の位置を示す位置情報を一時記憶する（ステップＳ１４）。
（５）受け付けた範囲に関連付けする電子データの指定をユーザーから受け付けたか否かを判断する（ステップＳ１５）。

（６）受け付けた電子データを示すデータ情報を、ステップＳ１４で一時記憶した位置情報に関連付けて一時記憶する（ステップＳ１６）。
（７）ステップＳ１４で一時記憶した位置情報と、ステップＳ１６で一時記憶したデータ情報とのセットを、画像読み込み装置１０より受信した画像データの付加情報として、エアタグ管理装置３０へ送信する（ステップＳ１７）。

図９は、エアタグを登録する処理をエアタグ管理装置３０に実行させるエアタグ登録プログラムの処理手順を示す図である。
以下に、図９に示すエアタグ登録プログラムの処理手順について説明する。
（１）画像読み込み装置１０から画像データが送信されたか否かを判断する（ステップＳ２１）。

（２）画像読み込み装置１０より画像データを受信する（ステップＳ２２）。
（３）エアタグ登録装置２０から画像データの付加情報が送信されたか否かを判断する（ステップＳ２３）。
（４）エアタグ登録装置２０から画像データの付加情報を受信する（ステップＳ２４）。

（５）ステップＳ２２で受信した画像データに、ステップＳ２４で受信した付加情報を対応付けて記憶し管理する（ステップＳ２５）。
図１０は、エアタグ管理装置３０において記憶し管理される画像データ及び付加情報からなるセット３００の一例を示す図である。
図１０に示すセット３００は、画像データ３０１、部分画像データ３０２、位置情報（ここではエアタグ座標３０３に相当）及びデータ情報（ここでは電子データ格納先３０４と電子データリンク箇所３０５に相当）を含む。

画像データ３００は、既にエアタグの登録がなされた画像データそのものであり、画像読み込み装置１０より送信される画像データに相当する。例えば、画像データ３００は、図１０中のＡに示すような画像データである。
部分画像データ３０２は、エアタグ化する範囲内の画像データであり、エアタグ登録装置２０より送信される部分画像データに相当する。例えば、部分画像データ３０２は図１０中のＢ及びＣに示すような画像データである。

エアタグ座標３０３は、エアタグ化する範囲を示す座標値であり、エアタグ登録装置２０より送信される位置情報に相当する。
電子データ格納先３０４及び電子データリンク箇所３０５は、関連付けしたい電子データの格納先と当該電子データ中の選択箇所を示す情報であり、エアタグ登録装置２０より送信されるデータ情報に相当する。

なお、部分画像データ３０２は、エアタグ座標３０３を用いて画像データ３００より抽出することができるので、セット３００中に無くてもよい。
図１１（ａ）、（ｂ）は、エアタグ提供装置２００におけるエアタグ提供の際の表示画面の一例を示す図である。
（１）エアタグ提供装置２００が、２次元媒体上に記載された画像を内蔵カメラで撮影すると、内蔵モニターに画像が表示され、エアタグであることを知らしめるエアタグ表示が施される（図１１（ａ））。ここでは、「担当：高橋 納期 ３／７」と記載された範囲、及び、「作業３が遅れるので作業４」と記載された範囲を選択している。ここでエアタグ表示は、明暗や色調を反転させたり点滅させる等して強調表示することが好ましい。また、エアタグ化する位置が範囲ではなく点である場合には、当該点の位置に星型などの特徴的なマークを表示したり、点やマークを点滅させる等して強調表示することが好ましい。

（２）ユーザーがエアタグ表示にタッチするなどのエアタグの表示を要求する所定の操作を行うと、エアタグ表示にリンクされている電子データが表示される（図１１（ｂ））。ここでは、「担当：高橋 納期 ３／７」と記載された範囲の近傍に「方策１を施し納期を短縮する」と表示されている。
図１２は、エアタグを管理する処理をエアタグ管理装置３０に実行させるエアタグ管理プログラムの処理手順を示す図である。

以下に、図１２に示すエアタグ管理プログラムの処理手順について説明する。
（１）エアタグ提供装置２００から撮影データが送信されたか否かを判断する（ステップＳ３１）。
（２）エアタグ提供装置２００より撮影データを受信する（ステップＳ３２）。
（３）エアタグ管理装置３０において管理している画像データの中に、受信した撮影データに相当するものが存在するか否かを判断する（ステップＳ３３）。

（４）該当する画像データが存在しない場合には、エアタグが無い旨をエアタグ提供装置２００に通知して、ステップＳ３１に戻る（ステップＳ３４）。
（５）該当する画像データが存在すると判断された場合に、当該画像データの付加情報として管理している部分画像データ（例えば図１０の部分画像データ３０２）と位置情報（例えば図１０のエアタグ座標３０３）とをエアタグ提供装置２００へ送信する（ステップＳ３５）。

（６）エアタグ提供装置２００へエアタグ表示が終了したか否かを問い合わせる。終了している場合には、ステップＳ３１へ戻る（ステップＳ３６）。
（７）エアタグ表示が終了していない場合には、エアタグ提供装置２００からＡＲ表示要求を受け付けたか否かを判断する（ステップＳ３７）。
（８）ＡＲ表示要求を受け付けた場合には、エアタグ提供装置２００よりＡＲ表示要求に係る位置情報を受信する（ステップＳ３８）。

（９）受信した位置情報に関連付けられたデータ情報に基づいて、ＡＲ表示用の電子データを取得する（ステップＳ３９）。
（１０）取得したＡＲ表示用の電子データをエアタグ提供装置２００へ送信し、ステップＳ３６へ戻る（ステップＳ４０）。
図１３は、エアタグを提供する処理をエアタグ提供装置２００に実行させるエアタグ提供プログラムの処理手順を示す図である。

以下に、図１３に示すエアタグ提供プログラムの処理手順について説明する。
（１）２次元媒体上に記載された画像を内蔵カメラで撮影することにより撮影データを取得する（ステップＳ４１）。
（２）取得した撮影データに基づいて、内蔵モニター上に画像を表示する（ステップＳ４２）。

（３）エアタグ管理装置３０へ取得した撮影データを送信する（ステップＳ４３）。
（４）エアタグ管理装置３０よりエアタグが無い旨を受信したか否かを判断する（ステップＳ４４）。
（５）エアタグが無い旨を受信した場合には、内蔵モニター上にエアタグは無いとＡＲ表示する（ステップＳ４５）。

（６）エアタグ管理装置３０から部分画像データと位置情報とが送信されたか否かを判断する（ステップＳ４６）。
（７）部分画像データと位置情報とを受信する（ステップＳ４７）。
（８）受信した位置情報に基づいてエアタグ表示する範囲の位置を特定し、受信した部分画像データに基づいて当該範囲の歪みを補正する（ステップＳ４８）。

（９）エアタグ表示する範囲を強調表示するなどして、エアタグ表示を施す（ステップＳ４９）。
（１０）エアタグ表示を終了させる指示をユーザーより受け付けたか否かを判断する（ステップＳ５０）。
（１１）エアタグ表示を終了させる（ステップＳ５１）。

（１２）エアタグ表示を終了させる指示を受け付けていない場合には、ユーザーからＡＲ表示要求を受け付けたか否かを判断する（ステップＳ５２）。
（１３）ＡＲ表示要求を受け付けた場合には、エアタグ管理装置３０へＡＲ表示要求に係る位置情報を送信する（ステップＳ５３）。
（１４）エアタグ管理装置３０からＡＲ表示用の電子データが送信されたか否かを判断する（ステップＳ５４）。

（１５）ＡＲ表示用の電子データを受信する（ステップＳ５５）。
（１６）ＡＲ表示用の電子データをＡＲ表示し、ステップＳ５０へ戻る（ステップＳ５６）。
以上のように、上記構成のエアタグ登録管理システム１００によれば、画像中のユーザーが所望する点や範囲等の位置をエアタグとして登録することができるので、原本中に特殊な記号を記載する必要がなく、原本を編集しなくてもＡＲ表示させることができる。また上記構成のエアタグ提供装置２００によれば、画像中の一部にエアタグ表示を施し、当該エアタグ表示に対応付けてエアタグを提供することができるので、特殊な記号を記載せずにエアタグを提供することができる。

なお、コンピューターに本実施の形態のような動作を実行させることができるプログラムがコンピューター読み取り可能な記録媒体に記録され、この記録媒体が流通し取り引きの対象となり得る。また、当該プログラムは、例えばネットワーク等を介して流通して取り引きの対象となり得、また、表示装置に表示されたり印刷されて、利用者に提示されることもあり得る。

ここでコンピューター読み取り可能な記録媒体とは、例えば、フロッピーディスク、ＣＤ、ＭＯ、ＤＶＤ、メモリカード等の着脱可能な記録媒体、及び、ハードディスク、半導体メモリ等の固定記録媒体等であり、特に限定されるものではない。

本発明は、携帯可能な外部端末装置において利用できる便利なアプリケーションソフトウェアとして広く適用することができる。本発明によって、特殊な記号を記載せずにエアタグを提供することができ、その産業的利用価値は極めて高い。

１０ 画像読み込み装置
１１ 読み込み部
１２ 画像データ送信部
２０ エアタグ登録装置
２１ 表示部
２２ 位置受付部
２３ データ受付部
２４ 候補情報記憶部
２５ 付加情報送信部
３０ エアタグ管理装置
３１ 管理部
３２ 撮影データ受信部
３３ 判断部
３４ 送信部
１００ エアタグ登録管理システム
２００ エアタグ提供装置
２０１ 撮影部
２０２ 撮影データ送信部
２０３ 付加情報受信部
２０４ 表示部

Claims (15)

1. エアタグを登録し管理するエアタグ登録管理システムであって、
   ２次元媒体上に記載された画像を読み込むことにより、画像データを取得する読み込み手段と、
   取得された前記画像データを用いて、画像を表示する表示手段と、
   表示された前記画像中のエアタグ化する位置の指定を、ユーザーから受け付けて、当該位置を示す位置情報を取得する位置受付手段と、
   前記位置に関連付けする電子データの指定を、ユーザーから受け付けて、当該電子データを示すデータ情報を取得するデータ受付手段と、
   前記画像データと、前記位置情報と、前記データ情報とを関連付けて記憶し管理する管理手段と
   を備えることを特徴とするエアタグ登録管理システム。
2. 前記エアタグ登録管理システムは、さらに、
   前記位置に関連付けする電子データの候補の所在を示す候補情報を記憶している記憶手段を備え、
   前記データ受付手段は、
   前記記憶手段に記憶されている前記候補情報により示される所在を用いて取得される電子データの中から、ユーザーに選択させることにより、前記電子データの指定を受け付けること
   を特徴とする請求項１に記載のエアタグ登録管理システム。
3. 前記エアタグ登録管理システムは、さらに、
   外部端末装置において２次元媒体上に記載された画像を撮影することにより得られた撮影データを、当該外部端末装置より受信する受信手段と、
   前記管理手段により管理されている前記画像データの中に、受信した前記撮影データに相当するものが存在するか否かを判断する判断手段と、
   相当する画像データが存在する場合に、当該画像データに関連付けて前記管理手段により管理されている前記位置情報と、前記データ情報又は当該データ情報により示される電子データとを、前記外部端末装置へ送信する送信手段と
   を備えることを特徴とする請求項１又は２に記載のエアタグ登録管理システム。
4. エアタグを提供するエアタグ提供装置であって、
   ２次元媒体上に記載された画像を撮影することにより、撮影データを取得する撮影手段と、
   ２次元媒体上に記載された画像を読み込むことにより取得された画像データと、当該画像中のエアタグ化する位置を示す位置情報と、当該位置に関連付けされた電子データを示すデータ情報とを管理するエアタグサーバーへ、前記撮影データを送信する送信手段と、
   受信した前記撮影データに該当する画像データが、前記エアタグサーバーに管理されている場合に、当該画像データに関連付けて管理されている前記位置情報と、前記データ情報とを、前記エアタグサーバーから受信する受信手段と、
   前記撮影データに基づいて画像を表示し、受信された前記位置情報に基づいて当該画像中の一部にエアタグであることを知らしめるエアタグ表示を施し、受信された前記データ情報に基づいて当該エアタグ表示に対応付けてエアタグを提供する表示手段と
   を備えることを特徴とするエアタグ提供装置。
5. 前記エアタグサーバーは、前記位置情報を、エアタグ化する画像の範囲を示す情報として管理し、さらに、当該範囲内の部分画像データを関連付けて管理しており、
   前記受信手段は、さらに、
   前記部分画像データを、前記エアタグサーバーから受信し、
   前記表示手段は、さらに、
   前記撮影データ中における前記部分画像データに相当する画像の範囲を画像認識することにより、前記エアタグ表示の位置精度を高めること
   を特徴とする請求項４に記載のエアタグ提供装置。
6. エアタグを登録し管理するエアタグ登録管理方法であって、
   ２次元媒体上に記載された画像を読み込むことにより、画像データを取得する読み込みステップと、
   取得された前記画像データを用いて、画像を表示する表示ステップと、
   表示された前記画像中のエアタグ化する位置の指定を、ユーザーから受け付けて、当該位置を示す位置情報を取得する位置受付ステップと、
   前記位置に関連付けする電子データの指定を、ユーザーより受け付けて、当該電子データを示すデータ情報を取得するデータ受付ステップと、
   前記画像データと、前記位置情報と、前記データ情報とを関連付けて記憶し管理する管理ステップとを含むこと
   を特徴とするエアタグ登録管理方法。
7. 前記データ受付ステップは、
   前記位置に関連付けする電子データの候補の中から、ユーザーに選択させることにより、前記電子データの指定を受け付けること
   を特徴とする請求項６に記載のエアタグ登録管理方法。
8. 前記エアタグ登録管理方法は、さらに、
   外部端末装置において２次元媒体上に記載された画像を撮影することにより得られた撮影データを、当該外部端末装置より受信する受信ステップと、
   前記管理ステップにより管理されている前記画像データの中に、受信した前記撮影データに相当するものが存在するか否かを判断する判断ステップと、
   相当する画像データが存在する場合に、当該画像データに関連付けて前記管理ステップにより管理されている前記位置情報と、前記データ情報又は当該データ情報により示される電子データとを、前記外部端末装置へ送信する送信ステップと
   を含むことを特徴とする請求項６又は７に記載のエアタグ登録管理方法。
9. エアタグを提供するエアタグ提供方法であって、
   ２次元媒体上に記載された画像を撮影することにより、撮影データを取得する撮影ステップと、
   ２次元媒体上に記載された画像を読み込むことにより取得された画像データと、当該画像中のエアタグ化する位置を示す位置情報と、当該位置に関連付けされた電子データを示すデータ情報とを管理するエアタグサーバーへ、前記撮影データを送信する送信ステップと、
   受信した前記撮影データに該当する画像データが、前記エアタグサーバーに管理されている場合に、当該画像データに関連付けて管理されている前記位置情報と、前記データ情報とを、前記エアタグサーバーから受信する受信ステップと、
   前記撮影データに基づいて画像を表示し、受信された前記位置情報に基づいて当該画像中の一部にエアタグであることを知らしめるエアタグ表示を施し、受信された前記データ情報に基づいて当該エアタグ表示に対応付けてエアタグを提供する表示ステップと
   を含むことを特徴とするエアタグ提供方法。
10. 前記エアタグサーバーは、前記位置情報を、エアタグ化する画像の範囲を示す情報として管理し、さらに、当該範囲内の部分画像データを関連付けて管理しており、
    前記受信ステップは、さらに、
    前記部分画像データを、前記エアタグサーバーから受信し、
    前記表示ステップは、さらに、
    前記撮影データ中における前記部分画像データに相当する画像の範囲を画像認識することにより、前記エアタグ表示の位置精度を高めること
    を特徴とする請求項９に記載のエアタグ提供方法。
11. エアタグを登録する処理を、エアタグ登録装置に実行させるエアタグ登録プログラムであって、
    ２次元媒体上に記載された画像を読み込むことにより生成された画像データを受信する受信ステップと、
    受信された前記画像データを用いて、画像を表示する表示ステップと、
    表示された前記画像中のエアタグ化する位置の指定を、ユーザーから受け付けて、当該位置を示す位置情報を取得する位置受付ステップと、
    前記位置に関連付けする電子データの指定を、ユーザーより受け付けて、当該電子データを示すデータ情報を取得するデータ受付ステップと、
    前記画像データと、前記位置情報と、前記データ情報とを関連付けて送信する送信ステップと
    を含むことを特徴とするエアタグ登録プログラム。
12. 前記データ受付ステップは、
    前記位置に関連付けする電子データの候補の中から、ユーザーに選択させることにより、前記電子データの指定を受け付けること
    を特徴とする請求項１１に記載のエアタグ登録プログラム。
13. エアタグ化する位置を示す位置情報に、前記位置に関連付けする電子データを示すデータ情報を関連付けて、対応する画像データの付加情報として記憶するエアタグ管理装置に、エアタグを管理する処理を実行させるエアタグ管理プログラムであって、
    外部端末装置において２次元媒体上に記載された画像を撮影することにより得られた撮影データを、当該外部端末装置より受信する受信ステップと、
    前記エアタグ管理装置に、受信した前記撮影データに相当する画像データが管理されているか否かを判断する判断ステップと、
    相当する画像データが管理されている場合に、当該画像データに関連付けて記憶されている前記位置情報と、前記データ情報又は当該データ情報により示される電子データとを、前記外部端末装置へ送信する送信ステップと
    を含むことを特徴とするエアタグ管理プログラム。
14. エアタグを提供する処理を、エアタグ提供装置に実行させるエアタグ提供プログラムであって、
    ２次元媒体上に記載された画像を撮影することにより、撮影データを取得する撮影ステップと、
    ２次元媒体上に記載された画像を読み込むことにより取得された画像データと、当該画像中のエアタグ化する位置を示す位置情報と、当該位置に関連付けされた電子データを示すデータ情報とを管理するエアタグサーバーへ、前記撮影データを送信する送信ステップと、
    受信した前記撮影データに該当する画像データが、前記エアタグサーバーに管理されている場合に、当該画像データに関連付けて管理されている前記位置情報と、前記データ情報とを、前記エアタグサーバーから受信する受信ステップと、
    前記撮影データに基づいて画像を表示し、受信された前記位置情報に基づいて当該画像中の一部にエアタグであることを知らしめるエアタグ表示を施し、受信された前記データ情報に基づいて当該エアタグ表示に対応付けてエアタグを提供する表示ステップと
    を含むことを特徴とするエアタグ提供プログラム。
15. 前記エアタグサーバーは、前記位置情報を、エアタグ化する画像の範囲を示す情報として管理し、さらに、当該範囲内の部分画像データを関連付けて管理しており、
    前記受信ステップは、さらに、
    前記部分画像データを、前記エアタグサーバーから受信し、
    前記表示ステップは、さらに、
    前記撮影データ中における前記部分画像データに相当する画像の範囲を画像認識することにより、前記エアタグ表示の位置精度を高めること
    を特徴とする請求項１４に記載のエアタグ提供プログラム。

Images