JP2015036904A - 席案内システム、席案内方法及び席案内プログラム - Google Patents

Abstract

【課題】席を探しやすくする。【解決手段】席案内システムは、複数の席のうちの少なくとも１つの席を撮像する撮像部と、複数の席の状態に関する席情報を記憶する記憶部と、撮像部が撮像する席を特定するための情報を検出する検出部と、検出部が検出する情報を含む検出情報に基づいて撮像部が撮像する席を特定し、当該特定された席について記憶部が記憶する席情報に基づいて当該特定された席の状態に関する席案内情報を生成する席案内情報生成部と、席案内情報生成部が生成する席案内情報の内容を撮像部が撮像する画像上に重ね合わせて表示する表示画像であって、撮像部が撮像する画像内の席と当該席の席案内情報の内容とを対応させて表示する表示画像を生成する表示画像生成部と、表示画像生成部が生成する表示画像を表示する表示部と、を備える。【選択図】図５

Description

本発明は、席案内システム、席案内方法及び席案内プログラムに関する。

イベント会場や列車などの複数の席が用意される場所では、事前に利用する人が設定されていない自由席がある場合がある。自由席を利用する人は、各席を見回り、空いている席（空席）を確認して、自席として確保する。例えば、特許文献１には、座席使用者が決定されていない場合の座席管理を行うための技術が開示されている。

特開２００３−３０３２３３号公報

しかしながら、従来の技術では、席が探しにくかった。従来の技術によって席を見つけるまでの手順を挙げると、例えば、ユーザは、携帯端末の画面上で座席のレイアウトと座席の情報を取得する。次に、ユーザは、自分の現在の位置が携帯端末の画面上に表示されているどの地点に該当するかを判断する。次に、ユーザは、画面上に表示されている空席が、自分の現在の位置から見てどの方向かを確認する。そして、ユーザは、実際に席の番号などを確認して自席として確保する。以上のように、席を探すまでにユーザがとる行動は煩雑であり、時間を要するものであった。

本発明は上記の課題に鑑みてなされたものであり、席を探しやすくする席案内システム、席案内方法及び席案内プログラムを提供することを目的とする。

本発明は上記の課題を解決するためになされたものであり、本発明の一態様は、複数の席のうちの少なくとも１つの席を撮像する撮像部と、複数の席の状態に関する席情報を記憶する記憶部と、撮像部が撮像する席を特定するための情報を検出する検出部と、検出部が検出する情報を含む検出情報に基づいて撮像部が撮像する席を特定し、当該特定された席について記憶部が記憶する席情報に基づいて当該特定された席の状態に関する席案内情報を生成する席案内情報生成部と、席案内情報生成部が生成する席案内情報の内容を撮像部が撮像する画像上に重ね合わせて表示する表示画像であって、撮像部が撮像する画像内の席と当該席の席案内情報の内容とを対応させて表示する表示画像を生成する表示画像生成部と、表示画像生成部が生成する表示画像を表示する表示部と、を備える席案内システムである。

また、本発明の一態様は、上記の席案内システムにおいて、記憶部が記憶する席情報とは、複数の席各々の状態が空席であるか否かについての情報を含み、席案内情報生成部は、検出部が検出する情報を含む検出情報に基づいて撮像部が撮像する席を特定し、当該特定された席について記憶部が記憶する席情報に基づいて当該特定された席の状態が空席であるか否かについての席案内情報を生成する。

また、本発明の一態様は、上記の席案内システムにおいて、記憶部が記憶する席情報とは、複数の席各々からユーザが離れた時間に関する情報を含み、席案内情報生成部は、検出部が検出する情報を含む検出情報に基づいて撮像部が撮像する席を特定し、当該特定された席について記憶部が記憶する席情報に基づいて当該特定された席からユーザが離れてから経過した時間に関する席案内情報を生成する。

また、本発明の一態様は、席案内方法であって、撮像部が、複数の席のうちの少なくとも１つの席を撮像する撮像過程と、検出部が、撮像部によって撮像された席を特定するための情報を検出する検出過程と、席案内情報生成部が、検出部によって検出された情報を含む検出情報に基づいて撮像部によって撮像された席を特定し、当該特定された席について記憶部に記憶された席の状態に関する席情報に基づいて当該特定された席の状態に関する席案内情報を生成する席案内情報生成過程と、表示画像生成部が、席案内情報生成部によって生成された席案内情報の内容を撮像部によって撮像された画像上に重ね合わせて表示する表示画像であって、撮像部によって撮像された画像内の席と当該席の席案内情報の内容とを対応させて表示する表示画像を生成する表示画像生成過程と、表示部が、表示画像生成部によって生成された表示画像を表示する表示過程と、を有する席案内方法である。

また、本発明の一態様は、席案内プログラムであって、コンピュータに、複数の席のうちの少なくとも１つの席を撮像部に撮像させる撮像手順、撮像手順において撮像される席を特定するための情報を検出させる検出手順、検出手順において検出される情報を含む検出情報に基づいて撮像手順において撮像される席を特定し、当該特定された席について記憶部に記憶された席の状態に関する席情報に基づいて当該特定された席の状態に関する席案内情報を生成する席案内情報生成手順、席案内情報生成手順において生成される席案内情報の内容を撮像手順において撮像される画像上に重ね合わせて表示する表示画像であって、撮像手順において撮像される画像内の席と当該席の席案内情報の内容とを対応させて表示する表示画像を生成する表示画像生成手順、表示画像生成手順において生成される表示画像を表示する表示手順、を実行させるための席案内プログラムである。

本発明の一態様によれば、席を探しやすくすることができる。

本発明の第１の実施形態に係る席案内システムの使用環境の一例を示す図である。 第１の実施形態に係る席案内システムの一例を示す外観図である。 第１の実施形態に係る席管理テーブルの一例を示す表である。 第１の実施形態に係る席案内システムによる処理の流れの一例を示す図である。 第１の実施形態に係る席案内システムを構成する端末装置、席及び席案内サーバの構成の一例を示すブロック図である。 第１の実施形態に係る表示画像の生成処理の様子の一例を示す模式図である。 第２の実施形態に係る席案内システムの一例について説明する図である。 第２の実施形態に係る席案内システムを構成する端末装置、席及び席案内サーバの構成の一例を示すブロック図である。 第３の実施形態に係る席案内システムの一例について説明する図である。

＜第１の実施形態＞
以下、図面を参照しながら本発明の実施形態について詳述する。図１は、本発明の第１の実施形態に係る席案内システムの使用環境の一例を示す図である。図１（ａ）の画像１０は、イベント会場に席が並べて配置されている様子を示す。画像１０には、複数の席と、その一部に複数の人間が着席している様子が示されている。図１（ｂ）は、本実施形態の席案内システムの一部を構成する端末装置１００の前面図である。端末装置１００の前面１００−１は、例えば、スマートフォン、携帯電話、タブレット端末などであり、扁平な長方形の形状を有する。端末装置１００は、タッチパネルである表示部２０、副カメラ３０、音声出力部４０を備える。表示部２０には、表示画像、ＡＲ表示切替スイッチ（ＯＮ、ＯＦＦのスイッチ）２４及び説明文２６が表示されている。ＡＲ表示切替スイッチ２４は、押下するたびにオンとオフが反転するオルタネートスイッチであってもよい。図１（ｂ）において、表示部２０が表示している画像は、図１（ａ）の画像１０内の複数の席各々と、当該複数の席各々の席の状態に関する席案内情報２２とを対応付けてＡＲ表示するときの一例である。図１（ｂ）において、表示画像内の席に対して、席案内情報２２として、「着」、「予」、「空」、「３」という文字・数字がバルーンで示されている。説明文２６には、「着」、「予」、「空」、「数字」という文字・数字の内容の意味が記載されている。

表示部２０が表示する表示画像は、図１（ａ）の画像１０に写った席の上に、各席の状態が重ねて示されている。当該表示画像はＡＲ（Augmented Reality；拡張現実）技術によって生成されており、ＡＲ表示切替スイッチ２４のＯＦＦスイッチを押すことで、表示画像からＡＲ表示を解除して、元の画像１０をそのまま端末装置１００に表示させることもできる。また、端末装置１００の表示部２０の表示領域は限られているため、表示画像内の席案内情報２２は簡略化された表示になっている。そして、その内容は、説明文２６において説明されている。図１（ｃ）は、端末装置１００の背面図である。端末装置１００の背面１００−２は、主カメラ５０を備える。

説明文２６において、例えば、席案内情報２２の「着」は、当該席に人が着席していることを示している。「予」は、当該席が予約席であることを示している。「空」は、当該席がまだ誰も座っていない空席であることを示している。また、「数字」は、当該席に座っていたユーザが離席してから経過した時間（離席時間）を分単位で示す。なお、図１（ｂ）における席案内情報２２の表示は一例である。例えば、席の状態を異なる色で示したり、或いは特定の状態にある席（例えば、空席）のみを席案内情報２２で示したりしてもよい。また、席案内情報２２の表示方法を種々の態様に切り替えられるようにしてもよい。

図２は、席案内システム１の一例を示す外観図である。席案内システム１は、端末装置１００、席２００及び席案内サーバ３００を備える。席２００は複数の席を備える（図２では、７席を示す。）。席案内サーバ３００は、ネットワークＮＷを介して、端末装置１００及び席２００に接続されており、相互に情報の送受信を行うことができる。席案内システム１は、例えば、映画館や劇場、スポーツ観覧施設などのイベント会場や、列車の客車などの公共・民間施設に適用することができる。席２００は、これら施設に複数設置された席である。

複数の席２００各々は、例えば、それぞれ情報処理装置（図示せず）を備えている。この情報処理装置は、各席の利用状態を、ネットワークＮＷを介して席案内サーバ３００に送信したり、席案内サーバ３００から送られてくる情報を受信したりすることができる。ネットワークＮＷは、例えば、携帯電話網、ＰＨＳ（Personal Handy-phone System）網、ＶＰＮ（Virtual Private Network）網、専用通信回線網、ＷＡＮ（Wide Area Network）、ＬＡＮ（Local Area Network）、ＰＳＴＮ（Public Switched Telephone Network；公衆交換電話網）など、またはこれらの組み合わせによって構成される情報通信ネットワークである。

図４は、本実施形態における席案内システム１による処理の流れの一例を示す図である。図４（ａ）は、端末装置１００と席案内サーバ３００による処理の流れの一例を示すシーケンス図である。
（ステップＳ３００）まず、端末装置１００は、ユーザの入力に基づいてＡＲによる席案内を開始する。そして、端末装置１００は、複数の席のうちの少なくとも１つの席の撮像を開始する。
（ステップＳ３０２）次に、端末装置１００は、ステップＳ３００において撮像した席を特定するための情報を含む検出情報を席案内サーバ３００に送信し、席案内サーバ３００は、当該情報を受信する。なお、検出情報は、例えば、撮像時の端末装置１００の位置や姿勢、撮像の画角を含む。
（ステップＳ３０４）次に、席案内サーバ３００は、席案内サーバ３００によって記憶されている複数の席２００の状態に関する席情報と端末装置１００から受信した検出情報とに基づいて、席の状態に関する席案内情報（図１の席案内情報２２）を生成する。

（ステップＳ３０６）次に、席案内サーバ３００はステップＳ３０４で生成した席案内情報を端末装置１００に送信し、端末装置１００は当該席案内情報を受信する。
（ステップＳ３０８）次に、端末装置１００は、席案内サーバ３００から受信した席案内情報を、端末装置１００によって先に撮像された画像の上に重ね合わせた表示画像を生成する。なお、表示画像の生成処理については、後述する。
（ステップＳ３１０）そして、端末装置１００は、ステップＳ３０８において生成された表示画像（ＡＲ画像）を表示する。

図４（ｂ）は、席２００による処理の流れの一例を示すフローチャートである。
（ステップＳ３２０）まず、席２００は、着席を検出したか否かを判定する。席２００による着席の検出については、後述する。着席を検出した場合（ステップＳ３２０；ＹＥＳ）、ステップＳ３２２に遷移する。着席を検出していない場合（ステップＳ３２０；ＮＯ）、ステップＳ３２０に戻る。
（ステップＳ３２２）次に、席２００は、自席が着席状態にあることを示す席使用情報と自席の席識別情報とをネットワークＮＷを介して席案内サーバ３００に送信する。

（ステップＳ３２４）次に、席２００は、離席を検出したか否かを判定する。席２００による離席の検出については後述する。離席を検出した場合（ステップＳ３２４；ＹＥＳ）、ステップＳ３２６に遷移する。離席を検出していない場合（ステップＳ３２４；ＮＯ）、ステップＳ３２４に戻る。
（ステップＳ３２６）そして、自席が離席状態にあることを示す席使用情報と離席を検出した時刻とを席案内サーバ３００に送信する。
なお、上記では席案内サーバ３００側の処理については記していないが、席案内サーバ３００は、上記ステップＳ３２２及びＳ３２６において席２００から送信された情報に基づいて、席の状態を管理する。席の管理方法については後述する。

図５は、本実施形態に係る席案内システム１を構成する端末装置１００、席２００及び席案内サーバ３００の構成の一例を示すブロック図である。以下、席案内システム１の各構成要素の構成について詳述する。端末装置１００は、記憶部１１０と、撮像部１２０と、測定部１２２と、検出部１３０と、検出情報送信制御部１３２と、端末側通信部１４０と、席案内情報受信制御部１５０と、表示画像生成部１６０と、表示部１７０、制御部１８０とを備える。また、測定部１２２は、ＧＰＳ（Global Positioning System；全地球測位システム）センサ１２４と、加速度センサ１２６と、地磁気センサ１２８とを備える。

記憶部１１０は、例えば、ＨＤＤ（Hard Disc Drive）やＳＳＤ（Solid State Drive）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）、ＲＯＭ（Read-Only Memory）、ＲＡＭ（Random Access Memory）などを含み、端末装置１００の制御部１８０が実行する各種プログラム（ファームウェアやアプリケーションプログラムなど）や処理結果を格納する。また、記憶部１１０は、ＡＲ合成プログラム１１２やバッファ画像１１４などを格納する。

撮像部１２０は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの固体撮像素子を利用したカメラモジュールを備える。撮像部１２０は、複数の席２００のうちの少なくとも１つの席を撮像する。撮像部１２０の撮像方向は、例えば、表示部１７０の表示面の法線方向に一致している。また、撮像部１２０は、ユーザの視線方向を撮像するように設置されている。撮像部１２０によって撮像された画像は、記憶部１１０にバッファ画像１１４として格納される。また、撮像部１２０は、撮像の画角を示す情報を、検出部１３０が検出する検出情報の一部として、検出部１３０に出力する。

測定部１２２は、ＧＰＳセンサ１２４、加速度センサ１２６、及び地磁気センサ１２８を備え、これらのセンサは、制御して端末装置１００の位置と姿勢に関する情報を測定する。測定部１２２は、測定した端末装置１００の位置と姿勢に関する情報を、検出部１３０に出力する。なお、測定部１２２は、ＧＰＳ以外の方法で端末装置１００の位置を測定してもよい。例えば、位置が既知である複数の無線基地局やアクセスポイントからの電波の強度に基づいて、自装置の位置を推定する方法などがある。本実施形態では特定の方法に限定せずに端末装置１００の位置を測定することができる。加速度センサ１２６は、地磁気センサ１２８と組み合わせることで、撮像部１２０の撮像方向（図６の矢印６０４の方向）、即ち端末装置１００の姿勢を特定する。

検出部１３０と、検出情報送信制御部１３２と、席案内情報受信制御部１５０と、表示画像生成部１６０とは、例えば、記憶部１１０に格納されたプログラムを制御部１８０が実行することにより機能するソフトウェア機能部である。検出部１３０は、撮像部１２０から入力された撮像の画角に関する情報と、測定部１２２から入力された端末装置１００の位置と姿勢に関する情報とを、撮像部が撮像する席を特定するための情報を含む検出情報の一部として取得する。すなわち、検出部１３０は、撮像部１２０が撮像する席２００を特定するための情報を検出する。検出部１３０は、検出した検出情報を検出情報送信制御部１３２に出力する。検出情報送信制御部１３２は、端末側通信部１４０を制御し、検出部１３０から入力された検出情報を席案内サーバ３００に送信する。

端末側通信部１４０は、無線基地局やアクセスポイントとの通信を介して、ネットワークＮＷ上の席案内サーバ３００と通信を行う。端末側通信部１４０は、アンテナや符号化／復号部、変調／復調部、アップ／ダウンコンバータなどを備えており、無線基地局やアクセスポイントと無線通信を行うことができる。席案内情報受信制御部１５０は、端末側通信部１４０を制御して、席案内サーバ３００から送信された席案内情報を受信する。次に席案内情報受信制御部１５０は、受信した席案内情報を記憶部１１０に記憶し、表示画像生成部１６０に出力する。

表示画像生成部１６０は、席案内情報受信制御部１５０から入力された席案内情報の内容を、バッファ画像１１４の画像上に、ＡＲ合成プログラム１１２によって重ね合わせた表示画像を生成する。すなわち、表示画像生成部１６０は、撮像部１２０が撮像する画像上に、席案内情報の内容を重ね合わせる処理を行う。表示画像生成部１６０は、生成した表示画像を表示部１７０に出力する。そして、表示部１７０は、表示画像生成部１６０が生成する表示画像を表示する。表示部１７０は、例えば、液晶ディスプレイ装置や有機ＥＬ（Electroluminescence）表示装置を備える。また、表示部１７０は、上記表示装置と、接触検知機構が組み合わされたタッチパネルであってもよい。接触検知機構の態様としては種々のものが採用される。例えば、抵抗膜方式や静電容量方式、赤外線方式、表面弾性波方式などの方式を利用した接触検知機構を採用してもよい。

席２００は、記憶部２１０と、圧力センサ２２０と、席情報送信制御部２３０と、席側通信部２４０、制御部２５０とを備える。記憶部２１０は、例えば、ＨＤＤやＳＳＤ、ＥＥＰＲＯＭ、ＲＯＭ、ＲＡＭなどを含み、制御部２５０が実行する各種プログラムや処理結果を格納する。また、記憶部２１０は、席各々を示す席識別情報を格納する。圧力センサ２２０は、席２００の座部などに配置され、ユーザの着座の際に席２００に加わる圧力を検出する。圧力センサ２２０は、検出された圧力を示す情報（電気信号）を席情報送信制御部２３０に出力する。

席情報送信制御部２３０は、例えば、ソフトウェア機能部である。席情報送信制御部２３０は、圧力センサ２２０から入力された圧力の値から、ユーザの着席を判定する。ユーザが着席したと判定した場合、席情報送信制御部２３０は、席側通信部２４０を制御し、自席にユーザが着席したことを示す席使用情報と自席の席識別情報とを、ネットワークＮＷを介して席案内サーバ３００に送信させる。

席情報送信制御部２３０による着席の判定は、例えば、所定の閾値以上の圧力が検出されたか否かで行う。例えば、１０ｋｇを所定の閾値として設定し、閾値以上の重さが席に掛かったときにのみ、自席にユーザが着席したと判定する。また、誤って着席したときなどに、席案内サーバ３００で管理される席の使用状態が更新されることを防ぐため、所定の時間（例えば、１０秒間など）連続して圧力が検出されたときにのみ、自席にユーザが着席したと判定してもよい。また、検出される圧力が所定の閾値よりも小さくなったときには、ユーザが離席したと判定する。そして、席情報送信制御部２３０を制御し、ユーザが離席したことを示す席使用情報と自席の席識別情報、離席を検出した時刻とを、ネットワークＮＷを介して席案内サーバ３００に送信させる。

席案内サーバ３００は、記憶部３１０と、席情報受信制御部３２０と、検出情報受信制御部３３０と、サーバ側通信部３４０と、席案内情報生成部３５０と、席案内情報送信制御部３５２、制御部３６０とを備える。記憶部３１０は、例えば、ＨＤＤやＳＳＤ、ＥＥＰＲＯＭ、ＲＯＭ、ＲＡＭなどを含み、制御部３６０が実行する各種プログラム（ファームウェアやアプリケーションプログラムなど）や処理結果などを格納する。また、記憶部３１０は、席管理テーブル３１２や検出情報３１４、ＡＲ生成プログラム３１６を格納する。席情報受信制御部３２０と、検出情報受信制御部３３０と、席案内情報生成部３５０と、席案内情報送信制御部３５２とは、ソフトウェア機能部である。

席情報受信制御部３２０は、サーバ側通信部３４０を制御して、席２００から送信された席の使用状態（着席または離席）を示す席使用情報と、席識別情報と、離席が検出された時刻とを受信する。そして、席情報受信制御部３２０は、受信した情報に基づいて、席管理テーブル３１２を更新する。席管理テーブル３１２には、上記の席使用情報や席識別情報の他、各席の配置などが席情報として記憶されている。すなわち、記憶部３１０は複数の席２００の状態に関する席情報を記憶する。

なお、席情報受信制御部３２０は、着席を示す席使用情報を受信した場合、当該座席について着座フラグを立てる。席案内サーバ３００は、この着座フラグがある間は、離席を示す席使用情報を受信した場合も、ユーザが使用中の席であるとして管理する。着座フラグは、例えば、閉館のタイミングやイベントの終了などのタイミングでリセットされる。また、席管理テーブル３１２の詳細については、後述する。

検出情報受信制御部３３０は、サーバ側通信部３４０を制御して、端末装置１００から検出情報を受信し、記憶部３１０に記憶する。席案内情報生成部３５０は、記憶部３１０からＡＲ生成プログラム３１６を読み出して、席案内情報を生成する。席案内情報の生成には、記憶部３１０に格納されている席管理テーブル３１２と検出情報３１４を使用する。席案内情報の生成の詳細については、後述する。席案内情報生成部３５０は、生成した席案内情報を席案内情報送信制御部３５２に出力する。席案内情報送信制御部３５２は、サーバ側通信部３４０を制御し、席案内情報生成部３５０から入力された席案内情報をネットワークＮＷを介して端末装置１００に送信する。

図３は、席管理テーブル３１２の一例を示す表である。列Ｃ５００は、席２００各々を示す席識別情報を示す。列Ｃ５１０は、席２００各々の、例えば、中心の位置を示す空間座標である。列Ｃ５２０は、席２００各々が離席を検出した時刻を示す。列Ｃ５３０は、席２００各々の使用状態を示している。列Ｃ５４０は、席２００各々のユーザを示す。

図３において、席の使用状態は、「空席」、「着席」、「ユーザが席を離れてからから経過した時間」、または「予約」のいずれかで示されている。席情報受信制御部３２０は、席２００から受信する席使用情報及び席識別情報に基づいて、列Ｃ５３０の項目を更新する。例えば、初期状態では、席２００各々はいずれも「空席」とされている。席情報受信制御部３２０は、席２００から着席を示す席使用情報を受信した場合、当該席の使用状況を「着席」とする。席情報受信制御部３２０は、席２００から離席を示す席使用情報と離席を検出した時刻とを受信した場合、当該離席を検出した時刻を列Ｃ５２０の該当する欄に記憶する。そして、席情報受信制御部３２０は、現在の時刻を参照し、離席した時刻からの経過時間を列Ｃ５３０の該当する欄に記憶する。現在の時刻は、例えば制御部３６０の備える時計の示す時刻である。すなわち、記憶部３１０が記憶する席情報とは、複数の席２００各々の状態が空席であるか否かについての情報と複数の席２００各々からユーザが離れた時間に関する情報とを含む。例えば、席識別情報がＢ１の行の使用状態の欄が「２」になっているが、これは離席から２分が経過したことを示す。なお、席情報受信制御部３２０は、新たに着席を示す席使用情報が受信されるまで、当該経過時間を定期的に更新する。また、席管理テーブル３１２は、行Ｌ５００に示されるように、予約席とそのユーザを関連付けて管理してもよい。

図６は、表示画像の生成処理の様子の一例を示す模式図である。図６（ａ）は、表示画像における席案内情報の内容の表示位置を決定する際の方法の一例を示す模式図である。図６（ａ）において、ｘ軸、ｙ軸、及びｚ軸は、それぞれ直交する３次元空間の座標を示す軸である。これらの軸は、現実の空間に即して設定されている。例えば、ｘ軸は東西に平行に、ｙ軸は南北に平行に設定され、ｚ軸が地表に対して垂直に設定されている。球６１０Ａ〜６１０Ｆは、それぞれ「空席」の状態の席を示している。また、球６１０Ａ〜６１０Ｆは、それぞれ図３の列Ｃ５１０に記憶されている座標が示す位置に基づいて配置されている。

枠６００ａは、端末装置１００の撮像部１２０が撮像する範囲を模式的に示している。本実施形態において、席案内サーバ３００は、端末装置１００から検出情報を受信することにより、この空間において端末装置１００により撮像された範囲を設定することができる。図６（ａ）において、座標６０２は端末装置１００の位置を示し、矢印６０４は端末装置１００による撮像の方向をそれぞれ示す。座標６０２は、記憶部３１０に格納された検出情報３１４が含む端末装置１００の位置に関する情報に基づいて設定することができる。矢印６０４が示す方向は、加速度センサ１２６と地磁気センサ１２８から得られた情報に基づいて設定することができる。さらに、枠６００ａで示される撮像範囲は、検出情報３１４が含む端末装置１００の撮像部１２０の画角に関する情報に基づいて設定することができる。

次に、席案内情報生成部３５０は、例えば、座標６０２を原点、枠６００ａの横線と縦線をそれぞれＸ軸とＹ軸、矢印６０４が示す方向をＺ軸として、新たにそれぞれ直交する３次元空間の座標系を設定し、枠６００ａを規定する点（４隅の点）の座標と球６１０Ａ〜６１０Ｆのｘｙｚ座標系からＸＹＺ座標系に座標を変換する。次に、席案内情報生成部３５０は、特定した球６１０Ａ〜６１０Ｆを原点６０２から枠６００ａが属する平面上に投影する。次に、席案内情報生成部３５０は、座標変換後の枠６００ａが規定するＸ−Ｙ座標の範囲内にある円６２０Ａ〜６２０Ｃを特定し、円６２０Ａ〜６２０Ｃ各々の投影元の球６１０Ａ〜６１０Ｃ各々を特定する。そして、席案内情報生成部３５０は、円６２０Ａ〜６２０Ｃ各々の座標と当該席の使用状態とを対応付けて席案内情報（図１（ｂ）の席案内情報２２）を生成する。

すなわち、席案内情報生成部３５０は、検出部１３０が検出する情報を含む検出情報に基づいて撮像部１２０が撮像する席２００を特定し、当該特定された席２００について記憶部３１０が記憶する席情報に基づいて当該特定された席２００の状態に関する席案内情報を生成する。なお、席案内情報生成部３５０は、円６２０Ａ〜６２０Ｃの大きさを席案内情報の表示の大きさに反映してもよい。次に、席案内情報生成部３５０は、生成した席案内情報を席案内情報送信制御部３５２に出力する。そして、席案内情報送信制御部３５２は、サーバ側通信部３４０を制御し、席案内情報生成部３５０から入力された席案内情報をネットワークＮＷを介して端末装置１００に送信する。

図６（ｂ）は、席案内情報の内容を撮像画像上に重ね合わせた表示画像の一例である。図６（ｂ）において、画像６００ｂの撮像範囲は、図６（ａ）の枠６００ａで示される撮像範囲に対応する。また、図６（ｂ）において、席案内情報６２２Ａ〜６２２Ｃ各々は、図６（ａ）の球６１０Ａ〜６１０Ｃで示される「空」の文字は空席の状態の席にそれぞれ対応する。表示画像生成部１６０は、席案内サーバ３００から受信した席案内情報のＸ座標及びＹ座標を、例えば、撮像画像の左上の点を原点とした値に変換する。表示画像生成部１６０は、席案内情報の内容を当該情報の示す座標に基づいて、バッファ画像１１４（図７（ｂ））から取得した画像データの上に重ね合わせた表示画像データを生成する。以上により、席案内情報６２２Ａ〜６２２Ｃ各々を撮像画像に写る席２０２Ａ〜２０２Ｃにそれぞれ対応付けることができる。

なお、本実施形態において、検出情報は、撮像部１２０による撮像の画角を含んだが、この情報は必ずしも必要ではない。例えば、撮像範囲に席が１つしか写らない程度に端末装置１００を席に接近させて撮像した場合、端末装置１００の位置と姿勢に関する情報のみで撮像される席を特定することができる。従って、当該席の席案内情報の内容を画像内の席と対応させて表示することができる。また、席案内システム１が備える各機能部の構成を一部入れ替えても良い。例えば、ＡＲ生成プログラム３１６及びＡＲ合成プログラム１１２及びは端末装置１００と席案内サーバ３００のいずれかに格納されていればよい。両プログラムが席案内サーバ３００に格納される場合は、席案内サーバ３００は端末装置１００が撮像した画像を受信し、ＡＲ表示画像を生成してこれを端末装置１００に送信する。端末装置１００はこれをそのまま表示部１７０に表示する。両プログラムが端末装置１００に格納される場合は、端末装置１００は席管理テーブル３１２を受信し、受信した席管理テーブル３１２と両プログラムによってＡＲ表示画像を生成する。そして、生成したＡＲ表示画像を表示部１７０に表示する。

以上のように、撮像部１２０は、複数の席２００のうちの少なくとも１つの席を撮像し、記憶部３１０は、複数の席２００の状態に関する席情報を記憶し、検出部１３０は、撮像部１２０が撮像する席２００を特定するための情報を検出し、席案内情報生成部３５０は、検出部１３０が検出する情報を含む検出情報に基づいて撮像部１２０が撮像する席２００を特定し、当該特定された席２００について記憶部３１０が記憶する席情報に基づいて当該特定された席２００の状態に関する席案内情報を生成し、表示画像生成部１６０は、席案内情報生成部３５０が生成する席案内情報の内容を撮像部１２０が撮像する画像上に重ね合わせて表示する表示画像であって、撮像部１２０が撮像する画像内の席２００と当該席２００の席案内情報の内容とを対応させて表示する表示画像を生成し、表示部は、表示画像生成部１６０が生成する表示画像を表示する。従って、席案内システム１は、席と席案内情報とを対応付けて示すことができ、席を探しやすくすることができる。

また、記憶部３１０が記憶する席情報とは、複数の席２００各々の状態が空席であるか否かについての情報を含み、席案内情報生成部３５０は、検出部１３０が検出する情報を含む検出情報に基づいて撮像部１２０が撮像する席２００を特定し、当該特定された席２００について記憶部３１０が記憶する席情報に基づいて当該特定された席２００の状態が空席であるか否かについての席案内情報を生成する。従って、席案内システム１は、席の状態を分かり易く示すことができるため、空席を探しやすくすることができる。

また、記憶部３１０が記憶する席情報とは、複数の席２００各々からユーザが離れた時間に関する情報を含み、席案内情報生成部３５０は、検出部１３０が検出する情報を含む検出情報に基づいて撮像部１２０が撮像する席２００を特定し、当該特定された席２００について記憶部３１０が記憶する席情報に基づいて当該特定された席２００からユーザが離れてから経過した時間に関する席案内情報を生成する。従って、席案内システム１は、ユーザが長時間離れている席、すなわち空席となる可能性の高い席を分かり易く示すことができるため、空席を探しやすくすることができる。

＜第２の実施形態＞
以下、本発明の第２の実施形態について説明する。第２の実施形態における席案内システムは、第１の実施形態と同様に、イベント会場やスポーツ観覧施設、列車など、複数の席を備える公共・民間施設に適用可能な席案内システムである。本実施形態における席案内システムは、第１の実施形態と類似した構成を備えるが、端末装置及び席案内サーバの構成が一部異なっている。以下、第１の実施形態と同じ機能や構成については、第１の実施形態と同じ符号を使用し、説明を省略する。

図７は、第２の実施形態に係る席案内システムを適用したときの端末装置における表示の一例を示す図である。席２００ａの座面には現実の事物である席検出マーカー（ＡＲマーカー）７００ａが貼付されている。公共・民間施設において、席検出マーカーの貼付される席は、１つの席であってもよいし、複数の席であってもよい。そして、図７においては、当該席の使用状態が席案内情報７１０ａとして、「空」という語を有するバルーンでもって席２００ａに対応付けられてＡＲ表示されている。

図８は、本実施形態に係る第２の実施形態に係る席案内システムを構成する端末装置１００ａ、席２００及び席案内サーバ３００ａの構成の一例を示すブロック図である。第２の実施形態における端末装置１００ａの構成は第１の実施形態における端末装置１００の構成と類似するが、表示画像生成部１６０の機能が第１の実施形態の表示画像生成部１６０の機能と少し異なる。また、端末装置１００ａは、第１の実施形態の端末装置１００が備える検出部１３０の代わりに画像解析部１３０ａを備える。また、端末装置１００ａは、記憶部１１０に画像解析プログラム１１６を格納する。また、端末装置１００ａには、第１の実施形態における端末装置１００の測定部１２２が欠如している。

画像解析部１３０ａは、記憶部１１０に格納された画像解析プログラム１１６の実行により機能するソフトウェア機能部である。まず、画像解析部１３０ａは、バッファ画像１１４の画像データを解析し、当該画像データ中に席検出マーカーが存在するかどうかを判定する。次に、席検出マーカーを識別した場合、当該席検出マーカーの領域の座標を記憶部１１０に記憶する。次に、席検出マーカーを解析し、当該席検出マーカーが示す情報を取得する。この席検出マーカーが示す情報とは、例えば、当該席検出マーカーが貼付された席２００ａの席識別情報である。

このとき、例えば、席検出マーカー自体が暗号化された席識別情報を格納していてもよく、格納していなくてもよい。画像解析部１３０ａは、例えば、席検出マーカーの画像パターンを抽出する。また、記憶部１１０には予め、画像解析部１３０ａが抽出する画像パターンと席識別情報とを対応付けて格納しておく。そして、画像解析部１３０ａは、解析した席検出マーカーの画像パターンに関連付けられた席識別情報を取得するようにしてもよい。すなわち、画像解析部１３０ａは、撮像部１２０が撮像する席２００を特定するための情報を検出する。なお、画像パターンの解析には、エッジ抽出やテンプレートマッチングなど種々の方法が採用できる。画像解析部１３０ａは、取得した席識別情報を検出情報送信制御部１３２に出力する。検出情報送信制御部１３２は、端末側通信部１４０を制御して、画像解析部１３０ａから入力された席識別情報を検出情報の一部として席案内サーバ３００ａに送信する。

第２の実施形態における席案内サーバ３００ａの構成は第１の実施形態における席案内サーバ３００の構成と類似するが、席案内情報生成部３５０ａの機能が第１の実施形態の席案内情報生成部３５０とは少し異なる。席案内情報生成部３５０ａは、席管理テーブル３１２を参照し、検出情報３１４が示す席識別情報に対応する席の使用状態を取得する。そして、席案内情報生成部３５０は、取得した席の使用状態を席案内情報として席案内情報送信制御部３５２に出力する。

端末装置１００ａの席案内情報受信制御部１５０は、端末側通信部１４０を制御し、席案内サーバ３００ａから、画像解析部１３０ａが解析した席検出マーカーと関連付けられた席の使用状態を受信する。次に、席案内情報受信制御部１５０は、受信した席の使用状態を表示画像生成部１６０に出力する。表示画像生成部１６０は、記憶部１１０からバッファ画像１１４の画像データと画像解析部１３０ａが解析したＡＲ表示マーカーの座標とを取得する。そして、表示画像生成部１６０は、席案内情報受信制御部１５０から入力された席案内情報の内容を、ＡＲ表示マーカーの座標に基づいて、バッファ画像１１４から取得した画像データの上に重ね合わせた表示画像データを生成する。そして、表示部１７０は、表示画像生成部１６０が生成する表示画像（図７）を表示する。

なお、本実施形態において、席検出マーカーは画像ではなく文字などであってもよい。そしてその場合は、文字のパターン認識手法を利用して席検出マーカーを識別してもよい。また、画像解析部１３０ａは、席２００ａを直接識別してもよい。例えば、席の外観（色や模様、形など）を席各々、或いは、一部の席で変更し、当該席の画像パターンを識別できるようにしてもよい。このように、端末装置１００ａは、席検出マーカーを使用せずに席案内情報を表示画像に表示させてもよい。本発明の第２の実施形態によれば、端末装置の位置、姿勢、撮像装置の画角を取得することなく、簡便に検出情報を取得することができる。

＜第３の実施形態＞
以下、本発明の第３の実施形態について説明する。第３の実施形態における席案内システムは、第１及び第２の実施形態と同様に、イベント会場やスポーツ観戦施設、列車など、複数の席を備える公共・民間施設に適用可能な席案内システムである。本実施形態における席案内システムは、第２の実施形態と類似した構成を備えるので、その説明を省略する。図９は、第３の実施形態に係る席案内システムを適用したときの端末装置における表示の一例を示す図である。席２００ｂの座面には現実の事物である席検出マーカー（ＡＲマーカー）７００ｂが貼付されている。そして、席案内情報である空席の方向を示す矢印が席２００ｂに対応付けられて表示されている。なお、本例では空席の方向としたが、例えば、席案内サーバでユーザの情報を管理し、ユーザが事前に予約した席の方向を示すなどしてもよい。

第３の実施形態における席案内サーバの構成は、第２の実施形態における席案内サーバの構成と類似するが、席案内情報生成部３５０ａの機能が少し異なる。席案内情報生成部３５０ａは、席管理テーブル３１２を参照し、検出情報３１４が示す席識別情報に対応する席の使用状態を取得する。当該席の状態が空席だった場合、席案内情報生成部３５０は、第２の実施形態と同様の処理を行う。当該席の状態が一時的な離席や予約などで当該席を使用できない場合、席案内情報生成部３５０ａは、席管理テーブル３１２を参照し、使用状態が空席となっている席を抽出する。次に、席案内情報生成部３５０は、抽出された空席各々の座標と検出情報３１４が示す席の座標とを比較し、抽出された空席の中で、検出情報３１４が示す席と最も距離の近い空席を抽出する。次に、席案内情報生成部３５０は、検出情報３１４が示す席から見た最も近い空席の方向を示す情報と当該空席の席識別情報とを席案内情報として生成する。なお、当該方向を示す情報とは、例えば、検出情報３１４が示す席の座標を始点とし、当該空席の座標を終点とする有向線分を図６（ａ）における枠６００ａが属する平面に投影したものである。次に、席案内情報生成部３５０は、生成した席案内情報を席案内情報送信制御部３５２に出力する。

端末装置の席案内情報受信制御部１５０は、端末側通信部１４０を制御し、席案内情報として席２００ｂから見た空席の方向を示す情報と当該空席の識別情報とを受信する。次に、席案内情報受信制御部１５０は、受信した席案内情報を表示画像生成部１６０に出力する。そして、表示画像生成部１６０は、席案内情報が示す空席の方向と当該空席の席識別情報とに基づいてＡＲ表示用の画像（図９の７１０ｂ）を生成する。そして、席検出マーカーの座標に基づいて、バッファ画像１１４から取得した画像データの上に当該生成した画像を重ね合わせた表示画像データを生成する。以上により、席案内情報を撮像画像に写る席に対応付けて示すことができる。第３の実施形態によれば、第２の実施形態の効果に加えて、空席の方向を容易く示すことができる。

なお、上述した各実施形態における端末装置や席案内サーバの一部、例えば、検出部１３０、画像解析部１３０ａ、表示画像生成部１６０、及び席案内情報生成部３５０、３５０ａをコンピュータで実現するようにしてもよい。その場合、この制御機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現してもよい。なお、ここでいう「コンピュータシステム」とは、端末装置や席案内サーバに内蔵されたコンピュータシステムであって、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでもよい。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。

また、上述した実施形態における端末装置や席案内サーバの一部、または全部を、ＬＳＩ（Large Scale Integration；大規模集積回路）やＡＳＩＣ（Application Specific Integrated Circuit；特定用途向け大規模集積回路）等の集積回路として実現してもよい。端末装置や席案内サーバの各機能ブロックは個別にプロセッサ化してもよいし、一部、または全部を集積してプロセッサ化してもよい。また、集積回路化の手法はＬＳＩに限らず専用回路、または汎用プロセッサで実現してもよい。また、半導体技術の進歩によりＬＳＩに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いてもよい。

以上、図面を参照してこの発明の一実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。例えば、上記３つの実施形態を組み合わせてもよい。例えば、第１の実施形態の席案内システムに第２の実施形態における端末装置１００ａの画像解析部１３０ａの機能を組み合わせて撮像画像内の席を識別し、席案内情報を表示する位置を調整してもよい。こうすることで、端末装置は、撮像画像内の席と席案内情報とをより正確に対応させて表示することができる。また、第１の実施形態における席案内情報の表示方法と、第３の実施形態における席案内情報の表示方法とを切り替えられるようにしてもよい。

本発明は、次の態様で実施することができる。
（１）
席を撮像する撮像部（１２０）と、自己の位置と姿勢を測定する測定部（１２２）と、
自己の位置と姿勢とでもたらされる検出情報を送信し、そして席情報及び拡張現実感情報から成る席案内情報を受信する端末側通信部（１４０）と、席案内情報に拡張現実感を付与した画面を生成する表示画像生成部（１６０）と、表示画像生成部（１６０）の生成した表示画像を表示する表示部（１７０）を備える端末装置。
（２）
測定部（１２２）は、ＧＰＳセンサ（１２４）と、加速度センサ（１２６）と、地磁気センサ（１２８）とを備える上記（１）に記載の端末装置。
（３）
拡張現実感を付与するプログラムを記憶し、また画像を一時記憶する記憶部（１１０）を備える上記（１）または（２）に記載の端末装置。
（４）
席識別情報を格納する記憶部（２１０）と、席使用情報及び席識別情報を送信する席側通信部（２４０）と、を備える席。
（５）
席使用情報は、圧力センサ（２２０）の出力の判別によりもたらされる上記（４）に記載の席。
（６）
席の配置の情報、席使用情報及び席識別情報が記憶された席管理テーブル（３１２）と、席案内情報を生成する席案内情報生成部（３５０）と、端末装置（１００）から検出情報を受信し、そして席案内情報を端末装置（１００）へ送信するサーバ側通信部（３４０）と、を備える席案内サーバ（３００）。
（７）
ネットワークＮＷを介して接続された端末装置（１００）と、席（２００）と、席案内サーバ（３００）とから成る席案内システムであって、端末装置（１００）は、席（２００）を撮像する撮像部（１５０）と、端末装置（１００）の位置及び姿勢を測定する測定部（１２８）と、撮像部（１５０）及び測定部（１２８）によってもたらされる検出情報を席案内サーバ（３００）へ送信する端末側通信部（１４０）とを備え、席（２００）は、席使用情報及び席識別情報を送信する席側通信部（２４０）を備え、席案内サーバ（３００）は、端末装置（１００）から受信した検出情報及び席（２００）から受信した席使用情報から席案内情報を生成する席案内情報生成部（３５０）と、席案内情報を端末装置（１００）へ送信するサーバ側通信部（３４０）とを備える、席案内システム。

１００、１００ａ‥端末装置、１２０‥撮像部、１３０‥検出部、１３０ａ‥画像解析部、１６０‥表示画像生成部、１７０‥表示部、２００、２００ａ、２００ｂ‥席、３００、３００ａ‥席案内サーバ、３１０‥記憶部、３５０‥席案内情報生成部

Claims (5)

1. 複数の席のうちの少なくとも１つの席を撮像する撮像部と、
   前記複数の席の状態に関する席情報を記憶する記憶部と、
   前記撮像部が撮像する席を特定するための情報を検出する検出部と、
   前記検出部が検出する情報を含む検出情報に基づいて前記撮像部が撮像する席を特定し、当該特定された席について前記記憶部が記憶する前記席情報に基づいて当該特定された席の状態に関する席案内情報を生成する席案内情報生成部と、
   前記席案内情報生成部が生成する前記席案内情報の内容を前記撮像部が撮像する画像上に重ね合わせて表示する表示画像であって、前記撮像部が撮像する画像内の席と当該席の前記席案内情報の内容とを対応させて表示する表示画像を生成する表示画像生成部と、
   前記表示画像生成部が生成する前記表示画像を表示する表示部と、
   を備える席案内システム。
2. 前記記憶部が記憶する前記席情報とは、前記複数の席各々の状態が空席であるか否かについての情報を含み、
   前記席案内情報生成部は、前記検出部が検出する情報を含む検出情報に基づいて前記撮像部が撮像する席を特定し、当該特定された席について前記記憶部が記憶する前記席情報に基づいて当該特定された席の状態が空席であるか否かについての席案内情報を生成する
   請求項１に記載の席案内システム。
3. 前記記憶部が記憶する前記席情報とは、前記複数の席各々からユーザが離れた時間に関する情報を含み、
   前記席案内情報生成部は、前記検出部が検出する情報を含む検出情報に基づいて前記撮像部が撮像する席を特定し、当該特定された席について前記記憶部が記憶する前記席情報に基づいて当該特定された席からユーザが離れてから経過した時間に関する席案内情報を生成する
   請求項１又は２に記載の席案内システム。
4. 撮像部が、複数の席のうちの少なくとも１つの席を撮像する撮像過程と、
   検出部が、前記撮像部によって撮像された席を特定するための情報を検出する検出過程と、
   席案内情報生成部が、前記検出部によって検出された情報を含む検出情報に基づいて前記撮像部によって撮像された席を特定し、当該特定された席について記憶部に記憶された席の状態に関する席情報に基づいて当該特定された席の状態に関する席案内情報を生成する席案内情報生成過程と、
   表示画像生成部が、前記席案内情報生成部によって生成された前記席案内情報の内容を前記撮像部によって撮像された画像上に重ね合わせて表示する表示画像であって、前記撮像部によって撮像された画像内の席と当該席の前記席案内情報の内容とを対応させて表示する表示画像を生成する表示画像生成過程と、
   表示部が、前記表示画像生成部によって生成された前記表示画像を表示する表示過程と、
   を有する席案内方法。
5. コンピュータに、
   複数の席のうちの少なくとも１つの席を撮像部に撮像させる撮像手順、
   前記撮像手順において撮像される席を特定するための情報を検出する検出手順、
   前記検出手順において検出される情報を含む検出情報に基づいて前記撮像手順において撮像される席を特定し、当該特定された席について記憶部に記憶された席の状態に関する席情報に基づいて当該特定された席の状態に関する席案内情報を生成する席案内情報生成手順、
   前記席案内情報生成手順において生成される前記席案内情報の内容を前記撮像手順において撮像される画像上に重ね合わせて表示する表示画像であって、前記撮像手順において撮像される画像内の席と当該席の前記席案内情報の内容とを対応させて表示する表示画像を生成する表示画像生成手順、
   前記表示画像生成手順において生成される前記表示画像を表示部に表示させる表示手順、
   を実行させるための席案内プログラム。

Images