JP2022012890A - 情報処理システム、情報処理装置、及び情報処理方法 - Google Patents

Abstract

【課題】子供等が同行者からはぐれた場合に、両者を効率的に合流させることができる技術を提供する。【解決手段】本開示に係る情報処理システムでは、制御装置が、所定のエリア内において第１のユーザと第２のユーザとがはぐれたことを検出すると、第１のユーザと第２のユーザとを関連付けるデータ及び所定のエリア内に設置された複数のカメラで撮影される画像に基づいて、第１のユーザの現在位置を特定する。そして、制御装置は、第１のユーザの現在位置において該第１のユーザに対するエンターテイメントを提供する処理と、第１のユーザの現在位置を示す情報である位置情報を第２のユーザに通知する処理と、を実行する。【選択図】図５

Description

本開示は、情報処理システム、情報処理装置、及び情報処理方法に関する。

監視カメラにより撮影された画像情報から親子の移動経路が相違していることが検出されると、子供が迷子になったと判定して、警告を発生する技術が知られている（例えば、特許文献１を参照。）。

また、特許文献２には、施設へ入場した際に撮影された親子の画像から親の服の色、子供の服の色、子供の身長等の親子情報を抽出して、親子情報ＤＢに登録しておく技術が提案されている。そして、子供が施設内で迷子になった場合に、親の服の色、子供の服の色、子供の身長等が親の端末からサーバへ送信されると、親の位置から子供の位置までの誘導経路がサーバから親の端末に送信される。

特許第６３５００２４号公報 特開２０１３－１９１０５９号公報

本開示の目的は、子供等が同行者からはぐれた場合に、両者を効率的に合流させることができる技術を提供することにある。

本開示は、情報処理システムとして捉えることができる。その場合の情報処理システムは、例えば、
所定のエリア内に設置される複数のカメラと、
前記所定のエリアに入場している第１のユーザと該第１のユーザに同行するユーザである第２のユーザとを関連付けるデータを記憶する記憶装置と、
前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理と、前記複数のカメラにより撮影される画像と前記記憶装置に記憶されているデータとに基づいて、前記第１のユーザの現在位置を特定する処理と、前記特定された現在位置において前記第１のユーザに対するエンターテイメントを提供する処理と、前記特定された現在位置に関する情報である位置情報を、前記第２のユーザに通知する処理と、を実行する制御装置と、
を備えるようにしてもよい。

本開示は、情報処理装置として捉えることもできる。その場合の情報処理装置は、例えば、
所定のエリアに入場している第１のユーザと該第１のユーザに同行するユーザである第２のユーザとを関連付けるデータを記憶する記憶部と、
前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理と、前記所定のエリア内に設置される複数のカメラによって撮影される画像と前記記憶部に記憶されているデータとに基づいて、前記第１のユーザの現在位置を特定する処理と、前記特定された現在位置において前記第１のユーザに対するエンターテイメントを提供する処理と、前記特定された現在位置に関する情報である位置情報を、前記第２のユーザに通知する処理と、を実行する制御部と、
を備えるようにしてもよい。

本開示は、情報処理方法として捉えることもできる。その場合の情報処理方法は、例えば、
所定のエリアに入場している第１のユーザと該第１のユーザに同行するユーザである第２のユーザとがはぐれたことを検出するステップと、
前記第１のユーザと前記第２のユーザとを関連付けるデータを取得するステップと、
前記所定のエリア内に設置される複数のカメラにより撮影される画像と、前記第１のユーザと前記第２のユーザとを関連付けるデータと、に基づいて、前記第１のユーザの現在位置を特定するステップと、
前記特定された現在位置において前記第１のユーザに対するエンターテイメントを提供するステップと、
前記特定された現在位置に関する情報である位置情報を、前記第２のユーザに通知するステップと、
をコンピュータが実行するようにしてもよい。

なお、本開示は、上記した情報処理方法を実現するための情報処理プログラム、又は該情報処理プログラムを格納した非一時的記憶媒体として捉えることもできる。

本開示によれば、子供等が同行者からはぐれた場合に、両者を効率的に合流させることができる技術を提供することができる。

本開示を適用するユーザ探索システムの概要を示す図である。 所定のエリアにおけるカメラ及びサイネージ装置の配置例を示す図である。 ユーザ探索システムに含まれるサーバ装置の構成例を概略的に示したブロック図である。 ユーザ管理ＤＢに格納されるユーザ情報テーブルの構成例を示す図である。 実施形態におけるサーバ装置で行われる処理フローを示すフローチャートである。

本開示は、店舗、施設、又は街等の所定のエリアにおいて、第２のユーザとはぐれた第１のユーザを探索するためのシステムに適用される。本開示における第１のユーザは、該第１のユーザの外出時に同行者の付添いが必要なユーザ（例えば、子供等）である。第２のユーザは、第１のユーザの外出時に同行するユーザ（例えば、親、親以外の親族、保育士、又は教員等）である。

ここで、所定のエリア内で第１のユーザと第２のユーザとがはぐれた場合に、所定のエリア内に設置された複数のカメラ（例えば、監視カメラ等）を利用して第１のユーザの現在位置を特定し、特定された現在位置を第２のユーザに通知する方法が考えられる。斯様な方法によれば、第１のユーザの現在位置を効率的且つ速やかに特定することができる。また、第１のユーザの探索に割くことができる人手が少ない場合等であっても、第１のユーザの現在位置を特定することができる。しかしながら、特定された現在位置に第１のユーザが留まっているとは限らず、第２のユーザを探して移動し続けてしまう可能性がある。その場合、第１のユーザと第２のユーザとを速やかに合流させることが困難になる可能性がある。

これに対し、本開示に係る情報処理システムは、第２のユーザからはぐれた第１のユー
ザの現在位置を特定すると、その現在位置で第１のユーザにエンターテイメントを提供することで、第１のユーザの不要な移動を抑制することを特徴とする。斯様な情報処理システムでは、制御装置が、先ず、第１のユーザと第２のユーザとがはぐれたことを検出する処理を実行する。例えば、制御装置は、所定のエリア内に設置された複数のカメラによって撮影される画像に基づいて、第２のユーザから所定の距離以内に第１のユーザが存在しないことを検出してもよい。すなわち、第２のユーザから所定の距離以内に第１のユーザが存在しないことをもって、第１のユーザと第２のユーザとがはぐれたことが検出されてもよい。その際、第１のユーザと第２のユーザとを関連付けるデータを予め記憶装置に記憶させておけば、制御装置は、当該データを利用して第１のユーザから所定の距離以内に第２のユーザが存在するかを判別することができる。第１のユーザと第２のユーザとを関連付けるデータとしては、例えば、第１のユーザと第２のユーザとの各々の外観上の特徴（例えば、性別、年齢、身長、服装等）を関連付けたデータを用いてもよい。また、第１のユーザと第２のユーザとを関連付けるデータとしては、第１のユーザと第２のユーザとの各々の顔認証データを関連付けたデータを用いてもよい。

なお、第１のユーザと第２のユーザとの合意の下で、両者の距離が一時的に離れる場合も想定される。よって、第２のユーザから所定の距離以内に第１のユーザが存在しない状態が所定時間以上続いていることをもって、第１のユーザと第２のユーザとがはぐれたことが検出されてもよい。また、制御装置は、第１のユーザを捜索するための要求を第２のユーザから取得することで、第１のユーザと第２のユーザとがはぐれたことを検出してもよい。

第１のユーザと第２のユーザとがはぐれたことが検出されると、制御装置は、所定のエリア内に設置された複数のカメラによって撮影される画像と記憶装置に記憶されているデータとに基づいて、第１のユーザの現在位置を特定する。例えば、制御装置は、複数のカメラによって撮影される画像の中から、記憶装置に記憶されている第１のユーザのデータ（第１のユーザの外観上の特徴に関するデータ、又は第１のユーザの顔認証データ）と一致するユーザが写っている画像を抽出してもよい。そして、制御装置は、第１のユーザが写っている画像を撮影したカメラの位置又は撮影範囲に基づいて、第１のユーザの現在位置を特定してもよい。

第１のユーザの現在位置が特定されると、制御装置は、特定された現在位置において第１のユーザに対するエンターテイメントを提供する処理を実行する。例えば、制御装置は、第２のユーザの嗜好に適したデジタルコンテンツ（例えば、アニメーション等の動画、又はゲーム等）を、第２のユーザの近傍に位置するサイネージ装置から出力させてもよい。また、制御装置は、自律走行可能な遊具（例えば、アニメーションのキャラクタ若しくは動物等を模した自律走行型のロボット又は乗り物等）を、第１のユーザの現在位置に向けて運行させてもよい。なお、記憶装置は、第１のユーザと第２のユーザとを関連付けるデータに、第１のユーザの好むエンターテイメントに関する情報（以下、「嗜好情報」と記す場合もある。）を更に関連付けて記憶するようにしてもよい。その場合、制御装置は、記憶装置に記憶されている嗜好情報に基づいて、第１のユーザに提供されるエンターテイメントを決定してもよい。

また、第１のユーザの現在位置が特定されると、制御装置は、当該現在位置に関する情報である位置情報を、第２のユーザに通知する処理を実行する。その際、第２のユーザがスマートフォン等のユーザ端末を携帯していれば、当該ユーザ端末に位置情報が通知されてもよい。別法として、第２のユーザの近傍に位置する係員等を介して位置情報の通知が行われてもよく、又は第２のユーザの近傍に配置されているサイネージ装置を介して位置情報の通知が行われてもよい。なお、上記位置情報を第２のユーザに通知する処理において、制御装置は、複数のカメラで撮影される画像のうち、エンターテイメントの提供を受
けている第１のユーザが撮影されている画像を、位置情報とともに第１のユーザに通知してもよい。

本開示に係る情報処理システムによれば、第１のユーザが第２のユーザからはぐれてしまった場合に、人手に依存することなく、第１のユーザの現在位置を効率的且つ速やかに特定することができる。さらに、本開示に係る情報処理システムによれば、第１のユーザの現在位置において、該第１のユーザにエンターテイメントを提供することで、第１のユーザの不要な移動を抑制することができる。これにより、第１のユーザと第２のユーザとを速やかに合流させることも可能になる。

＜実施形態＞
以下、本開示の具体的な実施形態について図面に基づいて説明する。本実施形態に記載される構成部品の寸法、材質、形状、相対配置等は、特に記載がない限り開示の技術的範囲をそれらのみに限定する趣旨のものではない。

本実施形態では、所定のエリア内において同行者（第２のユーザ）からはぐれてしまったユーザ（第１のユーザ）を探索するためのシステム（以下、「ユーザ探索システム」と記す場合もある。）に本開示を適用する例について述べる。

（ユーザ探索システムの概要）
図１は、本実施形態におけるユーザ探索システムの概要を示す図である。本実施形態におけるユーザ探索システムは、サーバ装置１００と、カメラ２００と、サイネージ装置３００と、ユーザ端末４００と、を含んで構成される。

カメラ２００は、所定のエリア内で人（ユーザ）が立ち入り得る場所を撮影する、所謂監視カメラである。本例では、図２に示すように、所定のエリア内でユーザが立ち入り得る場所を、区画１から区画ＮまでのＮ個の区画に区分けし、それらの区画の各々に少なくとも１つのカメラ２００が設置される。その際、区画１から区画Ｎの各々の広さおよびまたは形状は、１台のカメラで当該区画の全域を撮影し得るように定められてもよい。なお、撮影角度およびまたは撮影位置の異なる複数のカメラが個々の区画に設置されてもよい。各カメラ２００により撮影された画像は、リアルタイムでサーバ装置１００へ送信されてもよく、又は所定の周期（例えば、数秒から数十秒の周期）でサーバ装置１００へ送信されてもよい。

サイネージ装置３００は、電子化された広告又は所定のエリアの案内図等の映像若しくは文字を表示する装置である。本例では、図２に示すように、上記した区画１から区画Ｎの各区画に少なくとも１つ配置される。また、サイネージ装置３００は、第２のユーザからはぐれてしまった第１のユーザに対し、該第１のユーザの嗜好に見合ったデジタルコンテンツを提供する機能も有する。斯様なデジタルコンテンツの提供は、サーバ装置１００からの要求に応じて行われる。

ユーザ端末４００は、第２のユーザが携帯する小型のコンピュータである。ユーザ端末４００は、例えば、スマートフォン、携帯電話、タブレットコンピュータ、ウェアラブルコンピュータ（スマートウォッチ等）等である。本例においては、ユーザ端末４００は、第１のユーザの現在位置を示す情報（位置情報）をサーバ装置１００から受信したときに、当該位置情報を第２のユーザに提示する機能も有する。例えば、ユーザ端末４００は、第１のユーザの現在位置を示す画像をディスプレイに表示、又は第１のユーザの現在位置を示す音声メッセージをスピーカから出力する。

サーバ装置１００は、第１のユーザと第２のユーザとがはぐれてしまった場合に、両ユ
ーザの合流を幇助するための情報処理装置である。サーバ装置１００は、カメラ２００で撮影された画像をモニタリングすることで、第１のユーザが第２のユーザからはぐれたことを検出する。斯様な検出の具体的な方法については後述する。第１のユーザが第２のユーザからはぐれたことが検出されると、サーバ装置１００は、第１のユーザの現在位置を特定し、特定された現在位置に第１のユーザを足止めするための処理を行う。本例では、サーバ装置１００は、第１のユーザの現在位置が属する区画に設置されているサイネージ装置３００を利用して、第１のユーザの嗜好に見合ったエンターテイメントを提供する。例えば、サーバ装置１００は、第１のユーザが好むキャラクタが出演しているアニメーション等の映像を、上記サイネージ装置３００から表示させてもよい。なお、サイネージ装置３００がゲーム機としての機能を有する場合は、サーバ装置１００は、第１のユーザが好むビデオゲームのソフトウェアを、上記サイネージ装置３００で実行させてもよい。また、本例のサーバ装置１００は、特定された第１のユーザの現在位置を第２のユーザに通知する機能も有する。例えば、サーバ装置１００は、第１のユーザの現在位置を示す情報（位置情報）を、第２のユーザのユーザ端末４００へ送信する。

（サーバ装置１００）
ここで、図１に示したユーザ探索システムに含まれるサーバ装置１００の構成について、図３に基づいて説明する。図３は、図１に示したサーバ装置１００の構成の一例を概略的に示したブロック図である。

サーバ装置１００は、前述したように、第１のユーザと第２のユーザとがはぐれてしまった場合に、両ユーザの合流を幇助するための情報処理装置である。斯様なサーバ装置１００は、汎用のコンピュータにより構成することができる。例えば、サーバ装置１００は、プロセッサ（ＣＰＵ、又はＧＰＵ等）と、主記憶装置（ＲＡＭ、又はＲＯＭ等）と、補助記憶装置（ＥＰＲＯＭ、ハードディスクドライブ、又はリムーバブルメディア等）と、を含んで構成される。リムーバブルメディアは、例えば、ＵＳＢメモリ、ＣＤ、又はＤＶＤ等の記録媒体でもよい。補助記憶装置には、オペレーティングシステム（ＯＳ）、各種プログラム、及び各種テーブル等が格納される。プロセッサが補助記憶装置に格納されたプログラムを実行することで、後述するような、所定の目的に合致した各機能を実現する。なお、サーバ装置１００の一部又は全部の機能は、ＡＳＩＣ又はＦＰＧＡ等のハードウェア回路で実現されてもよい。

本例におけるサーバ装置１００は、図３に示すように、通信部１０１、制御部１０２、及び記憶部１０３を有して構成される。なお、サーバ装置１００の構成は、図３に示す例に限らず、適宜構成要素の省略、置換、追加が行われてもよい。

通信部１０１は、サーバ装置１００をネットワークに接続する。例えば、通信部１０１は、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）、又はＷｉ－Ｆｉ（
登録商標）等の通信網を利用して、ネットワーク経由でカメラ２００又はサイネージ装置３００等との通信を行う。また、通信部１０１は、５Ｇ（5th-Generation）若しくはＬＴＥ（Long Term Evolution）等の移動体通信サービス、又はＷｉ－Ｆｉ等の無線通信網を
利用して、第２のユーザのユーザ端末４００等と通信を行う。

制御部１０２は、ＣＰＵ等のプロセッサにより構成され、サーバ装置１００の制御を司る。本例における検出部１０２１、特定部１０２２、提供部１０２３、及び通知部１０２４等の機能モジュールを有する。これらの機能モジュールは、記憶部１０３に格納されているプログラムをプロセッサが実行することで実現される。

検出部１０２１は、所定のエリア内において第１のユーザと第２のユーザとがはぐれたことを検出する。具体的には、検出部１０２１は、各区画に設置されているカメラ２００
で撮影された画像の中から、第２のユーザが写っている画像（以下、「第１の画像」と記す場合もある。）を特定する。第１の画像を特定する処理は、後述の記憶部１０３に記憶されているデータ（例えば、第２のユーザの顔認証データ等）に基づいて行われる。第１の画像が特定されると、検出部１０２１は、第１の画像、及び第１の画像の対象区画に隣接する区画が撮影された画像（以下、「関連画像」と記す場合もある。）に基づいて、第２のユーザから所定の距離以内に第１のユーザが写っているかを判定する。例えば、検出部１０２１は、先ず、第１の画像及び関連画像から、第２のユーザから所定の距離以内の画像（第２のユーザを中心として半径が所定の距離となる円の内部の画像）をトリミングする。続いて、検出部１０２１は、トリミングされた画像の中に第１のユーザが写っているかを判定する。斯様な判定処理は、後述の記憶部１０３に記憶されているデータ（例えば、第１のユーザの顔認証データ）に基づいて行われる。そして、トリミングされた画像の中に第１のユーザが写っていなければ、第１のユーザと第２のユーザとがはぐれている判定する。一方、トリミングされた画像の中に第１のユーザが写っていれば、第１のユーザと第２のユーザとがはぐれていないと判定する。

なお、検出部１０２１は、トリミングされた画像の中に第１のユーザが写っていない状態が所定時間以上続いていることをもって、第１のユーザと第２のユーザとがはぐれていると判定してもよい。斯様な方法によれば、第１のユーザと第２のユーザとの合意の下で両者の距離が一時的に所定の距離より大きくなっている場合と、第１のユーザと第２のユーザとの合意無しに両者の距離が所定の距離より大きくなっている場合と、を区別することができる。

特定部１０２２は、第１のユーザと第２のユーザとがはぐれていることが検出された場合に、第１のユーザの現在位置を特定する。具体的には、特定部１０２２は、各区画に設置されているカメラ２００で撮影された画像の中から、第１のユーザが写っている画像（以下、「第２の画像」と記す場合もある。）を抽出する。第２の画像を抽出する処理は、後述の記憶部１０３に記憶されているデータ（例えば、第１のユーザの顔認証データ等）に基づいて行われる。第２の画像が抽出されると、特定部１０２２は、該第２の画像を撮影したカメラが設置されている区画（第２の画像の対象区画）を、第１のユーザの現在位置に特定する。なお、特定部１０２２は、第２の画像の対象区画に加え、当該対象区画において第１のユーザの近傍に位置する目印（例えば、建造物、看板、又は展示物等）も特定してもよい。

提供部１０２３は、特定部１０２２によって特定された第１のユーザの現在位置に基づいて、第１のユーザに対するエンターテイメントの提供を行う。具体的には、提供部１０２３は、先ず、第１のユーザの嗜好に見合ったエンターテイメントを決定する。斯様なエンターテイメントを決定する処理は、後述の記憶部１０３に記憶されているデータ（例えば、第１のユーザの嗜好情報等）に基づいて行われる。その際、例えば、第１のユーザがアニメーション等に出演している特定のキャラクタを嗜好していれば、提供部１０２３は、当該キャラクタが出演している映像を、第１のユーザの嗜好に見合ったエンターテイメントに決定する。また、第１のユーザが特定のビデオゲームを嗜好していれば、提供部１０２３は、当該ビデオゲームを、第１のユーザの嗜好に見合ったエンターテイメントに決定する。第１のユーザの嗜好に見合ったエンターテイメントが決定されると、提供部１０２３は、第１のユーザの現在位置が属する区画に設置されているサイネージ装置３００に対し、提供指令を送信する。ここでいう「提供指令」は、例えば、上記エンターテイメントをサイネージ装置３００から第１のユーザへ提供させるための指令である。なお、上記エンターテイメントをサイネージ装置３００から提供させる際に、提供部１０２３は、第２のユーザが迎えに行くまで現在位置に留まっていることを第１のユーザに促すためのメッセージを、当該サイネージ装置３００から表示させてもよい。

通知部１０２４は、特定部１０２２によって特定された第１のユーザの現在位置を、第２のユーザに通知する。具体的には、通知部１０２４は、先ず、第２の画像の対象区画を示す情報（及び、対象区画において第１のユーザの近傍に位置する目印を示す情報）を含む位置情報を生成する。続いて、通知部１０２４は、生成された位置情報を、通信部１０１を介して第２のユーザのユーザ端末４００へ送信する。位置情報の送信は、後述の記憶部１０３に記憶されているデータ（例えば、ユーザ端末４００のメールアドレス等）に基づいて行われる。なお、上記した位置情報には、エンターテイメントの提供を受けている第１のユーザを撮影した画像が含まれてもよい。これにより、第２のユーザは、サーバ装置１００により特定されたユーザが第１のユーザで間違えないかの確認を行うことができるとともに、第１のユーザの様子を把握することができる。

記憶部１０３は、各種の情報を記憶する。記憶部１０３は、例えば、ＲＡＭ、磁気ディスク、又はフラッシュメモリ等の記憶媒体により構成される。記憶部１０３には、プロセッサにより実行される各種プログラム、及び各種データ等が記憶される。本例では、記憶部１０３には、ユーザ管理ＤＢ１０３１が構築される。ユーザ管理ＤＢ１０３１は、プロセッサによって実行されるＤＢＭＳ（Database Management System）のプログラムが、補助記憶部に記憶されるデータを管理することで構築される。ユーザ管理ＤＢ１０３１は、例えば、リレーショナルデータベースである。

ユーザ管理ＤＢ１０３１は、第１のユーザと該第１のユーザに同行している第２のユーザとを関連付けたデータが格納される。ここで、ユーザ管理ＤＢ１０３１に格納されるデータの一構成例について、図４に基づいて説明する。図４は、ユーザ管理ＤＢ１０３１に格納されるデータのテーブル構成を例示する図である。ユーザ管理ＤＢ１０３１に格納されるテーブル（以下、「ユーザ情報テーブル」と記す場合もある。）は、図４に示すように、グループＩＤ、第１の顔認証データ、第２の顔認証データ、嗜好、及び連絡先等の各フィールドを有する。グループＩＤフィールドには、第１のユーザと該第１のユーザに同行している第２のユーザとを含むグループを識別するための情報（グループＩＤ）が登録される。斯様なグループＩＤは、各ユーザ情報テーブルがユーザ管理ＤＢ１０３１に登録される際に付与される。第１の顔認証データフィールドには、第１のユーザの顔を識別するための顔認証データ（以下、「第１の顔認証データ」と記す場合もある。）が登録される。第２の顔認証データフィールドには、第２のユーザの顔を識別するための顔認証データ（以下、「第２の顔認証データ」と記す場合もある。）が登録される。嗜好フィールドには、第１のユーザの好むエンターテイメントに関する情報（嗜好情報）が登録される。例えば、第１のユーザが好む特定のキャラクタを示す情報、又は第１のユーザが好む特定のビデオゲームを示す情報等が嗜好フィールドに登録される。連絡先フィールドには、第２のユーザの連絡先を示す情報が登録される。本例では、第２のユーザが携帯するユーザ端末４００のメールアドレスを示す情報が連絡先フィールドに登録される。

ここで、ユーザ情報テーブルの第１の顔認証データフィールド、第２の顔認証データフィールド、嗜好フィールド、及び連絡先フィールドに登録される情報は、第１のユーザ及び第２のユーザが所定のエリアに入場する際に登録されてもよい。その際、第１の顔認証データと第２の顔認証データとは、第１のユーザ及び第２のユーザが所定のエリアに入場する際にカメラ２００で撮影された画像から生成されてもよい。また、第１のユーザの嗜好情報と第２のユーザの連絡先に関する情報とは、第２のユーザがユーザ端末４００を介してサーバ装置１００に登録してもよい。なお、第１の顔認証データ、第２の顔認証データ、嗜好情報、及び連絡先に関する情報は、第１のユーザ及び第２のユーザが所定のエリアに入場する前に、第２のユーザによってサーバ装置１００に事前登録されてもよい。

なお、上記したようなユーザ管理ＤＢ１０３１は、外部装置で構築されてもよい。そして、サーバ装置１００と外部装置とをネットワークを介して接続することで、サーバ装置
１００が適宜にユーザ管理ＤＢ１０３１にアクセスすることができるようにしてもよい。

上記したように構成されるサーバ装置１００で実行される一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。

（処理の流れ）
次に、本例におけるサーバ装置１００で行われる処理フローについて、図５に基づいて説明する。図５は、サーバ装置１００で繰り返し実行される処理フローを示すフローチャートである。なお、図５に示す処理フローは、記憶部１０３のユーザ管理ＤＢ１０３１に登録されているグループ（第１のユーザと第２のユーザとの組合せ）毎に繰り返し実行される。

図５の処理ルーチンでは、サーバ装置１００の検出部１０２１が、各カメラ２００で撮影された画像を、通信部１０１を通じて取得する（ステップＳ１０１）。次いで、検出部１０２１は、ステップＳ１０１で取得された複数の画像の中から、第２のユーザが写っている画像（第１の画像）を特定する（ステップＳ１０２）。具体的には、検出部１０２１は、先ず、ユーザ管理ＤＢ１０３１のユーザ情報テーブルにアクセスして、第２の顔認証データフィールドに登録されている第２の顔認証データを読み出す。続いて、検出部１０２１は、ステップＳ１０１で取得した複数の画像の各々と第２の顔認証データとを照合することで、第２の顔認証データに適合する顔が写っている画像を抽出し、当該画像を第１の画像として特定する。

検出部１０２１は、ステップＳ１０２で特定された第１の画像に基づいて、第１のユーザと第２のユーザとがはぐれているかを判定する（ステップＳ１０３）。具体的には、検出部１０２１は、先ず、ステップＳ１０１で取得された複数の画像の中から、第１の画像と、第１の画像の対象区画に隣接する区画を撮影した画像（関連画像）と、を抽出する。続いて、検出部１０２１は、第１の画像及び関連画像から、第２のユーザから所定の距離以内の画像をトリミングする。また、検出部１０２１は、ステップＳ１０２で第２の顔認証データの読み出し対象となったユーザ情報テーブルから、第１の顔認証データフィールドに登録されている第１の顔認証データを読み出す。そして、検出部１０２１は、上記でトリミングされた画像と第１の顔認証データとを照合することで、トリミングされた画像の中に第１の顔認証データに適合する顔が写っているかを判定する。その際、トリミングされた画像の中に第１の顔認証データに適合する顔が写っていれば、第２のユーザから所定の距離以内の範囲に第１のユーザが存在していることになる。そのため、検出部１０２１は、第１のユーザと第２のユーザとがはぐれていないと判定する（ステップＳ１０３で否定判定）。その場合、当該処理フローが一旦終了される。一方、トリミングされた画像の中に第１の顔認証データに適合する顔が写っていなければ、第２のユーザから所定の距離以内の範囲に第１のユーザが存在していないことになる。そのため、検出部１０２１は、第１のユーザと第２のユーザとがはぐれていると判定する（ステップＳ１０３で肯定判定）。その場合、ステップＳ１０４からステップＳ１０９の処理が実行される。

なお、検出部１０２１は、前述したように、トリミングされた画像の中に第１の顔認証データに適合する顔が写っていない状態が所定時間以上続いていることをもって、第１のユーザと第２のユーザとがはぐれていると判定してもよい。その場合、第１のユーザと第２のユーザとの合意に下で両者の距離が一時的に所定の距離より大きくなった場合に、第１のユーザと第２のユーザとがはぐれていると判定されることを抑制することができる。

ステップＳ１０４では、サーバ装置１００の特定部１０２２が、ステップＳ１０１で取得された複数の画像の中から、第１のユーザが写っている画像（第２の画像）を抽出する。具体的には、特定部１０２２は、ステップＳ１０１で取得された複数の画像の各々とス
テップＳ１０３で読み出された第１の顔認証データとを照合することで、第１の顔認証データに一致する顔が写っている画像を抽出し、当該画像を第２の画像として抽出する。

ステップＳ１０５では、特定部１０２２が、ステップＳ１０４で抽出された第２の画像に基づいて、第１のユーザの現在位置を特定する。具体的には、特定部１０２２は、第２の画像を撮影したカメラ２００が設置されている区画（第２の画像の対象区画）を、第１のユーザの現在位置として特定する。斯様にして特定された第１のユーザの現在位置は、特定部１０２２から提供部１０２３へ渡される。

ステップＳ１０６では、サーバ装置１００の提供部１０２３が、第１のユーザの嗜好情報を取得する。具体的には、ステップＳ１０３で第１の顔認証データの読み出し対象となったユーザ情報テーブルから、嗜好フィールドに登録されている嗜好情報を読み出す。

ステップＳ１０７では、提供部１０２３が、第１のユーザに提供されるエンターテイメントを決定する。具体的には、提供部１０２３は、ステップＳ１０６で読み出された嗜好情報に基づいて、第１のユーザに提供されるエンターテイメントを決定する。その際、第１のユーザの嗜好情報がアニメーション等に出演している特定のキャラクタを示す情報であれば、提供部１０２３は、当該キャラクタが出演しているアニメーション等の映像を、第１のユーザの提供されるエンターテイメントに決定する。また、第１のユーザの嗜好情報が特定のビデオゲームを示す情報であれば、提供部１０２３は、当該ビデオゲームを、第１のユーザに提供されるエンターテイメントに決定する。

ステップＳ１０８では、提供部１０２３が、ステップＳ１０５で特定された区画（第１のユーザの現在位置が属する区画）に設定されているサイネージ装置３００に対し、提供指令を送信する。提供指令は、ステップＳ１０７で決定されたエンターテイメントを第１のユーザに提供するための指令である。ここで、ステップＳ１０７で決定されたエンターテイメントがアニメーション等の映像であれば、提供指令は、当該映像をサイネージ装置３００から出力させるための指令となる。その際の提供指令には、当該映像のデータが含まれてもよい。また、ステップＳ１０７で決定されたエンターテイメントがビデオゲームであれば、提供指令は、当該ビデオゲームのソフトウェアをサイネージ装置３００に実行させるための指令となる。その際の提供指令には、当該ビデオゲームのソフトウェアが含まれてもよい。上記したような提供指令を受信したサイネージ装置３００では、第１のユーザが嗜好するキャラクタが出演している映像が出力され、又は第１のユーザが嗜好するビデオゲームのソフトウェアが実行される。これにより、第１のユーザの注意をサイネージ装置３００に向けることができる。その結果、ステップＳ１０５で特定された区画から他の区画へ第１のユーザが移動してしまうことを抑制することができる。すなわち、第１のユーザを、ステップＳ１０５で特定された区画に足止めしておくことができる。

なお、提供指令には、第２のユーザが迎えに行くまで現在位置に留まっていることを促すためのメッセージを、サイネージ装置３００から出力させるための指令が含まれてもよい。上記したようなメッセージがサイネージ装置３００から出力されると、ステップＳ１０５で特定された区画から他の区画へ第１のユーザが移動してしまうことをより確実に抑制することができる。

ステップＳ１０９では、サーバ装置１００の通知部１０２４が、第２のユーザのユーザ端末４００に対し、第１のユーザの現在位置を示す情報（位置情報）を送信する。具体的には、通知部１０２４は、先ず、ステップＳ１０２で第２の顔認証データの読み出し対象となったユーザ情報テーブルから、連絡先フィールドに登録されている情報（ユーザ端末４００のメールアドレス）を読み出す。次いで、通知部１０２４は、通信部１０１から上記メールアドレスへ向けて、第１のユーザの位置情報を送信する。斯様な位置情報を受信
したユーザ端末４００では、第１のユーザの現在位置を示す情報（第１のユーザが位置している区画を示す情報）がディスプレイ又はスピーカ等から出力される。なお、サーバ装置１００からユーザ端末４００へ送信される位置情報には、第２のユーザが位置している区画から第１のユーザが位置している区画までの経路を示す地図データ、およびまたは第１のユーザを撮影した画像が含まれてもよい。位置情報に含められる第１のユーザの画像は、ステップＳ１０４で抽出された第２の画像でもよく、サイネージ装置３００に併設されるカメラで撮影された画像でもよい。その場合、第２のユーザがより速やかに第１のユーザの現在位置へたどり着いたり、第２のユーザが第１のユーザの現在の様子を把握したりすることが可能になる。

図５の処理フローによれば、所定のエリア内において第１のユーザが第２のユーザからはぐれてしまった場合に、第１のユーザの現在位置を速やか且つ効率的に特定することができる。また、図５の処理フローによれば、第１のユーザの現在位置において該第１のユーザの嗜好に見合ったエンターテイメントを提供することで、第１のユーザを現在位置に足止めしておくことができる。これにより、第２のユーザが第１のユーザを迎えに行くまでの間に、第１のユーザが現在位置から移動してしまうことを抑制することもできる。その結果、第１のユーザと第２のユーザとを効率的に合流させることができる。

＜変形例１＞
前述した実施形態では、サイネージ装置３００を利用して、第１のユーザにエンターテイメントを提供する例について述べたが、動物又はキャラクタを模した自律走行型のロボットを利用して、第１のユーザにエンターテイメントを提供してもよい。その場合、ユーザ情報テーブルの嗜好フィールドには、第１のユーザが好む動物又はキャラクタを示す情報が登録されてもよい。そして、第１のユーザに提供されるエンターテイメントを決定する際に、提供部１０２３は、第１のユーザの嗜好情報に基づいて、ロボットを決定してもよい。例えば、第１の情報の嗜好情報が特定の動物を示す情報である場合は、提供部１０２３は、当該動物を模したロボットを選択する。続いて、提供部１０２３は、選択されたロボットを、第１のユーザの現在位置まで自律走行させるための運行指令を生成する。その際の運行指令は、例えば、第１のユーザの現在位置までロボットを自律走行させるための指令、及び第１のユーザの現在位置においてロボットを第１のユーザと遊ばせるための指令等を含む。斯様な運行指令は、通信部１０１を介して、サーバ装置１００からロボットへ送信される。

上記運行指令を受信したロボットは、当該運行指令に従って運行することで、第１のユーザの現在位置へ移動する。そして、第１のユーザの現在位置において、ロボットが第１のユーザと一緒に遊ぶことで、第１のユーザを現在位置に足止めすることができる。

なお、上記ロボットがマイクロモビリティの機能を有する場合は、提供部１０２３は、以下の第１から第３の指令を含む運行指令を生成し、生成された運行指令を対象のロボットへ送信してもよい。
（第１の指令）第１のユーザの現在位置までロボットを自律走行させるための指令
（第２の指令）第１のユーザの現在位置においてロボットに第１のユーザを乗車させるための指令
（第３の指令）第１のユーザの現在位置から第２のユーザの位置までロボットを自律走行させるための指令

その場合、第１のユーザを現在位置に足止めさせておくことはできないものの、第１のユーザの不用意な移動を抑制することができるとともに、第１のユーザと第２のユーザとの効率的な合流を実現することができる。

＜変形例２＞
前述した実施形態では、第１のユーザの位置情報を、ユーザ端末４００を介して第２のユーザに通知する例について述べたが、第２のユーザの最寄りに位置するサイネージ装置３００を介して、第１のユーザの位置情報が第２のユーザに通知されてもよい。

本変形例では、第１のユーザの位置情報を第２のユーザに通知する際に、通知部１０２４が、先ず、第２のユーザの現在位置を特定する。その際、通知部１０２４は、前述の第１の画像を撮影したカメラ２００が設置されている区画（第１の画像の対象区画）を、第２のユーザの現在位置に特定してもよい。そして、通知部１０２４は、特定された区画に設置されているサイネージ装置３００に、第１のユーザの位置情報を表示させてもよい。これにより、第２のユーザがユーザ端末４００を携帯していない場合、又はユーザ端末４００の連絡先が不明な場合等であっても、第１のユーザの位置情報を第２のユーザに知らせることができる。

また、第１のユーザの位置情報は、第２のユーザのユーザ端末４００に送信されるとともに、第２のユーザの最寄りのサイネージ装置３００から表示されるようにしてもよい。その場合、第２のユーザがユーザ端末４００を携帯しているか否かに関わらず、第１のユーザの位置情報を第２のユーザに通知することができる。

＜変形例３＞
前述した実施形態では、カメラ２００で撮影された画像に基づいて、第１のユーザと第２のユーザとがはぐれたことを検出する例について述べたが、第２のユーザからの要求に基づいて第１のユーザと第２のユーザとがはぐれたことを検出してもよい。

本変形例では、第２のユーザは、ユーザ端末４００又は最寄りのサイネージ装置３００を利用して、サーバ装置１００に対する捜索要求を行う。ここでいう捜索要求は、第２のユーザとはぐれてしまった第１のユーザを捜索するための要求である。斯様な捜索要求には、例えば、当該第２のユーザと第１のユーザとに割り当てられたグループＩＤ、又は第２のユーザの顔画像が含まれる。第２のユーザの顔画像は、ユーザ端末４００で撮影された画像でもよく、又はサイネージ装置３００に併設されるカメラで撮影された画像でもよい。

上記捜索要求をサーバ装置１００が受け付けると、検出部１０２１が、ユーザ管理ＤＢ１０３１にアクセスして、第１のユーザと第２のユーザとが関連付けられているユーザ情報テーブルを特定する。その際、捜索要求にグループＩＤが含まれていれば、検出部１０２１は、ユーザ管理ＤＢ１０３１に格納されているユーザ情報テーブルの中から、当該グループＩＤと一致する情報がグループＩＤフィールドに登録されているユーザ情報テーブルを特定すればよい。また、捜索要求に第２のユーザの顔画像が含まれている場合は、検出部１０２１は、ユーザ管理ＤＢ１０３１に格納されているユーザ情報テーブルの中から、当該顔画像に適合する顔認証データが第２の顔認証データフィールドに登録されているユーザ情報テーブルを特定すればよい。斯様にしてユーザ情報テーブルが特定されると、前述の実施形態と同様の手順により、第１のユーザの現在位置の特定、第１のユーザに対するエンターテイメントの提供、及び第２のユーザに対する位置情報の通知を行うことができる。

＜その他＞
上記した実施形態及び変形例はあくまでも一例であって、本開示はその要旨を逸脱しない範囲内で適宜変更して実施し得る。例えば、サーバ装置１００で行われる処理の一部又は全ては、ユーザ端末４００で行われてもよい。その場合、第１のユーザにエンターテイメントを提供するための処理のみがサーバ装置１００で行われ、その他の処理がユーザ端
末４００で行われてもよい。また、第１のユーザにエンターテイメントを提供するための処理に加え、コンピュータの演算負荷が大きくなり易い処理（例えば、カメラ２００で撮影された画像と第１の顔認証データとを照合する処理）がサーバ装置１００で行われ、その他の処理がユーザ端末４００で行われてもよい。

また、本開示において説明した処理及び手段は、技術的な矛盾が生じない限りにおいて、自由に組み合わせて実施することができる。例えば、実施形態と変形例１－３は、可能な限り組み合わせて実施することができる。さらに、１つの装置が行うものとして説明した処理が、複数の装置によって分担して実行されてもよい。あるいは、異なる装置が行うものとして説明した処理が、１つの装置によって実行されても構わない。コンピュータシステムにおいて、各機能をどのようなハードウェア構成で実現するかは柔軟に変更可能である。

また、本開示は、上記の実施形態で説明した機能を実装したコンピュータプログラム（情報処理プログラム）をコンピュータに供給し、当該コンピュータが有する１つ以上のプロセッサがプログラムを読み出して実行することによっても実現可能である。このようなコンピュータプログラムは、コンピュータのシステムバスに接続可能な非一時的なコンピュータ可読記憶媒体によってコンピュータに提供されてもよく、又はネットワークを介してコンピュータに提供されてもよい。非一時的なコンピュータ可読記憶媒体は、データ及びプログラム等の情報を電気的、磁気的、光学的、機械的、又は化学的作用によって蓄積し、コンピュータ等から読み取ることができる記録媒体である。斯様な記録媒体としては、例えば、磁気ディスク（フロッピー（登録商標）ディスク、又はハードディスクドライブ（ＨＤＤ）等）、光ディスク（ＣＤ－ＲＯＭ、又はＤＶＤディスク・ブルーレイディスク等）等の任意のタイプのディスクを例示することができる。また、記録媒体は、読み込み専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、ＥＰＲＯＭ、ＥＥＰＲＯＭ、磁気カード、フラッシュメモリ、光学式カード、又はＳＳＤ（Solid State Drive）
等の媒体でもよい。

１００ サーバ装置
１０１ 通信部
１０２ 制御部
１０２１ 検出部
１０２２ 特定部
１０２３ 提供部
１０２４ 通知部
１０３ 記憶部
１０３１ ユーザ管理ＤＢ
２００ カメラ
３００ サイネージ装置
４００ ユーザ端末

Claims (20)

1. 所定のエリア内に設置される複数のカメラと、
   前記所定のエリアに入場している第１のユーザと該第１のユーザに同行するユーザである第２のユーザとを関連付けるデータを記憶する記憶装置と、
   前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理と、前記複数のカメラにより撮影される画像と前記記憶装置に記憶されているデータとに基づいて、前記第１のユーザの現在位置を特定する処理と、前記特定された現在位置において前記第１のユーザに対するエンターテイメントを提供する処理と、前記特定された現在位置に関する情報である位置情報を、前記第２のユーザに通知する処理と、を実行する制御装置と、
   を備える、情報処理システム。
2. 前記エンターテイメントを前記第１のユーザに提供する処理において、前記制御装置は、前記第１のユーザの嗜好に適したデジタルコンテンツを、前記第１のユーザの現在位置の近傍に配置されているサイネージ装置から出力させる、
   請求項１に記載の情報処理システム。
3. 前記エンターテイメントを前記第１のユーザに提供する処理において、前記制御装置は、自律走行可能な遊具を、前記第１のユーザの現在位置に向けて運行させる、
   請求項１に記載の情報処理システム。
4. 前記位置情報を前記第２のユーザに通知する処理において、前記制御装置は、前記複数のカメラで撮影される画像のうち、前記エンターテイメントの提供を受けている前記第１のユーザが撮影されている画像を、前記位置情報とともに前記第２のユーザに通知する、請求項１から３の何れか１項に記載の情報処理システム。
5. 前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理において、前記制御装置は、前記複数のカメラにより撮影される画像に基づいて、前記第２のユーザから所定の距離以内に前記第１のユーザが存在しないことを検出する、
   請求項１から４の何れか１項に記載の情報処理システム。
6. 前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理において、前記制御装置は、前記複数のカメラにより撮影される画像に基づいて、前記第２のユーザから所定の距離以内に前記第１のユーザが存在しない状態が所定時間以上続いていることを検出する、
   請求項１から４の何れか１項に記載の情報処理システム。
7. 前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理において、前記制御装置は、前記第１のユーザを捜索するための要求を、前記第２のユーザから取得する、
   請求項１から４の何れか１項に記載の情報処理システム。
8. 前記記憶装置は、前記第１のユーザの顔認証データと前記第２のユーザの顔認証データとを関連付けたデータを記憶する、
   請求項１から７の何れか１項に記載の情報処理システム。
9. 前記第１のユーザの現在位置を特定する処理において、前記制御装置は、前記記憶装置に記憶されている前記第１のユーザの顔認証データと前記複数のカメラにより撮影される画像とに基づいて、前記第１のユーザの現在位置を特定する、
   請求項８に記載の情報処理システム。
10. 前記記憶装置は、前記第１のユーザの顔認証データと前記第２のユーザの顔認証データとに、前記第１のユーザの嗜好に関する情報を更に関連付けたデータを記憶しており、
    前記エンターテイメントを前記第１のユーザに提供する処理において、前記制御装置は、前記第１のユーザの嗜好に関する情報に基づいて、前記第１のユーザに提供するエンターテイメントを決定する、
    請求項８又は９に記載の情報処理システム。
11. 所定のエリアに入場している第１のユーザと該第１のユーザに同行するユーザである第２のユーザとを関連付けるデータを記憶する記憶部と、
    前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理と、前記所定のエリア内に設置される複数のカメラにより撮影される画像と前記記憶部に記憶されているデータとに基づいて、前記第１のユーザの現在位置を特定する処理と、前記特定された現在位置において前記第１のユーザに対するエンターテイメントを提供する処理と、前記特定された現在位置に関する情報である位置情報を、前記第２のユーザに通知する処理と、を実行する制御部と、
    を備える、情報処理装置。
12. 前記エンターテイメントを前記第１のユーザに提供する処理において、前記制御部は、前記第１のユーザの嗜好に適したデジタルコンテンツを、前記第１のユーザの現在位置の近傍に配置されているサイネージ装置から出力させる、
    請求項１１に記載の情報処理装置。
13. 前記エンターテイメントを前記第１のユーザに提供する処理において、前記制御部は、自律走行可能な遊具を、前記第１のユーザの現在位置に向けて運行させる、
    請求項１１に記載の情報処理装置。
14. 前記位置情報を前記第２のユーザに通知する処理において、前記制御部は、前記複数のカメラで撮影される画像のうち、前記エンターテイメントの提供を受けている前記第１のユーザが撮影される画像を、前記位置情報とともに前記第２のユーザに通知する、
    請求項１１から１３の何れか１項に記載の情報処理装置。
15. 前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理において、前記制御部は、前記複数のカメラにより撮影される画像に基づいて、前記第２のユーザから所定の距離以内に前記第１のユーザが存在しないことを検出する、
    請求項１１から１４の何れか１項に記載の情報処理装置。
16. 前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理において、前記制御部は、前記複数のカメラにより撮影される画像に基づいて、前記第２のユーザから所定の距離以内に前記第１のユーザが存在しない状態が所定時間以上続いていることを検出する、
    請求項１１から１４の何れか１項に記載の情報処理装置。
17. 前記第１のユーザと前記第２のユーザとがはぐれたことを検出する処理において、前記制御部は、前記第１のユーザを捜索するための要求を、前記第２のユーザから取得する、請求項１１から１４の何れか１項に記載の情報処理装置。
18. 前記記憶部は、前記第１のユーザの顔認証データと前記第２のユーザの顔認証データとを関連付けたデータを記憶する、
    請求項１１から１７の何れか１項に記載の情報処理装置。
19. 前記記憶部は、前記第１のユーザの顔認証データと前記第２のユーザの顔認証データとに、前記第１のユーザの嗜好に関する情報を更に関連付けたデータを記憶しており、
    前記エンターテイメントを前記第１のユーザに提供する処理において、前記制御部は、前記第１のユーザの嗜好に関する情報に基づいて、前記第１のユーザに提供するエンターテイメントを決定する、
    請求項１８に記載の情報処理装置。
20. 所定のエリアに入場している第１のユーザと該第１のユーザに同行するユーザである第２のユーザとがはぐれたことを検出するステップと、
    前記第１のユーザと前記第２のユーザとを関連付けるデータを取得するステップと、
    前記所定のエリア内に設置される複数のカメラにより撮影される画像と、前記第１のユーザと前記第２のユーザとを関連付けるデータと、に基づいて、前記第１のユーザの現在位置を特定するステップと、
    前記特定された現在位置において前記第１のユーザに対するエンターテイメントを提供するステップと、
    前記特定された現在位置に関する情報である位置情報を、前記第２のユーザに通知するステップと、
    をコンピュータが実行する、
    情報処理方法。

Images