JP2018085628A - サイネージシステム、携帯端末装置およびプログラム - Google Patents

Abstract

【課題】ディスプレイに表示させた配信映像で利用者が遊んだことを思い出のコンテンツとして残すことができ、さらに、遊んだ場所や日時に応じた様々な撮影映像を利用者が閲覧できるようにして、複数のディスプレイを有効活用することができるようにする。【解決手段】配信映像を表示するサイネージ１と、このサイネージに対峙した利用者を撮影するカメラ２と、サイネージおよびカメラにネットワークを介して接続されたサーバ５，６と、を備え、サーバは、サイネージに対峙する利用者を識別すると、サイネージへの配信映像の表示とカメラによる利用者の撮影とを制御し、利用者の遊覧中の行動を撮影した撮影映像を前記カメラ装置より取得して、利用者ごとに撮影映像を蓄積する。さらに、サーバは、利用者、サイネージおよびカメラが設置された場所、およびその場所を利用者が訪れた日時に対応させて撮影映像を蓄積する。【選択図】図１

Description

本発明は、コンテンツを表示するディスプレイ装置と、このディスプレイ装置にネットワークを介して接続されたサーバ装置と、を備えたサイネージシステム、利用者が所持する携帯端末装置、および携帯端末装置のプロセッサに実行させるプログラムに関するものである。

例えばテーマパークでは、利用者が長い行列を作って長時間待たされることがあり、特に人気のあるアトラクションでは、待ち時間が数時間に及ぶことも珍しくない。このような長時間の行列待ちは、利用者の満足度を著しく低下させる。そこで、行列待ちの利用者、特に子供が退屈せずに待ち時間を有意義に過ごすことができるような技術が望まれる。

このような利用者に待ち時間を有意義に過ごさせる技術として、従来、ゲームのコンテンツをディスプレイに表示して、携帯端末を用いて利用者がゲームに参加するようにした技術が知られている（特許文献１参照）。また、ゲームのコンテンツをディスプレイに表示して、ＲＦＩＤタグが設けられた玩具を用いて利用者がゲームに参加するようにした技術が知られている（特許文献１参照）。

特開２００２−３１２５２４号公報 特開２０１０−１５２６４７号公報

さて、ディスプレイに表示させたコンテンツ（配信映像）で子供が遊んだ場合、その状況をカメラで撮影して、後日、自宅などで映像を閲覧することができるようにすると、遊んだことを思い出として残すことができるため、利用者の満足度を高めることができる。また、複数の場所にディスプレイを設けた場合、遊んだ場所や日時に応じた様々な映像を利用者が閲覧できるようにすると、複数のディスプレイを有効活用することができ、利用者をより一層楽しませることができる。

しかしながら、前記従来の技術では、ディスプレイに表示させた配信映像による遊びがその場限りの一時的なものであり、遊んだことを思い出として残すことができず、また、遊んだ場所や日時に応じた様々な映像を利用者が閲覧することができず、複数のディスプレイを有効活用することができないという問題があった。

そこで、本発明は、ディスプレイに表示させた配信映像で利用者が遊んだことを思い出として自身のコンテンツとして残すことができ、さらに、遊んだ場所や日時に応じた様々な映像を利用者が閲覧できるようにして、複数のディスプレイを有効活用することができるサイネージシステム、携帯端末装置およびプログラムを提供することを主な目的とする。

本発明のサイネージシステムは、配信映像を表示するディスプレイ装置と、このディスプレイ装置にネットワークを介して接続されたサーバ装置と、を備えたサイネージシステムであって、前記サーバ装置にネットワークを介して接続されて、前記ディスプレイ装置に対峙した利用者を撮影するカメラ装置を、さらに備え、前記サーバ装置は、前記ディスプレイ装置に対峙する利用者を識別すると、前記ディスプレイ装置への前記配信映像の表示と前記カメラ装置による利用者の撮影とを制御し、利用者の遊覧中の行動を撮影した撮影映像を前記カメラ装置より取得して、利用者ごとに前記撮影映像を記憶部に蓄積する構成とする。

また、本発明の携帯端末装置は、利用者が所持し、前記サイネージシステムへアクセス可能な携帯端末装置であって、前記サーバ装置に利用者を登録する登録モードと、前記サーバ装置の前記記憶部に蓄積された利用者の遊覧中の行動を撮影した前記撮影映像を再生する閲覧モードと、前記サーバ装置の前記記憶部に蓄積された前記撮影映像を他の利用者と共有する共有モードと、を実行するアプリケーションプログラムが搭載されてなる構成とする。

また、本発明のプログラムは、利用者が所持し、前記サイネージシステムへアクセス可能な携帯端末装置のプロセッサに実行させるプログラムであって、前記サーバ装置に利用者を登録する登録モードと、前記サーバ装置の前記記憶部に蓄積された利用者の遊覧中の行動を撮影した前記撮影映像を再生する閲覧モードと、前記サーバ装置の前記記憶部に蓄積された前記撮影映像を他の利用者と共有する共有モードと、を前記プロセッサに実行させる構成とする。

本発明によれば、ディスプレイ装置に表示した配信映像に基づいて、カメラの撮影で取得した撮影映像、すなわち、利用者の遊覧中の行動を撮影した撮影映像を利用者に提示することができる。これにより、ディスプレイ装置に表示させた配信映像で利用者が遊んだ思い出のコンテンツを残すことができる。

本実施形態に係るサイネージシステムの全体構成図 サブアトラクションエリアの状況を示す説明図 アトラクション管理サーバ５の概略構成を示すブロック図 中央管理サーバ６の概略構成を示すブロック図 中央管理サーバ６の記憶部４３に記憶される管理テーブルの登録内容を示す説明図 サイネージ１に表示される画面を示す説明図 携帯端末７に表示される画面を示す説明図 利用者がユーザ登録を行う際のサイネージシステムの動作手順を示すシーケンス図 利用者がサブアトラクションエリアに入場する際のサイネージシステムの動作手順を示すシーケンス図 利用者がサブアトラクションエリアに滞在している間のサイネージシステムの動作手順を示すシーケンス図 利用者が携帯端末７でコンテンツを閲覧する際のサイネージシステムの動作手順を示すシーケンス図

前記課題を解決するためになされた第１の発明は、配信映像を表示するディスプレイ装置と、このディスプレイ装置にネットワークを介して接続されたサーバ装置と、を備えたサイネージシステムであって、前記サーバ装置にネットワークを介して接続されて、前記ディスプレイ装置に対峙した利用者を撮影するカメラ装置を、さらに備え、前記サーバ装置は、前記ディスプレイ装置に対峙する利用者を識別すると、前記ディスプレイ装置への前記配信映像の表示と前記カメラ装置による利用者の撮影とを制御し、利用者の遊覧中の行動を撮影した撮影映像を前記カメラ装置より取得して、利用者ごとに前記撮影映像を記憶部に蓄積する構成とする。

これによると、ディスプレイ装置に表示した配信映像に基づいて、カメラの撮影で取得した撮影映像、すなわち、利用者の遊覧中の行動を撮影した撮影映像を利用者に提示することができる。これにより、ディスプレイ装置に表示させた配信映像で利用者が遊んだ思い出のコンテンツを残すことができる。

また、第２の発明は、前記ディスプレイ装置および前記カメラ装置は、施設内の複数の場所にそれぞれ設置され、前記サーバ装置は、利用者、前記場所、およびその場所を利用者が訪れた日時に対応させて前記撮影映像を蓄積する構成とする。

これによると、思い出のコンテンツとして利用者、場所および日時に対応させて蓄積するため、利用者、場所および日時に応じた様々な撮影映像を利用者に提示することができるようになり、複数のディスプレイ装置を有効活用することができる。

また、第３の発明は、利用者が複数の前記ディスプレイ装置を順に見て回るように、遊覧エリア内に複数の前記ディスプレイ装置が設置され、前記サーバ装置は、複数の前記ディスプレイ装置に互いに連携する前記配信映像を表示する構成とする。

これによると、遊覧エリア内の複数のディスプレイ装置に互いに連携する配信映像が表示されるため、利用者をより一層楽しませることができる。

また、第４の発明は、前記サーバ装置は、前記カメラ装置で撮影された前記撮影映像から抽出された利用者に関する情報に基づいて前記配信映像を生成して、前記ディスプレイ装置に配信する構成とする。

これによると、利用者が映る映像から利用者に特化した独自の配信映像が生成されるため、利用者をより一層楽しませることができる。

また、第５の発明は、前記サーバ装置は、前記カメラ装置で撮影された前記撮影映像に基づいて、利用者の身体の動きを検出して、前記配信映像として、アバターが利用者と同じ動作を行う映像を生成する構成とする。

これによると、利用者がキャラクターと一体になったような感覚を味わうことができる。

また、第６の発明は、前記サーバ装置は、前記カメラ装置で撮影された映像に基づいて、利用者の服装の特徴を抽出して、前記配信映像として、利用者と同じ服装をしたキャラクターの映像を生成する構成とする。

これによると、キャラクターに対する利用者の親近感を高めることができる。

また、第７の発明は、前記ディスプレイ装置および前記カメラ装置は、行列待ちが発生する第１のエリアに隣接する第２のエリアに設置される構成とする。

これによると、家族などのグループで施設に来場した場合に、利用者（例えば子供）の同行者（例えば保護者）が行列に並び、利用者が同行者と分かれて第２のエリアで遊ぶことができる。

また、第８の発明は、前記サーバ装置は、所定の統合条件に基づいて、同一の利用者に関する前記撮影映像を統合する構成とする。

これによると、利用者の撮影映像を一連のコンテンツとしてまとめて閲覧することができる。この場合、携帯端末などの利用者端末を用いて利用者が統合条件を指定することができるようにするとよい。

また、第９の発明は、前記ディスプレイ装置および前記カメラ装置は、施設内の複数の場所にそれぞれ設置され、前記統合条件は、前記場所、およびその場所を利用者が訪れた日時の少なくともいずれか一つに関するものである構成とする。

これによると、場所や日時を基準にしてコンテンツを統合することができる。これにより、特定日に訪れた複数の場所ごとのコンテンツをまとめて閲覧したり、過去数年分の特定日のコンテンツをまとめて閲覧したり、特定期間のコンテンツをまとめて閲覧したりすることができる。

また、第１０の発明は、利用者が所持し、前記サイネージシステムへアクセス可能な携帯端末装置であって、前記サーバ装置に利用者を登録する登録モードと、前記サーバ装置の前記記憶部に蓄積された利用者の遊覧中の行動を撮影した前記撮影映像を再生する閲覧モードと、前記サーバ装置の前記記憶部に蓄積された前記撮影映像を他の利用者と共有する共有モードと、を実行するアプリケーションプログラムが搭載されてなる構成とする。

これによると、第１の発明と同様に、ディスプレイ装置に表示させた配信映像で利用者が遊んだ思い出のコンテンツを残すことができる。また、携帯端末装置を用いてサーバ装置に利用者を登録することができる。また、利用者の遊覧中の行動を撮影した前記撮影映像を自ら再生したり、他の利用者との間で共有したりすることができる。

また、第１１の発明は、利用者が所持し、前記サイネージシステムへアクセス可能な携帯端末装置のプロセッサに実行させるプログラムであって、前記サーバ装置に利用者を登録する登録モードと、前記サーバ装置の前記記憶部に蓄積された利用者の遊覧中の行動を撮影した前記撮影映像を再生する閲覧モードと、前記サーバ装置の前記記憶部に蓄積された前記撮影映像を他の利用者と共有する共有モードと、を前記プロセッサに実行させる構成とする。

これによると、第１の発明と同様に、ディスプレイ装置に表示させた配信映像で利用者が遊んだ思い出のコンテンツを残すことができる。また、携帯端末装置を用いてサーバ装置に利用者を登録することができる。また、利用者の遊覧中の行動を撮影した前記撮影映像を自ら再生したり、他の利用者との間で共有したりすることができる。

以下、本発明の実施の形態を、図面を参照しながら説明する。

図１は、本実施形態に係るサイネージシステムの全体構成図である。

このサイネージシステムは、テーマパークのアトラクションで行列待ちする利用者、特に子供が退屈せずに待ち時間を有意義に過ごすことができるように、サイネージ１にキャラクターなどの配信映像を表示するものであり、サイネージ１（ディスプレイ装置）と、カメラ２（カメラ装置）と、リーダー３と、入口ゲート４と、アトラクション管理サーバ５（サーバ装置）と、中央管理サーバ６（サーバ装置）と、携帯端末７（携帯端末装置）と、を備えている。

サイネージ１、カメラ２およびリーダー３は、サブアトラクションエリアに設置されている。このサブアトラクションエリアは、アトラクションエリアに併設されるものであり、テーマパーク内には複数のサブアトラクションエリアが設けられており、この複数のサブアトラクションエリアの各々に、サイネージ１、カメラ２およびリーダー３が設置されている。サイネージ１、カメラ２およびリーダー３と、アトラクション管理サーバ５とは、エリア内ネットワークを介して接続されている。なお、図１に示す例では、カメラ２およびリーダー３がサイネージ１を介してアトラクション管理サーバ５に接続されている。

サイネージ１は、液晶表示パネルなどからなる表示部と、通信部と、を備えており、アトラクション管理サーバ５から配信される配信映像を表示する。なお、表示部をタッチパネルディスプレイで構成して、利用者が画面を操作できるようにしてもよい。また、サイネージ１に、音声を出力するスピーカを設けて、利用者に話しかけるようにしてもよい。

カメラ２は、サイネージ１の前のエリアを撮影する。これにより、サイネージ１に対峙してサイネージ１の画面を見る利用者が撮影される。

リーダー３は、携帯端末７に表示された認証情報（例えば２次元コード）を読み取る。この認証情報はアトラクション管理サーバ５を介して中央管理サーバ６に送信され、中央管理サーバ６において認証情報を用いてユーザ認証が行われ、ユーザ認証が成功すると、入口ゲート４が開放され、利用者がサブアトラクションエリアに入場することができる。

アトラクション管理サーバ５は、サブアトラクションエリアごとに設けられ、１つのサブアトラクションエリアに設置されたサイネージ１およびカメラ２を制御する。このアトラクション管理サーバ５は、中央管理サーバ６から配信される配信映像をサイネージ１に配信する。また、カメラ２から送信される撮影映像を受信する。また、中央管理サーバ６から配信される基本となる配信映像から、カメラ２で撮影された撮影映像に基づいて独自の配信映像を生成してサイネージ１に配信する。

中央管理サーバ６は、利用者が携帯端末７またはＰＣ（図示せず）でユーザ登録の操作を行うことで取得したユーザ登録情報を管理し、このユーザ登録情報を参照して、リーダー３で携帯端末７から取得した認証情報に基づいてユーザ認証を行う。また、中央管理サーバ６は、利用者に関するコンテンツ、すなわち、サイネージ１に表示した配信映像、およびカメラ２の撮影で取得した撮影映像を利用者および日時などに対応付けて管理する。

携帯端末７は、施設の利用者が所持するものであり、スマートフォンやタブレット端末などの携帯デバイスである。携帯端末７および中央管理サーバ６はネットワークを介して接続されている。このネットワークは、ＷｉＦｉ（登録商標）などの無線ＬＡＮ通信や、ＬＴＥ（Long Term Evolution）などのセルラー通信などによる無線通信網、およびインターネットなどにより構成される。

この携帯端末７には、ユーザ登録やコンテンツ閲覧やコンテンツ共有に関するアプリケーションがインストールされる。このアプリケーションには、ユーザ登録を行う登録モードと、中央管理サーバ６に蓄積された利用者のコンテンツを閲覧する閲覧モードと、中央管理サーバ６に蓄積された利用者のコンテンツを他の利用者と共有する共有モードと、がある。

次に、サブアトラクションエリアについて説明する。図２は、サブアトラクションエリアの状況を示す説明図である。

サブアトラクションエリア（第２のエリア）は、アトラクションエリア（第１のエリア）に隣接して設けられている。また、利用者が行列待ちする待ちエリアが、アトラクションエリアに隣接して設けられている。利用者（子供）は同行者（保護者）と分かれて、サブアトラクションエリアに入場する。同行者は待ちエリアで行列に並ぶ。サブアトラクションエリアで遊んだ利用者は、出口ゲート１１から退場して同行者と合流してアトラクションエリアに進む。

サブアトラクションエリアの入口ゲート４には、リーダー３が設置されている。利用者は、携帯端末７に表示させた２次元コードをリーダー３にかざすチェックインの操作を行い、リーダー３で読み取った認証情報が中央管理サーバ６に送信され、中央管理サーバ６において認証情報を用いたユーザ認証が成功すると、入口ゲート４が開放され、利用者がサブアトラクションエリアに入場することができる。

入口ゲート４の近傍には、サイネージ１およびカメラ２が設置されている。サイネージ１には、チェックインの操作を促す案内のコンテンツが表示される。カメラ２は、サイネージ１を見る人物を撮影し、アトラクション管理サーバ５において、カメラ２の映像を用いた顔登録が行われる。このとき、リーダー３を用いたユーザ認証で取得した利用者ＩＤが顔登録情報と対応付けられる。

サブアトラクションエリアの内部には、利用者が歩く経路に沿って複数のサイネージ１が設置されており、利用者は、サブアトラクションエリア内を遊覧する、すなわち、複数のサイネージ１を順に見て回ることができるようになっている。図２に示す例では、サイネージ１が設置されたスポットが３つ設けられている。

ここで、複数のサイネージ１には、互いに連携する配信映像が表示される。例えばダンス練習に関する配信映像であれば、ダンスを段階的に教習する配信映像がサイネージ１に順に表示され、利用者はダンスを段階的に習得することができる。図２に示す例では、キャラクターが手本となるダンスを踊る配信映像がサイネージ１に表示されている。

複数のサイネージ１の各々にはカメラ２が併設されており、カメラ２は、サイネージ１に対峙してそのサイネージ１に表示される配信映像に応じて行動する利用者を撮影する。例えばダンス練習に関する配信映像であれば、ダンスを踊る利用者が撮影される。

次に、アトラクション管理サーバ５の概略構成について説明する。図３は、アトラクション管理サーバ５の概略構成を示すブロック図である。

アトラクション管理サーバ５は、通信部２１と、制御部２２と、記憶部２３と、を備えている。

通信部２１は、エリア内ネットワークを介してサイネージ１およびカメラ２との間で通信を行う。また、通信部２１は、外部ネットワークを介して中央管理サーバ６との間で通信を行う。

記憶部２３は、中央管理サーバ６から配信された配信映像や、カメラ２から送信された撮影映像や、制御部２２で実行されるプログラムなどを記憶する。

制御部２２は、行動認識部３１と、服装認識部３２と、配信映像生成部３３と、人物認識部３４と、を備えている。この制御部２２はプロセッサで構成され、制御部２２の各部は、記憶部２３に記憶されたプログラム（インストラクション）をプロセッサに実行させることで実現される。

行動認識部３１は、カメラ２の撮影映像に基づいて、利用者の行動（動作）を認識する。本実施形態では、利用者の身体の動きを検出し、利用者と同じ動作をアバターに行わせるために必要となる情報、例えば手足の動きなどに関する情報を取得する。

服装認識部３２は、カメラ２の撮影映像に基づいて、利用者の服装を認識する。本実施形態では、利用者の着衣を検出し、キャラクターに利用者と同じ服装をさせるために必要となる情報、例えば着衣の色や種類などに関する情報を取得する。

配信映像生成部３３は、中央管理サーバ６から配信される基本となる配信映像から、カメラ２の撮影映像に基づいて独自の配信映像を生成する。本実施形態では、行動認識部３１の認識結果に基づいて、キャラクターのアバターが利用者と同じ動作を行う映像を生成する。また、服装認識部３２の認識結果に基づいて、利用者と同じ服装をしたキャラクターが踊る映像を生成する。

人物認識部３４は、入口ゲート４の近傍に設置されたカメラ２の映像から、利用者の顔画像の特徴情報を抽出して、その特徴情報を登録する顔登録を行う。また、サブアトラクションエリア内の各スポットに設置されたカメラ２の映像から、利用者の顔画像の特徴情報を抽出して、登録された特徴情報と比較して、サイネージ１に対峙する利用者を識別する顔照合を行う。これにより、サイネージ１に対峙する利用者を認識することができる。

次に、中央管理サーバ６の概略構成について説明する。図４は、中央管理サーバ６の概略構成を示すブロック図である。

中央管理サーバ６は、通信部４１と、制御部４２と、記憶部４３と、を備えている。

通信部４１は、外部ネットワークを介して携帯端末７との間で通信を行う。また、通信部２１は、外部ネットワークを介してアトラクション管理サーバ５との間で通信を行う。

記憶部４３は、ユーザ登録情報や、管理テーブル（図５参照）や、制御部４２で実行されるプログラムなどを記憶する。

制御部４２は、遊覧情報管理部５１と、ユーザ認証部５２と、コンテンツ統合部５３と、と、を備えている。この制御部４２はプロセッサで構成され、制御部４２の各部は、記憶部４３に記憶されたプログラム（インストラクション）をプロセッサに実行させることで実現される。

遊覧情報管理部５１は、サブアトラクションエリア（遊覧エリア）に設置された複数のサイネージ１を利用者が順に見て回る際に、サイネージ１に表示した配信映像、およびカメラ２の撮影で取得した撮影映像に関する遊覧情報を管理する。この遊覧情報は、コンテンツの他に、利用者が滞在した場所（サブアトラクションエリアおよびスポット）や日時、すなわち、利用者がいつどこで遊んだかを表す情報を含む。

ここで、本実施形態では、同一のサブアトラクションエリア内の各スポットのサイネージ１には、互いに連携する配信映像、例えば一連のダンスのコンテンツが順に表示され、この各スポットのサイネージ１に表示した配信映像、およびカメラ２の撮影で取得した撮影映像が、利用者ＩＤに対応づけて蓄積される。

このとき、本実施形態では、入口ゲートの近傍に設置されたカメラ２の映像に基づく人物登録（顔登録）で登録された利用者に、入口ゲートのリーダー３で携帯端末７に表示された２次元コードを読み取ることで取得した利用者ＩＤが付与される。また、サブアトラクションエリア内の各スポットに設置されたカメラ２の映像に基づく人物認識（顔照合）により、各スポットのコンテンツ（配信映像および撮影映像）を利用者ＩＤに対応づけることができる。

また、本実施形態では、複数のサブアトラクションエリアごとのサイネージ１に表示される配信映像も連携しており、この複数のサブアトラクションエリア同士で連携する配信映像も、利用者ＩＤに対応づけてコンテンツが蓄積される。なお、この利用者ＩＤごとのコンテンツは、自身の遊んだ思い出を残す目的から、必ずしもサイネージ１に表示される配信映像を含める必要はない。

ユーザ認証部５２は、携帯端末７に表示された２次元コードをリーダー３で読み取ることで取得した認証情報に基づいてユーザ認証を行う。

コンテンツ統合部５３は、サブアトラクションエリア内の各スポットのコンテンツ（表示映像およびカメラ映像）を統合する。例えばダンス練習に関する配信映像であれば、各スポットのコンテンツ（配信映像および撮影映像）をつなげると、一つの連続したダンスのコンテンツになる。

また、コンテンツ統合部５３は、所定の統合条件に基づいて、同一の利用者に関するコンテンツを統合する。統合条件は、サブアトラクションエリア、およびそのサブアトラクションエリアを訪れた日時などに関するものである。このとき、アンドおよびオアなどの抽出条件に基づいて、統合するコンテンツを抽出することができ、また、日付の昇順などの並び替えの条件に基づいて、コンテンツの並び替えを行うことができるようにするとよい。

なお、このコンテンツの統合では、統合されたコンテンツが順に再生されるようにすればよく、これには、コンテンツ同士の関連づけが行われればよく、映像データを１つの映像ファイルに結合する必要はない。

また、複数のコンテンツの映像が順に再生されるようにコンテンツを統合する他に、１つのストーリーに基づいて作成されたコンテンツに、利用者のコンテンツ（配信映像および撮影映像）を組み込むようにしてもよい。

次に、中央管理サーバ６の記憶部４３に記憶される管理テーブルについて説明する。図５は、管理テーブルの登録内容を示す説明図である。

中央管理サーバ６の記憶部４３には、遊覧情報管理部５１で登録管理される管理テーブル（遊覧情報）が記憶されている。この管理テーブルには、利用者ＩＤ、パスワード、氏名、コンテンツ（配信映像および撮影映像）、日時、２次元コードの各項目の情報が登録されている。この管理テーブルは、アトラクションごとに作成される。

２次元コードの項目には、２次元コードに格納された情報が登録される。なお、２次元コードは、入口ゲート４を開くための鍵情報であり、入場しようとする利用者が登録された人物であることを確認できればよく、例えば利用者ＩＤが格納される。配信映像および撮影映像の項目には、映像ファイルの名称が登録される。日時は、利用者がサブアトラクションエリアを訪れた日時である。

次に、サイネージ１に表示される画面について説明する。図６は、サイネージ１に表示される画面を示す説明図である。

図６（Ａ）は、案内画面を示している。この案内画面は、携帯端末７に表示させた２次元コードをリーダー３にかざすチェックインの操作を利用者に促すものであり、入口ゲート４の近傍に設置されたサイネージ１に表示される。なお、サブアトラクションエリアに利用者を招き入れる誘導のコンテンツを表示するようにしてもよい。

図６（Ｂ）は、開始選択画面を示している。この開始選択画面は、遊びを開始するか否か（○および×）を利用者が選択するものであり、サブアトラクションエリアの最初のスポットに設置されたサイネージ１に表示される。また、この開始選択画面には、利用者の名前が表示され、サイネージ１に表示されたキャラクターが利用者を認識していることを利用者に伝える。これにより、利用者は親近感をもってキャラクターに接することができる。なお、子供に声掛けする音声を出力するようにしてもよい。

図６（Ｃ）は、表示モード選択画面を示している。この表示モード選択画面は、コンテンツの表示モードを利用者が選択する。ここでは、配信映像がダンス練習の場合を示しており、表示モードには、模範演技モード（いっしょにおどる？）とアバターモード（＊＊＊になる？）と、がある。

図６（Ｄ）は、配信映像の表示画面を示している。この配信映像の表示画面には、キャラクターなどの映像が表示される。図６（Ｃ）の表示モード選択画面で模範演技モードが選択されると、キャラクターが模範演技を行う映像、すなわち手本となるダンスを踊る映像が表示される。また、アバターモードが選択されると、キャラクターのアバターが利用者と同じ動作を行う映像が表示される。

図６（Ｅ）は、コンテンツ表示画面の別例を示している。このコンテンツ表示画面では、キャラクターが模範演技を行う映像（動画）が表示される画面上に、前のスポットのカメラ２で撮影された利用者の映像が表示されている。これにより、前回の自分の踊る姿を見ることで、ダンスの上達具合を確認して、ダンスのステップアップを図ることができる。

図６（Ｆ）は、配信映像の表示画面の別例を示している。このコンテンツ表示画面は、他のサブアトラクションエリアとコンテンツを連携させた場合であり、配信映像の表示画面には、他のサブアトラクションエリアに対応するキャラクターが表示される。これにより、スタンプラリーと同様の効果を得ることができる。

なお、当日に既に訪れたサブアトラクションエリアとまだ訪れていないサブアトラクションエリアとを識別できるように、キャラクターの表示形態を変更して表示するようにしてもよい。例えば、当日に既に訪れたサブアトラクションエリアでは、キャラクターがカラーで表示され、まだ訪れていないサブアトラクションエリアでは、キャラクターがグレーアウトで表示される。

次に、携帯端末７に表示される画面について説明する。図７は、携帯端末７に表示される画面を示す説明図である。

図７（Ａ）は、ユーザ登録画面を示している。このユーザ登録画面は、ユーザ登録を行う際（登録モード）に表示されるものである。このユーザ登録画面では、利用者が氏名、住所およびパスワードなどの情報を入力することができる。また、ユーザ登録画面には「登録」のボタンが設けられており、このボタンを操作すると、利用者が入力した内容でユーザ登録が行われる。

図７（Ｂ）は、トップ画面（メニュー画面）を示している。このトップ画面では、マイコンテンツ、２次元コード、コンテンツシェアのいずれかを利用者が選択することができる。ここで、「マイコンテンツ」を選択すると、図７（Ｃ）に示すマイコンテンツ画面に遷移する。また、「２次元コード」を選択すると、図７（Ｅ）に示す２次元コード画面に遷移する。また、「コンテンツシェア」を選択すると、図７（Ｆ）に示すコンテンツシェア画面に遷移する。

図７（Ｃ）は、マイコンテンツ画面（コンテンツ一覧画面）を示している。このマイコンテンツ画面は、利用者が過去にサブアトラクションエリアを訪れた際のコンテンツが一覧表示される。

また、このマイコンテンツ画面には、「再生」のボタンが設けられており、コンテンツを選択して「再生」のボタンを操作すると、図７（Ｄ）に示すコンテンツ再生画面に遷移する。

また、このマイコンテンツ画面には、「編集」のボタンが設けられており、このボタンを操作すると、コンテンツ統合に関する統合条件（サブアトラクションエリア、サブアトラクションエリアを訪れた日時など）を利用者が指定する統合条件指定画面（図示せず）に遷移する。この統合条件指定画面で統合条件を指定すると、統合条件に適合したコンテンツが抽出され、抽出されたコンテンツを統合した統合コンテンツが、図７（Ｄ）に示すコンテンツ再生画面に表示される。なお、抽出されたコンテンツを一覧表示して、統合するコンテンツを利用者に選択させるようにしてもよい。

図７（Ｄ）は、コンテンツ再生画面を示している。このコンテンツ再生画面は、コンテンツの映像を利用者が閲覧するものである（閲覧モード）。このコンテンツ再生画面には、再生ボタンが設けられており、この再生ボタンを操作すると、コンテンツが再生される。

また、このコンテンツ再生画面には、サイネージ１に表示した配信映像、すなわちキャラクターが映る映像と、カメラ２の撮影で取得した撮影映像、すなわち利用者が映る映像と、が並べて表示されている。この２つの映像は同期して再生される。これにより、２つのコンテンツを比較することができ、ダンス練習に関するコンテンツであれば、ダンスの習熟度を確認することができる。

また、このコンテンツ再生画面には、「投稿」のボタンが設けられており、このボタンを操作すると、自分の映像を他の利用者に共有させるコンテンツシェアを行うことができる。なお、統合したコンテンツが表示された状態で「投稿」のボタンを操作すると、統合したコンテンツを共有することができる。

図７（Ｅ）は、２次元コード画面を示している。この２次元コード画面には、２次元コードが表示される。この２次元コードは、サブアトラクションエリアに入場する際にリーダー３にかざすことでユーザ認証が行われ、ユーザ認証が成功すると、入口ゲート４が開放される。

図７（Ｆ）は、コンテンツシェア画面を示している。このコンテンツシェア画面には、他の利用者が投稿した映像が表示される。図７に示す例では、複数の利用者ごとのコンテンツ（配信映像および撮影映像）が並べて表示されている。

なお、図７には、携帯端末７に表示される画面の例を示したが、同様の画面をＰＣに表示させることもできる。また、利用者ごとのコンテンツとして、配信映像は含めず、撮影映像のみで構成することもできる。

次に、利用者がユーザ登録を行う際（登録モード）のサイネージシステムの動作について説明する。図８は、利用者がユーザ登録を行う際のサイネージシステムの動作手順を示すシーケンス図である。

携帯端末７において、アプリケーションを起動すると、ユーザ登録が未了であれば、ユーザ登録画面（図７（Ａ）参照）が表示される。このユーザ登録画面で、利用者が氏名、住所およびパスワードなどの情報を入力すると、入力情報が携帯端末７から中央管理サーバ６に送信される。

中央管理サーバ６では、携帯端末７から送信される入力情報を受信すると、その入力情報に基づいてユーザ登録処理が行われ、ユーザ登録情報が記憶部４３に記憶される。このとき、利用者に利用者ＩＤが付与される。

次に、利用者がサブアトラクションエリアに入場する際のサイネージシステムの動作について説明する。図９は、利用者がサブアトラクションエリアに入場する際のサイネージシステムの動作手順を示すシーケンス図である。

利用者が、サブアトラクションエリアの入口に設置されたサイネージ１の前に来ると、カメラ２で利用者が撮影され、その映像がアトラクション管理サーバ５に送信される。アトラクション管理サーバ５では、カメラ２の映像から人物が検知されると、２次元コードをリーダー３にかざすチェックインの操作を促す案内画面（図６（Ａ）参照）の表示情報をサイネージ１に送信し、サイネージ１に案内画面が表示される。

携帯端末７において、利用者がアプリケーションを起動すると、ログイン画面が表示され、このログイン画面に認証情報を入力してユーザ認証が成功すると、トップ画面（図７（Ｂ）参照）が表示され、このトップ画面で「２次元コード」を選択すると、２次元コード画面（図７（Ｅ）参照）が表示される。

次に、利用者が、２次元コード画面に表示された２次元コードをリーダー３にかざすチェックインの操作を行うと、リーダー３では、２次元コードを読み取る処理が行われる。そして、リーダー３から読取情報が中央管理サーバ６に送信される。

中央管理サーバ６では、リーダー３から送信された読取情報を受信すると、その読取情報に基づいて、登録済みの正規の利用者か否かのユーザ認証を行う。このユーザ認証が成功すると、認証成功通知がアトラクション管理サーバ５に送信される。

アトラクション管理サーバ５では、中央管理サーバ６から送信された認証成功通知を受信すると、カメラ２から取得した映像を用いて利用者の顔登録が行われる。また、サブアトラクションエリアへの入場が許可されたことを示す認証確認画面の表示情報がサイネージ１に送信され、サイネージ１に認証確認画面（ユーザ認証が成功したことを表す画面）が表示される。また、開放指示が入口ゲート４に送信され、入口ゲート４が開放され、利用者がサブアトラクションエリアに入場することができる。

次に、利用者がサブアトラクションエリアに滞在している間のサイネージシステムの動作について説明する。図１０は、利用者がサブアトラクションエリアに滞在している間のサイネージシステムの動作手順を示すシーケンス図である。

カメラ２では、サイネージ１の前のエリアが常時撮影されており、利用者がサブアトラクションエリアに入場して最初のスポットのサイネージ１の前に来ると、カメラ２で利用者が撮影され、その映像がアトラクション管理サーバ５に送信される。

アトラクション管理サーバ５では、カメラ２から取得した映像から人物が検知されると、その映像を用いて顔照合が行われる。そして、開始選択画面（図６（Ｂ）参照）の表示情報がサイネージ１に送信され、サイネージ１に開始選択画面が表示される。このとき、顔照合で特定された利用者ＩＤに基づいて開始選択画面に利用者の名前が表示される。

サイネージ１に表示された開始選択画面で、利用者が開始を選択する操作を行うと、開始選択の操作情報がサイネージ１からアトラクション管理サーバ５に送信される。アトラクション管理サーバ５では、サイネージ１からの開始選択の操作情報を受信すると、表示モード選択画面（図６（Ｃ）参照）の表示情報がサイネージ１に送信され、サイネージ１に表示モード選択画面が表示される。

サイネージ１に表示された表示モード選択画面で、利用者が表示モードを選択する操作を行うと、表示モード選択の操作情報がサイネージ１からアトラクション管理サーバ５に送信される。アトラクション管理サーバ５では、サイネージ１からの表示モード選択の操作情報を受信すると、利用者が選択した表示モードに応じて配信映像を生成する処理が開始される。

このとき、利用者が選択し表示モードが模範演技モードであれば、カメラ２の映像に基づいて服装認識が行われ、その服装認識の結果に基づいて配信映像が生成される。また、利用者が選択し表示モードがアバターモードであれば、カメラ２の撮影映像に基づいて行動認識が行われ、その行動認識の結果に基づいて配信映像が生成される。

なお、模範演技モードでは、服装認識の結果に基づいて利用者と同じ服装をしたキャラクターが踊る配信映像を表示させることができるが、キャラクターに利用者と同じ服装をさせないようにしてもよい。この場合、中央管理サーバ６から配信される配信映像をそのままサイネージ１に表示させればよい。

そして、配信映像を含む配信映像の表示画面（図６（Ｄ），（Ｅ），（Ｆ）参照）の表示情報がサイネージ１に送信され、コンテンツ表示画面がサイネージ１に表示される。

また、利用者が２番目以降のスポットに来ると、アトラクション管理サーバ５において、カメラ２の撮影映像に基づく顔照合が行われる。また、表示モードに応じて服装認識や行動認識が行われて配信映像が生成される。このとき、顔照合で特定された利用者ＩＤに基づいて、前のスポットで表示した配信映像と連携する配信映像が生成される。そして、生成された配信映像を含む配信映像の表示画面がサイネージ１に送信されて、表示される。

なお、最後のスポットでは、サイネージ１にコンテンツ終了画面が表示される。

次に、利用者が携帯端末７でコンテンツを閲覧する際（閲覧モード）のサイネージシステムの動作について説明する。図１１は、利用者が携帯端末７でコンテンツを閲覧する際のサイネージシステムの動作手順を示すシーケンス図である。

携帯端末７において、アプリケーションを起動すると、ログイン画面が表示され、このログイン画面に認証情報を入力すると、中央管理サーバ６において、ユーザ認証が行われ、ユーザ認証が成功すると、認証成功通知が携帯端末７に送信される。

携帯端末７では、認証成功通知に応じてトップ画面（図７（Ｂ）参照）が表示され、このトップ画面で「マイコンテンツ」を選択すると、配信要求が中央管理サーバ６に送信される。中央管理サーバ６では、配信要求に応じて、利用者に関するコンテンツの一覧情報が生成されて、その一覧情報を含む表示情報が携帯端末７に送信される。携帯端末７では、表示情報に基づいてマイコンテンツ画面（図７（Ｃ）参照）が表示される。

次に、利用者がマイコンテンツ画面で「編集」のボタンを操作すると、統合条件指定画面が表示される。この統合条件指定画面で統合条件を指定すると、統合条件が中央管理サーバ６に送信される。中央管理サーバ６では、統合条件に基づいてコンテンツを統合する処理が行われ、統合されたコンテンツを含む表示情報が携帯端末７に送信される。携帯端末７では、表示情報に基づいてコンテンツ再生画面（図７（Ｄ）参照）が表示される。このコンテンツ再生画面で利用者が再生の操作を行うと、指定した条件で統合されたコンテンツを閲覧することができる。そして、利用者がログアウトの操作を行うと、ログアウト画面が表示される。

なお、利用者がマイコンテンツ画面で「再生」のボタンを操作すると、選択した１つのコンテンツをコンテンツ再生画面（図７（Ｄ）参照）で閲覧することができる。

以上のように、本出願において開示する技術の例示として、実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施形態にも適用できる。また、上記の実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。

例えば、前記の実施形態では、テーマパークの例について説明したが、テーマパークに限定されるものではなく、種々の施設に適用することができる。

また、前記の実施形態では、遊覧エリアとして、アトラクションに併設されたサブアトラクションエリアの例について説明したが、遊覧エリアはこれに限定されるものではなく、単独のアトラクションエリアとして設けるようにしてもよい。これにより、テーマパーク内のアトラクションが全体的に混雑している場合に、子供だけを遊ばせることができる。

また、前記の実施形態では、サイネージの前の利用者を、カメラの撮影映像を用いた顔照合で識別するようにしたが、サイネージごとにリーダーを設けて、サイネージの前の利用者をリーダーで識別するようにしてもよい。また、携帯端末７との間での近距離通信により、サイネージの前の利用者を識別するようにしてもよい。

また、前記の実施形態では、ユーザ登録やコンテンツの閲覧を携帯端末で行うようにしたが、ＰＣなどの携帯端末以外のユーザ端末でユーザ登録やコンテンツの閲覧を行うことができるようにしてもよい。

本発明に係るサイネージシステム、携帯端末装置およびプログラムは、ディスプレイに表示させた配信映像で利用者が遊んだことを思い出のコンテンツとして残すことができ、さらに、遊んだ場所や日時に応じた様々な映像を利用者が閲覧できるようにして、複数のディスプレイを有効活用することができる効果を有し、配信映像を表示するディスプレイ装置と、このディスプレイ装置にネットワークを介して接続されたサーバ装置と、を備えたサイネージシステム、利用者が所持する携帯端末装置、および携帯端末装置のプロセッサに実行させるプログラムなどとして有用である。

１ サイネージ（ディスプレイ装置）
２ カメラ（カメラ装置）
３ リーダー
４ 入口ゲート
５ アトラクション管理サーバ（サーバ装置）
６ 中央管理サーバ（サーバ装置）
７ 携帯端末
１１ 出口ゲート
３１ 行動認識部
３２ 服装認識部
３３ 配信映像生成部
３４ 人物認識部
４３ 記憶部
５１ 遊覧情報管理部
５２ ユーザ認証部
５３ コンテンツ統合部

Claims (11)

1. 配信映像を表示するディスプレイ装置と、このディスプレイ装置にネットワークを介して接続されたサーバ装置と、を備えたサイネージシステムであって、
   前記サーバ装置にネットワークを介して接続されて、前記ディスプレイ装置に対峙した利用者を撮影するカメラ装置を、さらに備え、
   前記サーバ装置は、前記ディスプレイ装置に対峙する利用者を識別すると、前記ディスプレイ装置への前記配信映像の表示と前記カメラ装置による利用者の撮影とを制御し、利用者の遊覧中の行動を撮影した撮影映像を前記カメラ装置より取得して、利用者ごとに前記撮影映像を記憶部に蓄積することを特徴とするサイネージシステム。
2. 前記ディスプレイ装置および前記カメラ装置は、施設内の複数の場所にそれぞれ設置され、
   前記サーバ装置は、利用者、前記場所、およびその場所を利用者が訪れた日時に対応させて前記撮影映像を蓄積することを特徴とする請求項１に記載のサイネージシステム。
3. 利用者が複数の前記ディスプレイ装置を順に見て回るように、遊覧エリア内に複数の前記ディスプレイ装置が設置され、
   前記サーバ装置は、複数の前記ディスプレイ装置に互いに連携する前記配信映像を表示することを特徴とする請求項１または請求項２に記載のサイネージシステム。
4. 前記サーバ装置は、前記カメラ装置で撮影された前記撮影映像から抽出された利用者に関する情報に基づいて前記配信映像を生成して、前記ディスプレイ装置に配信することを特徴とする請求項１から請求項３のいずれかに記載のサイネージシステム。
5. 前記サーバ装置は、前記カメラ装置で撮影された前記撮影映像に基づいて、利用者の身体の動きを検出して、前記配信映像として、アバターが利用者と同じ動作を行う映像を生成することを特徴とする請求項４に記載のサイネージシステム。
6. 前記サーバ装置は、前記カメラ装置で撮影された映像に基づいて、利用者の服装の特徴を抽出して、前記配信映像として、利用者と同じ服装をしたキャラクターの映像を生成することを特徴とする請求項４に記載のサイネージシステム。
7. 前記ディスプレイ装置および前記カメラ装置は、行列待ちが発生する第１のエリアに隣接する第２のエリアに設置されることを特徴とする請求項１から請求項６のいずれかに記載のサイネージシステム。
8. 前記サーバ装置は、所定の統合条件に基づいて、同一の利用者に関する前記撮影映像を統合することを特徴とする請求項１から請求項７のいずれかに記載のサイネージシステム。
9. 前記ディスプレイ装置および前記カメラ装置は、施設内の複数の場所にそれぞれ設置され、
   前記統合条件は、前記場所、およびその場所を利用者が訪れた日時の少なくともいずれか一つに関するものであることを特徴とする請求項８に記載のサイネージシステム。
10. 利用者が所持し、請求項１に記載のサイネージシステムへアクセス可能な携帯端末装置であって、
    前記サーバ装置に利用者を登録する登録モードと、
    前記サーバ装置の前記記憶部に蓄積された利用者の遊覧中の行動を撮影した前記撮影映像を再生する閲覧モードと、
    前記サーバ装置の前記記憶部に蓄積された前記撮影映像を他の利用者と共有する共有モードと、
    を実行するアプリケーションプログラムが搭載されてなることを特徴とする携帯端末装置。
11. 利用者が所持し、請求項１に記載のサイネージシステムへアクセス可能な携帯端末装置のプロセッサに実行させるプログラムであって、
    前記サーバ装置に利用者を登録する登録モードと、
    前記サーバ装置の前記記憶部に蓄積された利用者の遊覧中の行動を撮影した前記撮影映像を再生する閲覧モードと、
    前記サーバ装置の前記記憶部に蓄積された前記撮影映像を他の利用者と共有する共有モードと、
    を前記プロセッサに実行させることを特徴とするプログラム。

Images