JP2014191602A - 表示装置、プログラム及び表示システム - Google Patents

Abstract

【課題】広告、集客効果を高めること。
【解決手段】キャラクターの顔画像の表示部２４０と、撮像部３０と、撮像画像から人物の顔画像を検出する顔検出処理手段２３１と、顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段２３２と、表情認識処理手段による表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段２３４とを備え、くじ引きの処理を行う。
【選択図】図１０

Description

本発明は、表示装置、プログラム及び表示システムに係り、特に広告や集客に用いる表示装置、プログラム及び表示システムに関する。

従来、例えばデジタルサイネージ装置などの表示装置においては、広告画像の内容を容易に変更することができるため、最新の情報を常に閲覧者に提供できる点で優れた広告効果を発揮する（例えば特許文献１参照）。

特開２０１２−１２８２１０号公報

しかしながら、上記表示装置は、広告画像の切り換えが自在であることから、ある程度の広告効果を上げることが可能だが、閲覧者に対して一方的にメッセージを送るという形で使用されるため、飽きられやすく、広告効果が徐々に低下するという問題があった。
そこで本発明は、より高い広告効果を発揮することのできる表示装置、プログラム及び表示システムを提供することをその目的とする。

以上の課題を解決するため、本発明の表示装置は、
画像を表示する表示部と、撮像を行う撮像部と、前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段と、前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段と、前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段と、を備えることを特徴としている。

以上の課題を解決するため、本発明のプログラムは、
画像を表示する表示部と撮像を行う撮像部とを有する表示装置のコンピュータを、前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段、前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段、前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段、として機能させることを特徴としている。

以上の課題を解決するため、本発明の表示システムは、表示装置とサーバ装置とを備える表示システムであって、
前記表示装置は、画像を表示する表示部と、撮像を行う撮像部と、前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段と、前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段と、を備え、
前記サーバ装置は、前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段を備えることを特徴としている。

本発明によれば、注目度を高め、広告効果、集客効果の向上を図ることが可能となる。

第一の実施形態の表示システムの概略構成を示すブロック図である。 デジタルサイネージ装置の主制御構成を示すブロック図である。 デジタルサイネージ装置のスクリーン部の概略構成を示す正面図である。 携帯端末の主制御構成を示すブロック図である。 サーバ装置の主制御構成を示すブロック図である。 デジタルサイネージ装置の制御部における機能構成を示すブロック図である。 デジタルサイネージ装置におけるくじ引きの前段階の処理を示すフローチャートである。 サーバ装置におけるくじ引きの処理の流れを示すフローチャートである。 サーバ装置におけるくじ引きの処理の他の例を示すフローチャートである。 第二の実施形態のデジタルサイネージ装置の制御部における機能構成を示すブロック図である。 デジタルサイネージ装置におけるくじ引きの処理を示すフローチャートである。 デジタルサイネージ装置におけるくじ引きの処理の他の例を示すフローチャートである。

［第一の実施形態］
以下に、本発明を実施するための最良の形態について図面を用いて説明する。ただし、以下に述べる第一の実施形態には、本発明を実施するために技術的に好ましい種々の限定が付されているが、発明の範囲を以下の実施形態及び図示例に限定するものではない。

図１は第一の実施形態の表示システムの概略構成を示すブロック図である。表示システム１には、本発明に係る表示装置としてのデジタルサイネージ装置２と、ネットワークＮを介してデジタルサイネージ装置２に通信自在なサーバ装置５と、例えばＮＦＣなどの近距離無線通信技術によってデジタルサイネージ装置２に通信自在な携帯端末４とが備えられている。

［デジタルサイネージ装置］
図２はデジタルサイネージ装置２の主制御構成を示すブロック図である。デジタルサイネージ装置２は、人物画像の映像光を照射する投影部２１と、投影部２１から照射された映像光を背面で受けて前面に投影するスクリーン部２２とを備えている。

投影部２１は、処理プログラム及び各種のデータに基づいて各部を制御する制御部２３と、制御部２３に接続され、当該制御部２３から出力された画像データ（動画及び静止画を含む画像データ）を映像光に変換してスクリーン部２２に向けて照射するプロジェクタ２４と、処理プログラム及び各種のデータを記憶する記憶部２５と、ネットワークＮを介してサーバ装置５と通信する通信部２６とを備えている。

次に、スクリーン部２２について説明する。
図３は、スクリーン部２２の概略構成を示す正面図である。図３に示すようにスクリーン部２２には、四角形の画像形成部２７と、画像形成部２７を支持する台座２８とが備えられている。
画像形成部２７は、映像光の照射方向に対して略直交する例えばアクリル板などの一枚の透光板２９により形成されている。透光板２９の背面には背面投影用のフィルムスクリーンが積層され、なおかつフィルムスクリーンの背面にはフィルム状のフレネルレンズが積層されている。そして、この画像形成部２７と前述したプロジェクタ２４とにより表示部２４０（図６参照）を構成している。

そして、画像形成部２７の上部には、例えばカメラなどの撮像部３０が設けられている。この撮像部３０が画像形成部２７に対向する空間の映像をリアルタイムに撮像して画像データを生成する。撮像部３０は、図示は省略するが、光学系及び撮像素子を備えるカメラと、カメラを制御する撮像制御部とを備えている。上記カメラは、可視光カメラまたは赤外線カメラのいずれを使用してもよい。
カメラの光学系は、複数のレンズから構成され、焦点距離が所定距離に固定され、被写界深度が深くなるように構成されている。また、この光学系は、画像形成部２７に向き合った人物の顔部分を撮像可能な方向に光軸が向けられている。
撮像素子は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-oxide Semiconductor）等のイメージセンサである。そして、撮像素子は、光学系を通過した光学像を二次元の画像信号に変換する。
撮像制御部は、撮像素子による特定の被写体の撮像を制御する。即ち、撮像制御部は、図示は省略するが、タイミング発生器、ドライバなどを備えている。そして、撮像制御部は、タイミング発生器、ドライバにより撮像素子を走査駆動して、受光した光学像を所定周期毎に二次元の画像信号に変換させ、当該撮像素子の撮像領域から１画面分ずつフレーム画像を読み出して画像データを生成する。

台座２８には、携帯端末４と通信し携帯端末４に対して情報を読み書きするためのリーダライター部３１と、ボタン式の操作部３２と、スピーカなどの音声出力部３３と、マイクなどの音声入力部３４とが設けられている。
リーダライター部３１、操作部３２、音声出力部３３、音声入力部３４及び撮像部３０は、図２に示すように制御部２３に接続されている。

制御部２３は、各種のプログラムを実行して所定の演算や各部の制御を行うＣＰＵとプログラム実行時の作業領域となるメモリとを備えている（いずれも図示略）。
そして、制御部２３はリーダライター部３１に対して携帯端末４がかざされると、読み取り時においては携帯端末４に記憶されている情報を、リーダライター部３１を介して読み出す。他方、書き込み時においては制御部２３は書き込み情報を、リーダライター部３１を介して携帯端末４に記憶させる。
また、制御部２３は、操作部３２からの操作信号に基づいて、各種の処理を実行し、必要時には、記憶部２５から画像データや音声データを読み出して、プロジェクタ２４の表示制御及び音声出力部３３の音声出力制御を実行する。
さらに、制御部２３は、撮像部３０から得られた画像データや、音声入力部３４から得られた音声データを記憶部２５に格納する。
また、制御部２３は、携帯端末４からの情報や、操作部３２からの操作信号によっては、通信部２６を制御してサーバ装置５と通信を行う。通信により得られた情報は記憶部２５に格納される。

図４は、携帯端末４の主制御構成を示すブロック図である。
携帯端末４は、例えば携帯電話、スマートフォン、タブレット式端末などの携帯機器である。図４に示すように携帯端末４には、例えば表示部４１と、操作部４２と、通信部４３と、近距離通信部４４と、記憶部４５と、これらを制御する制御部４６とが設けられている。
表示部４１は例えば液晶パネルや有機ＥＬパネルなどから構成されている。
操作部４２は例えばタッチパネルや、操作キーなどである。
通信部４３は３ＧやＬＴＥ、Ｗｉ−Ｆｉなどの規格により通信を行う。
近距離通信部４４は例えばＮＦＣなどの近距離無線通信技術によってデジタルサイネージ装置２のリーダライター部３１と通信を行う。
記憶部４５には、デジタルサイネージ装置２との通信を行うためのアプリケーションが記憶されている。デジタルサイネージ装置２との通信を行うためのアプリケーションとしては、クーポン取得アプリ４５１などが挙げられる。
制御部４６は、各種のプログラムを実行して所定の演算や各部の制御を行うＣＰＵとプログラム実行時の作業領域となるメモリとを備えている（いずれも図示略）。
また、制御部４６は、近距離通信部４４がデジタルサイネージ装置２のリーダライター部３１に接近すると、クーポン取得アプリ４５１を起動し、近距離通信部４４及びリーダライター部３１を介してデジタルサイネージ装置２と情報の送受を実行する。

［サーバ装置］
図５はサーバ装置５の主制御構成を示すブロック図である。
サーバ装置５は、表示部５１と、入力部５２と、通信部５３と、記憶部５４と、これらを制御する制御部５５とが設けられている。
表示部５１は、ＬＣＤ（Liquid Crystal Display）等で構成され、制御部５５から入力される表示情報に応じて各種表示を行う。
入力部５２はキーボードとマウス等のポインティングデバイスとからなり、サーバ装置５の管理者による入力を受け付けてその操作情報を制御部５５に出力する。
通信部５３は、モデム、ルータ、ネットワークカード等により構成され、ネットワークＮに接続されて、ネットワークＮ上のデジタルサイネージ装置２との通信を行う。

記憶部５４は、磁気記録媒体を有するＨＤＤ（Hard Disk Drive）、不揮発性の半導体メモリ等により構成される。記憶部５４には、図５に示すように、デジタルサイネージ装置２と通信を行ってくじ引きの処理を行う処理プログラム５４１と、くじ引きの景品管理データ５４２とが記憶されている。
制御部５５は、各種のプログラムを実行して所定の演算や各部の制御を行うＣＰＵとプログラム実行時の作業領域となるメモリとを備えている（いずれも図示略）。

［表示システムを利用したくじ引きの処理の概要］
この表示システム１のデジタルサイネージ装置２は、例えば、店舗に設置され、広告表示だけでなく、くじ引きを実施して、広告と集客のために利用されることを前提としている。
そして、サーバ装置５は、デジタルサイネージ装置２で実施されたユーザーの顔画像の表情認識の結果を受信して当該結果を考慮したくじ引きの処理を実施し、くじ引きの結果をデジタルサイネージ装置２に返信する。
また、携帯端末４は、デジタルサイネージ装置２によりくじ引きを実行する人物（以下、この人物を「ユーザー」とする）が携行する端末であって、くじ引きの賞品であるクーポン券として機能するクーポンデータ４５２を受信し、保存するための受信装置として利用されるものである。

［デジタルサイネージ装置におけるくじ引きの前段階の処理］
表示システム１を利用したくじ引きの実施のために、デジタルサイネージ装置２ではくじ引きの前段階の処理を実行する。
そのため、デジタルサイネージ装置２には、図２に示すように、その記憶部２５にくじ引きの前段階の処理を行う為の処理プログラム２５１が格納されており、くじ引きの前段階の処理に要する設定データ、画像データ、音声データ等の各種データは、記憶部２５内のデータ記憶部２５２に格納されている。
そして、デジタルサイネージ装置２の制御部２３は、いわゆるコンピュータであって、上記くじ引きの前段階の処理プログラム２５１を実行することにより、図６に示す、顔検出処理手段２３１、表情認識処理手段２３２、映像生成手段２３３として機能する。
なお、以下の説明において、撮像画像、顔画像、表示画像、その他の画像は、いずれも、全てデータ化して処理が行われることを前提する。

上記顔検出処理手段２３１は、撮像部３０による撮像画像からくじ引きを行うユーザーの顔画像とその位置、サイズを検出する。
表情認識処理手段２３２は、検出された顔画像から、複数種類の表情のいずれに近いかを数値化し、これらの数値から表情点数を算出する。
映像生成手段２３３は、撮像部３０による撮像の際に、表示部２４０により所定の映像を表示する。これにより、ユーザーが所定の映像を見たときの反応が表情に表れた状態で撮像を行うことができる。

［顔検出処理手段］
上記各手段２３１〜２３３について、さらに補足的に説明する。
顔検出処理手段２３１は、撮像部３０により取得された撮像画像から所定のアルゴリズムに基づいて顔検出処理を行い、顔画像を取得する。
この顔検出処理手段２３１では、撮像部３０により取得された撮像画像に対してadaboost（アダブースト）のアルゴリズムを用いて顔画像の検出を行う。
adaboostのアルゴリズムでは、顔画像の識別力が弱い識別器（例えば、識別の正解率が0.5より若干高い程度）を複数使用する。これらの識別器は、予め、サンプルとなる顔画像と非顔画像とを用いた学習によって識別器ごとに重み付けが設定されている。
そして、顔検出処理手段２３１は、撮像画像全体を各識別器によりサーチすることでそれぞれの識別器から得られる点数（重み付けが反映された点数）の総計が所定の閾値以上となるエリアに顔があるものと認識する。

上記識別器としては、例えば、顔の部分的な特徴を白黒の矩形領域とその配置とで表したHaar-Like（ハールライク）特徴といわれる複数のパターン画像を使用する。これらの複数のパターン画像も顔画像と非顔画像とを用いた学習によって個々に重み付けされている。そして、各パターン画像と撮像画像のサーチエリアとの一致判定結果から当該識別器の点数を算出する。
また、顔画像を検出するためのサーチエリアは、複数のサイズで用意されており、識別器も、これらのサイズごとに用意されている。つまり、各種のサイズで顔画像の検出を行い、これにより、撮像画像の撮像範囲内の顔画像の位置だけでなく、顔画像のサイズも取得することが可能となっている。
なお、この顔検出処理手段２３１による顔画像の検出の手法は一例であって、上記処理に限らず、他の周知の顔検出の手法を使用することも可能である。

［表情認識処理手段］
表情認識処理手段２３２は、顔検出処理手段２３１により検出された顔画像から複数種類の表情にどの程度近いかを示す表情点数を求める。そして、それぞれの表情の表情点数を統合して一つの表情点数を算出する。
表情の種類としては、例えば、無表情、笑顔、恐れた顔、驚く顔、悲しい顔、嫌悪している顔、怒り顔等が挙げられる。なお、これらに限定されるものではなく、より多く又はより少ない表情を選択することも可能であり、また、上記以外の他の表情を選択することも可能である。
この表情の表情点数の取得は、例えば、adaboostのアルゴリズムを利用することができる。
この場合、学習の際に、各種の表情の中でいずれか一種類の表情を示す画像とそれ以外の表情の画像とを用いて複数の識別器を生成する。また、識別器のパターン画像はHaar-Like特徴とすることが好ましい。これにより、一種類の表情を識別するための複数の識別器が取得される。
さらに、同様にして、他の全ての種類の表情についてそれぞれを識別するための複数の識別器を各種の表情ごとに生成する。

そして、表情認識処理手段２３２は、顔検出処理手段２３１により検出された顔画像に対して、それぞれの表情ごとに識別器の点数の総計（重み付けを考慮した総計）を求める。
このとき、無表情(normal)の識別器の点数の総計をＮｅ、笑顔(happiness)の識別器の点数の総計をＨａ、恐れた顔(fear)の識別器の点数の総計をＦｅ、驚く顔(surprise)の識別器の点数の総計をＳｕ、悲しい顔(sadness)の識別器の点数の総計をＳａ、嫌悪している顔(disgust)の識別器の点数の総計をＤｉ、怒り顔(anger)の識別器の点数の総計をＡｎとし、これらをそれぞれの表情ごとの表情点数とする。
そして、表情認識処理手段２３２は、これらの表情点数について個別に係数ａ〜ｇを乗算して重み付けを行った上で合計した値を総合的な表情点数Ｌとして算出する。即ち、表情点数Ｌは次式(1)で表すことができる。算出された当該表情点数Ｌは通信部２６を通じてサーバ装置５に送信される。
Ｌ＝ａ・Ｎｅ＋ｂ・Ｈａ＋ｃ・Ｆｅ＋ｄ・Ｓｕ＋ｅ・Ｓａ＋ｆ・Ｄｉ＋ｇ・Ａｎ …(1)

なお、表情認識処理手段２３２による各表情点数の取得の手法は例示であって、上記処理に限らず、表情を検出する周知の他の手法を使用することが可能である。
例えば、固有空間法を用いた表情認識により表情点数を求めても良い。固有空間法では、顔画像から主成分分析やフィッシャーの線形判別を応用した重判別分析等の判別分析を用いて変換行列Ｔを求める。この行列Ｔは学習用顔画像から作られた行列の分散共分散行列の固有値を用いて作られる。この行列Ｔを用いて同種の表情ごとに複数の学習用顔画像を変換して多次元空間上に射影し、得られた空間上の点を平均化して、各種の表情ごとに空間上の点を取得する。そして、ユーザーの顔画像取得時には当該顔画像を行列Ｔにより変換して多次元空間上に射影された一点を得る。この一点から各種の表情の平均の点までのユークリッド距離を個別に算出する。このとき、ユーザーの顔画像の点がいずれかの表情の平均の点までの距離が短いほど、ユーザーがその表情に近い表情であることを示す。
従って、ユーザーの顔画像の点から各表情の平均の点までの距離を表情点数とした場合には、その値が小さいほどユーザーがその表情に近い表情であることを意味する。
このように、相関関係は逆となるが、表情認識処理手段２３２は、固有空間法により各表情点数を取得しても良い。

［映像生成手段］
映像生成手段２３３は、デジタルサイネージ装置２のくじ引きを行っていない待機状態において表示部２４０に広告画面等を表示させ、くじ引きを行う際にはユーザーに対して表示部２４０に操作手順を示すガイド画面を表示させる制御を行う。
また、映像生成手段２３３は、くじ引きの実行のためにユーザーを撮像する際に、演出効果を与えるために、所定の演出映像を表示部２４０に表示する表示制御を実行する。ここで、表示する演出映像は、例えば、ルーレットやスロットの動作映像等であり、これらを表示してくじ引きの緊張感を盛り上げる効果を演出する。

［サーバ装置におけるくじ引きの処理］
表示システム１を利用したくじ引きの実施のために、サーバ装置５ではくじ引きの処理を実行する。
サーバ装置５の記憶部５４に格納された処理プログラム５４１は、制御部５５を、表情認識処理手段２３２により算出された表情点数Ｌに基づいて結果が変動するくじ引きの処理を行うくじ引き処理手段として機能させる。
即ち、くじ引き処理手段としての制御部５５は、デジタルサイネージ装置２の表情認識処理手段２３２から、表情点数Ｌのデータを受信すると、以下の手法で複数あるくじ引きの景品の中から一つを選択する。

即ち、複数用意されたくじ引きの景品については、予め、重複を生じないように、それぞれに表情点数Ｌの数値範囲が対応付けられている。そして、くじ引き処理手段としての制御部５５は、取得した表情点数Ｌを数値範囲に含む景品を特定した上で、当落決定処理を実行する。この当落決定処理は、例えば、乱数発生処理を行い、得られた乱数が予め定めた当たり判定の数値範囲内に属するか否かによって当落を決定する。

また、表情点数Ｌによって景品を決定しているが、景品の決定の替わりに又は景品の決定と共に、表情点数Ｌに応じてくじ引きの当選確率を変動させても良い。例えば、当落決定処理において、当たり判定の数値範囲を表情点数Ｌの大小に応じて拡縮させる等の処理を加えても良い。

また、サーバ装置５の制御部５５は、くじ引きの各種の景品の在庫管理の処理も行っている。記憶部５４内のくじ引きの景品管理データ５４２は、各種の景品ごとに在庫数を記録している。そして、くじ引き処理手段としての制御部５５は、当落決定処理を行って当たりが発生した場合には、景品管理データ５４２に対して、その時の景品の在庫数を一つ減じる書き換え処理を実行する。
そして、くじ引き処理手段としての制御部５５は、通信部５３を通じて、くじ引きの当落結果及び当選時の景品をデジタルサイネージ装置２に通知する。

［携帯端末における景品受け取りの処理］
デジタルサイネージ装置２では、携帯端末４を通じてくじ引きの景品の引き渡しを行う。
この場合の景品は、金券、買い物割引券、商品引換券等として機能する電子クーポンである。
携帯端末４の制御部４６は、クーポン取得アプリ４５１を実行することにより、景品受け取り処理を実行する。
即ち、くじ引きの当選の結果と当選時の景品の通知を受信したデジタルサイネージ装置２のリーダライター部３１に近距離通信部４４を接近させると、制御部４６はデジタルサイネージ装置２から景品内容に応じた電子クーポンのクーポンデータ４５２を受信する。
このクーポンデータ４５２は、景品の内容を示した表示画像データであり、携帯端末４の表示部４１に表示することが可能である。そして、店頭で携帯端末４によりクーポンデータ４５２の提示を行うことにより、金券、買い物割引券又は商品引換券として使用することができる。

なお、クーポン取得アプリ４５１による処理として、デジタルサイネージ装置２からクーポンデータ４５２を取得する場合を例示したが、クーポン取得アプリ４５１によりサーバ装置５のクーポン受け取りアドレスを取得可能とし、デジタルサイネージ装置２を介さずにサーバ装置５からクーポンデータ４５２を受信することも可能である。

［デジタルサイネージ装置におけるくじ引きの前段階の処理の流れ］
表示システム１においてくじ引きを実施する場合のデジタルサイネージ装置２におけるくじ引きの前段階の処理の流れを図７のフローチャートに基づいて説明する。
まず、デジタルサイネージ装置２は待機状態にあり、制御部２３は撮像部３０によりデジタルサイネージ装置２の表示部２４０の前方に対して定期的な撮像を実行する（ステップＳ１）。また、このとき、映像生成手段２３３は、表示部２４０に広告の表示や店舗でのくじ引き開催中であることを示す画像を表示させる。

そして、顔検出処理手段２３１は、撮像画像に対して顔画像の検出を実行する（ステップＳ３）。そして、制御部２３は、顔画像の検出の有無を判定し（ステップＳ５）、顔画像が検出されなかった場合にはステップＳ１に戻り、所定期間を待ってから再び撮像を行う。
また、顔画像が検出された場合には、デジタルサイネージ装置２の表示部２４０の正面側にユーザーとなる人物が存在することを意味するので、デジタルサイネージ装置２はくじ引きの開始準備状態に移行する。そして、映像生成手段２３３は、表示部２４０にくじ引きの操作手順を示した説明画面を表示させる（ステップＳ７）。
この説明画面は、ユーザーに対して表示部２４０の正面に立つように誘導を行う内容となっている。この時、表示部２４０に基準となる枠を表示し、その枠内にユーザーの顔が入るように誘導する。この説明画面による誘導を行うと、映像生成手段２３３は、くじ引きの演出映像の表示を開始する（ステップＳ９）。

そして、演出映像の表示を行いながら、あらためて撮像部３０によりユーザーの撮像を行い（ステップＳ１１）、顔検出処理手段２３１は、撮像画像に対して顔画像の検出を実行する（ステップＳ１３）。
そして、表情認識処理手段２３２は、検出された顔画像から複数の表情について表情点数を算出する（ステップＳ１５）。さらに、表情認識処理手段２３２は、それぞれの表情の表情点数を前述した式(1)により合計して総合的な表情点数Ｌを取得する。
表情認識処理手段２３２は、総合的な表情点数Ｌをサーバ装置５に送信する（ステップＳ１７）。
その後、サーバ装置５側において後述する図８のフローチャートに基づいてくじ引きの処理が行われるので、デジタルサイネージ装置２の制御部２３はくじ引きの処理の結果の受信待ちを行う（ステップＳ１９）。

そして、サーバ装置５からくじ引きの結果を受信すると、映像生成手段２３３は、くじ引きの結果が当たりか否かを判定する（ステップＳ２１）。そして、外れの場合には、映像生成手段２３３は、表示部２４０において、くじ引きが外れであることを通知する画面を表示して処理全体を終了する（ステップＳ２７）。
また、当たりの場合には、映像生成手段２３３は、表示部２４０において、くじ引きが当たりであること及び景品内容を通知する画面を表示する（ステップＳ２３）。

くじ引きが当たりの際には、制御部２３は、予めデータ記憶部２５２に格納されていた景品内容に応じた電子クーポンのクーポンデータを呼び出して、携帯端末４へ送信可能な状態で待機する。待機中は、表示部２４０において、携帯端末４をデジタルサイネージ装置２のリーダライター部３１へかざすように受け渡して手順を示したガイド画面を表示する（ステップＳ２５）。
そして、携帯端末４がリーダライター部３１へかざされると、クーポンデータを送信して、処理全体を終了する。

［サーバ装置におけるくじ引きの処理の流れ］
表示システム１においてサーバ装置５が表示点数に基づいて行うくじ引きの処理の流れを図８のフローチャートを参照して説明する。
サーバ装置５の制御部５５は、デジタルサイネージ装置２から総合的な表情点数Ｌの受信待ちを行っている（ステップＳ４１）。
そして、総合的な表情点数Ｌを受信すると、その値から景品を特定し（ステップＳ４３）、当落決定処理を実行する（ステップＳ４５）。つまり、乱数を発生させてそれが当たりの数値範囲内か否かを判定する（ステップＳ４７）。
これにより、当たりと判定した場合には、制御部５５は、その通信部５３からデジタルサイネージ装置２に対して当たりであること及び選択された景品の内容を示す情報を通知する（ステップＳ４９）。そして、記憶部５４内の景品管理データ５４２について当選の景品の在庫数をひとつ減じる内容に更新して（ステップＳ５１）、くじ引きの処理を完了する。
また、当落決定処理の結果がはずれの場合には、制御部５５は、その通信部５３からデジタルサイネージ装置２に対してはずれであることを通知して（ステップＳ５３）、くじ引きの処理を完了する。

［表示システムの技術的な効果］
表示システム１のデジタルサイネージ装置２は、その制御部２３が、撮像画像から顔検出処理を行う顔検出処理手段２３１と、予め定められた条件に従って、撮像部３０による撮像画像から検出された顔画像が複数種類の表情のいずれに近いかに応じて数値化した表情点数を求める表情認識処理手段２３２として機能している。
また、サーバ装置５では、その制御部５５が、表情認識処理手段による表情点数に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段として機能している。
そのため、表示システム１では、デジタルサイネージ装置２とサーバ装置５との連携により、デジタルサイネージ装置２において、ユーザーに対する情報表示や画像表示だけでなく、くじ引きへの参加を促すことができ、ユーザーを繰り返しデジタルサイネージ装置２に立ち寄らせることができ、注目度、広告効果、集客効果の向上を図ることが可能となる。
さらに、この表示システム１では、表情認識処理手段２３２及びくじ引き処理手段により、ユーザーの表情を加味してくじ引きの結果を変動させることが可能である。
このため、例えば、店頭等で何らかテーマに沿ったキャンペーンの際にくじ引きを行うような場合に好適である。例えば、「笑う門には福来たる」というテーマを採用する場合には、笑顔の表情点数の係数を高くすることで、笑顔のユーザーに当たりを出やすくする、豪華賞品を進呈する等によりテーマに合わせてくじ引きを盛り上げることができる。同様に、ユーザーへの励ましをテーマとする場合には、笑顔や怒り顔以外の表情点数の係数を高くして、落胆する人を応援するくじ引きを行うことができる。
その他、怒り顔の表情点数の係数を高くして、はずれが続いてイライラし始めたユーザーの当たりを出やすくする等のようなことも可能である。

また、デジタルサイネージ装置２において、表情認識処理手段２３２は、撮像部３０による撮像画像から検出された顔画像を複数種類の表情ごとに数値化して表情点数を求め、さらに、これらを統合して一つの総合的な表情点数Ｌを求めている。
そのため、ユーザーの複雑な感情を表情に表している場合でも、それらを加味してくじ引きの結果に反映することが可能である。

また、デジタルサイネージ装置２において、映像生成手段２３３は、撮像部３０による撮像が行われる前に表示部２４０で所定の演出映像を表示させるので、当該映像をユーザーが見たときの反応が表れた表情を反映したくじ引きを行うことができる。
また、前述したように、テーマを決めてくじ引きが行われている場合には、そのテーマに応じた演出映像を表示部２４０に表示してもよい。

［サーバ装置におけるくじ引きの処理の他の例］
前述した表示システム１では、デジタルサイネージ装置２の表情認識処理手段２３２は、各種の表情の表情点数を統合して総合的な表情点数Ｌを算出した上で、くじ引き処理手段として機能するサーバ装置５の制御部５５に送信していたが、総合的な表情点数Ｌを算出しないで、各種の表情の表情点数を個別に制御部５５に送信しても良い。
その場合に、サーバ装置５の制御部５５がくじ引き処理手段として行う処理の他の例について図９のフローチャートを参照して説明する。

まず、サーバ装置５の制御部５５は、デジタルサイネージ装置２から各表情の表情点数の受信待ちを行っている（ステップＳ６１）。
そして、各表情の表情点数を受信すると、想定されている全種類の表情ごとに当落決定処理を実行する（ステップＳ６３）。なお、この場合には、全種類の表情ごとに個別に景品が決められているものとする。また、各表情の当落決定処理において、個々に表情点数に基づいて当選確率を変動させても良い。
そして、全種類の表情について当落決定処理が終わると、制御部５５は、表情認識処理手段２３２から受信した各表情の表情点数の中から値が最大となる表情を特定する。そして、表情点数が最大の表情に対応する当落決定処理結果をくじ引きの結果として採用する（ステップＳ６５）。
制御部５５は、採用した当落決定処理結果を参照して、くじ引きが当たりかはずれかを判定する（ステップＳ６７）。
これにより、当たりと判定した場合には、制御部５５は、その通信部５３からデジタルサイネージ装置２に対して当たりであること及びその景品の内容を示す情報を通知する（ステップＳ６９）。そして、記憶部５４内の景品管理データ５４２について当選の景品の在庫数をひとつ減じる内容に更新して（ステップＳ７１）、くじ引きの処理を完了する。
また、当落決定処理の結果がはずれの場合には、制御部５５は、その通信部５３からデジタルサイネージ装置２に対してはずれであることを通知して（ステップＳ７３）、くじ引きの処理を完了する。

このように、表情認識処理手段２３２が、複数種類の表情ごとに求めた個々の表情点数をサーバ装置５に送信し、サーバ装置５の制御部５５は、くじ引き処理手段として、複数種類の表情の各々に対応するくじ引き処理を行うと共に、表情認識処理手段２３２が求めた複数種類の表情の表情点数によりユーザーの顔画像が最も近い表情を求め、当該表情に対応するくじ引き処理の結果を採用する処理を行っている。
このため、ユーザーの最も顕著な表情をくじ引きの結果に反映させることが可能である。

［第二の実施形態］
以下に、本発明の第二の実施の形態について図面を用いて説明する。ただし、以下に述べる第二の実施形態には、本発明を実施するために技術的に好ましい種々の限定が付されているが、発明の範囲を以下の実施形態及び図示例に限定するものではない。
この第二の実施の形態では、表示装置としてのデジタルサイネージ装置２Ａ単体により、くじ引きを実施する場合を例示する。

このデジタルサイネージ装置２Ａにおいて、図２及び図３に示すデジタルサイネージ装置２と同一の構成については同符号を付して重複する説明は省略する。また、デジタルサイネージ装置２と同一の構成については図２又は図３を参照する。
そして、以下の説明では、デジタルサイネージ装置２Ａがデジタルサイネージ装置２と異なる点のみについて説明する。
このデジタルサイネージ装置２Ａは、記憶部２５に格納された処理プログラム２５１により、その制御部２３が、図１０に示すように、顔検出処理手段２３１、表情認識処理手段２３２、映像生成手段２３３に加えて、くじ引き処理手段２３４として機能する。なお、各手段２３１〜２３３の機能は図６において説明した内容と同一である。

このくじ引き処理手段２３４は、前述したサーバ装置５の制御部５５が行っていたくじ引き処理手段としての機能と同じ機能を果たすことができる。
即ち、くじ引き処理手段２３４は、表情認識処理手段２３２から、総合的な表情点数Ｌのデータを受け取り、景品を特定する。即ち、デジタルサイネージ装置２Ａのデータ記憶部２５２には、複数のくじ引きの景品とそれぞれの総合的な表情点数Ｌの数値範囲との対応付けデータが格納されているので、くじ引き処理手段２３４はこれを参照する。
また、図５に示すサーバ装置５が保有していた景品管理データと同じデータがデータ記憶部２５２に格納されている。
従って、くじ引き処理手段２３４は、総合的な表情点数Ｌにより景品を特定すると、当落決定処理を行う。当落決定処理は、乱数発生処理を行い、得られた乱数が予め定めた当たり判定の数値範囲内に属するか否かによって当落を決定する。
このくじ引き処理手段２３４は、総合的な表情点数Ｌによってくじ引きの当選確率を変動させても良い。
さらにくじ引き処理手段２３４は、当落決定処理を行って当たりが発生した場合には、景品管理データに対して、その時の景品の在庫数を一つ減じる書き換え処理を実行する。
そして、くじ引き処理手段２３４は、くじ引きの当落結果及び当選時の景品を映像生成手段２３３に通知する。

このように、デジタルサイネージ装置２Ａは、制御部２３がくじ引き処理手段２３４として機能し、これによりサーバ装置５を使用せずにくじ引きを行うことを可能とする。
かかるデジタルサイネージ装置２Ａのくじ引きの処理について図１１のフローチャートに基づいて説明する。

まず、デジタルサイネージ装置２Ａはくじ引きの前段階の処理として総合的な表情点数Ｌを取得するまでの処理を実行する（ステップＳ１０１）。この処理は、デジタルサイネージ装置２が行うステップＳ１〜Ｓ１５までの処理（図７参照）と同一であるため説明は省略する。
くじ引きの前段階の処理により得られた、総合的な表情点数Ｌに基づいて、くじ引き処理手段２３４は、景品を特定し（ステップＳ１０３）、当落決定処理を実行する（ステップＳ１０５）。つまり、乱数を発生させてそれが当たりの数値範囲内か否かを判定する（ステップＳ１０７）。

これにより、当たりと判定した場合には、くじ引き処理手段２３４は、データ記憶部２５２内の景品管理データについて当選の景品の在庫数をひとつ減じる内容に更新する（ステップＳ１０９）。
そして、映像生成手段２３３は、表示部２４０において、くじ引きが当たりであること及び景品内容を通知する画面を表示する（ステップＳ１１１）。

さらに、くじ引きが当たりの際には、制御部２３は、データ記憶部２５２から景品内容に応じた電子クーポンのクーポンデータを呼び出して、携帯端末４へ送信可能な状態で待機する。待機中は、表示部２４０において、携帯端末４をデジタルサイネージ装置２のリーダライター部３１へかざすように受け渡しの手順を示したガイド画面を表示する（ステップＳ１１３）。
そして、携帯端末４がリーダライター部３１へかざされると、クーポンデータを送信して、処理全体を終了する。

また、映像生成手段２３３は、くじ引きの結果が外れの場合には、表示部２４０において、くじ引きが外れであることを通知する画面を表示して処理全体を終了する（ステップＳ１１５）。

デジタルサイネージ装置２Ａは、その制御部２３が、撮像画像から顔検出処理を行う顔検出処理手段２３１と、予め定められた条件に従って、撮像部３０による撮像画像から検出された顔画像が複数種類の表情のいずれに近いかに応じて数値化した表情点数を求める表情認識処理手段２３２と、表示部２４０に画像表示を行う映像生成手段２３３と、表情認識処理手段２３２による表情点数に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段２３４として機能している。
従って、デジタルサイネージ装置２Ａ単独により、ユーザーに対する情報表示や画像表示だけでなく、くじ引きへの参加を促すことができ、注目度、広告効果、集客効果の向上を図ることが可能となる。また、表示システム１と同様にユーザーの表情を加味してくじ引きの結果を変動させることが可能である。

また、デジタルサイネージ装置２Ａの場合も、表情認識処理手段２３２が複数の表情の表情点数を統合して一つの総合的な表情点数Ｌを求めているので、ユーザーの複雑な感情を表情に表している場合でも、それらを加味してくじ引きの結果に反映することが可能である。
さらに、デジタルサイネージ装置２Ａの場合も、映像生成手段２３３は、撮像部３０による撮像が行われる前に表示部２４０で所定の演出映像を表示させるので、当該映像をユーザーが見たときの反応が表れた表情を反映したくじ引きを行うことができる。

［デジタルサイネージ装置におけるくじ引きの処理の他の例］
上記デジタルサイネージ装置２Ａの表情認識処理手段２３２は、各種の表情の表情点数を統合して総合的な表情点数Ｌを算出した上で、くじ引き処理手段２３４がくじ引き処理を行っているが、総合的な表情点数Ｌを算出しないで、各種の表情の表情点数からくじ引き処理手段２３４がくじ引き処理を行うことも可能である。
その場合の制御部２３における全体的なくじ引きの処理について図１２のフローチャートを参照して説明する。

まず、デジタルサイネージ装置２Ａはくじ引きの前段階の処理として複数の表情ごとの表情点数を取得するまでの処理を実行する（ステップＳ１２１）。この処理は、デジタルサイネージ装置２が行うステップＳ１〜Ｓ１５までの処理（図７参照）において、式(1)による表情点数の統合を行う前までの処理と同一であるため説明は省略する。

そして、くじ引きの前段階の処理により各表情の表情点数を取得すると、くじ引き処理手段２３４は、全種類の表情について当落決定処理を実行する（ステップＳ１２３）。なお、この場合には、各種の表情ごとに予め景品が決められているものとする。また、各表情の当落決定処理において、個々に表情点数に基づいて当選確率を変動させても良い。

そして、全種類の表情について当落決定処理が終わると、くじ引き処理手段２３４は、表情認識処理手段２３２から取得した各表情の表情点数の中から値が最大となる表情を特定する。そして、表情点数が最大の表情に対応する当落決定処理結果をくじ引きの結果として採用する（ステップＳ１２５）。
くじ引き処理手段２３４は、採用した当落決定処理結果を参照して、くじ引きが当たりかはずれかを判定する（ステップＳ１２７）。

これにより、当たりと判定した場合には、くじ引き処理手段２３４は、データ記憶部２５２内の景品管理データについて当選の景品の在庫数をひとつ減じる内容に更新する（ステップＳ１２９）。そして、映像生成手段２３３は、表示部２４０において、くじ引きが当たりであること及び景品内容を通知する画面を表示する（ステップＳ１３１）。

さらに、くじ引きが当たりの際には、制御部２３は、表示部２４０において、携帯端末４をデジタルサイネージ装置２のリーダライター部３１へかざす手順を示したガイド画面を表示して（ステップＳ１３３）、リーダライター部３１へかざされた携帯端末４にクーポンデータを送信して、処理全体を終了する。
また、映像生成手段２３３は、くじ引きの結果が外れの場合には、表示部２４０において、くじ引きが外れであることを通知する画面を表示して処理全体を終了する（ステップＳ１３５）。

このように、くじ引き処理手段２３４が、複数種類の表情の各々に対応するくじ引き処理を行うと共に、表情認識処理手段２３２が求めた複数種類の表情の表情点数によりユーザーの顔画像が最も近い表情を求め、当該表情に対応するくじ引き処理の結果を採用する処理を行っている。
このため、デジタルサイネージ装置２Ａは、ユーザーの最も顕著な表情をくじ引きの結果に反映させることが可能である。

［その他］
上記第二の実施形態のデジタルサイネージ装置２Ａの表情認識処理手段２３２における各表情の表情点数を求める場合にも、adaboostのアルゴリズムではなく、個別空間法を用いて表情点数を求めても良い。

また、第一及び第二の実施の形態では、くじ引きの景品を携帯端末４により取得する場合を例示したが、店頭でクーポン券や商品を直接手渡しすることにより、携帯端末４を使用しない表示システムを構築することも可能である。

また、第一の実施の形態では、デジタルサイネージ装置２が単体である場合を例示したが、例えば、複数の提携店舗ごとにデジタルサイネージ装置２を設置し、これら複数のデジタルサイネージ装置２が全てネットワークＮを通じてサーバ装置５と接続された表示システム１を構築することも可能である。この場合、離れている各店舗で個々に受け渡しが行われる景品の在庫を一括して管理することができる。

また、第一又は第二の実施の形態において、サーバ装置５におけるくじ引きの処理又はデジタルサイネージ装置２Ａにおけるくじ引きの処理は、ユーザーの顔画像の総合的な表情点数Ｌを求め、景品を特定してからさらに乱数により当落を判定しているが、この当落決定を省略しても良い。例えば、総合的な表情点数Ｌの数値範囲としてはずれの範囲も加えることで、総合的な表情点数Ｌのみを利用して当落を決定することが可能である。

また、デジタルサイネージ装置２又は２Ａにおいて、予めユーザーに対してユーザー情報を要求し、くじ引き処理手段としてのサーバ装置５の制御部５５又はくじ引き処理手段２３４は、取得したユーザー情報も加味してくじ引き処理を実行しても良い。例えば、ユーザー情報としてユーザーの年齢等を要求し、くじ引き処理において、ユーザーの年齢に係数を乗じて総合的な表情点数Ｌに加算する、或いは、ユーザーの年齢に応じて景品を決定し、総合的な表情点数Ｌに応じて当選確率を変動させる等の処理を行っても良い。

また、デジタルサイネージ装置２又は２Ａにおいて、ユーザーに対して、複数回の撮像及び顔検出処理を行い、それぞれの顔画像から表情点数を取得しても良い。その場合、映像生成手段２３３が所定の演出映像を流している間に複数回の撮像を行うことが望ましい。
このように、複数回の撮像により複数の表情点数を取得した場合には、それらの平均値に基づいてくじ引きの処理を行うことが望ましい。

また、本発明は上記第一と第二の実施形態に限らず適宜変更可能である。
例えば、本実施形態では、デジタルサイネージ装置２との通信を行うため、それ専用のアプリケーションを実行するようになっているが、これ以外にも携帯端末４に搭載されているインターネットブラウザによってネット上のアプリケーションを実行することでデジタルサイネージ装置２との通信を行うことも可能である。

本発明のいくつかの実施形態を説明したが、本発明の範囲は、上述の実施の形態に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。

〔付記〕
＜請求項１＞
画像を表示する表示部と、
撮像を行う撮像部と、
前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段と、
前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段と、
前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段と、
を備えることを特徴とする表示装置。
＜請求項２＞
前記表情認識処理手段は、予め定められた条件に従って、前記撮像部による撮像画像から検出された顔画像が複数種類の表情のいずれに近いかに応じて数値化した表情点数を求め、
前記くじ引き処理手段は、前記表情認識処理手段による表情点数に基づいて結果が変動するくじ引き処理を行うことを特徴とする請求項１記載の表示装置。
＜請求項３＞
前記表情認識処理手段は、前記撮像部による撮像画像から検出された顔画像を複数種類の表情ごとに数値化し、これらを統合して一つの表情点数を求めることを特徴とする請求項２記載の表示装置。
＜請求項４＞
前記表情認識処理手段は、前記撮像部による撮像画像から検出された顔画像を複数種類の表情ごとに数値化して個別に表情点数を求め、
前記くじ引き処理手段は、前記複数種類の表情の各々に対応するくじ引き処理を行うと共に、前記表情認識処理手段が求めたそれぞれの表情点数により前記顔画像が最も近い表情を求め、当該表情に対応するくじ引き処理の結果を採用することを特徴とする請求項２記載の表示装置。
＜請求項５＞
前記撮像部による撮像が行われる前に前記表示部で所定の映像を表示させる映像生成手段を備えることを特徴とする請求項１から４のいずれか一項に記載の表示装置。
＜請求項６＞
画像を表示する表示部と撮像を行う撮像部とを有する表示装置のコンピュータを、
前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段、
前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段、
前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段、
として機能させることを特徴とするプログラム。
＜請求項７＞
表示装置とサーバ装置とを備える表示システムであって、
前記表示装置は、
画像を表示する表示部と、
撮像を行う撮像部と、
前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段と、
前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段と、を備え、
前記サーバ装置は、
前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段を備えることを特徴とする表示システム。

１ 表示システム
２，２Ａ デジタルサイネージ装置
４ 携帯端末
５ サーバ装置
２３ 制御部
２５ 記憶部
２７ 画像形成部
３０ 撮像部
３１ リーダライター部
４５ 記憶部
４６ 制御部
５４ 記憶部
５５ 制御部（くじ引き処理手段）
２３１ 顔検出処理手段
２３２ 表情認識処理手段
２３３ 映像生成手段
２３４ くじ引き処理手段
２４０ 表示部
２５１ 処理プログラム
２５２ データ記憶部
４５１ クーポン取得アプリ
４５２ クーポンデータ
５４１ 処理プログラム
５４２ 景品管理データ
Ｌ 表情点数

Claims (7)

1. 画像を表示する表示部と、
   撮像を行う撮像部と、
   前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段と、
   前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段と、
   前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段と、
   を備えることを特徴とする表示装置。
2. 前記表情認識処理手段は、予め定められた条件に従って、前記撮像部による撮像画像から検出された顔画像が複数種類の表情のいずれに近いかに応じて数値化した表情点数を求め、
   前記くじ引き処理手段は、前記表情認識処理手段による表情点数に基づいて結果が変動するくじ引き処理を行うことを特徴とする請求項１記載の表示装置。
3. 前記表情認識処理手段は、前記撮像部による撮像画像から検出された顔画像を複数種類の表情ごとに数値化し、これらを統合して一つの表情点数を求めることを特徴とする請求項２記載の表示装置。
4. 前記表情認識処理手段は、前記撮像部による撮像画像から検出された顔画像を複数種類の表情ごとに数値化して個別に表情点数を求め、
   前記くじ引き処理手段は、前記複数種類の表情の各々に対応するくじ引き処理を行うと共に、前記表情認識処理手段が求めたそれぞれの表情点数により前記顔画像が最も近い表情を求め、当該表情に対応するくじ引き処理の結果を採用することを特徴とする請求項２記載の表示装置。
5. 前記撮像部による撮像が行われる前に前記表示部で所定の映像を表示させる映像生成手段を備えることを特徴とする請求項１から４のいずれか一項に記載の表示装置。
6. 画像を表示する表示部と撮像を行う撮像部とを有する表示装置のコンピュータを、
   前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段、
   前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段、
   前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段、
   として機能させることを特徴とするプログラム。
7. 表示装置とサーバ装置とを備える表示システムであって、
   前記表示装置は、
   画像を表示する表示部と、
   撮像を行う撮像部と、
   前記撮像部による撮像画像から顔検出処理を行い、人物の顔画像を検出する顔検出処理手段と、
   前記顔検出処理手段によって検出された顔画像の表情を認識する表情認識処理手段と、を備え、
   前記サーバ装置は、
   前記表情認識処理手段により認識された表情に基づいて結果が変動するくじ引き処理を行うくじ引き処理手段を備えることを特徴とする表示システム。

Images