JP6260105B2 - 表示装置及び表示システム - Google Patents

Description

本発明は、表示装置及び表示システムに係り、特にクーポン券などの景品を発行可能な表示装置及び表示システムに関する。

従来、例えばデジタルサイネージ装置などの表示装置においては、広告画像の内容を容易に変更することができるため、最新の情報を常に閲覧者に提供できる点で優れた広告効果を発揮する（例えば特許文献１参照）。
近年では、ユーザが所有する携帯端末と表示装置とを通信させることにより、表示中の広告内容に関連した景品（例えばクーポン券など）を表示装置から携帯端末へと転送する技術も開発されている。

特開２０１２−１２８２１０号公報

ところで、景品発行型の表示装置であっても広告効果をより高めることが望まれている。
そこで本発明の課題は、より高い広告効果を発揮することのできる表示装置及び表示システムを提供することである。

以上の課題を解決するため、本発明の一の態様によれば、
表示部と、
前記表示部に表示される映像に関連した音声を出力する音声出力部と、
音声が入力される音声入力部と、
前記音声出力部から出力した音声と、前記音声入力部から入力された音声とを複数の比較条件毎に比較してそれぞれの近似具合を求め、当該近似具合により決定された比較条件に基づいて景品情報の内容を決定する制御部とを備えることを特徴とする表示装置が提供される。

本発明によれば、より高い広告効果を発揮することができる。

本実施形態に係る表示システムの概略構成を示すブロック図である。 本実施形態に係るデジタルサイネージ装置の主制御構成を示すブロック図である。 本実施形態に係るスクリーン部の概略構成を示す正面図である。 本実施形態に係る景品情報における当選確率の一例を示す表である。 本実施形態に係る携帯端末の主制御構成を示すブロック図である。 本実施形態に係るデジタルサイネージ装置で実行されるくじ引き処理の流れを示すフローチャートである。 本実施形態に係るデジタルサイネージ装置で実行される近似具合算出処理の流れを示すフローチャートである。 本実施形態に係る出力音声と入力音声とのそれぞれの音声波形を時間軸（横軸）-音程軸（縦軸）線図にプロットしたイメージ図である。

以下に、本発明を実施するための最良の形態について図面を用いて説明する。ただし、以下に述べる実施形態には、本発明を実施するために技術的に好ましい種々の限定が付されているが、発明の範囲を以下の実施形態及び図示例に限定するものではない。

図１は本実施形態に係る表示システムの概略構成を示すブロック図である。表示システム１には、本発明に係る表示装置としてのデジタルサイネージ装置２と、ネットワークＮを介してデジタルサイネージ装置２に通信自在なサーバ３と、例えばＮＦＣなどの近距離無線通信技術によってデジタルサイネージ装置２に通信自在な携帯端末４とが備えられている。

図２はデジタルサイネージ装置２の主制御構成を示すブロック図である。デジタルサイネージ装置２は、人物画像の映像光を照射する投影部２１と、投影部２１から照射された映像光を背面で受けて前面に投影する人型のスクリーン部２２とを備えている。

投影部２１は、画像や音声からなるコンテンツデータに基づいて各部を制御する制御部２３と、制御部２３に接続され、当該制御部２３から出力された映像データを映像光に変換してスクリーン部２２に向けて照射するプロジェクタ２４と、各コンテンツデータを記憶する記憶部２５と、ネットワークＮを介してサーバ３と通信する通信部２６とを備えている。

次に、スクリーン部２２について説明する。
図３は、スクリーン部２２の概略構成を示す正面図である。図３に示すようにスクリーン部２２には、人物の上半身が表示される表示部２７と、表示部２７を支持する台座２８とが備えられている。
表示部２７の外形は人物の上半身を模した形状に形成されている。表示部２７は、映像光の照射方向に対して略直交する例えばアクリル板などの一枚の透光板２９により形成されている。透光板２９の背面には背面投影用のフィルムスクリーンが積層され、なおかつフィルムスクリーンの背面にはフィルム状のフレネルレンズが積層されている。そして、表示部２７における人物の目に対応する部分には、例えばカメラなどの撮像部３０が設けられている。この撮像部３０が表示部２７に対向する空間の映像をリアルタイムに撮像している。
台座２８には、携帯端末４と近距離通信し携帯端末４に対して情報を読み書きするためのリーダライター部（近距離通信部）３１と、ボタン式の操作部３２と、スピーカなどの音声出力部３３と、マイクなどの音声入力部３４とが設けられている。
リーダライター部３１、操作部３２、音声出力部３３、音声入力部３４及び撮像部３０は、図２に示すように制御部２３に接続されている。

記憶部２５には、各コンテンツデータ以外にも景品情報が記憶されている。景品情報とは、デジタルサイネージ装置２と携帯端末４とが通信をする際に実行されるくじ引きに関する情報であり、くじ引きの当選確率や、当選時に提供される景品の内容等を含んでいる。

この景品情報は、音声出力部３３から出力した音声と、音声入力部３４から入力された音声とを比較して求められた近似具合に基づいて、その内容が決定されるようになっている。
図４は、景品情報における当選確率の一例を示す表である。この例では、景品として１等、２等、３等が用意されている。また、音声出力部３３から出力した音声と、音声入力部３４から入力された音声とが完全に一致した場合を１００点、全く似ていない場合を０点とする。近似具合が７０点以下であると、１等の当選確率が５％、２等の当選確率が１０％、３等の当選確率が２０％、それ以外がはずれに設定されている。近似具合が７１点以上８０点以下であると、１等の当選確率が１０％、２等の当選確率が２０％、３等の当選確率が４０％、それ以外がはずれに設定されている。近似具合が８１点以上９０点以下であると、１等の当選確率が１５％、２等の当選確率が３０％、３等の当選確率が５０％、それ以外がはずれに設定されている。近似具合が９１点以上であると、１等の当選確率が２０％、２等の当選確率が３０％、３等の当選確率が５０％、はずれはなしに設定されている。このように、近似具合によって各等の当選確率が変動するようになっている。

制御部２３はリーダライター部３１に対して携帯端末４がかざされると、読み取り時においては携帯端末４に記憶されている情報を、リーダライター部３１を介して読み出す。他方、書き込み時においては制御部２３は書き込み情報を、リーダライター部３１を介して携帯端末４に記憶させる。
また、制御部２３は、操作部３２からの操作信号に基づいて、操作内容に関連したコンテンツデータを記憶部２５から読み出し、プロジェクタ２４及び音声出力部３３を制御する。
制御部２３は、撮像部３０から得られた画像や、音声入力部３４から得られた音声を解析し、その解析内容に関連したコンテンツデータを記憶部２５から読み出して、プロジェクタ２４及び音声出力部３３を制御する。
ここで、記憶部２５には、ユーザにものまねを促しそのものまねの近似具合によってくじ引きを実行するものまねコンテンツデータがコンテンツデータとして記憶されている。このものまねコンテンツデータが記憶部２５から読み出された場合、制御部２３は、ものまねコンテンツデータに基づいてプロジェクタ２４及び音声出力部３３を制御する。これにより、ユーザは音声出力内容に基づいてものまねを行う。ものまねにより発生された音声は音声入力部３４を介して制御部２３に入力される。制御部２３は、音声出力部３３から出力した音声と、音声入力部３４から入力された音声とを周知の音声認識手段を用いることで比較して近似具合を求め、当該近似具合に基づいて景品情報の内容を決定する。出力音声と入力音声との比較においては、音程、リズム、イントネーションの３つの比較条件から、それぞれの近似具合を求め、最も近似具合の高いものを景品情報の決定に反映させる。

なお、本実施形態では、出力音声と入力音声との比較を、音程、リズム、イントネーションの３つの比較条件のそれぞれで行う場合を例示して説明するが、これらを複合的に評価してもよい。またこれら３つの比較条件以外の条件を用いて近似具合を求めてもよい。

制御部２３は、携帯端末４からの情報や、操作部３２からの操作信号によっては、通信部２６を制御してサーバ３と通信を行う。通信により得られた情報は記憶部２５に格納される。

図５は、携帯端末４の主制御構成を示すブロック図である。
携帯端末４は、例えば携帯電話、スマートフォン、タブレット式端末などの携帯機器である。図５に示すように携帯端末４には、例えば表示部４１と、操作部４２と、通信部４３と、近距離通信部４４と、記憶部４５と、これらを制御する制御部４６とが設けられている。
表示部４１は例えば液晶パネルや有機ＥＬパネルなどから構成されている。
操作部４２は例えばタッチパネルや、操作キーなどである。
通信部４３は３ＧやＬＴＥ、Ｗｉ−Ｆｉなどの規格に応じた通信を行う。
近距離通信部４４は例えばＮＦＣなどの近距離無線通信技術によってデジタルサイネージ装置２のリーダライター部３１と通信を行う。
記憶部４５には、デジタルサイネージ装置２との通信を行うためのアプリケーションが記憶されている。デジタルサイネージ装置２との通信を行うためのアプリケーションとしては、クーポン取得アプリなどが挙げられる。
制御部４６は、近距離通信部４４がデジタルサイネージ装置２のリーダライター部３１に接近すると、クーポン取得アプリを起動し、近距離通信部４４及びリーダライター部３１を介してデジタルサイネージ装置２と情報の送受を実行する。

次に、本実施形態の作用について説明する。
デジタルサイネージ装置２で実行されるくじ引き処理について説明する。図６はくじ引き処理の流れを示すフローチャートである。
デジタルサイネージ装置２の制御部２３は、リーダライター部３１に対して携帯端末４から情報が入力されたり、操作部３２からの操作信号が入力されたりすることで、くじ引き処理の実行が指示されると、くじ引き処理を実行する。

ステップＳ１では、制御部２３は、ものまねコンテンツデータを記憶部２５から読み出し、当該ものまねコンテンツデータを基にプロジェクタ２４及び音声出力部３３を制御する。これにより、ユーザにものまねを促す画像及び音声が出力される。

ステップＳ２では、ユーザが発したものまねの音声が音声入力部３４から入力されるので、制御部２３はこの入力音声を認識する。
ステップＳ３では、制御部２３は、近似具合算出処理時を実行する。

図７は近似具合算出処理の流れを示すフローチャートである。
ステップＳ３１では、制御部２３は、コンテンツデータを基にした出力音声と、音声入力部３４からの入力音声とのそれぞれの音程、音長を解析する。
図８は、出力音声と入力音声とのそれぞれの音声波形を時間軸（横軸）-音程軸（縦軸）線図にプロットしたイメージ図である。図８中、実線が出力音声の一音分の音程及び音長を示し、点線が入力音声の一音分の音程及び音長を示している。ステップＳ３１では、このような出力音声と入力音声との波形が時間軸-音程軸線図に出力される。

ステップＳ３２では、制御部２３は比較条件の一つである音程の近似具合を求める。音程の近似具合を求める際には、出力音声と入力音声との各音の音程の差ｄ１に基づいて決定する。具体的には差ｄ１が小さいほど高得点とし、差ｄ１が大きいほど低得点とする。そして、各音程毎の得点を積算して積算値（実測音程値）を求める。また、どの音程も完全に一致した場合の理想的な積算値（理想音程値）も求める。そして、以下の式によって、全体的な音程の近似値が求められる。
全体的な音程の近似値＝（実測音程値／理想音程値）×１００（点）

ステップＳ３３では、制御部２３は比較条件の一つであるリズムの近似値を求める。リズムの近似具合を求める際には、出力音声と入力音声との各音の音長の差ｄ２に基づいて決定する。具体的には差ｄ２が小さいほど高得点とし、差ｄ２が大きいほど低得点とする。そして、各音程毎の得点を積算して積算値（実測音長値）を求める。また、どの音程も完全に一致した場合の理想的な積算値（理想音長値）も求める。そして、以下の式によって、全体的な音長の近似値が求められる。
全体的な音長の近似値＝（実測音長値／理想音長値）×１００（点）

ステップＳ３４では、制御部２３は比較条件の一つであるイントネーションの近似具合を求め、近似具合算出処理を終了する。イントネーションの近似具合を求める際には、出力音声の全体的な波形と、入力音声の全体的な波形とがどれだけ似ているかによって決定する。具体的に、図８の例では、第五音を頂点として、第一音〜第五音までが上昇傾向、第五音〜第九音までが下降傾向となっている。これら上昇傾向及び下降傾向が出力音声と入力音声とで似ていれば高得点とし、似ていなければ低得点とする。上昇傾向及び下降傾向の比較は、例えば出力音声及び入力音声の波形を微分することで求まる傾きを基準にして行うことが挙げられる。そして、全体的なイントネーションの近似値は、各音程毎の微分値を積算して積算値（実測微分値）を求める。また、どの音程も完全に一致した場合の理想的な積算値（理想微分値）も求める。そして、以下の式によって、全体的なイントネーションの近似値が求められる。
全体的なイントネーションの近似値＝（実測微分値／理想微分値）×１００（点）

図６のステップＳ４では、制御部２３は、３つの比較条件の近似具合のうち、最高点の近似具合に基づいて景品情報の内容を決定する。

ステップＳ５では、制御部２３は乱数を発生させて景品情報内の当選率と比較することでくじ引きを実行する。
ステップＳ６では、制御部２３は、プロジェクタ２４を制御して、くじ引きの結果を表示する。
ステップＳ７では、制御部２３は、くじ引きの結果がハズレの場合はそのまま終了し、当たりの場合はステップＳ８に移行する。

ステップＳ８では、制御部２３は、プロジェクタ２４を制御して、近距離通信要求表示を実行する。
ステップＳ９では、制御部２３は、リーダライター部３１と携帯端末４とが通信可能な状態か否かを判断し、通信可能な状態であればステップＳ１０に移行し、通信ができない状態であればステップＳ８に移行して、携帯端末４がリーダライター部３１にかざされるまで待機する。
ステップＳ１０では、制御部２３は、ステップＳ４で選択した景品情報から、くじ引きの当選結果に対応した景品を取得し、リーダライター部３１を介して携帯端末４に出力する。これにより、景品がユーザに提供される。

以上のように、本実施形態によれば、音声出力部３３から出力した音声と、音声入力部３４から入力された音声とを比較して求められた近似具合に基づいて景品情報の内容が決定されているので、出力音声に対するものまねの修練度によって景品情報を異ならせることができる。したがって、ユーザの能力によって景品情報を異ならせることができ、興趣性の高い広告を出力することができる。
また、広告したい内容に関連した出力音声に設定しておけば、ユーザがものまねをして楽しみながらその内容を復唱することになるので、ユーザ自身に好意的にすり込まれることとなる。このため、広告の内容に対しても好印象を与えることができる。
また、周りの観客にもものまねの内容が伝播するので、より一層広告効果が高められる。
これらのことより、広告効果を高めることが可能となる。

また、デジタルサイネージ装置２で決定した景品情報がリーダライター部３１から携帯端末４に出力されているので、紙などの別の媒体に出力しなくとも、ユーザが所有する携帯端末４に直接景品を提供することができる。

また、表示部２７の外形が人型であるために、ものまねする相手があたかもその場にいるような臨場感を醸し出すことができ、興趣性をより高めることができる。

なお、本発明は上記実施形態に限らず適宜変更可能である。
例えば上記実施形態では、表示装置として投影式のデジタルサイネージ装置２を例示して説明したが、液晶パネル或いは有機ＥＬパネルを用いたデジタルサイネージ装置を表示装置として適用することも可能である。

また、本実施形態では、デジタルサイネージ装置２との通信を行うため、それ専用のアプリケーションを実行するようになっているが、これ以外にも携帯端末４に搭載されているインターネットブラウザによってネット上のアプリケーションを実行することでデジタルサイネージ装置２との通信を行うことも可能である。

また、当選確率を決定する対象となった比較条件毎に景品の内容を変更することも可能である。これにより、当選により提供される景品にバリエーションを持たせることができ、興趣性を高めることが可能である。
また、本実施形態では、音程、音長、イントネーションの最高点に基づいて景品情報の内容を決定したがこれに限らず、上記３つの点数に基づいて決定してもよいし、任意の二つを選んでもよい。また、近似具合は、上記３つに限らなく、他の要素でもよい。

また、上記実施形態では、くじ引き処理全体をデジタルサイネージ装置２で実行する場合について例示したが、くじ引き処理におけるくじ引き（ステップＳ５）をサーバ３で実行することも可能である。この場合、デジタルサイネージ装置２の制御部２３で求められた近似具合が通信部２６を介して入力されると、当該近似具合に基づいてサーバ３が景品情報の内容を決定し、当該決定した景品情報をデジタルサイネージ装置２に出力するようになっている。

本発明のいくつかの実施形態を説明したが、本発明の範囲は、上述の実施の形態に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。

〔付記〕
＜請求項１＞
表示部と、
前記表示部に表示される映像に関連した音声を出力する音声出力部と、
音声が入力される音声入力部と、
前記音声出力部から出力した音声と、前記音声入力部から入力された音声とを比較して近似具合を求め、当該近似具合に基づいて景品情報の内容を決定する制御部とを備えることを特徴とする表示装置。
＜請求項２＞
請求項１記載の表示装置において、
前記制御部は、
前記音声出力部から出力した音声の音程と、前記音声入力部から入力された音声の音程とを比較して近似具合を求め、当該近似具合に基づいて前記景品情報の内容を決定することを特徴とする表示装置。
＜請求項３＞
請求項１又は２記載の表示装置において、
前記制御部は、
前記音声出力部から出力した音声の音長と、前記音声入力部から入力された音声の音長とを比較して近似具合を求め、当該近似具合に基づいて前記景品情報の内容を決定することを特徴とする表示装置。
＜請求項４＞
請求項１〜３のいずれか一項に記載の表示装置において、
前記制御部は、
前記音声出力部から出力した音声のイントネーションと、前記音声入力部から入力された音声のイントネーションとを比較して近似具合を求め、当該近似具合に基づいて前記景品情報の内容を決定することを特徴とする表示装置。
＜請求項５＞
請求項１〜４のいずれか一項に記載の表示装置において、
携帯端末と近距離通信を行うための近距離通信部を備え、
前記制御部は、決定した前記景品情報を前記近距離通信部から前記携帯端末に出力させることを特徴とする表示装置。
＜請求項６＞
請求項１〜５のいずれか一項に記載の表示装置において、
前記表示部は、人型に形成されていることを特徴とする表示装置。
＜請求項７＞
表示装置と、
前記表示装置とネットワークを介して接続されたサーバとを備え、
前記表示装置は、
表示部と、
前記表示部に表示される映像に関連した音声を出力する音声出力部と、
音声が入力される音声入力部と、
前記サーバと通信を行うための通信部と、
前記音声出力部から出力した音声と、前記音声入力部から入力された音声とを比較して近似具合を求める制御部とを備え、
前記サーバは、
前記制御部で求められた前記近似具合が前記通信部を介して入力されると、当該近似具合に基づいて景品情報の内容を決定し、決定した前記景品情報を前記表示装置に出力することを特徴とする表示システム。
＜請求項８＞
請求項７記載の表示システムにおいて、
前記表示装置は、
携帯端末と近距離通信を行うための近距離通信部を備え、
決定した前記景品情報を前記近距離通信部から前記携帯端末に出力させることを特徴とする表示システム。
＜請求項９＞
請求項７又は８記載の表示システムにおいて、
前記表示部は、人型に形成されていることを特徴とする表示システム。

１ 表示システム
２ デジタルサイネージ装置（表示装置）
３ サーバ
４ 携帯端末
２１ 投影部
２２ スクリーン部
２３ 制御部
２４ プロジェクタ
２５ 記憶部
２６ 通信部
２７ 表示部
２８ 台座
３０ 撮像部
３１ リーダライター部（近距離通信部）
３２ 操作部
３３ 音声出力部
３４ 音声入力部
Ｎ ネットワーク

Claims (9)

1. 表示部と、
   前記表示部に表示される映像に関連した音声を出力する音声出力部と、
   音声が入力される音声入力部と、
   前記音声出力部から出力した音声と、前記音声入力部から入力された音声とを複数の比較条件毎に比較してそれぞれの近似具合を求め、当該近似具合により決定された比較条件に基づいて景品情報の内容を決定する制御部とを備えることを特徴とする表示装置。
2. 請求項１記載の表示装置において、
   前記制御部は、
   前記音声出力部から出力した音声の音程と、前記音声入力部から入力された音声の音程とを比較して近似具合を求め、当該近似具合に基づいて前記景品情報の内容を決定することを特徴とする表示装置。
3. 請求項１又は２記載の表示装置において、
   前記制御部は、
   前記音声出力部から出力した音声の音長と、前記音声入力部から入力された音声の音長とを比較して近似具合を求め、当該近似具合に基づいて前記景品情報の内容を決定することを特徴とする表示装置。
4. 請求項１〜３のいずれか一項に記載の表示装置において、
   前記制御部は、
   前記音声出力部から出力した音声のイントネーションと、前記音声入力部から入力された音声のイントネーションとを比較して近似具合を求め、当該近似具合に基づいて前記景品情報の内容を決定することを特徴とする表示装置。
5. 請求項１〜４のいずれか一項に記載の表示装置において、
   携帯端末と近距離通信を行うための近距離通信部を備え、
   前記制御部は、決定した前記景品情報を前記近距離通信部から前記携帯端末に出力させることを特徴とする表示装置。
6. 請求項１〜５のいずれか一項に記載の表示装置において、
   前記表示部は、人型に形成されていることを特徴とする表示装置。
7. 表示装置と、
   前記表示装置とネットワークを介して接続されたサーバとを備え、
   前記表示装置は、
   表示部と、
   前記表示部に表示される映像に関連した音声を出力する音声出力部と、
   音声が入力される音声入力部と、
   前記サーバと通信を行うための通信部と、
   前記音声出力部から出力した音声と、前記音声入力部から入力された音声とを複数の比較条件毎に比較して近似具合を求める制御部とを備え、
   前記サーバは、
   前記制御部で求められたそれぞれの前記近似具合が前記通信部を介して入力されると、当該近似具合により決定された比較条件に基づいて景品情報の内容を決定し、決定した前記景品情報を前記表示装置に出力することを特徴とする表示システム。
8. 請求項７記載の表示システムにおいて、
   前記表示装置は、
   携帯端末と近距離通信を行うための近距離通信部を備え、
   決定した前記景品情報を前記近距離通信部から前記携帯端末に出力させることを特徴とする表示システム。
9. 請求項７又は８記載の表示システムにおいて、
   前記表示部は、人型に形成されていることを特徴とする表示システム。

Images