JP5981137B2 - 対話形システム及び方法 - Google Patents

Description

本発明は、店内に展示される又はショッピングウィンドウ内に陳列される製品などの展示アイテムのうちの１つ以上に、観察者の注意を引き付けるために、展示アイテムの観察者の動作に適合されるサウンドスケープ及び照明を自動的に生成するための対話形システム及び方法に関する。

人々の注意を引くことは、ますます困難なことになっている。例えば、店内には、見るものがたくさんある。しかしながら、店内に展示されている又はショッピングウィンドウ内に陳列されている各物体又はアイテムに、ただ、音声又は照明を付加するだけでは、買い物客の注意を或るアイテムに引き付けるのには適さない、耳障りで、気が散る環境をもたらすであろう。国際特許出願公開第WO2008/012717A2号は、アイテムを見ている少なくとも１人の観察者の凝視を検出するよう構成される検出器を少なくとも１つ含む対話形方法及びシステムを開示している。処理装置は、前記アイテムの１アイテム当たりの累積的な凝視期間などの凝視期間を計算し、累積的な凝視期間に従って最も見られているアイテムを識別し、最も見られているアイテムに関する情報を供給するよう構成される。表示装置は、情報、最も見られているアイテムのリスト、最も見られているアイテムを表現したもの、及び／又は最も見られているアイテムのうちの少なくとも１つのアイテムに関するオーディオ／ビジュアルショーを表示する。少なくとも１つのアイテム及び／又はアイテムを表現したものが、最も見られているアイテム及び／又はアイテムを表現したものの他のものより大々的に表示され得る。

本発明の目的は、更に改善された対話性を備える対話形システム及び方法を提供することである。

この目的は、独立請求項によって解決される。他の実施例は、従属請求項によって示されている。

この発明の基本的な考えは、或る観察者又はユーザの動作の検出に応じて照明及びサウンドスケープの生成を始動し、生成される前記照明及びサウンドスケープを前記観察者又はユーザの動作に適合させることによって、対話性を改善するというものである。従って、或る動作、例えば、店内の顧客の或る製品を見る動作が、特定の音声及び照明又は他の様式のような特別なイベントを始動させ得る。一例は、物体を凝視するによって興味を示す人である。この動作は、検出され、凝視されている前記物体にとりわけ空間的に焦点を合わせた音声及び照明イベントを始動させ得る。従って、本発明は、サウンドスケープ及び照明の生成を、よりユーザの動作に適合させることによって、対話性を改善することを可能にする。これは、前記ユーザの、興味のあるアイテムに対する注目の増大をもたらし得る。

本発明は、或る実施例においては、
− 展示アイテムに興味を示している少なくとも１人の観察者の動作を検出するよう適合される少なくとも１つの検出器と、
− 前記少なくとも１つの検出器から受け取った情報に応じて、検出された前記動作に適合したサウンドスケープ及び照明が生成されるように、照明及び音響システムを制御するよう適合される制御装置とを有する対話形システムを提供する。

観察者は、人、とりわけ、例えば新製品の展示などの展示アイテム、例えばショッピングウィンドウ内に展示されている服又は靴を見てまわり、眺めている大型店内の買い物客であり得る。

本発明の他の実施例によれば、前記検出器は、前記展示アイテムの前に立って、前記展示アイテムを見ている前記少なくとも１人の観察者を含む領域を監視するよう構成されるカメラであり得る。前記カメラは、ビデオカメラ又はフォトカメラであり得る。前記フォトカメラは、定期的に写真を撮るよう構成され得る。カメラは、例えば店内の、風景からのたくさんの情報の取得を可能にし、従って、生成される前記サウンドスケープ及び照明の、観察者の動作への適合の改善を手助けすることを可能にする。しかしながら、前記検出器は、観察者の動作を検出することができるあらゆる種類のセンサ、例えば、タッチセンサ、又は凝視若しくはジェスチャ検出センサであり得る。

本発明の他の実施例においては、前記制御装置は、前記カメラから受け取ったビデオ情報を、前記少なくとも１人の観察者の特徴について分析し、前記照明及び音響システムの制御を、前記分析の結果に適合させるよう、適合され得る。例えば、前記制御装置は、前記観察者のジェスチャ、又は例えば身長、性別、年齢などの前記観察者の特徴を求めて、前記ビデオ情報を処理し得る。例えば、前記制御装置は、ビデオ情報処理によって、前記観察者が、背の高い人又は子供であることを検出してもよく、又は前記観察者の動きの速度を分析することによって、前記観察者の年齢を検出してもよく、又は前記観察者の形状を分析することによって、前記観察者の性別を検出してもよい。

本発明の他の実施例においては、前記検出器は、観察者の動作として、前記観察者の、展示アイテムへの凝視、前記観察者による展示アイテムへの接触、及び前記観察者の、展示アイテムに対する指さしのうちの１つ以上を検出するよう適合され得る。これらの動作は、観察者の展示アイテムへの興味の表れであり、はっきりと識別されることができ、従って、前記観察者の前記アイテムへの興味を更に高めるための適切なサウンドスケープ及び照明の生成を改善することを可能にする。

本発明の他の実施例によれば、前記制御装置は、前記少なくとも１つの検出器から受け取った情報に応じて、生成される前記サウンドスケープ及び／又は照明が空間的に観察者に限定されるように、前記照明及び音響システムを制御するようにも適合され得る。空間的に限定されるサウンドスケープは、例えば、スピーカアレイによって生成され得る。前記スピーカアレイは、空間的に限定されるサウンドスケープを生成するために、信号処理装置によって制御される。空間的に限定される照明は、例えば、スポットライトで生成され得る。サウンドスケープ及び／又は照明の空間限定は、店内で、前記対話形システムの幾つかを、耳障りで、気が散る環境をもたらすことなく、並列に動作させることを可能にする。

本発明の実施例においては、前記制御装置は、前記少なくとも１つの検出器から受け取った情報に応じて、生成される前記照明及び／又はサウンドスケープが、観察者が興味を示している前記アイテムに関連するように、前記照明及び音響システムを制御するよう更に適合され得る。例えば、観察者が、高いヒールを備える靴に興味を示している場合、前記システムは、左から右へ行く高いヒールの音を含むサウンドスケープ、及び前記音と共に、同じく左から右へさまよい、最終的に前記靴の上で停止し、前記靴に強烈な光を当てる照明を生成し得る。

本発明の他の実施例は、
− 展示されるアイテムを照明するよう構成される幾つかの照明ユニットを備える照明システムと、
− 空間的に制御可能なサウンドスケープを作成するよう適合されるスピーカアレイを備える音響システムと、
− 本発明による上記のような対話形システムとを有する店の対話形システムに関する。

このシステムは、例えば、組込み照明及び音響システムを備える棚であり得る。前記棚は、新製品を展示し、本発明による新たな方法で買い物客の注意を引くことを可能にする。

更に、本発明の実施例は、
− 展示アイテムに興味を示している少なくとも１人の観察者の動作を検出する動作と、
− 前記動作の検出によって受け取った情報に応じて、検出された前記動作に適合したサウンドスケープ及び照明が生成されるように、照明及び音響システムを制御する動作とを有する対話形方法に関する。

本発明の実施例においては、前記検出する動作は、前記展示アイテムの前に立って、前記展示アイテムを見ている前記少なくとも１人の観察者を含む領域の監視と、前記監視から受け取ったビデオ情報の、前記少なくとも１人の観察者の特徴についての分析とを含み得る。

本発明の実施例においては、前記制御する動作は、前記照明及び音響システムの制御の、前記ビデオ情報の前記分析の結果に対する適合を含み得る。

本発明の実施例においては、前記検出する動作は、前記観察者の、展示アイテムへの凝視を検出する動作、前記観察者による展示アイテムへの接触を検出する動作、及び前記観察者の、展示アイテムに対する指さしを検出する動作のうちの１つ以上を含み得る。

本発明の他の実施例においては、前記制御する動作は、前記少なくとも１つの検出器から受け取った情報に応じた、生成される前記サウンドスケープ及び／又は照明が空間的に観察者に限定されるような、前記照明及び音響システムの制御を含み得る。

他の実施例においては、前記制御する動作は、前記少なくとも１つの検出器から受け取った情報に応じた、生成される前記照明及び／又はサウンドスケープが、観察者が興味を示している前記アイテムに関連するような、前記照明及び音響システムの制御を含み得る。

本発明の他の実施例によれば、コンピュータによって実行される場合に、本発明による上記の方法を実行することが可能なコンピュータプログラムが提供され得る。従って、本発明による方法は、例えば、新規な機能で拡張され得る既存の対話形システム、とりわけ、対話形ショッピングウインドウに適用されてもよく、例えば、ダウンロード接続を通じて、又は記録担体を介して、供給されるコンピュータプログラムを実行するよう適合される。

本発明の他の実施例によれば、本発明によるコンピュータプログラムを記憶する記録担体、例えば、ＣＤ−ＲＯＭ、ＤＶＤ、メモリーカード、フロッピー（登録商標）ディスク、又は電子アクセスのためにコンピュータプログラムを記憶するのに適した同様なデータ記憶媒体が、提供される。

最後に、本発明の実施例は、本発明による方法を実行するようプログラムされ、照明及び音響システムを制御するためのインタフェースを有するコンピュータを提供する。

下記の実施例を参照して、本発明のこれら及び他の態様を説明し、明らかにする。

以下、本発明を、例示的な実施例に関してより詳細に説明する。しかしながら、本発明は、これらの例示的な実施例に限定されない。

製品展示のために店内に取り付けられ得る、本発明による対話形システムの実施例を示す。 図１の対話形システムの制御装置を実現するコンピュータによって実行され得る、本発明による対話形方法の実施例のフローチャートを示す。

以下において、機能的に同様又は同一の素子は、同じ参照符号を持ち得る。

図１は、アイテムを展示するために設けられる、店のための対話形システム１０を示している。システム１０は、検出器としての２つのビデオカメラ１２と、ビデオカメラ１２からのビデオ情報を処理し、幾つかのスポットライト２１を備える照明システム２０及び幾つかのスピーカ２３を備える音響システム２２を、受け取ったビデオ情報に応じて制御するための制御装置１８とを有する。照明システム２０及び音響システム２２は、新製品などの幾つかのアイテム１６にわたって配設される。ビデオカメラ１２は、各カメラが、例えば店内の台の上又は棚の中に配置され得るアイテム１６の前の領域２４を監視するように、調節される。

カメラ１２からのビデオ情報は、制御装置１８に送信される。制御装置１８は、監視領域２４内の観察者１４の動作を検出するように受信情報を処理するよう構成されるコンピュータである。前記動作は、例えば、展示アイテム１６のうちの１つの凝視、アイテム１６のうちの１つに対する指さし、又はジェスチャ、移動、歩行、アイテム１６をよりよく見るためのかがみ込みなどのような他の動作であり得る。本発明との関連においては、動作は、観察者の位置、又は観察者の身長、性別若しくは年齢などの観察者の個人的特徴も含み得る。これらの特徴は、受け取ったビデオ情報を画像処理ソフトで処理することによって取得され得る。画像処理ソフトは、ビデオから人を判別し、例えば前記人の形状を分析することによって前記人の身長及び性別を推定することができる。従って、制御装置１８は、ビデオ情報の処理及び分析から、観察者１４の動作に関する幾つかの情報を取得し得る。赤外線存在検出器、運動検出器などの他の検出器も利用され得ることに注意されたい。本発明の目的のためには、検出器が、監視領域内の人の、アイテムに対する指さし又は或る方向への移動などの少なくとも１つの動作を検出することができることが不可欠である。

制御装置１８は、更に、受け取ったビデオ情報に応じて、検出された動作に依存して、動作に適合したサウンドスケープ及び照明が生成されるようにして、照明システム２０及び音響システム２２を制御するよう適合される。この生成は、制御装置に予めプログラムされてもよく、例えば、観察者１４が或るアイテム１６を凝視する場合、前記或るアイテム１６に関する空間限定サウンドスケープ２６が生成されてもよく、スポットライト２８が、アイテム１６の中で前記或るアイテム１６が目立つように、前記或るアイテム１６を照明してもよい。生成されるサウンドスケープは、例えば、アイテムに関する一般的な音声であってもよいが、刺激的な音楽、又は製品についての情報であってもよい。自動的に生成されるサウンドスケープを空間的に限定し、生成される照明を空間的に限定することによって、店内の他の対話形システムとの干渉が回避され得る。空間的に限定されるサウンドスケープの生成は、信号処理装置で行われ得る。信号処理装置は、観察者の位置に向けられ、観察者が立っている或る特定の領域に制限されるサウンドスケープが生成されるようにアレイのスピーカ２３を制御し得る。

図２は、本発明による対話形方法の実施例を実施するためのアルゴリズムのフローチャートを示している。このアルゴリズムは、制御装置１８において実施され、制御装置１８の処理装置によって実行されてもよい。前記方法は、観察者１４の動作を検出するための第１ステップＳ１０と、ステップ１０において検出された動作に応じて照明システム２０及び音響システム２２を制御するための第２ステップＳ１２とを有する。

ステップＳ１０は、領域２４を監視するためのステップＳ１４を有する。このステップは、展示されるアイテムの前の或る領域を監視するためのビデオカメラなどの検出器の制御、例えば、監視されるべき領域に対するビデオカメラの焦点合わせ、更なる処理のためのビデオカメラからのビデオ情報などの検出器からの情報の送信を含み得る。

ステップＳ１２は、領域を監視するものから受け取った情報を分析するためのステップＳ１６、とりわけ、図１に関して上で記載したような観察者１４の動作を検出するためのビデオ情報の処理及び分析を有する。このステップにおいては、例えば、ビデオカメラによって撮られた画像を処理して、画像内の人を検出し、前記画像で記録されている前記人の或る動作を判別するために、受け取った情報における動作検出用の専用アルゴリズムによって、受け取った情報が処理される。この作業を達成するために、画像認識及び処理アルゴリズムが用いられ得る。ステップＳ１２の他のステップＳ１８においては、照明及び音響システムの制御が、ステップ１６において実行された分析及び処理の結果に従って適合される。これは、例えば、分析が、観察者が、或るアイテムに興味を示している、例えば、前記アイテムを凝視している又はこのアイテムを指さしているという結果になった場合の、或るサウンドスケープ及びスポットライティングの生成を有する。サウンドスケープは、展示アイテムに関するサウンドスケープを備えるデータベースに記憶されるサウンドライブラリからロードされ得る。照明は、例えば、興味のあるアイテムを、観察者が前記アイテムをよりよく見ることができるように、照明するスポットライトを、照明システムが作動させるよう適合され得る。

上記を要約すると、本発明の或る基本的な特徴は、或る動作、例えば、店内の顧客が或る製品を見ることが、音声、照明若しくは他の様式、又はそれらの組み合わせのようなイベントを始動させ得ることである。店の特定の領域、買い物客の存在又は特定の挙動が、サウンドスケープの再生を始動させ得る。例えば、ドレススーツ又はイブニングドレスの領域は、スタイリッシュなディナーの音声、又は劇場で公演が開始する直前に聞こえる音声を始動させ得る。または、スポーツウェアの領域は、スポーツイベントの音声を始動させ得る。これらの音声は、他の買い物客を妨害しないために低強度レベルで生成され得る。音声は、スピーカアレイを用いて、ユーザの視界に空間的に限定され得る。買い物客の身長、性別、年齢のような態様は、刺激を決定し得る。例えば、年配者は、派手で、慌ただしい効果を嫌うが、それらは、子供には歓迎される。また、反応性スポットライトは、人間の存在を検出すると、照明の特性を適合させ、製品に関連する経験に関するサウンドスケープを再生する。第１実施例を参照されたい。空間的な効果を付加することは可能であろう。例えば、高いヒールを備える靴のためには、高いヒールの音が、左から右へ行ってもよく、又は買い物客の進行方向に買い物客に同行してもよい。

本発明は、とりわけ、店、展示会、又は誰かの注意をアイテム若しくは物体に引くための他のあらゆる環境に適用され得る。

本発明の機能の少なくとも幾つかは、ハードウェア又はソフトウェアによって実施され得る。ソフトウェアで実施する場合には、本発明を実施する単一の又は多数のアルゴリズムを処理するために、単一の又は多数の標準的なマイクロプロセッサ又はマイクロコントローラが用いられ得る。

「有する」は、他の要素又はステップを除外せず、単数形表記は、複数性を除外しないことに注意されたい。更に、請求項における如何なる参照符号も、本発明の範囲を限定するものとして解釈されるべきではない。

Claims (11)

1. 少なくとも１人の観察者の動作であって、前記動作が、前記少なくとも１人の観察者の展示アイテムへの興味の表れである動作を検出する少なくとも１つの検出器と、
   前記少なくとも１つの検出器から受け取った情報に応じて、検出された前記動作に適合したサウンドスケープ及び照明が生成されるように、照明及び音響システムを制御する制御装置とを有する対話形システムであって、
   前記制御装置が、更に、前記少なくとも１つの検出器から受け取った情報に応じて、生成される前記サウンドスケープが、前記少なくとも1人の観察者の位置に向けられ、前記少なくとも1人の観察者が存在する空間領域に限定されるように、前記音響システムを制御し、
   前記検出器が、前記展示アイテムの前に立って、前記展示アイテムを見ている前記少なくとも１人の観察者を含む領域を監視するよう構成されるカメラであり、
   前記制御装置が、更に、前記カメラから受け取ったビデオ情報を、前記少なくとも１人の観察者の個人的特徴について分析し、前記サウンドスケープ及び照明の特性を前記分析の結果に適合させるように前記照明及び音響システムを制御する対話形システム。
2. 前記検出器が、観察者の動作として、前記観察者の、展示アイテムへの凝視、前記観察者による展示アイテムへの接触、及び前記観察者の、展示アイテムに対する指さしのうちの１つ以上を検出する請求項１に記載のシステム。
3. 前記制御装置が、更に、前記少なくとも１つの検出器から受け取った情報に応じて、生成される前記照明が空間的に前記少なくとも１人の観察者が興味を示している前記アイテムの方へ限定されるように、前記照明システムを制御する請求項１又は２に記載のシステム。
4. 前記制御装置が、更に、前記少なくとも１つの検出器から受け取った情報に応じて、生成される前記照明及び／又はサウンドスケープが、観察者が興味を示している前記アイテムに関連するように、前記照明及び音響システムを制御する請求項１乃至３のいずれか一項に記載のシステム。
5. 展示されるアイテムを照明するよう構成される幾つかの照明ユニットを備える照明システムと、
   空間的に制御可能なサウンドスケープを作成するスピーカアレイを備える音響システムと、
   請求項１乃至４のいずれか一項に記載の対話形システムとを有する店の対話形システム。
6. 少なくとも１人の観察者の動作であって、前記動作が、前記少なくとも１人の観察者の展示アイテムへの興味の表れである動作を検出する動作と、
   前記動作の検出によって受け取った情報に応じて、検出された前記動作に適合したサウンドスケープ及び照明が生成されるように、照明及び音響システムを制御する動作とを有する対話形方法であって、
   前記制御する動作が、少なくとも１つの検出器から受け取った情報に応じた、生成される前記サウンドスケープが、前記少なくとも1人の観察者の位置に向けられ、前記少なくとも1人の観察者が存在する空間領域に限定されるような、前記音響システムの制御を更に有し、
   前記検出する動作が、前記展示アイテムの前に立って、前記展示アイテムを見ている前記少なくとも１人の観察者を含む領域の監視を有し、且つ前記監視から受け取ったビデオ情報の、前記少なくとも１人の観察者の個人的特徴についての分析を有し、
   前記制御する動作が、前記サウンドスケープ及び照明の特性を前記ビデオ情報の前記分析の結果に適合させるように前記照明及び音響システムを制御する対話形方法。
7. 前記検出する動作が、前記観察者の、展示アイテムへの凝視を検出する動作、前記観察者による展示アイテムへの接触を検出する動作、及び前記観察者の、展示アイテムに対する指さしを検出する動作のうちの１つ以上を有する請求項６に記載の方法。
8. 前記制御する動作が、前記少なくとも１つの検出器から受け取った情報に応じた、生成される前記照明が空間的に前記少なくとも1人の観察者が興味を示している前記アイテムの方へ限定されるような、前記照明システムの制御を更に有する請求項６又は７に記載の方法。
9. 前記制御する動作が、前記少なくとも１つの検出器から受け取った情報に応じた、生成される前記照明及び／又はサウンドスケープが、観察者が興味を示している前記アイテムに関連するような、前記照明及び音響システムの制御を更に有する請求項６乃至８のいずれか一項に記載の方法。
10. コンピュータによって実行される場合に、請求項６乃至９のいずれか一項に記載の方法を実行することが可能なコンピュータプログラム。
11. 請求項１０に記載のコンピュータプログラムを記憶する記録担体。

Images