JP6186306B2 - 配信サーバ装置、配信システム及びプログラム - Google Patents

Description

本発明は、配信サーバ装置、配信システム及びプログラムに関する。

サイネージやテレビなどを閲覧するユーザに対して、詳細な情報をユーザが携帯する通信端末に配信する配信システムが普及している。この種の配信システムでは、例えば近距離無線通信を用い、サイネージ近傍にいる全ユーザの通信端末に同一の情報を配信する。あるいは、ユーザ毎に異なる情報を配信する場合、配信システムは、例えば予めユーザの通信端末とテレビとの間で認証を行うことにより、テレビの利用履歴や現在の閲覧内容に関連した情報をユーザの通信端末に配信する。このような配信システムには、例えば予めユーザ識別情報及びユーザ属性情報を登録しておき、ユーザが携帯する通信端末の位置に基づいて、当該通信端末に情報やサービスを提供する技術が適用可能である（例えば、特許文献１参照。）。
しかしながら、大画面を用いたサイネージや、商品を陳列した店舗などを閲覧するユーザに対する配信システムでは、大画面又は店舗の中の注目対象がユーザ毎に異なる。このため、大画面又は店舗を用いた配信システムでは、各ユーザの注目対象やユーザ属性に基づいて配信情報を変更することが望ましい。

ここで、配信可能な領域内に多数のユーザが存在する場合、各ユーザの注目対象やユーザ属性に基づいて配信情報を変更するためには、各ユーザの通信端末をあらかじめ配信システム側に登録しておく必要がある。

また近年、生体情報を用いた生体認証システムが増加してきている。生体認証システムでは、あらかじめユーザの生体情報を生体認証システム側に登録しておき、サービスの利用に先行して、ユーザの生体認証を実行する。

特開２００４−２４２０５２号公報

以上説明したように、従来の配信システムでは、各ユーザの注目対象やユーザ属性に基づいて配信情報を変更するためには、各ユーザの通信端末をあらかじめ配信システム側に登録しておく必要がある。

また、このような配信システムを有する複数のサービス提供者が存在した場合、サービス提供者ごとにユーザＩＤ等を登録する必要性が生じるため、ユーザにとってはどのサービス提供者にユーザＩＤやユーザ属性を登録したか、分からなくなる可能性がある。

更に、ユーザが閲覧対象の画面内容に注目していなくても任意の情報が配信される場合があり、ユーザが不快に感じる可能性がある。

この発明は上記事情に着目してなされたもので、その目的とするところは、各ユーザの注目対象が異なる場合において、予めユーザ登録をしなくても、注目対象に応じた配信情報を各ユーザの通信端末に配信し得る配信サーバ装置、配信システム及びプログラムを提供することにある。

上記目的を達成するためにこの発明の一つの観点は、以下のような構成要素を備えている。すなわち、閲覧対象に含まれる複数の注目対象を個別に閲覧するユーザが携帯する通信端末と、前記通信端末に通信可能な配信サーバ装置とを備えた配信システムであって、前記配信サーバ装置は、記憶手段、照合手段、選択手段及び配信手段を備えている。

前記記憶手段は、前記注目対象の識別情報毎に、前記通信端末に通信可能な配信情報と、少なくともユーザ属性又は興味情報を含むユーザ情報とを関連付けて記憶する。

前記照合手段は、前記通信端末から通信端末識別情報が付与された前記ユーザの第１の生体情報を取得し、当該第１の生体情報と、環境設置型センサから取得したユーザの第２の生体情報とを照合する。

前記選択手段は、前記ユーザの第２の生体情報に基づいて、当該ユーザが閲覧する注目対象の識別情報と当該ユーザのユーザ情報とが推定されると、推定結果に応じて前記記憶手段内の配信情報を選択する。

前記配信手段は、前記照合手段による照合結果に応じて前記第２の生体情報に最も類似する第１の生体情報に付与された通信端末識別情報に基づいて、当該第２の生体情報に基づく推定結果に応じて前記選択された配信情報を配信する。

また、この発明の一つの観点は以下のような態様を備えることを特徴とする。
一つの態様は、前記通信端末と前記配信サーバ装置とは近距離無線通信を用いて通信可能である。また、前記照合手段は、前記近距離無線通信を用いて通信可能な範囲内に存在する前記通信端末から前記第１の生体情報を取得する。

したがって、この発明の一つの観点によれば、前記通信端末から取得したユーザの第１の生体情報と、環境設置型センサから取得したユーザの第２の生体情報とを照合し、当該ユーザが閲覧する注目対象の識別情報と当該ユーザのユーザ情報とが推定されると、推定結果に応じて前記記憶手段内の配信情報を選択し、照合結果に応じて前記第２の生体情報に最も類似する第１の生体情報に付与された通信端末識別情報に基づいて、前記選択された配信情報を配信する。

このため、配信システムは、閲覧対象に含まれる複数の注目対象を個別に閲覧するユーザが通信端末を携帯するだけで、各ユーザの注目対象が異なる場合において、予めユーザ登録をしなくても、注目対象に応じた配信情報を各ユーザの通信端末に配信することができる。

また、一つの態様によれば、前記照合手段が、前記近距離無線通信を用いて通信可能な範囲内に存在する前記通信端末から前記第１の生体情報を取得する。このため、多数の第１の生体情報と照合する処理時間を短縮することができる。

すなわちこの発明によれば、各ユーザの注目対象が異なる場合において、予めユーザ登録をしなくても、注目対象に応じた配信情報を各ユーザの通信端末に配信し得る配信サーバ装置、配信システム及びプログラムを提供することができる。

この発明に係わる各実施形態の概要を述べるための模式図である。 本発明の第１の実施形態に係る配信システム及びその周辺構成を示すブロック図である。 同実施形態における意味情報ＤＢを説明するための模式図である。 同実施形態における意味情報ＤＢを説明するための模式図である。 同実施形態における生体情報格納部Ａを説明するための模式図である。 同実施形態における生体情報格納部Ｂを説明するための模式図である。 同実施形態における配信情報ＤＢを説明するための模式図である。 同実施形態における配信情報格納部を説明するための模式図である。 同実施形態における動作を説明するためのシーケンス図である。 同実施形態における変形例を説明するためのシーケンス図である。 本発明の第２の実施形態に係る配信システム及びその周辺構成を示すブロック図である。 同実施形態における個人情報取得部を説明するための模式図である。 同実施形態における配信情報ＤＢを説明するための模式図である。

以下、図面を参照してこの発明に係わる実施形態を説明するが、その前に、各実施形態の概要を述べる。
図１は各実施形態の概要を述べるための模式図である。

図１において、ディスプレイ装置１０の表示画面を閲覧対象とする。なお、閲覧対象としては、これに限らず、例えば、大画面サイネージ、商品ディスプレイ及びスポーツなどが適宜、使用可能となっている。

ユーザは、通信端末２０を携帯し、閲覧対象に含まれる複数の注目対象ｔｇを個別に閲覧する。ユーザが集まる領域の近傍には、カメラ等を含む環境設置型センサ３０が設置されている。配信サーバ装置４０は、ユーザの通信端末２０と通信可能となっている。

配信サーバ装置４０の図示しない記憶手段は、注目対象ｔｇの識別情報毎に、通信端末２０に配信可能な配信情報Ｕk_Ｄと、少なくともユーザ属性又は興味情報を含むユーザ情報Ｚkとを関連付けて記憶する。

配信サーバ装置４０の照合機能は、通信端末２０から通信端末識別情報ＵＨjが付与されたユーザの第１の生体情報Ｘjを取得し、当該第１の生体情報Ｘjと、環境設置型センサ３０から取得したユーザの第２の生体情報Ｙkとを照合する。なお、照合する第２の生体情報Ｙkは、第１の生体情報Ｘjと同じ種類の生体情報である。

配信サーバ装置４０の選択機能は、ユーザの第２の生体情報Ｙkに基づいて、当該ユーザが閲覧する注目対象ｔｇの識別情報と当該ユーザのユーザ情報Ｚkとが推定されると、推定結果に応じて記憶手段内の配信情報Ｕk_Ｄを選択する。推定されるユーザ情報Ｚkは、例えば、視線Ｌの先にあるユーザの注目対象ｔｇの意味を示す興味情報、又は身体的特徴などのユーザ属性を含んでいる。

配信サーバ装置４０の配信機能は、照合結果に応じて第２の生体情報Ｙkに最も類似する第１の生体情報Ｘjに付与された通信端末識別情報ＵＨjに基づいて、当該第２の生体情報Ｙkに基づく推定結果に応じて当該選択された配信情報Ｕk_Ｄを配信する。

これにより、各ユーザの注目対象ｔｇが異なる場合において、予めユーザ登録をしなくても、注目対象ｔｇに応じた配信情報を各ユーザの通信端末２０に配信できる。

以上が第１の実施形態の概要である。第２の実施形態は、上述した閲覧対象をディスプレイ装置１０上の表示画面から実空間上に存在するものに変えた例であり、これに伴い、ディスプレイ装置１０に代えて、興味対象取得装置を用いている。以上が第２の実施形態の概要である。このような各実施形態は、例えば、ディスプレイ装置、通信端末、環境設置型センサ、配信サーバ装置又は興味対象取得装置としてコンピュータを機能させるためのプログラムを用いて実施してもよい。すなわち、各装置は、センサ又はメモリ等のハードウェア資源に協働する機能ブロックの機能をプログラムにより実現してもよい。

続いて、各実施形態を具体的に説明する。

＜第１の実施形態＞
図２は本発明の第１の実施形態に係る配信システム及びその周辺構成を示すブロック図であり、図３乃至図８は配信システム内のＤＢ又は格納部を説明するための模式図である。配信システムは、例えば、ディスプレイ装置１０に接続されている。また、配信システムは、例えば、通信端末２０、環境設置型センサ３０及び配信サーバ装置４０を備えている。通信端末２０としては、１台のみを図示するが、通常、複数台の通信端末が用いられる。

ここで、ディスプレイ装置１０は、ディスプレイ１１、コンテンツ格納部１２及び意味情報ＤＢ１３を備えている。「ＤＢ」は「データベース」の略語である。

ディスプレイ１１は、コンテンツ格納部１２内のコンテンツをユーザに閲覧させるための表示器である。

コンテンツ格納部１２は、ディスプレイ１１で表示するコンテンツが格納される記憶装置である。コンテンツとしては、蓄積された動画像や静止画に限らず、オンラインでリアルタイムに送信される動画像や静止画を含んでもよい。

意味情報ＤＢ１３は、コンテンツ格納部１２内のコンテンツと連動して、ディスプレイ１１に表示中のコンテンツ内の注目対象に対する情報を記憶する記憶装置である。具体的には例えば、意味情報ＤＢ１３は、図３及び図４に示すように、ディスプレイ１１の位置情報（ｘ，ｙ）及び時刻情報ｔに関連付けて、注目対象ｔｇの意味情報（例えば、○○選手、○色、など）が登録されている。 位置情報は、ディスプレイ上の位置を指定する情報であり、例えば、表示画面上の座標又は領域を指定する情報が使用可能となっている。座標を指定する場合、例えば、点（ｘ１，ｙ１）の位置を指定する情報（ｘ１，ｙ１）が使用可能となっている。領域を指定する場合、例えば矩形領域の左上隅の点（ｘ１，ｙ１）の位置と、右下隅の点（ｘ２，ｙ２）の位置とを指定する情報（ｘ１，ｙ１）（ｘ２，ｙ２）が使用可能となっている。また、領域を指定する場合、例えば、円形領域の中心点（ｘ０，ｙ０）の位置と、当該中心点からの距離ｒとを指定する情報｛（ｘ０，ｙ０），ｒ｝を用いてもよい。これに限らず、領域を指定する場合、当該領域を指定可能な任意の情報が使用可能となっている。注目対象ｔｇは、例えば、ユーザＵの視線Ｌの先にある対象であり、閲覧対象が動画像の場合、位置情報及び時刻情報により識別可能となっており、閲覧対象が静止画の場合、位置情報により識別可能となっている。

なお、コンテンツ格納部１２及び意味情報ＤＢは、別々の記憶装置として設けてもよく、同一の記憶装置における別々の記憶領域として設けてもよい。

このようなディスプレイ装置１０は、前述したテレビやサイネージに相当し、必須の構成ではない。例えば、閲覧対象が複数の商品を展示した商店の場合、ディスプレイ装置１０は省略可能である。但し、本実施形態では、ディスプレイ装置１０を用いる場合を述べる。ユーザは、ディスプレイ１１に表示されたコンテンツを閲覧し、何らかの興味を発する。このとき、ユーザの興味情報やユーザ属性は、環境設置型センサ３０が生体センサ３１から取得した生体情報（例えばユーザの視線Ｌやユーザの外観）により推定可能となっている。

通信端末２０は、生体センサ２１、生体情報取得部２２、生体情報格納部Ａ２３、端末情報送信部２４、配信情報受信部２５及び表示部２６を備えている。

生体センサ２１は、通信端末２０を携帯するユーザの生体情報を収集し、当該生体情報を生体情報取得部２２に送出する機能をもっている。生体情報としては、例えば画像情報、音声情報、体温情報、呼吸周波数、及び脈波情報などが適宜、使用可能となっている。また、生体センサ２１としては、通信端末２０内に組み込まれる内蔵型、及び通信端末２０に配線コードもしくは近距離無線通信を介して接続されてユーザに装着されるウェアラブル型のいずれも使用可能となっている。生体センサ２１としては、１個のみを図示するが、生体情報の種類に応じて複数個の生体センサを用いてもよい。

生体情報取得部２２は、生体センサ２１から各ユーザの第１の生体情報Ｘj（０＜ｊ＜ｎ）を取得し、第１の生体情報Ｘjに通信端末識別情報ＵＨjを付与して生体情報格納部Ａ２３に格納する機能をもっている。ここで、ｎは検出されたユーザ数である。第１の生体情報Ｘjは、１種類の生体情報に限らず、複数種類の生体情報の集合としてもよい。通信端末識別情報ＵＨjは、当該ユーザないしユーザが携帯中の通信端末２０を一意に特定できる情報であり、例えば通信端末２０の製造番号、通信で利用されるアドレス情報などである。

生体情報格納部Ａ２３は、図５に示すように、通信端末識別情報ＵＨjが付与された第１の生体情報Ｘjを格納する記憶装置である。

端末情報送信部２４は、通信端末２０の仕様情報を通信端末識別情報ＵＨjと共に、配信サーバ装置４０の配信情報選択部４２に送信する機能をもっている。仕様情報とは、例えば、端末の機種名であったり、あるいは、端末の通信方式、表示画面のドット数、プロセッサの処理能力などのように、端末の技術的な規格や処理能力を表す情報である。配信情報選択部４２では、この仕様情報に基づいて、ユーザの通信端末２０の仕様に適合した配信情報が選択される。

配信情報受信部２５は、配信サーバ装置４０から送信された配信情報を受信する機能をもっている。

表示部２６は、通常の表示デバイスであり、例えば、配信情報受信部２５により受信された配信情報を表示する機能をもっている。

環境設置型センサ３０は、生体センサ３１、個人情報取得部３２、ユーザ情報推定部３３、生体情報取得部３４及び生体情報格納部Ｂ３５を備えている。

生体センサ３１は、通信端末２０を携帯するユーザの生体情報を収集し、当該生体情報を個人情報取得部３２及び生体情報取得部３４に送出する機能をもっている。生体情報としては、例えば画像情報、マイクロ波レーダ情報、音声情報、脈波情報、皮膚電気情報及び体温情報などが適宜、使用可能となっている。また、生体センサ３１としては、ユーザから離れた状態で用いられるカメラ、マイクロ波レーダ及びマイク等や、ユーザに接触した状態で用いられる脈波センサ、皮膚電気活動センサ及び体温センサ等が、適宜、使用可能となっている。生体センサ３１としては、１個のみを図示するが、生体情報の種類に応じて複数個の生体センサを用いてもよい。

個人情報取得部３２は、生体センサ３１から得られた生体情報に基づいて、各ユーザの顔や動作、音声等を表す個人情報を取得する機能をもっている。ここで、個人情報としては、例えば、顔の向きや、指差す方向、注視点などを含んでもよい。

ユーザ情報推定部３３では、個人情報取得部３２から得られた個人情報に基づいて、各ユーザの興味情報や、年齢・性別などのユーザ属性を推定する機能をもっている。例えば、ユーザ情報推定部３３は、個人情報が表す顔の向きや、指差す方向、注視点などによって、ユーザが閲覧対象内のどの注目対象に、またはどの時間において、興味を持ったかを推定する。例えば、ユーザ情報推定部３３は、注視点の位置情報及び時刻情報に基づいて意味情報ＤＢ１３から意味情報を読み出し、当該意味情報をユーザの興味情報として推定可能である。なお、注目対象に注目するユーザの抽出に用いられる技術は、例えば、特開２００６−０６５４４７号公報に記載されている。

このとき、該当のユーザが顔の向き、指差す方向、注視点を変えたタイミングで、個人情報取得部３２がユーザ属性を取得して興味を推定する動作を行っても良い。また、画像解析等によって、年齢や性別、身長、体重、ファッション性等の推定を行い、ユーザ属性の一部とすることもできる。

ユーザが興味を示す方向にある対象の認識方法として次の２つの例が挙げられる。

一つ目は、閲覧対象がディスプレイの平面上に存在する場合、ユーザが注目した対象をディスプレイ位置情報と時刻情報で識別する例である。このような識別のための技術は、例えば、「大野健彦, 武川直樹, 吉川厚, “眼球形状モデルに基づく視線測定システム −視線入力デバイスの実現に向けて−”, 情報処理学会研究報告, 2001-HI-93, pp.47-54 (2001)」に記載されている。

二つ目は、ユーザが興味を示す対象が、ディスプレイ上ではなく、実空間上に存在する場合の例である。二つ目の例については、第２の実施形態で述べる。

また、ユーザ情報推定部３３では、推定したユーザ属性と興味情報とを含むユーザ情報Ｚkに、ユーザ識別情報Ｕk（０＜ｋ＜ｎ）を付与する機能をもっている。

ユーザ識別情報Ｕkは、ユーザ情報Ｚk、第２の生体情報Ｙk及び配信情報Ｕk_Ｄを互いに関連付けるための一時的な情報であり、Ｕkの値が互いに重複しない情報であれば任意の情報が使用可能となっている。ユーザ識別情報Ｕkとしては、例えば、環境設置型センサ３０が当該個人情報を取得したときの緯度・経度などの位置情報、時刻情報、当該個人に一時的に付与された順番、および乱数の組み合わせなどが、適宜、使用可能となっている。

生体情報取得部３４は、カメラや、組み込み型の生体センサ３１からユーザの第２の生体情報Ｙkを取得する機能をもっている。例えば、生体情報取得部３４は、カメラの画像解析やマイクロ波レーダ等によって、ユーザの心拍や呼吸等を示す生体情報を取得（推定）することができる。また、手すりや壁や床に、脈波センサや皮膚電気活動センサ、体温センサなどの生体センサ３１を組み込んでおき、生体情報取得部３４は、ユーザが生体センサ３１に触れた際に、生体センサ３１から第２の生体情報Ｙkを取得してもよい。

また、生体情報取得部３４は、別途、ユーザ情報Ｚkに付与されるユーザ識別情報Ｕkを当該取得した第２の生体情報Ｙkに付与し、当該ユーザ識別情報Ｕk及び第２の生体情報Ｙkを生体情報格納部Ｂ３５に格納する機能をもっている。なお、ユーザ識別情報Ｕkは、ユーザ情報Ｚkが推定される前に第２の生体情報Ｙkに付与されてもよく、ユーザ情報Ｚkが推定された後に第２の生体情報Ｙkに付与されてもよい。

第２の生体情報Ｙkは、１種類の生体情報に限らず、複数種類の生体情報を含んでもよい。また例えば、第２の生体情報Ｙkが複数種類の生体情報（例、顔画像と体温）を含む場合、ある種類（例、顔画像）の生体情報をユーザ情報Ｚkの推定に用い、他の種類（例、体温）の生体情報を照合に用いてもよい。このことは、以下の各実施形態でも同様である。この場合、必要があれば、複数種類の生体情報が同一のユーザから収集されるように、複数の生体センサ３１の位置や方向など（例、体温センサの位置と、カメラの撮影範囲など）を設定すればよい。この種の設定は、１種類の生体情報（例、１台のカメラから得られる画像情報）からユーザ情報Ｚk及び第２の生体情報Ｙkが得られる場合には、必要がない。

生体情報格納部Ｂ３５は、図６に示すように、ユーザ識別情報Ｕkが付与された第２の生体情報Ｙkを格納する記憶装置である。

配信サーバ装置４０は、配信情報ＤＢ４１、配信情報選択部４２、配信情報格納部４３、生体情報照合部４４及び情報配信部４５を備えている。

配信情報ＤＢ４１は、例えば図７に示すように、注目対象ｔｇの識別情報毎に、通信端末２０に配信可能な配信情報Ｕk_Ｄと、少なくともユーザ属性又は興味情報を含むユーザ情報Ｚkとを関連付けて記憶する記憶装置である。

ここで、注目対象の識別情報は、例えば、ユーザＵの視線Ｌの先にある注目対象を識別する情報であればよい。注目対象の識別情報の例としては、注目対象が動画像の場合には位置情報及び時刻情報が挙げられ、注目対象が静止画の場合には位置情報が挙げられる。

配信情報ＤＢ４１内の興味情報としては、図３に示した如き、意味情報ＤＢ１３内の意味情報を用いている。

配信情報選択部４２は、ユーザの第２の生体情報Ｙkに基づいて、当該ユーザが閲覧する注目対象ｔｇの識別情報と当該ユーザのユーザ情報Ｚkとが推定されると、推定結果に応じて配信情報ＤＢ４１内の配信情報Ｕk_Ｄを選択する機能をもっている。

配信情報格納部４３は、図８に示すように、配信情報選択部４２により選択された配信情報Ｕk_Ｄを格納する記憶装置である。この配信情報Ｕk_Ｄは、例えば、ユーザ識別情報Ｕkが付与されている。

生体情報照合部４４は、通信端末２０から通信端末識別情報ＵＨjが付与されたユーザの第１の生体情報Ｘjを取得し、当該第１の生体情報Ｘjと、環境設置型センサ３０から取得したユーザの第２の生体情報Ｙkとを照合する機能をもっている。

ここで、第１の生体情報Ｘjを取得する通信端末２０の範囲を、配信サーバ装置４０から近距離無線通信で通信可能な範囲の通信端末２０に限定すれば、多数の第１の生体情報Ｘjと照合する処理時間を短縮できる。近距離無線通信としては、例えば、到達距離が１０ｍ程度までのＢｌｕｅｔｏｏｔｈ（登録商標）や無線ＬＡＮ等の無線通信の技術が適宜使用可能となっている。

情報配信部４５は、当該照合結果に応じて第２の生体情報Ｙkに最も類似する第１の生体情報Ｘjに付与された通信端末識別情報ＵＨjに基づいて、当該第２の生体情報Ｙkに基づく推定結果に応じて当該選択された配信情報Ｕk_Ｄを配信する機能をもっている。

次に、以上のように構成された配信システムの動作について図９のシーケンス図を用いて説明する。

いま、ディスプレイ装置１０は、コンテンツ格納部１２内のコンテンツを画面に表示しているとする。

ユーザは、通信端末２０を携帯し、ディスプレイ装置１０に表示中のコンテンツに含まれる複数の注目対象ｔｇを個別に閲覧する。ディスプレイ装置１０の近傍には、カメラ等を含む環境設置型センサ３０及び配信サーバ装置４０が設置されている。

通信端末２０においては、生体情報取得部２２が、生体センサ２１からユーザの第１の生体情報Ｘjを取得し、第１の生体情報Ｘjに通信端末識別情報ＵＨjを付与して生体情報格納部Ａ２３に格納する（ＳＴ１Ａ）。

同様に、環境設置型センサ３０においては、生体情報取得部３４が、生体センサ３１からユーザの第２の生体情報Ｙkを取得し、第２の生体情報Ｙkにユーザ識別情報Ｕkを付与して生体情報格納部Ｂ３５に格納する（ＳＴ１Ｂ）。

配信サーバ装置４０においては、生体情報照合部４４が、通信端末２０から通信端末識別情報ＵＨjが付与された第１の生体情報Ｘjを取得すると共に、環境設置型センサ３０からユーザ識別情報Ｕkが付与された第２の生体情報Ｙkを取得する（ＳＴ２）。また、配信サーバ装置４０においては、ステップＳＴ２に並行して、配信情報選択部４２が、通信端末２０から通信端末識別情報ＵＨjが付与された仕様情報を取得してもよい。このとき、第１の生体情報Ｘjや仕様情報を取得する通信端末２０の範囲を、配信サーバ装置４０から近距離無線通信で通信可能な範囲の通信端末２０としてもよい。

一方、環境設置型センサ３０においては、個人情報取得部３２が、生体センサ３１から得られた第２の生体情報Ｙkに基づいて、各ユーザの顔や動作、音声等を表す個人情報を取得する。ユーザ情報推定部３３は、この個人情報に基づいて、ユーザの注目対象の識別情報を推定すると共に、当該ユーザの興味情報又はユーザ属性を含むユーザ情報Ｚkを推定し（ＳＴ３）、当該ユーザ情報Ｚkにユーザ識別情報Ｕkを付与する。

しかる後、配信サーバ装置４０においては、配信情報選択部４２が、当該推定された注目対象の識別情報と、（当該ユーザ識別情報Ｕkが付与された）ユーザ情報Ｚkとを取得する（ＳＴ４）。

配信情報選択部４２は、当該注目対象の識別情報とユーザ情報Ｚkとに基づいて、配信情報ＤＢ４１から配信情報Ｕk_Ｄを選択し（ＳＴ５）、当該配信情報Ｕk_Ｄ及び当該ユーザ識別情報Ｕkを配信情報格納部４３に格納する。

なお、配信情報ＤＢ４１は、図７に示したように、注目対象の識別情報毎に、そして、ユーザ情報Ｚk毎に対応して、配信情報が登録されている。例えば大きなスクリーン上でスポーツの試合が上映される場合、○○選手をよく見ている３０代男性のユーザに対し、○○選手の仕事術の配信情報が登録されている。また、○○選手をよく見ている３０代女性のユーザに対し、○○選手が好きな妻の手料理の配信情報が登録されている。また、注目対象が食品の場合、身長や体重等のユーザ属性から、各ユーザに適切なカロリーの食品を推薦する配信情報を登録しておくことも可能である。

また、配信情報は、さきに端末情報送信部２４から取得した仕様情報に適合するように選択してもよい。例えば、受信した全ての仕様情報を満たすように配信情報を選択してもよい。あるいは、生体情報照合部４４の照合結果に応じて第２の生体情報Ｙkに最も類似する第１の生体情報Ｘjに付与された通信端末識別情報ＵＨjが付与された仕様情報に基づいて配信情報を選択してもよい。

生体情報照合部４４においては、ステップＳＴ２で取得した第１の生体情報Ｘjと第２の生体情報Ｙkとを照合する（ＳＴ６）。

このとき、生体情報照合部４４は、任意のｊおよびｋについて、第１の生体情報Ｘjと第２の生体情報Ｙkとの全ての組み合わせについて類似度を算出する。なお、類似度の算出に用いる第１の生体情報Ｘjと第２の生体情報Ｙkは、同じ種類の生体情報であることを前提とする。例えば、第１の生体情報Ｘjの種類が呼吸周波数であれば、第２の生体情報Ｙkの種類も呼吸周波数であり、第１の生体情報Ｘjの種類が通信端末２０から収音した音声であれば、第２の生体情報Ｙkの種類も環境設置型センサ３０から収音した音声である。また、第１の生体情報Ｘjと第２の生体情報Ｙkとの照合性を高めるため、第１の生体情報Ｘj及び第２の生体情報Ｙkを取得した時点の時刻情報を補助的に利用してもよい。またあるいは、第１の生体情報Ｘjを取得する通信端末２０の範囲を、配信サーバ装置４０から近距離無線通信で通信可能な範囲の通信端末２０に限定すれば、多数の第１の生体情報Ｘjと照合する処理時間を軽減できる。

生体情報照合部４４は、全ての組み合わせにおいて類似度を算出した後、最も類似度の高い第１の生体情報Ｘjと第２の生体情報Ｙk（０＜ｊ＜ｎ，０＜ｋ＜ｎ）を送出する。詳しくは、生体情報照合部４４は、最高の類似度に基づき、通信端末識別情報ＵＨjが付与された当該第１の生体情報Ｘjと、ユーザ識別情報Ｕkが付与された当該第２の生体情報Ｙkとを照合結果｛ＵＨj, Ｘj｝,｛Ｕk, Ｙk｝として情報配信部４５に送出する。この場合、生体情報照合部４４は、照合結果｛ＵＨj, Ｘj｝,｛Ｕk, Ｙk｝のうち、付与された通信端末識別情報ＵＨj及びユーザ識別情報Ｕkのみを照合結果として情報配信部４５に送出してもよい。

いずれにしても、情報配信部４５は、照合結果に含まれるユーザ識別情報Ｕkに基づいて、配信情報格納部４３から配信情報Ｕk_Ｄを読み出し、当該配信情報Ｕk_Ｄを、照合結果に含まれる通信端末識別情報ＵＨjに基づいて通信端末２０に配信する（ＳＴ７）。

通信端末２０では、この配信情報Ｕk_Ｄを配信情報受信部２５が受信し、当該配信情報Ｕk_Ｄを表示部２６が表示する（ＳＴ８）。

上述したように本実施形態によれば、通信端末２０から取得したユーザの第１の生体情報Ｘjと、環境設置型センサ３０から取得したユーザの第２の生体情報Ｙkとを照合する。また、ユーザの第２の生体情報Ｙkに基づいて、当該ユーザが閲覧する注目対象ｔｇの識別情報と当該ユーザのユーザ情報Ｚkとが推定されると、推定結果に応じて配信情報ＤＢ４１内の配信情報Ｕk_Ｄを選択する。しかる後、照合結果に応じて第２の生体情報Ｙkに最も類似する第１の生体情報Ｘjに付与された通信端末識別情報ＵＨjに基づいて、推定結果に応じて選択された配信情報Ｕk_Ｄを配信する。

従って、各ユーザの注目対象ｔｇが異なる場合において、予めユーザ登録をしなくても、注目対象ｔｇに応じた配信情報を各ユーザの通信端末２０に配信することができる。

また、ユーザ登録をする必要がないため、複数のサービス提供者が存在した場合でも、ユーザは、サービス提供者毎のユーザ登録内容を失念する心配を解消できる。また、ユーザ登録をする必要がないため、ユーザ登録内容が漏洩する心配が無く、ユーザのプライバシを保護することができる。

また、ユーザの生体情報に基づいて、ユーザの注目対象の識別情報を推定する構成により、ユーザが注目していない対象に関する配信情報の配信を阻止することができる。

また、ユーザは、ユーザ登録をすることなく、通信端末２０だけでは得られにくいユーザ情報Ｚkに応じた配信情報を通信端末２０に受けることができる。

なお、本実施形態では、環境設置型センサ３０と配信サーバ装置４０とを分離した構成例を述べたが、これに限らず、配信サーバ装置４０が環境設置型センサ３０の機能ブロックの一部又は全部を更に備えた構成としてもよい。例えば、配信サーバ装置４０は、環境設置型センサ３０全体を更に備えてもよい。また例えば、配信サーバ装置４０は、環境設置型センサ３０の機能ブロックのうち、ユーザ情報推定部３３のみを更に備えてもよく、あるいは、個人情報取得部３２及びユーザ情報推定部３３のみを更に備えてもよい。このことは、以下の各実施形態でも同様である。

また、本実施形態では、２つの生体情報Ｘj，Ｙkの照合前に、第２の生体情報Ｙkからユーザ情報Ｚkを推定する場合を説明したが、これに限らず、図１０に示すように、生体情報の照合後に、ユーザ情報を推定するように変形してもよい。このことは、以下の各実施形態でも同様である。この変形例では、生体情報の照合により、最も類似度の高い生体情報Ｘj，Ｙkの組合せが決定した後に、受信した照合結果が示す最も類似度の高い第２の生体情報Ｙkに基づいてユーザ情報Ｚkを推定する（ステップＳＴ３−１〜ＳＴ３−３）。従って、この変形例によれば、第１の生体情報Ｘjに非類似の第２の生体情報Ｙkからユーザ情報Ｚkを推定する無駄な処理を解消することができる。

＜第２の実施形態＞
図１１は本発明の第２の実施形態に係る配信システム及びその周辺構成を示すブロック図であり、前述した図面と同一部分には同一符号を付してその詳しい説明を省略し、ここでは異なる部分について主に述べる。

すなわち、第２の実施形態は、第１の実施形態の変形例であり、上述した閲覧対象をディスプレイ装置１０上の表示画面から実空間上に存在するものに変えた例である。これに伴い、第２の実施形態は、図２に示したディスプレイ装置１０に代えて、図１１に示すように、対象収集センサ５１及び興味対象取得部５２を有する興味対象取得装置５０を備えている。

これに伴い、環境設置型センサ３０の個人情報取得部３２は、図１２に示すように、生体センサ３１から得られた画像情報から頭部方向推定技術によりユーザの注目方向（頭部方向）Ｈを推定し、当該注目方向Ｈを対象収集センサ５１に送出する機能が付加される。なお、この種の頭部方向推定技術は、例えば「大塚和弘, 大和淳司, 村瀬洋, “複数人物の対面会話シーンを対象とした画像中の人物頭部追跡に基づく会話構造のモデル化と確率的推論”, 画像の認識・理解シンポジウム (MIRU2006), pp.84-91 (2006)」に記載されている。

また、配信サーバ装置４０内の配信情報ＤＢ４１は、図７に示した位置情報及び時刻情報に代えて、図１３に示すように、注目対象ｔｇの識別情報として注目方向Ｈを用いている。また、配信情報及びユーザ情報としては、任意の情報が使用可能となっている。

ここで、対象収集センサ５１は、画像カメラであり、個人情報取得部３２から送出された注目方向Ｈに基づいて、注目方向Ｈの先の注目対象ｔｇを撮影し、得られた画像情報を興味対象取得部５２に送出する機能をもっている。

興味対象取得部５２は、対象収集センサ５１から得られた画像情報から画像認識技術を用いて注目対象ｔｇを認識し、認識した注目対象ｔｇの意味情報を推定し、推定された意味情報をユーザの興味情報として送出する機能をもっている。ユーザの興味情報の送出先は、ユーザ情報推定部３３又は配信情報ＤＢ４１である。例えば、配信情報ＤＢ４１の設定前には、送出先を配信情報ＤＢ４１とし、配信情報ＤＢ４１の設定後（配信システムの運用時）には、送出先をユーザ情報推定部３３とすればよい。なお、「興味対象取得部」の名称は、適宜、「注目対象認識部」又は「興味情報推定部」等の任意の名称に読み替えて構わない。

また、この種の画像認識技術は、例えば、「Jeon, J., Lavrenko, V. and Manmatha, R., "Automatic Image Annotation and Retrieval using Cross-Media Relevance Models", SIGIR'03, p.119-126, 2003.」に記載されている。

また、他の部分の構成は、第１の実施形態と同様である。

次に、以上のように構成された配信システムの動作について、前述した図９のシーケンス図を参照しながら説明する。

いま、ユーザは、通信端末２０を携帯し、実空間上に存在する閲覧対象に含まれる複数の注目対象ｔｇを個別に閲覧する。閲覧対象の近傍には、環境設置型センサ３０、配信サーバ装置４０及び興味対象取得装置５０が設置されている。

ここで、ステップＳＴ１Ａ、ＳＴ１Ｂ及びＳＴ２が前述同様に、実行されたとする。

一方、環境設置型センサ３０においては、個人情報取得部３２が、生体センサ３１から得られた第２の生体情報Ｙkに基づいて、各ユーザの顔や動作、音声等を表す個人情報を取得する。

このとき、個人情報取得部３２は、生体センサ３１から得られた第２の生体情報Ｙkに含まれる画像情報からユーザの注目方向（頭部方向）Ｈを推定し、当該注目方向Ｈを対象収集センサ５１に送出する。この注目方向Ｈを含む個人情報は、個人情報取得部３２からユーザ情報推定部３３に送出される。

対象収集センサ５１は、この注目方向Ｈに基づいて、注目方向Ｈの先の注目対象ｔｇを撮影し、得られた画像情報を興味対象取得部５２に送出する。

興味対象取得部５２は、この画像情報から注目対象ｔｇを認識し、認識した注目対象ｔｇの意味情報を推定し、推定された意味情報をユーザの興味情報として、注目方向Ｈと共に、ユーザ情報推定部３３に送出する。

ユーザ情報推定部３３は、個人情報取得部３２からの個人情報と、興味対象取得部５２からの興味情報及び注目方向Ｈに基づき、ユーザの注目対象の識別情報を推定すると共に、当該ユーザの興味情報又はユーザ属性を含むユーザ情報Ｚkを推定する（ＳＴ３）。また、ユーザ情報推定部３３は、推定したユーザ情報Ｚkにユーザ識別情報Ｕkを付与する。

以下、前述同様に、ステップＳＴ４〜ＳＴ８が実行される。

上述したように本実施形態によれば、閲覧対象を表示画面から実空間上に存在するものに変えた場合でも、環境設置型センサ３０から得られるユーザの注目方向Ｈに基づいて、当該ユーザの注目対象ｔｇを含む画像情報を得ると共に、当該画像情報からユーザの興味情報を推定できるため、第１の実施形態と同様の効果を得ることができる。

なお、この発明は上記実施形態に限定されるものではない。例えば、第２の実施形態では、環境設置型センサ３０及び配信サーバ装置４０と、興味対象取得装置５０とを分離した構成例を述べたが、これに限らず、環境設置型センサ３０又は配信サーバ装置４０が興味対象取得装置５０の機能ブロックの一部又は全部を更に備えた構成としてもよい。例えば、環境設置型センサ３０又は配信サーバ装置４０は、興味対象取得装置５０全体を更に備えてもよい。また例えば、環境設置型センサ３０又は配信サーバ装置４０は、興味対象取得装置５０の機能ブロックのうち、興味対象取得部５２のみを更に備えてもよい。このことは、以下の各実施形態でも同様である。

その他、機能ブロックの配置に限らず、各ステップの順番や各情報の内容等についても、この発明の要旨を逸脱しない範囲で種々変形して実施可能である。

要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

１０…ディスプレイ装置、１１…ディスプレイ、１２…コンテンツ格納部、１３…意味情報ＤＢ、２０…通信端末、２１，３１…生体センサ、２２，３４…生体情報取得部、２３…生体情報格納部Ａ、２４…端末情報送信部、２５…配信情報受信部、２６…表示部、３０…環境設置型センサ、３２…個人情報取得部、３３…ユーザ情報推定部、３５…生体情報格納部Ｂ、４０…配信サーバ装置、４１…配信情報ＤＢ、４２…配信情報選択部、４３…配信情報格納部、４４…生体情報照合部、４５…情報配信部、５０…興味対象取得装置、５１…対象収集センサ、５２…興味対象取得部。

Claims (5)

1. 閲覧対象に含まれる複数の注目対象を個別に閲覧するユーザが携帯する通信端末に通信可能な配信サーバ装置であって、
   前記注目対象の識別情報毎に、前記通信端末に通信可能な配信情報と、少なくともユーザ属性又は興味情報を含むユーザ情報とを関連付けて記憶する記憶手段と、
   前記通信端末から通信端末識別情報が付与された前記ユーザの第１の生体情報を取得し、当該第１の生体情報と、環境設置型センサから取得したユーザの第２の生体情報とを照合する照合手段と、
   前記ユーザの第２の生体情報に基づいて、当該ユーザが閲覧する注目対象の識別情報と当該ユーザのユーザ情報とが推定されると、推定結果に応じて前記記憶手段内の配信情報を選択する選択手段と、
   前記照合手段による照合結果に応じて前記第２の生体情報に最も類似する第１の生体情報に付与された通信端末識別情報に基づいて、当該第２の生体情報に基づく推定結果に応じて前記選択された配信情報を配信する配信手段と
   を備えたことを特徴とする配信サーバ装置。
2. 閲覧対象に含まれる複数の注目対象を個別に閲覧するユーザが携帯する通信端末と、前記通信端末に通信可能な配信サーバ装置とを備えた配信システムであって、
   前記配信サーバ装置は、
   前記注目対象の識別情報毎に、前記通信端末に配信可能な配信情報と、少なくともユーザ属性又は興味情報を含むユーザ情報とを関連付けて記憶する記憶手段と、
   前記通信端末から通信端末識別情報が付与された前記ユーザの第１の生体情報を取得し、当該第１の生体情報と、環境設置型センサから取得したユーザの第２の生体情報とを照合する照合手段と、
   前記ユーザの第２の生体情報に基づいて、当該ユーザが閲覧する注目対象の識別情報と当該ユーザのユーザ情報とが推定されると、推定結果に応じて前記記憶手段内の配信情報を選択する選択手段と、
   前記照合手段による照合結果に応じて前記第２の生体情報に最も類似する第１の生体情報に付与された通信端末識別情報に基づいて、当該第２の生体情報に基づく推定結果に応じて前記選択された配信情報を配信する配信手段と
   を備えたことを特徴とする配信システム。
3. 請求項２に記載の配信システムにおいて、
   前記通信端末と前記配信サーバ装置とは近距離無線通信を用いて通信可能であり、
   前記照合手段は、前記近距離無線通信を用いて通信可能な範囲内に存在する前記通信端末から前記第１の生体情報を取得することを特徴とする配信システム。
4. 閲覧対象に含まれる複数の注目対象を個別に閲覧するユーザが携帯する通信端末に通信可能な配信サーバ装置であって、前記注目対象の識別情報毎に、前記通信端末に配信可能な配信情報と、少なくともユーザ属性又は興味情報を含むユーザ情報とを関連付けて記憶する記憶手段、照合手段、選択手段及び配信手段を備えた前記配信サーバ装置が実行する配信方法であって、
   前記照合手段が、前記通信端末から通信端末識別情報が付与された前記ユーザの第１の生体情報を取得し、当該第１の生体情報と、環境設置型センサから取得したユーザの第２の生体情報とを照合する照合工程と、
   前記選択手段が、前記ユーザの第２の生体情報に基づいて、当該ユーザが閲覧する注目対象の識別情報と当該ユーザのユーザ情報とが推定されると、推定結果に応じて前記記憶手段内の配信情報を選択する選択工程と、
   前記配信手段が、前記照合工程による照合結果に応じて前記第２の生体情報に最も類似する第１の生体情報に付与された通信端末識別情報に基づいて、当該第２の生体情報に基づく推定結果に応じて前記選択された配信情報を配信する配信工程と
   を備えたことを特徴とする配信方法。
5. 請求項１に記載の配信サーバ装置、又は請求項２若しくは３に記載の配信システムの配信サーバ装置としてコンピュータを機能させるためのプログラム。

Images