JP2010068143A - 端末装置、ヘッドマウントディスプレイ装置及び配信システム - Google Patents

Abstract

【課題】 端末装置の使用状況にあわせて、効果的な情報伝達が可能な技術を提供する。
【解決手段】 本発明の配信システム１０は、ＣＭを配信するサーバ２と、ヘッドマウントディスプレイ装置１と、を備える。本発明のヘッドマウントディスプレイ装置１は、利用者の視聴状態を判断する状態解析部１１１と、視聴状態に合わせたＣＭを特定して再生するＣＭ決定部１１２と、コンテンツおよびＣＭの配信を要求する配信要求部１１３と、を備える。
【選択図】 図２

Description

本発明は、端末装置、ヘッドマウントディスプレイ装置及び配信システムに関する。

利用者が頭部に装置を装着して使用する際に、表示画面を好みの位置に移動させることが可能なヘッドマウントディスプレイ装置が知られている（例えば、特許文献１参照）。

特開２００４−２３６１０２号公報

しかしながら、特許文献１に記載のヘッドマウントディスプレイ装置では、表示画面を眼前以外の位置に移動させている間、利用者は表示画面に表示される画像を見ることができない。よって、視覚に訴えることで情報を伝えるようなコンテンツでは、情報の伝達効果を十分に発揮できない可能性がある。

そこで本発明では、端末装置の使用状況にあわせて、効果的な情報伝達が可能な技術を提供することを目的とする。

以上の課題を解決するため、本発明の端末装置は、宣伝と、視聴者の視聴状態に応じた再生形式を有する前記宣伝に対応する宣伝付属データと、を記憶する記憶部と、視聴者の視聴状態を検出するセンサ部と、前記センサ部の検出信号から、前記視聴状態を判断し、前記視聴状態に対応する前記再生形式に対応した宣伝を特定し、前記特定した宣伝を再生する制御部と、を備えることを特徴とする。

以上のように、本発明の端末装置によれば、端末装置の使用状況にあわせて、効果的な情報伝達が可能な技術を提供することができる。

以下、本発明を実施するための最良の形態について、図面を参照して説明する。
＜第一の実施形態＞
図１に、本発明の第一の実施形態にかかるヘッドマウントディスプレイ装置（以下、ＨＭＤと略記する）１を示す。図１は、本発明の第一の実施形態にかかるＨＭＤ１の斜視図である。

図示するように、本実施形態にかかるＨＭＤ１は、頭部装着帯１１と、音声出力部１２と、筐体１３と、支持部１４と、アーム部１５と、表示部１６と、操作部１７と、を備えている。

頭部装着帯１１は、その両端が相対向するように湾曲した形状に形成されている。また、頭部装着帯１１は、弾性を有する材質で構成され、利用者（視聴者）の頭部に装着する際に後述するスピーカを利用者の頭部の内側方向に押圧することで、ＨＭＤ１を利用者の頭部に着脱自在に装着することができるようにしている。

頭部装着帯１１の長手方向両端側には、筐体１３Ａ、１３Ｂ（これらを区別しない場合には、単に筐体１３と表記する）が連結されている。また、筐体１３Ａにはスピーカ１２Ａが、筐体１３Ｂにはスピーカ１２Ｂが、それぞれ接続されている。さらに、頭部装着帯１１の内部には、筐体１３Ｂに内蔵される電源（図示しない）および制御装置１０と、各部と、を電気的に接続するための信号線や、電源から電力を供給するための電力線等が配線されている。

音声出力部１２は、音声信号を音声に変換して出力する。具体的に、本実施形態にかかる音声出力部１２は、スピーカ１２Ａおよび１２Ｂを有しており、これらは利用者の両方の耳にあてがわれて使用されるいわゆるヘッドホン用のスピーカである。図１においては、向かって右側のスピーカ１２Ａが左耳用、向かって左側のスピーカ１２Ｂが右耳用である。これらの左右の別については、利用者の操作によって、任意に決定することができるものとしても良いし、表示部１６を右眼で見るか、左眼で見るかによって切り換えるようにしても良い。また、音声出力部１２には、電源から電力を供給するための電力線と、音声信号を供給する音声信号線とが配線されている。

筐体１３Ｂには、制御装置１０および電源が内蔵されている。さらに、本実施形態にかかるＨＭＤ１は、筐体１３Ｂのスピーカ１２Ｂとは逆側の外壁面に操作部１７を有している。

また、筐体１３Ａは、スピーカ１２Ａとは逆側の外壁面に、ＨＭＤ１の電源のオン、オフを切り替える電源スイッチ（図示しない）を備える。

なお、筐体１３０Ａと、１３０Ｂとは、お互いの対向する面に、それぞれ装着センサ１３３（図示しない）を備えている。装着センサ１３３は、筐体１３０Ａに備えられる赤外線発光素子（ＬＥＤ）と、筐体１３０Ｂに備えられる受光素子とからなる。装着センサ１３３の詳細については、後述する。

また、電源、電源スイッチ、制御装置１０および操作部１７は、筐体１３Ａおよび１３Ｂのどちらに配置されても良く、また、筐体１３Ａ、１３Ｂは、スピーカ１２Ａ、１２Ｂとそれぞれ一体となるような構成としても良い。

支持部１４は、筐体１３Ｂにアーム部１５の一端側を回動自在に連結する。利用者は、図示するように、支持部１４を回転中心としてアーム部１５を回動させることで、表示部１６を頭部装着帯１１と重なる位置に移動させることが可能である。また、利用者は、スピーカ１２Ａおよび１２Ｂの左右が反転するようにＨＭＤ１を装着し、表示部１６が眼前に配置されるよう、アーム部１５を１８０度回動させて使用することも可能である。すなわち利用者は、表示部１６を左右いずれの眼前にでも配置することが出来る。

アーム部１５は、頭部装着帯１１を利用者の頭部に装着した際、筐体１３Ａ側とは他端側に取り付けられている表示部１６が利用者の眼前に位置するように、その長手方向において湾曲している。また、内部には電源から表示部１６に電力を供給する電力線および画像信号を供給する画像信号線が配線されている。

なお、アーム部１５は、図示しない近接センサ１３１を備えている。近接センサ１３１の詳細については、後述する。

表示部１６は、アーム部１５の先端に利用者の視線に合わせて、上下および左右方向に回動自在に連結されている。表示部１６は、例えば、画像を表示するＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）と、表示された画像を拡大する光学系と、を備え、供給される画像信号に基づいて画像を表示する。

なお、表示部１６は、図示しないアイセンサ１３２を備えている。アイセンサ１３２の詳細については、後述する。

操作部１７は、複数の操作スイッチ１７１を備える。利用者は、操作スイッチ１７１を介して、ＨＭＤ１に関する機能、例えば、再生、停止、早送り、巻戻し、音量の変更、その他の制御処理等の指示を入力することが可能である。これらのスイッチを介して入力された操作指示は、後述する入出力インターフェース部１０４（以下、Ｉ／Ｆ部；図２参照）を介して制御部１０１に送信される。

なお、ＨＭＤ１は、操作部１７以外の入力手段として、利用者の頭部の動きに関する方向情報を角速度や加速度として検出する角速度センサや加速度センサを備え、検出した速度に対応する処理を実行するような構成としても良い。

次に、本発明の第一の実施形態にかかる配信システム１０について、図２を参照して説明する。図２は、本実施形態にかかるＨＭＤ１およびサーバ２の機能的な構成を示すブロック図である。

配信システム１０は、ＣＭ（宣伝）を配信するサーバ２と、サーバ２からネットワーク９００を介してＣＭの配信を受けるＨＭＤ１と、を含んでいる。

ネットワーク９００は、電話・携帯電話網やインターネット等を含む公衆通信網であり、ＨＭＤ１は、無線および有線でネットワーク９００と接続される。もちろん、図示しない基地局を介して、無線電波の送受信を行っても良い。

サーバ２は、制御部２０１と、記憶部２０２と、Ｉ／Ｆ部２０４と、を備えている。

記憶部２０２は、コンテンツデータベース２２１と、ＣＭデータベース２２２と、顧客情報２２３と、を記憶する。

コンテンツデータベース２２１は、クライアント（ここでは、ＨＭＤ１の利用者）へ配信するコンテンツデータと、当該コンテンツデータに関連する情報を有するコンテンツメタデータ（コンテンツ付属データ）と、を予め蓄積する。コンテンツデータは、例えば、音楽や映像、画像、文書等、あらゆるデジタルデータ全般である。

各コンテンツデータには、予めこれらを管理するためのメタデータが付与されている。コンテンツメタデータは、コンテンツを説明する複数の情報から構成されており、例えば、コンテンツのＩＤ、ジャンル、予測される視聴者層の属性（例えば、年齢・居住地区・性別・嗜好等の情報）、ＣＭ再生位置、当該ＣＭ再生位置で再生されるＣＭのＩＤ等の情報が格納される。

ＣＭデータベース２２２は、広告情報を配信するためのいわゆる宣伝であるＣＭ（コマーシャル）に関するＣＭデータと、当該ＣＭデータに関連する情報であるＣＭメタデータと、を予め蓄積する。本発明におけるＣＭデータは、クライアントに対する宣伝を目的とするものであれば、どのようなものでも良い。

ＣＭデータベース２２２に格納されるＣＭデータには、予めこれらを管理するための、図３に示すようなＣＭメタデータ（宣伝付属データ）が付与されている。ＣＭメタデータには、例えば、ＣＭのＩＤ、作成日時、再生時間、ターゲットとする消費者層の年齢層・居住地区・性別等を示す消費者属性情報が格納されている。

さらに、ＣＭメタデータに予め格納される情報として、宣伝形式（再生形式）がある。宣伝形式は、当該ＣＭの用途によって定められる。すなわち、音声のみで構成されているＣＭや、映像が付帯していても、音声のみでＣＭの宣伝効果が発揮されるような音声主体のＣＭには、音声用ＣＭであることを示す情報「音声」が、宣伝形式として格納される。一方、視覚（映像）に訴えることで始めて宣伝効果を発揮することができるようなＣＭについては、映像が主体である映像用ＣＭであることを示す情報「映像」が、宣伝形式として格納される。

なお、ＣＭデータベースに格納される各ＣＭには、それぞれ対をなすＣＭが存在する。このようなＣＭ対は、同様のＩＤ及び消費者属性情報を有しているが、その宣伝形式は異なっている。すなわち、ＣＭ対のうち、一方のＣＭの宣伝形式が「音声」である場合、他方のＣＭの宣伝形式は「映像」である。

顧客情報２２３は、後述の制御部２０１によって、クライアントごとに生成される情報である。顧客情報２２３は、図４に示すように、クライアントＩＤを格納するクライアントＩＤ格納領域２２３ａと、当該クライアントの嗜好や年齢・性別・住所等に関する個人情報をデータ化した属性情報を格納する属性情報格納領域２２３ｂと、各クライアントがインセンティブとして取得したポイントを格納する累積ポイント値格納領域２２３ｃと、を備えている。

累積ポイント値は、利用者がＣＭを視聴することによって累積されるものである。なお、視聴したＣＭによって、加算されるポイントが異なる。例えば、視聴されたＣＭの宣伝形式が「映像」の場合には、メディアにおいて音声と映像の双方を占有するものであるから、宣伝形式が「音声」のＣＭよりも高いポイントを付与する。なお、占有時間（再生時間）の長さ等、どのような基準で付与するポイントを定めても良い。

制御部２０１は、顧客情報２２３を管理する顧客管理部２１１と、クライアントの視聴状態に合わせたＣＭを配信するデータ配信部２１２と、を備えている。

顧客管理部２１１は、予めクライアントごとに年齢・性別・住所・嗜好等の属性情報を、ウェブページ等を介して受け付ける。そして、取得した属性情報は、クライアントおよびＨＭＤ１を識別するためのクライアントＩＤと対応付けて、顧客情報２２３の属性情報格納領域２２３ｂへと格納する。

また、顧客管理部２１１は、ＨＭＤ１から送信される視聴終了情報を受信すると、当該視聴終了情報に含まれるクライアントＩＤと、ＣＭＩＤと、視聴状態情報と、から視聴が終了したＣＭの視聴によって付与されるポイントを特定し、顧客情報２２３に格納される累積ポイント値に加算する。

なお、ＣＭの視聴によって付与されるポイントは、例えば、ＣＭメタデータに予め格納されていても良いし、ＣＭメタデータに格納されるＣＭに関する各情報から、ポイントを換算できる換算テーブルを予め記憶部２０４に記憶させておくような構成としても良い。

例えば、顧客管理部２１１は、視聴終了情報に含まれる視聴状態情報から、同様のＣＭＩＤを有するＣＭ対のうち、どちらの宣伝形式のＣＭを利用者が視聴したかを判断し、宣伝形式によって異なるポイントを加算することができる。

データ配信部２１２は、後述するＨＭＤ１の制御部１０１から、コンテンツ配信要求を受け付けると、コンテンツ配信要求に含まれるコンテンツＩＤから特定されるコンテンツを、ＨＭＤ１へと配信する。

その際、データ配信部２１２は、配信するコンテンツに予め定められたＣＭ再生位置で再生するＣＭ対を特定し、コンテンツと共に、Ｉ／Ｆ部２０４及びネットワーク９００を介してＨＭＤ１へと配信する。

具体的に、まず、データ配信部２１２は、コンテンツ配信要求に含まれるクライアントＩＤから特定した配信先クライアントの属性情報と、ＣＭメタデータと、の適合度を算出する。

適合度は、例えば、ＣＭに付与されたＣＭメタデータの項目に予め重み係数を配し、当該ＣＭメタデータと、クライアントの属性情報と、を照合して、一致する項目の重み係数の総和を算出することで推定することができる。

そして、データ配信部２１２は、この総和が大きければ大きいほど、コンテンツとＣＭとの適合度が高いと判断して、適合度の高いＣＭ対を、コンテンツメタデータに予め登録されるＣＭ再生位置に関連付け、当該ＣＭ対のＣＭＩＤを格納する。なお、ＣＭ対は同様の属性情報を有しているために、適合度の値も同値となる。

また、配信コンテンツのコンテンツメタデータと、ＣＭメタデータと、の適合度から関連付けるＣＭ対を決定しても良い。

Ｉ／Ｆ部２０４は、ネットワーク９００や各機能部間におけるインターフェースを提供し、サーバ２を、ネットワーク９００を介してＨＭＤ１とデータの送受信可能に接続する。

次に、ＨＭＤ１について詳細に説明する。

ＨＭＤ１は、制御装置１００を備えている。図２に示すように、制御装置１００は、制御部１０１と、記憶部１０２と、センサ部１０３と、Ｉ／Ｆ部１０４と、を備えている。

まず、センサ部１０３について説明する。

センサ部１０３は、近接センサ１３１と、アイセンサ１３２と、装着センサ１３３と、を備えている。各センサは、制御部１０１からの信号検出要求に応答して、信号を出力する。

近接センサ１３１は、表示部１６が使用位置（利用者の眼前）、および、退避位置（利用者の頭頂部付近、すなわち、支持部１４を回転中心に回動させた際、頭部装着帯１１と表示部１６が最も接近して重なる位置を含む、予め定められた範囲）にあることを示す信号を、制御部１０１へと出力する。

具体的に、近接センサ１３１は、例えば静電容量形近接センサであり、周囲物体の接近を検出して検出対象の移動情報や存在情報を電気信号に置き換え、検出信号を得る。

近接センサ１３１は、例えばアーム部１５（表示部１６でも良い）に取り付けられ、筐体１３Ａ（または、頭部装着帯１１でも良い）とアーム部１５との距離を表す検出信号を得る。そして、近接センサ１３１は、当該検出信号が、アーム部１５と筐体１３Ａとが所定の距離以上に離れたことを示すものであった場合、制御部１０１へ使用位置検出信号を出力する。一方、当該検出信号がアーム部１５と筐体１３Ａとが所定の距離以内に接近したことを示す検出信号であった場合には、制御部１０１へ退避位置検出信号を出力する。

なお、アーム部１５の位置を検出するためのセンサの種類は、上記に限定されない。金属の存在を検出する誘導形近接センサや、磁気による直流磁界を利用したスイッチ等を使用しても良い。

アイセンサ１３２は、表示部１６の対向する位置に、利用者の眼（虹彩）が存在するか否かを検出する。

具体的に、アイセンサ１３２は、例えば、表示部１６に取り付けられ、利用者の眼へと赤外光を照射する発光素子（ＬＥＤ）と、その反射光を受光する受光素子と、を備える赤外線センサである。アイセンサ１３２は、発光素子から出射する出力光がユーザの眼で反射されて、当該反射光が受光素子で検出された場合には、利用者の眼が存在すると判断して、制御部１０１へ虹彩検出信号を出力する。当該反射光が受光素子で検出されなかった場合には、制御部１０１へ虹彩非検出信号を出力する。

装着センサ１３３は、利用者がＨＭＤ１を装着しているか否かを判断するための信号を検出する。

装着センサ１３３は、例えば赤外線センサであり、赤外光を照射する発光素子（ＬＥＤ）と、その反射光を受光する受光素子と、を備えている。

本実施形態において、装着センサ１３３は、筐体１３０Ａに発光素子が、筐体１３０Ｂに受光素子が、お互い対向する位置に備えられている。

装着センサ１３３は、発光素子より出射された赤外線を受光する受光素子において、当該赤外線の受光時と、遮蔽物による遮光時と、の光量の変化を検出して、検出信号を得る。従って、装着センサ１３３は、当該赤外線が遮蔽されている場合、利用者がＨＭＤ１を装着していると判断して、装着状態検出信号を制御部１０１へと出力する。一方、当該赤外線を受光している場合、利用者がＨＭＤ１を装着していないと判断して、非装着状態検出信号を、を制御部１０１へと出力する。

なお、各センサは上記に限定されず、例えば赤外線センサには、他の光センサ等を用いることも可能である。

記憶部１０２は、データ記憶領域１２１と、テーブル記憶領域１２２と、を備えている。

データ記憶領域１２１には、サーバ２から配信されたコンテンツおよびコンテンツメタデータと、前記コンテンツのＣＭ再生位置に関連付けられたＣＭデータ対およびＣＭメタデータと、が記憶されている。

ＣＭ対は、それぞれ関連付けられたコンテンツのＣＭ再生位置で再生される。なお、これらの関連付けは、サーバ２においてコンテンツメタデータに登録されており、ＨＭＤ１は、コンテンツメタデータを参照することで再生ＣＭ対を特定可能である。

テーブル記憶領域１２２には、図５に示すような、センサの検出信号から利用者の視聴状態を判断するための視聴状態テーブル１２２１が記憶されている。詳細については、後述する。

次に、制御部１０１について説明する。

制御部１０１は、各センサからの検出信号を受信して利用者の状態を判断する状態解析部１１１と、利用者の状態から再生するＣＭを特定して再生するＣＭ決定部１１２と、サーバ２へと配信要求を出力する配信要求部１１３と、を備えている。

配信要求部１１３は、利用者のコンテンツ配信指示に従って、クライアントＩＤと、コンテンツＩＤと、を含むコンテンツ配信要求を出力する。そして、コンテンツ配信要求に応答したサーバ２から配信されるコンテンツと、コンテンツに付加されたＣＭ対と、を受信して、データ記憶領域１２１へと格納する。

状態解析部１１１は、ＣＭの再生タイミングに際して、利用者の視聴状態を判断する。

ＣＭの再生は、予め定められたコンテンツ中のＣＭ再生位置で実行される。例えば、コンテンツの再生前や、コンテンツの再生時間が所定の長さに達した時、チャプタの終了等に、予めＣＭ再生位置を示すチャプタマーカが設定されている。

状態解析部１１１は、再生中のコンテンツがＣＭ再生位置（ＣＭのチャプタマーカが設定される位置）に達すると、センサ部１０３の各センサに、信号検出要求を出力する。

次に、状態解析部１１１は、信号検出要求に応答した各センサから出力される検出信号を受信して、利用者の状態を判断する。

状態解析部１１１は、例えば、記憶部１０２に予め格納される図５に示すような視聴状態テーブル１２２１を参照して、利用者の視聴状態を判断する。

視聴状態テーブル１２２１は、記憶部１０２のテーブル記憶領域１２２に予め格納される、センサの検出信号から利用者の視聴状態を判断するためのテーブルである。

具体的に、視聴状態テーブル１２２１は、センサ部１０３の備える各センサの検出信号の内容を示す情報を予め格納する、アーム情報格納領域１２２１ａと、虹彩情報格納領域１２２１ｂと、頭部情報格納領域１２２１ｃと、を備えている。そして、これらの情報の組み合わせから予想される利用者の視聴状態を特定する情報が、視聴状態情報格納領域１２２１ｄに格納されている。

利用者の視聴状態を特定する情報は、利用者が映像・音声を視聴可能であるか否かを示す。

例えば、アーム１５が使用位置にあり、虹彩が検出され、かつ、装置が装着されている場合には、利用者は表示部１６を観察しており、スピーカからの音声も聴くことが可能な状態であると考えられる。従って、視聴状態情報格納領域１２２１ｄには、映像・音声共に視聴可能な状態であることを示す情報（図５では、「映像」）が格納される。一方、アーム１５が退避位置にあり、虹彩も検出されていないが、装置が装着されている場合には、利用者は表示部１６を観察していないが、スピーカから音声を聴くことは可能な状態にあると考えられる。従って、視聴状態情報格納領域１２２１ｄには、利用者が音声のみを聴くことが可能な状態であることを示す情報（図５では、「音声」）が格納される。

なお、利用者がＨＭＤ１を装着しておらず、さらにアーム１５が退避位置にあり、虹彩も検出されていない場合、視聴状態情報格納領域１２２１ｄには、利用者が非視聴状態であることを示す情報（図５では、「非視聴」）が格納される。

状態解析部１１１は、視聴状態テーブル１２２１から、各センサから受信した検出信号の内容と一致する情報を格納するレコードを抽出して、当該レコードの視聴状態情報格納領域１２２１ｄから、利用者の視聴状態情報を取得する。そして、状態解析部１１１は、当該視聴状態情報をＣＭ決定部１１２へと出力する。

ＣＭ決定部１１２は、状態解析部１１１から視聴状態情報を受け付けると、視聴状態情報の内容に基づいて、再生するＣＭを特定して、当該ＣＭの再生を開始する。

具体的に、ＣＭ決定部１１２は、視聴状態情報が「音声」または「映像」であるか否かを判断する。視聴情報が「音声」または「映像」であった場合、ＣＭ決定部１１２は、再生中のコンテンツのＣＭ再生位置に関連付けられたＣＭＩＤを有するＣＭ対のうち、当該視聴情報と一致する宣伝形式のＣＭの再生を開始する。

ＣＭ配信部１１３は、ＣＭの再生が終了後、再生が終了したＣＭＩＤと、クライアントＩＤと、視聴状態情報と、を含む視聴終了情報を、サーバ２へと出力する。サーバ２は、これら基づいて、インセンティブとしてのポイントを付与する。

Ｉ／Ｆ部１０４は、音声出力部１２と、表示部１６と、操作部１７と、を制御装置１００に接続する。また、ネットワーク９００や各機能部間におけるインターフェースを提供する。

なお、これらの各装置は、例えば、図１０に示すようなコンピュータ８１０により構成することができる。

コンピュータ８１０は、ハードディスク等の補助メモリ８０３と、メモリ８０２と、ＣＰＵ（Central Processing Unit）８０１と、ＮＩＣ（Network Interface Card）８０４等の通信装置と、これらを接続するバス８０５と、を備えており、各制御部は、補助メモリ８０３に記憶されている所定のプログラムを、メモリ８０２に読み込みＣＰＵ８０１で実行することにより実現可能である。

次に、ＨＭＤ１の制御部１０１が、ＣＭを再生する際の処理について、図６を用いて説明する。図６は、制御部１０１がＣＭの再生を実行する処理の流れを示すフローチャートである。制御部１０１は、再生中のコンテンツ等がＣＭの再生位置に到達すると、当フローを開始する。

状態解析部１１１は、まず、センサ部１０３の各センサに、信号検出要求を出力する（Ｓ１１）。

次に、状態解析部１１１は、利用者の視聴状態を判断する（Ｓ１２）。

具体的に、状態解析部１１１は、各センサからそれぞれ信号を取得すると、視聴状態テーブル１２２１を参照して各信号に一致するレコードの視聴状態情報を取得し、当該視聴状態情報をＣＭ決定部１１２へと出力する。

ＣＭ決定部１１２は、状態解析部１１１から視聴状態情報を受け付けると、利用者が視聴状態であるか否かを検出する（Ｓ１３）。

具体的に、ＣＭ決定部１１２は、視聴状態情報に、映像および音声共に視聴可能な状態であることを示す情報（「映像」）、または、音声のみを聴くことが可能な状態であることを示す情報（「音声」）が格納されている場合には（ＹＥＳ）、利用者が視聴状態にあると判断して、ステップ１４へ進む。利用者が、映像・音声共に視聴していない状態であることを示す情報（「非視聴」）が格納されている場合には（ＮＯ）、ステップ１１に戻って処理を繰り返す。

利用者の視聴状態が、映像および音声共に、または、音声のみを聴くことが可能な状態である場合には（ステップ１３でＹＥＳ）、ＣＭ決定部１１２は、コンテンツメタデータを参照して、ＣＭ再生位置に関連付けられたＣＭ対を特定し、当該ＣＭ対をなすＣＭのうち、その宣伝形式が視聴状態情報と一致する方のＣＭを特定する（Ｓ１４）。

そして、ＣＭ決定部１１２は、ステップ１４で特定されたＣＭの再生を開始する（Ｓ１５）。

配信要求部１１３は、ＣＭの再生が終了したことを検出すると、クライアントＩＤと、視聴が終了したＣＭＩＤと、視聴状態情報と、を含む視聴終了情報を生成して、サーバ２へと出力し（Ｓ１６）、処理を終了する。

このような構成によれば、利用者の視聴状態に合わせたＣＭが再生されるために、確実な宣伝効果を得る事が可能である。また、利用者が画面を見られない場合には音声主体のＣＭが再生されるため、映像が無いと意味不明なＣＭを聴かなければならないような事態を回避することができる。

また、利用者へと確実に情報が伝達されるため、ポイントや広告料金を正確に算出することも可能である。

なお、サーバ２は、ＣＭ対のうち、どちらか一方のみをコンテンツに付加して、ＨＭＤ１に配信するような構成としても良い。その場合、ＣＭ決定部１１２は、コンテンツに付加されたＣＭの宣伝形式が視聴状態と異なる場合には、他方のＣＭの配信をサーバ２に要求して、その配信を受けることができる。
＜第二の実施形態＞
次に、本発明の第二の実施形態について説明する。第二の実施形態では、第一の実施形態と比較して異なっている点に関連する事項について、以下、図７−９を参照しながら、説明する。

図７に、本発明の第二の実施形態にかかるＨＭＤ３を示す。

記憶部３０２のテーブル記憶領域１２２には、視聴状態テーブル１２２１に加えて、図８に示すような利用者情報１２２２が記憶される。

利用者情報１２２２は、顧客情報２２３と同様に、利用者の属性情報を予め格納する属性情報格納領域１２２２ａと、累積ポイント値格納領域１２２２ｂと、を有している。さらに、利用者情報１２２２は、利用者の視聴状態の履歴が格納される視聴履歴格納領域１２２２ｃと、当該視聴履歴から定まるＣＭ設定情報を格納する、ＣＭ設定情報格納領域１２２２ｄと、を備えている。

ＣＭ設定情報は、一定時間内に、同様の視聴状態が連続して視聴履歴に登録された場合に、当該視聴状態が設定されるものである。例えば、利用者の視聴状態を示す情報「音声」が一定時間内に、視聴履歴に連続して登録されると、以後、宣伝形式が「音声」のＣＭメタデータを有するＣＭのみが再生される。もちろん、「映像」が設定されると、宣伝形式が「映像」のＣＭメタデータを有するＣＭのみが再生されることとなる。

なお、ＣＭ設定は、所定の時間ごと、あるいは、電源のオフによってリセットされるような構成とすることが望ましい。

制御部３０１の状態解析部３１１は、再生中のコンテンツ等がＣＭの再生位置に到達すると、まず、ＣＭ設定情報格納領域１２２２ｄに格納されるＣＭ設定情報を確認する。ＣＭ設定情報が既に登録されている場合には、設定されている視聴状態情報を、ＣＭ決定部３１２へと出力する。

なお、ＣＭ設定情報が登録されていない場合には、第一の実施形態にかかる状態解析部１１１と同様に、センサ部１０３の各センサへ信号検出要求を出力し、信号検出要求に応答した各センサから出力される検出信号を受信する。そして、視聴状態テーブル１２２１から、各センサの信号に一致する視聴状態情報を検出して、当該視聴状態情報を、ＣＭ決定部３１２へと出力する。

さらに、状態解析部３１１は、視聴状態情報を取得した時間と、視聴状態情報と、を視聴履歴格納領域１２２２ｃへと格納する。そして、視聴履歴を参照して、一定時間内に、同様の視聴状態が連続して登録されているか否かを判断する。なお、同様の視聴状態が連続して登録されている場合には、当該視聴状態をＣＭ設定情報としてＣＭ設定情報格納領域１２２２ｄに格納する。

ＣＭ決定部３１２は、状態解析部３１１から視聴状態情報を受け付けると、第一の実施形態にかかる状態解析部１１１と同様に、利用者が視聴状態であるか否かを判断する。視聴状態である場合には、ＣＭ再生位置に関連付けられたＣＭの宣伝形式が、視聴状態情報と一致するか否かを判断する。利用者が映像および音声共に、または、音声のみを聴くことが可能な状態である場合には、ＣＭ決定部１１２は、コンテンツメタデータを参照して、ＣＭ再生位置に関連付けられたＣＭ対を特定する。そして、当該ＣＭ対のうち、宣伝形式が視聴状態情報と一致する方のＣＭの再生を開始する。

なお、この際、利用者の視聴状態に一致する宣伝形式のＣＭがデータ記憶領域１２１に記憶されていなかった場合、ＣＭ決定部３１２は、宣伝形式が異なるＣＭの中から、利用者の属性情報と適合度が最も高いＣＭメタデータを有するＣＭを再生しても良い。

配信要求部３１３は、ＣＭの再生が終了すると、当該ＣＭの視聴によって付与されるポイントを、利用者情報１２２２に格納される累積ポイント値に加算する。

ＣＭの視聴によって付与されるポイントは、例えば、ＣＭメタデータに予め格納されていても良いし、ＣＭメタデータに格納されるＣＭに関する各情報から、ポイントを換算できる換算テーブルを予めテーブル記憶領域３２２に記憶させておくような構成としても良い。

なお、配信要求部３１３は、利用者の視聴状態情報が「音声」で、かつ、予め関連付けられたＣＭ対のうち、宣伝形式が「映像」のＣＭのみが記憶部２０４にされている場合には、当該宣伝形式が「音声」のＣＭデータから、無音部分をカットした音声データを生成し、当該音声データの再生を開始するような構成としても良い。

また、配信要求部３１３は、ＣＭの視聴終了後、利用者の視聴状態に合わせて累積ポイント値を利用者へ通知するような構成としても良い。例えば、利用者の視聴が終了したＣＭの宣伝形式が「音声」である場合には、音声出力部１２を介して音声でポイント値を通知し、「映像」である場合には、表示部１６にポイント値を表示させる。もちろん、ＣＭの再生前や、再生中に、再生するＣＭのポイントを加算した後の累積ポイント値の通知を、数値やゲージを表示することで行うような構成とすることもできる。

次に、ＨＭＤ３の制御部３０１が、ＣＭを再生する際の処理について、図９を用いて説明する。図９は、制御部３０１がＣＭの再生を実行する処理の流れを示すフローチャートである。制御部３０１は、再生中のコンテンツ等がＣＭの再生位置に到達すると、当フローを開始する。

状態解析部３１１は、まず、利用者情報１２２２のＣＭ設定情報格納領域１２２２ｄに、ＣＭ設定情報が登録されているか否かを判断する（Ｓ２１）。登録されている場合には、ステップ２４へと進み、登録されていない場合には、ステップ２２へと進む。

次に、状態解析部３１１は、センサ部１０３の各センサに、信号検出要求を出力し、検出信号を取得する（Ｓ２２）。

さらに、状態解析部３１１は、各センサからそれぞれ信号を取得すると、視聴状態テーブル１２２１を参照して各信号に一致するレコードの視聴状態情報を取得し、当該視聴状態情報をＣＭ決定部３１２へと出力する（Ｓ２３）。

なお、状態解析部３１１は、取得した視聴状態情報を視聴履歴格納領域１２２２ｃへと登録して視聴履歴を更新する。そして、最新の視聴履歴を参照して、一定時間内に、同様の視聴状態（「非視聴」を除く）が視聴履歴に連続して登録されている場合に、当該視聴状態をＣＭ設定情報格納領域１２２２ｄへと登録する。

ＣＭ決定部３１２は、状態解析部３１１から視聴状態情報を受け付けると、利用者が視聴状態であるか否かを検出する（Ｓ２４）。

具体的に、ＣＭ決定部３１２は、利用者が映像および音声共に視聴可能、または、音声のみを聴くことが可能な状態である場合にはステップ２５へと進み、非視聴状態である場合には（ＮＯ）、ステップ２１に戻って処理を繰り返す。

利用者の視聴状態が、映像および音声共に視聴可能、または、音声のみを聴くことが可能な状態である場合には（ステップ２４でＹＥＳ）、ＣＭ決定部３１２は、コンテンツメタデータを参照して、ＣＭ再生位置に関連付けられたＣＭ対を特定する（Ｓ２５）。

そして、当該ＣＭ対のうち、宣伝形式が視聴状態情報と一致する方のＣＭの再生を開始する（Ｓ２６）。

その後、ＣＭの再生が終了すると、配信要求部３１３は、当該ＣＭの視聴によって付与されるポイントを、利用者情報１２２２に格納される累積ポイント値に加算して（Ｓ２７）、処理を終了する。

以上のような構成により、本実施形態にかかるＨＭＤ３によれば、同様の視聴状態が続く場合には、再生するＣＭの宣伝形式が設定されるために、ＣＭの再生タイミングごとに各センサの信号を解析する必要が無く、より速くＣＭの選択処理が実行可能である。

さらに、インセンティブとして付与されるポイントが、ＣＭを再生するごとに通知されるため、利用者は、適宜ポイントを確認することが可能である。

また、本発明は、上記のような実施形態には制限されない。上記の実施形態は、本発明の技術的思想の範囲内で様々な変形が可能である。

例えば、上記センサの他にも、角速度センサ等の検出信号により、装置が装着されているか否かを検出するような構成としても良い。

また、上記実施形態では、３つのセンサを備える構成として説明したが、例えば、近接センサのみ、または、アイセンサのみで、利用者の視聴状態を判断することも可能である。もちろん、各センサをどのように組み合わせて利用しても良い。

さらに、上記実施形態では、ＣＭの再生開始時に視聴状態に合わせたＣＭが選択される構成として説明したが、ＣＭの再生中に適宜利用者の視聴状態を判断し、変更があった場合には、ＣＭを変更するような構成としても良い。なお、ＣＭに切り替え用のチャプタマーカを設定しておくことで、切り替え位置から、同じ内容であるが宣伝形式が異なるＣＭに切り替えることも可能である。

なお、ＣＭ決定部３１２は、データ記憶領域１２１に視聴情報に一致する宣伝形式を有するＣＭが存在しなかった場合、サーバから一致するＣＭを取得するような構成としても良い。

また、第一の実施形態において、ＣＭデータベース２２２に視聴情報に一致するＣＭが存在しなかった場合、データ配信部２１２は、無音部分をカットした音声データを生成し、当該音声データをＨＭＤ１へと出力しても良い。

さらに、本願では、ＣＭを再生する装置としてＨＭＤを例に挙げて説明したが、ポータブルプレイヤ等、映像および音声を再生可能な他の端末装置に本発明を適用することも可能である。

さらに、上記実施形態では、サーバ２においてコンテンツのＣＭ再生位置で再生されるＣＭ対が予め設定されている構成として説明したが、ＨＭＤ１が再生ＣＭを、記憶部２０４から適宜選択するような構成としても良い。

なお、本発明のＨＭＤは、片眼で映像を見る構成となっているが、両眼で映像を見るような構成としても良い。

本発明の第一の実施形態にかかるＨＭＤ１の斜視図である。 配信システム１０の機能的な構成を示すブロック図である。 ＣＭメタデータの概略図である。 サーバ２の備える顧客情報の概略図である。 ＨＭＤ１の備える視聴状態テーブルの概略図である。 ＨＭＤ１の制御部１０１の実行する処理を示すフローチャートである。 本発明の第二の実施形態にかかるＨＭＤ３の機能的な構成を示すブロック図である。 ＨＭＤ３の備える利用者情報の概略図である。 ＨＭＤ３の制御部３０１の実行する処理を示すフローチャートである。 ＨＭＤ１の電気的な構成を示すブロック図である。

符号の説明

１・３：ＨＭＤ、２：サーバ、１００・３００：制御装置、１１：頭部装着帯、１２：音声出力部、１３Ａ、１３Ｂ：筐体、１４：支持部、１５：アーム部、１６：表示部、１７：操作部、１０１・３０１：制御部、１１１・３１１：状態解析部、１１２・３１２：ＣＭ決定部、１１３・３１３：配信要求部、１０２・２０２・３０２：記憶部、１０３：センサ部、１３１：近接センサ、１３２：アイセンサ、１３３：装着センサ。

Claims (9)

1. 宣伝と、視聴者の視聴状態に応じた再生形式を有する前記宣伝に対応する宣伝付属データと、を記憶する記憶部と、
   視聴者の視聴状態を検出するセンサ部と、
   前記センサ部の検出信号から、前記視聴状態を判断し、前記視聴状態に対応する前記再生形式に対応した宣伝を特定し、前記特定した宣伝を再生する制御部と、を備えること、
   を特徴とする端末装置。
2. 宣伝と、視聴者の視聴状態に応じた再生形式を有する前記宣伝の宣伝付属データと、を記憶する記憶部と、
   視聴者の視聴状態を検出するセンサ部と、
   前記センサ部の検出信号から、前記視聴状態を判断し、前記視聴状態に対応する前記再生形式に対応した宣伝を特定し、前記特定した宣伝を再生する制御部と、を備えること、
   を特徴とするヘッドマウントディスプレイ装置。
3. 請求項２に記載のヘッドマウントディスプレイ装置であって、
   前記宣伝は、音声用宣伝と、映像用宣伝と、を備えており、
   前記音声用宣伝は、視聴者が音声は聞いているが、映像を見ていない視聴状態であることを示す再生形式を前記宣伝付属データに備え、
   前記映像用宣伝は、視聴者が映像を見ている視聴状態であることを示す再生形式を前記宣伝付属データに備え、
   前記制御部は、前記センサ部の検出信号から、視聴者が音声は聞いているが、映像を見ていない視聴状態であると判断した場合には、音声用宣伝を特定して、特定した音声用宣伝を再生し、前記センサ部の検出信号から、視聴者が映像を見ていることを示す視聴状態であると判断した場合には、映像用宣伝を特定して、特定した映像用宣伝を再生すること、
   を特徴とするヘッドマウントディスプレイ装置。
4. 請求項請求項２または３に記載のヘッドマウントディスプレイ装置であって、
   前記センサ部は、頭部装着帯に対して回動自在に設けられた表示部の前記頭部装着帯に対する位置を検出する位置検出手段、および、前記表示部に対向する位置に視聴者の目が存在するか否かを検出する虹彩検出手段、の少なくとも何れか一方と、視聴者が頭部装着帯を装着しているか否かを検出する装着検出手段と、を備え、
   前記制御部は、前記装着検出手段の検出信号により、視聴者が頭部装着帯を装着していると判断し、前記位置検出手段の検出信号により、表示部が視聴者の眼前にないと判断し、または、前記虹彩検出手段の検出信号により、表示部に対向する位置に視聴者の目が存在しないと判断した場合には、視聴者が音声は聞いているが、映像を見ていない視聴状態であると判断すること、
   を特徴とするヘッドマウントディスプレイ装置。
5. 請求項２から４のいずれか一項に記載のヘッドマウントディスプレイ装置であって、
   前記センサ部は、頭部装着帯に対して回動自在に設けられた表示部の前記頭部装着帯に対する位置を検出する位置検出手段、および、前記表示部に対向する位置に視聴者の目が存在するか否かを検出する虹彩検出手段、の少なくとも何れか一方と、視聴者が頭部装着帯を装着しているか否かを検出する装着検出手段と、を備え、
   前記制御部は、前記装着検出手段の検出信号により、視聴者が頭部装着帯を装着していると判断し、前記位置検出手段の検出信号により、表示部が視聴者の眼前にあると判断し、または、前記虹彩検出手段の検出信号により、表示部に対向する位置に視聴者の目が存在すると判断した場合には、視聴者が映像を見ている視聴状態であると判断すること、
   を特徴とするヘッドマウントディスプレイ装置。
6. 視聴者の視聴状態を検出するセンサ部と、
   サーバから、コンテンツ、および、前記コンテンツ所定の宣伝再生位置と、前記所定の再生位置で再生する宣伝対を識別する宣伝ＩＤと、を少なくとも格納するコンテンツ付属データと、前記宣伝対、および、視聴者の視聴状態に対応する再生形式を有する前記宣伝対にそれぞれ対応する宣伝付属データからなる宣伝付属データ対と、を受信して、記憶部に記憶させ、
   前記宣伝対は、音声用宣伝と、映像用宣伝と、を備えており、前記音声用宣伝は、視聴者が音声は聞いているが、映像を見ていない視聴状態であることを示す再生形式を前記宣伝付属データに備え、前記映像用宣伝は、視聴者が映像を見ている視聴状態であることを示す再生形式を前記宣伝付属データに備え、前記コンテンツを再生して、所定の宣伝再生位置に到達したことを検出し、前記宣伝再生位置で再生する宣伝対を、前記宣伝ＩＤから特定し、前記宣伝再生位置における前記センサ部の検出信号から、視聴者が音声は聞いているが、映像を見ていない視聴状態であると判断した場合には、前記宣伝対から、音声用宣伝を特定して、特定した音声用宣伝を再生し、前記宣伝再生位置における前記センサ部の検出信号から、視聴者が映像を見ている視聴状態であると判断した場合には、前記宣伝対から、映像用宣伝を特定して、特定した映像用宣伝を再生する制御部と、を備えること
   を特徴とするヘッドマウントディスプレイ装置。
7. 請求項６に記載のヘッドマウントディスプレイ装置であって、
   前記制御部は、前記視聴状態が、視聴者が音声は聞いているが、映像を見ていないものであり、かつ、前記宣伝再生位置で再生する宣伝対のうち、音声用宣伝が前記記憶部に存在しない場合には、前記宣伝対のうち、映像用宣伝の無音部分をカットした音声データを生成し、前記音声データを再生すること
   を特徴とするヘッドマウントディスプレイ装置。
8. 請求項６に記載のヘッドマウントディスプレイ装置であって、
   前記制御部は、前記視聴状態に対応する再生形式を格納する宣伝付属データを備える宣伝が前記記憶部に存在しない場合には、前記サーバから前記宣伝の供給を受けること
   を特徴とするヘッドマウントディスプレイ装置。
9. コンテンツ、および、前記コンテンツの所定の宣伝再生位置を少なくとも格納するコンテンツ付属データと、宣伝と、視聴者の視聴状態に応じた再生形式を有する前記宣伝に対応する宣伝付属データと、クライアントに関する属性情報と、を記憶する記憶部と、コンテンツの配信要求に従って、前記配信要求に含まれるコンテンツＩＤから配信コンテンツを特定し、特定された前記コンテンツの所定の宣伝再生位置で再生される、前記属性情報と適合する宣伝付属データを備える音声用宣伝および映像用宣伝を、宣伝対として特定し、特定した前記コンテンツと、特定した前記宣伝対を識別する宣伝ＩＤを前記コンテンツの宣伝再生位置に対応付けて格納したコンテンツ付属データと、前記宣伝対と、前記宣伝対にそれぞれ対応する宣伝付属データからなる宣伝付属データ対と、をヘッドマウントディスプレイに配信する制御部と、を備え、前記音声用宣伝は、視聴者が音声は聞いているが、映像を見ていない視聴状態であることを示す再生形式を前記宣伝付属データに備え、前記映像用宣伝は、視聴者が映像を見ている視聴状態であることを示す再生形式を前記宣伝付属データに備えていること、を特徴とするサーバと、
   視聴者の視聴状態を検出するセンサ部と、前記サーバから、前記コンテンツ、および、前記コンテンツ付属データと、前記宣伝対、および、前記宣伝付属データ対と、を受信して、記憶部に記憶させ、前記コンテンツを再生して、前記宣伝再生位置に到達したことを検出し、前記宣伝再生位置で再生する宣伝対を、前記宣伝ＩＤから特定し、前記宣伝再生位置における前記センサ部の検出信号から、視聴者が音声は聞いているが、映像を見ていない視聴状態であると判断した場合には、前記宣伝対から音声用宣伝を特定して、特定した音声用宣伝を再生し、前記宣伝再生位置における前記センサ部の検出信号から、視聴者が映像を見ている視聴状態であると判断した場合には、前記宣伝対から映像用宣伝を特定して、特定した映像用宣伝を再生する制御部と、を備えるヘッドマウントディスプレイ装置と、を備えていること
   を特徴とする配信システム。

Images