JP2009288892A - ヘッドマウントディスプレイ装置 - Google Patents

Abstract

【課題】 画像データの未視聴区間を判断して、効率良く再生することが可能なヘッドマウントディスプレイ装置を提供する。
【解決手段】 本発明のヘッドマウントディスプレイ装置１は、表示手段と、前記表示手段の位置から前記表示手段に表示する画像データの未視聴区間を設定して、前記未視聴区間が設定されていることの通知と、前記未視聴区間の再生と、を行う制御手段を備える。
を備える。
【選択図】 図２

Description

本発明は、ヘッドマウントディスプレイ装置に関する。

利用者が頭部に装置を装着して使用する際に、表示画面を好みの位置に移動させることが可能なヘッドマウントディスプレイ装置が知られている（例えば、特許文献１参照）。

特開２００４−２３６１０２号公報

しかしながら、特許文献１に記載のヘッドマウントディスプレイ装置では、表示画面を眼前以外の位置に移動させている間、利用者は表示画面に表示される画像を観察できない。よって、未視聴の区間を生じさせないためには、利用者はその都度一時停止操作を行って、画像を停止させなければならなかった。また、音声を聞き続けたいような場合には、一時停止が入ることで細切れの視聴を強いられる可能性がある。

そこで本発明では、利用者の眼前以外の位置に表示画面が移動し、利用者が未視聴である区間の画像を、効率良く確認できる技術を提供することを目的とする。

以上の課題を解決するため、本発明のヘッドマウントディスプレイ装置は、表示手段と、前記表示手段の位置から前記表示手段に表示する画像データの未視聴区間を設定して、前記未視聴区間が設定されていることの通知と、前記未視聴区間の再生と、を行う制御手段
を備えることを特徴とする。

以上のように、本発明のヘッドマウントディスプレイ装置によれば、利用者が、未視聴部分を効率的良く確認することが可能な技術を提供することができる。

以下、本発明を実施するための最良の形態について、図面を参照して説明する。

図１に、本発明の第一の実施形態にかかるヘッドマウントディスプレイ装置（以下、ＨＭＤと略記する）１を示す。図１は、本発明の第一の実施形態にかかるＨＭＤ１の斜視図である。

図示するように、本実施形態にかかるＨＭＤ１は、頭部装着帯１１と、音声出力部１２と、筐体１３と、支持部１４と、アーム部１５と、表示部１６と、操作部１７と、を備えている。

頭部装着帯１１は、その両端が相対向するように湾曲した形状に形成されている。また、頭部装着帯１１は、弾性を有する材質で構成され、利用者の頭部に装着する際に後述するスピーカを利用者の頭部の内側方向に押圧することで、ＨＭＤ１を利用者の頭部に着脱自在に装着することができるようにしている。

頭部装着帯１１の長手方向両端側には、筐体１３Ａ、１３Ｂ（これらを区別しない場合には、単に筐体１３と表記する）が連結されている。また、筐体１３Ａにはスピーカ１２Ａが、筐体１３Ｂにはスピーカ１２Ｂが、それぞれ接続されている。さらに、頭部装着帯１１の内部には、筐体１３Ｂに内蔵される電源（図示しない）および制御装置１０と、各部と、を電気的に接続するための信号線や、電源から電力を供給するための電力線等が配線されている。

音声出力部１２は、音声信号を音声に変換して出力する。具体的に、本実施形態にかかる音声出力部１２は、スピーカ１２Ａおよび１２Ｂを有しており、これらは利用者の両方の耳にあてがわれて使用されるいわゆるヘッドホン用のスピーカである。図１においては、向かって右側のスピーカ１２Ａが左耳用、向かって左側のスピーカ１２Ｂが右耳用である。これらの左右の別については、利用者の操作によって、任意に決定することができるものとしても良いし、表示部１６を右眼で見るか、左眼で見るかによって切り換えるようにしても良い。また、音声出力部１２には、電源から電力を供給するための電力線と、音声信号を供給する音声信号線とが配線されている。

筐体１３Ｂには、制御装置１０および電源が内蔵されている。さらに、本実施形態にかかるＨＭＤ１は、筐体１３Ｂのスピーカ１２Ｂとは逆側の外壁面に操作部１７を有している。

また、筐体１３Ａは、スピーカ１２Ａとは逆側の外壁面に、ＨＭＤ１の電源のオン、オフを切り替える電源スイッチ（図示しない）を備える。

なお、電源、電源スイッチ、制御装置１０および操作部１７は、筐体１３Ａおよび１３Ｂのどちらに配置されても良く、また、筐体１３Ａ、１３Ｂは、スピーカ１２Ａ、１２Ｂとそれぞれ一体となるような構成としても良い。

支持部１４は、筐体１３Ｂにアーム部１５の一端側を回動自在に連結する。利用者は、図示するように、支持部１４を回転中心としてアーム部１５を回動させることで、表示部１６を頭部装着帯１１と重なる位置に移動させることが可能である。また、利用者は、スピーカ１２Ａおよび１２Ｂの左右が反転するようにＨＭＤ１を装着し、表示部１６が眼前に配置されるよう、アーム部１５を１８０度回動させて使用することも可能である。すなわち利用者は、表示部１６を左右いずれの眼前にでも配置することが出来る。

アーム部１５は、頭部装着帯１１を利用者の頭部に装着した際、筐体１３Ａ側とは他端側に取り付けられている表示部１６が利用者の眼前に位置するように、その長手方向において湾曲している。また、内部には電源から表示部１６に電力を供給する電力線および画像信号を供給する画像信号線が配線されている。

表示部１６は、アーム部１５の先端に利用者の視線に合わせて、上下および左右方向に回動自在に連結されている。表示部１６は、例えば、画像を表示するＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）と、表示された画像を拡大する光学系と、を備え、供給される画像信号に基づいて画像を表示する。

操作部１７は、複数の操作スイッチ１７１を備える。利用者は、操作スイッチ１７１を介して、ＨＭＤ１に関する機能、例えば、再生、停止、早送り、巻戻し、音量の変更、その他の制御処理等の指示を入力することが可能である。これらのスイッチを介して入力された操作指示は、後述する入出力インターフェース部１０４（以下、Ｉ／Ｆ部；図２参照）を介して制御部１０１に送信される。

なお、ＨＭＤ１は、操作部１７以外の入力手段として、利用者の頭部の動きに関する方向情報を角速度や加速度として検出する角速度センサや加速度センサをさらに備え、検出した角速度や加速度に対応する処理を実行するような構成としても良い。

次に、本発明の第一の実施形態にかかるＨＭＤ１の備える制御装置１０について、図２を参照して説明する。図２は、ＨＭＤ１の機能的な構成を示すブロック図である。

制御装置１０は、図２に示すように、制御部１０１と、記憶部１０２と、アーム位置検出部１０３と、Ｉ／Ｆ部１０４と、を有する。

まず、アーム位置検出部１０３について説明する。アーム位置検出部１０３は、表示部１６が使用位置（利用者の眼前）、および、退避位置（利用者の頭頂部付近、すなわち、支持部１４を回転中心に回動させた際、頭部装着帯１１と表示部１６が最も接近して重なる位置を含む、予め定められた範囲）にあることを示す信号を、制御部１０１へと出力する。

具体的に、アーム位置検出部１０３は、近接センサ１３１を備えている。近接センサ１３１は、例えば静電容量形近接センサであり、周囲物体の接近を検出し、検出対象の移動情報や存在情報を、電気信号に置き換えて検出信号として得るものである。

近接センサ１３１は、例えばアーム部１５（表示部１６でも良い）に取り付けられ、筐体１３Ａ（または、頭部装着帯１１でも良い）とアーム部１５との距離を示す検出信号を出力する。アーム位置検出部１０３は、近接センサ１３１から出力される検出信号を受け付ける。そして、当該検出信号が、アーム部１５と筐体１３Ａとが所定の距離以上に離れたことを示すものであった場合、制御部１０１へ使用位置検出信号を出力する。また、アーム位置検出部１０３は、近接センサ１３１から出力される検出信号が、アーム部１５と筐体１３Ａとが所定の距離以内に接近したことを示す検出信号であった場合、制御部１０１へ退避位置検出信号を出力する。

なお、アーム部１５の位置を検出するためのセンサの種類は、上記に限定されない。金属の存在を検出する誘導形近接センサや、磁気による直流磁界を利用したスイッチ等を使用しても良い。

次に、制御部１０１について説明する。制御部１０１は、アーム位置検出部１０３からの検出信号に従って未視聴区間を設定する情報取得部１１１と、未視聴区間を利用者に通知するための通知画面を表示する情報通知部１１２と、利用者の指示を受け付けて、未視聴区間を再生する画像再生部１１３と、から構成されている。

情報取得部１１１は、アーム位置検出部１０３からの検出信号を受信すると、利用者の再生する画像コンテンツに関する未視聴区間を設定する。

未視聴区間（セグメント）とは、利用者が画像コンテンツを再生している際に、アーム部１５が退避位置に移動したタイミングである開始位置と、アーム部１５が退避位置から使用位置へと戻ったタイミングである終了位置と、で規定される区間である。このような未視聴区間を、ここでは便宜上、セグメントと呼ぶ。

具体的に、情報取得部１１１は、画像コンテンツの再生中にアーム位置検出部１０３から退避位置検出信号を受信すると、セグメントデータテーブル（図３参照）に新たなセグメントレコードを作成する。

セグメントデータテーブルは、記憶部１０２のセグメントデータ記憶領域１２１に記憶され、各セグメント、および、当該セグメントが設定される各画像コンテンツを識別するためのセグメントＩＤが格納されるセグメントＩＤ格納領域１２１ａと、セグメントの開始位置を示す情報が格納される未視聴開始位置格納領域１２１ｂと、セグメントの終了位置を示す情報が格納される未視聴終了位置格納領域１２１ｃと、画像コンテンツに予め設定されるチャプタのうち、各セグメントが含まれるチャプタＩＤが登録されるチャプタＩＤ格納領域１２１ｄと、から構成される。

開始位置および終了位置とは、ここでは、画像の先頭位置からの再生時刻である。これらは、画像の特定の位置を示す情報であればどのようなものでも良く、例えば、画像の先頭位置からのフレーム数等の情報を格納しても良い。

情報取得部１１１は、新たなセグメントレコードのセグメントＩＤ格納領域１２１ａに、各セグメントおよび当該セグメントが設定される各画像コンテンツ（例えば、ファイル名）を識別するためのセグメントＩＤを付与する。さらに、退避位置検出信号を受信した際の再生時刻を、未視聴開始位置格納領域１２１ｂへと格納する。

また、情報取得部１１１は、アーム位置検出部１０３から使用位置検出信号を受信すると、最新のセグメントレコードの未視聴終了位置格納領域１２１ｃに、退避位置検出信号を受信した際の再生時刻を格納する。そして、再生画像コンテンツにチャプタが設定されている場合には、当該画像コンテンツのメタデータ（図４参照）から、当該セグメントレコードのセグメントを含むチャプタをメタデータから全て検出して、そのチャプタＩＤを、チャプタＩＤ格納領域１２１ｄへと格納する。

メタデータとは、コンテンツデータ記憶領域１２２に記憶されるコンテンツごとに設けられる情報であり、これらはコンテンツを説明する複数の特定情報から構成される。例えば、図４に示すように、コンテンツのファイル名、設定されるチャプタの数、各チャプタの開始位置および終了位置等の情報を含む。

その後、情報取得部１１１は、情報通知部１１２に通知画面の表示要求を出力する。

次に、情報通知部１１２について説明する。情報通知部１１２は、情報取得部１１１が生成したセグメントデータテーブルの各セグメントレコードに基づいて、セグメントの再生が可能な旨を利用者に通知するための通知画面を表示する。

具体的に、情報通知部１１２は、情報取得部１１１からの通知画面の表示要求を受け付けると、通知画面８１０（図５参照）を生成して、表示部１６に表示させる。通知画面８１０には例えば、セグメントデータレコードに記録される各セグメントをダイジェスト再生するためのダイジェスト再生アイコン８１１と、各セグメントのみを再生するためのセグメント再生アイコン８１２と、が表示される。

なお、セグメント再生アイコン８１２は、記録されるセグメントレコードの全てについてセグメント再生アイコン８１２を表示しても良いし、最新のものから所定の数のレコードについてのみ表示しても良い。また、セグメント再生アイコン８１２には、当該セグメントの開始位置のフレームを縮小し、これをサムネイルとして表示しても良い。

なお、通知画面８１０は、例えば、画像再生部１１３によって画像コンテンツが再生され、表示部１６に表示されている最中にも、重ねて表示させることが可能である。もちろん、通知画面８１０は、画像コンテンツが再生されていない場合でも表示可能である。

利用者は、表示されたアイコンに対応するダイジェストおよびセグメントの再生を、操作部１７を介して画像再生部１１３へと指示することが可能である。なお、利用者はこのような再生指示を、図示しない角速度センサ等を用いて頭部の動作によって入力しても良い。

なお、情報通知部２１２は、通知画面８１０を一定の期間ごとに表示／消去して、繰り返し利用者に未視聴区間が存在することを通知しても良い。また、このタイミングは、利用者が任意で設定することが可能な構成としても良いし、利用者が要求した場合にのみ通知画面８１０を表示させても良い。

画像再生部１１３は、利用者からの再生指示に従って、画像コンテンツ、および、再生アイコンに対応する画像コンテンツのダイジェストやセグメントを再生する。

具体的に、画像再生部１１３は、ダイジェストの再生指示を受け付けると、所定の再生方法に従って、画像コンテンツをダイジェスト再生する。

まず、画像再生部１１３は、セグメントデータテーブルのセグメントＩＤ格納領域１２１ａを参照して、現在再生中の画像コンテンツに関するセグメントレコードを抽出する。そして、画像再生部１１３は、所定の再生方法に従って、画像コンテンツのダイジェスト再生を開始する。

所定の再生方法とは、未視聴区間であるセグメントを利用者が視聴可能なものであれば、どのように画像コンテンツを再生しても良いが、例えば、下記のような方法で、画像コンテンツを再生する。

図６（ａ）、図６（ｂ）、図６（ｃ）は、画像再生部１１３の実行するダイジェスト再生の、一例を示す概略図である。

ダイジェスト再生の一つの方法として、画像再生部１１３は、図６（ａ）に示すように、特定の画像コンテンツの各セグメントレコードを繋げ、ダイジェスト画像として再生する。具体的に、画像再生部１１３は、セグメントレコードを時系列順に並べて、最初のセグメントレコードの未視聴開始位置格納領域１２１ｂに格納される再生時刻（開始位置）から、画像コンテンツの再生を開始する。そして、当該セグメントレコードの未視聴終了位置格納領域１２１ｃに格納される再生時刻（終了位置）にさしかかると、次のセグメントレコードの未視聴開始位置格納領域１２１ｂに格納される再生時刻（開始位置）にジャンプする。これを最後のセグメントレコードの終了位置まで繰り返すことで、画像再生部１１３は、未視聴区間の画像のみを再生する。

他のダイジェスト再生の方法として、画像再生部１１３は、図６（ｂ）に示すように、特定の画像コンテンツのセグメントレコードを、その前後の所定の位置で繋げて、ダイジェスト画像として再生する。具体的に、画像再生部１１３は、セグメントレコードを時系列順に並べて、各セグメントレコードの未視聴開始位置格納領域１２１ｂに格納される再生時刻から所定の時間前の位置（例えば、３秒前）を開始位置、各セグメントレコードの未視聴終了位置格納領域１２１ｃに格納される再生時刻から、所定の時間後の位置（例えば、３秒後）を終了位置として仮定する。そして、この開始位置と終了位置を繋げることにより、画像再生部１１３は、未視聴区間およびその前後の領域を再生する。

また、さらなるダイジェスト再生の方法として、画像再生部１１３は、図６（ｃ）に示すように、特定の画像コンテンツについて、各セグメントを含むチャプタを繋げて、ダイジェスト画像として再生する。具体的に、画像再生部１１３は、各セグメントレコードのチャプタＩＤ格納領域１２１ｄに格納されるチャプタＩＤについて、当該画像コンテンツのメタデータを検索し、各チャプタの開始位置および終了位置の再生時刻を取得して、時系列順にこの開始位置と終了位置を繋げることにより、画像再生部１１３は、未視聴区間を、チャプタごと再生する。

なお、画像再生部１１３は、セグメントの再生指示を受け付けた場合には、当該セグメントの再生を開始する。セグメントの再生についても同様に、セグメントのみ、セグメントおよびその前後の領域、セグメントを含むチャプタ等、どのような再生方法によってこれを再生しても良い。

また、セグメントデータテーブルの各セグメントレコードは、ダイジェストおよびセグメントの再生後、視聴済となったものについては全て削除される。さらに、未視聴となる部分が残った場合には、その部分についてセグメントの開始位置および終了位置が更新されて、新たなセグメントが設定される。なお、利用者は、このような削除・更新について、任意で設定することが可能である。

さらに、画像再生部１１３は、ダイジェストやセグメントの画像データを生成して、これを再生するような構成としても良い。もちろん、画像データの生成について、どのような生成方法を用いることも可能である。

Ｉ／Ｆ部１０４は、音声出力部１２と、表示部１６と、操作部１７と、を制御装置１０に接続する。また、ＨＭＤ１と、外部機器とをデータ転送可能に接続する汎用バスとして、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）や、ＩＥＥＥ１３９４等の規格に準拠する端子を備える。

ここで、ＨＭＤ１のハードウェア構成について説明する。図１０は、ＨＭＤ１の電気的な構成を示すブロック図である。

図１０に示すように、ＨＭＤ１は、各装置への制御を担うＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）８１と、各種データを書換え可能に記憶するメモリ８２と、各種のプログラム、プログラムの生成するデータ等を格納する不揮発性の補助メモリ８３と、ＬＣＤ８４、スピーカ１２、各デバイスとＣＰＵ８１を接続するＩ／Ｆ部１０４と、を備える。制御部１０１は、例えば、補助メモリ８３に記憶されている所定のプログラムを、メモリ８２に読み込み、ＣＰＵ８１で実行することにより実現可能である。

次に、情報取得部１１１が実行する処理について、図７を用いて詳細に説明する。図７は、第一の実施形態にかかる情報取得部１１１が、未視聴区間を記録する処理を示すフローチャートである。情報取得部１１１は、画像コンテンツの再生が開始されると、当フローを開始する。

情報取得部１１１は、まず、アーム位置検出部１０３からの退避位置検出信号の受信を検出する（Ｓ１１）。退避位置検出信号を受信した場合（Ｓ１１でＹＥＳ）、Ｓ１２へと進む。

情報取得部１１１は、退避位置検出信号を受信すると（Ｓ１１でＹＥＳ）、セグメントデータテーブルに新たなセグメントレコードを作成して、その開始位置を規定する（Ｓ１２）。具体的に、情報取得部１１１は、セグメントＩＤ格納領域１２１ａにセグメントＩＤを登録し、退避位置検出信号を受信した際の再生時刻を、未視聴開始位置格納領域１２１ｂへと格納する（Ｓ１２）。

次に、情報取得部１１１は、アーム位置検出部１０３からの使用位置検出信号の受信を検出する（Ｓ１３）。使用位置検出信号を受信した場合（Ｓ１３でＹＥＳ）、Ｓ１４へと進む。

情報取得部１１１は、使用位置検出信号を受信すると（Ｓ１３でＹＥＳ）、セグメントの終了位置を規定する（Ｓ１４）。具体的に、情報取得部１１１は、最新のセグメントレコードの未視聴終了位置格納領域１２１ｃに、退避位置検出信号を受信した際の再生時刻を格納する。そして、再生画像コンテンツにチャプタが設定されている場合には、当該セグメントレコードのセグメントを含むチャプタを全て検出して、そのチャプタＩＤを、チャプタＩＤ格納領域１２１ｄへと格納する。

なお、情報取得部１１１は、現在再生中の画像コンテンツが終了を検出した場合に、当該フローを終了する。

このような構成によれば、利用者は、画像データを最初から再生しなおすことなく、未視聴部分を確認することが可能である。また、未視聴部分をダイジェスト化して視聴可能であるため、効率良く未視聴部分のみを視聴することが可能である。

次に、本発明の第二の実施形態について説明する。第二の実施形態であるＨＭＤ２は、第一の実施形態と比較して異なっている点に関連する事項について、以下、図８および図９を参照しながら、説明する。

図８に、本発明の第二の実施形態にかかるコンテンツ配信システムを示す。同図に示すように、コンテンツ配信システムは、コンテンツを配信するサーバ３と、サーバ３からネットワーク９００を介してコンテンツの配信を受けるＨＭＤ２と、を含んでいる。

ネットワーク９００は、電話・携帯電話網やインターネット等を含む公衆通信網であり、ＨＭＤ２は、無線および有線でネットワーク９００と接続される。もちろん、図示しない基地局を介して、無線電波の送受信を行っても良い。

なお、各セグメントは、セグメントデータテーブルで管理せず、コンテンツデータに直接セグメントデータを付与しても良い。例えば、メタデータにセグメントを新たなチャプタとして直接登録し、チャプタでセグメントを呼び出し可能な構成とすることができる。これによって、利用者は、チャプタ単位での再生やスキップを実行することで、未視聴区間のみを視聴することが可能となる。

以下、コンテンツ配信システムの各装置の実行する処理を、図９を参照しながら説明する。図９は、第二の実施形態にかかるコンテンツ配信システムの各装置の動作例を示すタイムチャートである。

ＨＭＤ２は、制御装置２０を含み、制御装置２０は、制御部２０１と、記憶部２０２と、アーム位置検出部１０３と、Ｉ／Ｆ部１０４と、から構成される。

制御部２０１は、アーム位置検出部１０３からの信号を取得し、当該信号の情報をサーバ３へと出力する信号取得部２１１と、再生可能なダイジェストおよびセグメントを利用者へと通知する情報通知部２１２と、サーバ３から配信される画像データを再生するストリーミング再生部２１３と、を含む。

信号取得部２１１は、画像コンテンツの再生中にアーム位置検出部１０３から退避位置検出信号を受け付けると、Ｉ／Ｆ部１０４を介して、サーバ３へ当該信号を受け付けた再生時刻を含む退避位置検出情報を送信する。また、信号取得部２１１は、アーム位置検出部１０３から使用位置検出信号を受け付けると、Ｉ／Ｆ部１０４を介して、サーバ３へ当該信号を受け付けた再生時刻を含む使用位置検出情報を送信すると共に、再生中のコンテンツに関するセグメントリストを要求する。

情報通知部２１２は、サーバ３からのセグメントリストの提供を受け付けると、このセグメントリストに従って第一の実施形態にかかる情報通知部１１２と同様に、図５に示すような通知画面８１０を生成して、表示部１６に表示させる。

なお、通知画面８１０は、ストリーミング再生部２１３によってストリーミング型の画像コンテンツが再生され、表示部１６に表示されている最中でも、重ねて表示させることが可能である。

ストリーミング再生部２１３は、サーバ３から配信される画像データを受信して、これを再生する。具体的に、ストリーミング再生部２１３は、サーバ３から配信されるストリーミング型の画像データを受信すると、これを記憶部２０２のコンテンツデータ記憶領域２２１へと格納しながら所定の複号化方式に従ってデコードし、画像信号および音声信号を生成して表示部１６および音声出力部１２へと出力する。

また、ストリーミング再生部２１３は、利用者から操作部１７を介してダイジェストおよびセグメントの再生指示を受け付けると、サーバ３へ再生指示を受けたダイジェストおよびセグメントの配信要求を出力する。

図８に戻って、サーバ３の構成について説明する。サーバ３は、制御部３０１と、記憶部３０２と、Ｉ／Ｆ部３０３と、から構成される。

記憶部３０２は、コンテンツデータベース３２１と、画像データ記憶領域３２２と、セグメントデータ記憶領域３２３と、を有する。

コンテンツデータベース３２１は、クライアント（ここでは、ＨＭＤ２のユーザ）へと配信されるコンテンツデータを予め蓄積する。コンテンツデータとは、例えば、音楽や映像、画像、文書等、あらゆるデジタルデータ全般である。

画像データ記憶領域３２２には、セグメントデータテーブルに基づいて、後述の画像生成部３１２によって生成されるダイジェスト画像データおよびセグメント画像データが格納される。

セグメントデータ記憶領域３２３は、第一の実施形態にかかるセグメントデータ記憶領域１２１と同様に、図３に示すようなセグメントデータテーブルを記憶する。

Ｉ／Ｆ部３０３は、ネットワーク９００や各機能部間におけるインターフェースを提供し、サーバ３を、ネットワーク９００を介してＨＭＤ２とデータの送受信可能に接続する。

次に、サーバ３の制御部３０１の実行する処理について、図９を参照しながら説明する。

サーバ３の制御部３０１は、ＨＭＤ２からの退避位置検出情報および使用位置検出情報に基づいて、セグメントを規定する情報管理部３１１と、ＨＭＤ２からのダイジェストおよびセグメント配信要求に従って、ダイジェストおよびセグメント画像を生成する画像生成部３１２と、ＨＭＤ２からの配信要求に従って、画像データをストリーミング配信するストリーミング配信部３１３と、から構成される。

情報管理部３１１は、顧客ごとにセグメントデータテーブルを管理する。具体的に、情報管理部３１１は、ＨＭＤ２からの退避位置検出情報を受信すると、セグメントデータテーブルに新たなセグメントレコードを作成して、各セグメントおよび当該セグメントが設定される各画像コンテンツ（例えば、ファイル名）を識別するためのセグメントＩＤをセグメントＩＤ格納領域１２１ａへ登録し、退避位置検出情報に含まれる再生時刻を、未視聴開始位置格納領域１２１ｂへと格納する。

また、情報管理部３１１は、ＨＭＤ２からの使用位置検出情報を受信すると、最新のセグメントレコードの未視聴終了位置格納領域１２１ｃに、退避位置検出情報に含まれる再生時刻を格納する。そして、再生画像コンテンツにチャプタが設定されている場合には、当該セグメントレコードのセグメントを含むチャプタをメタデータから全て検出して、そのチャプタＩＤを、チャプタＩＤ格納領域１２１ｄへと格納する。

さらに、情報管理部３１１は、ＨＭＤ２からのセグメントリスト要求を受信すると、セグメントリストをＨＭＤ２へと提供する。具体的に、情報管理部３１１は、再生中の画像コンテンツのファイル名をＨＭＤ２へと問い合わせて、当該画像コンテンツに関するセグメントレコードをセグメントデータテーブルから抽出して、セグメントリストとしてＨＭＤ２へと送信する。

画像生成部３１２は、ＨＭＤ２からダイジェストおよびセグメント配信要求を受信すると、所定の生成方法に従ってダイジェスト画像データおよびセグメント画像データを生成し、画像データ記憶領域３２２へと格納し、ストリーミング配信部３１３へ当該画像データの配信を要求する。

所定の生成方法は、未視聴区間であるセグメントを含んでいれば、どのように画像データを生成しても良く、例えば、第一の実施形態にかかる画像再生部１１３が実行する画像の再生方法（図６（ａ）〜図６（ｃ）参照）と同様の手法を用いることが可能であるため、ここでは詳細な説明を省略する。

ストリーミング配信部３１３は、画像生成部３１２から画像データの配信要求を受け付けると、配信要求のあったダイジェスト画像データおよびセグメント画像データを、任意の符号化方式（例えば、ＭＰＥＧ−４等）によって圧縮符号化して、ＨＭＤ２へストリーミング配信を開始する。

もちろん、サーバ３は、画像データをストリーミング配信ではなく、通常の送信（ダウンロード）によって、ＨＭＤ２へと供給しても良い。

以上のような構成によれば、サーバにおいて未視聴区間が管理されるため、ＨＭＤ２の処理負荷が低減されるとともに、その記憶容量に左右されずに、新たに生成されたダイジェスト画像データおよびセグメント画像データを再生することが可能となる。

また、本発明は、上記のような実施形態には制限されない。上記の実施形態は、本発明の技術的思想の範囲内で様々な変形が可能である。

なお、利用者の装着状態を検出可能な構成とし、これによってセグメントを規定しても良い。装着状態の検出は、例えば、赤外線センサ投光器より赤外線ビームを投光し、赤外線センサ受光器側で赤外線ビームを受光時と、遮蔽物による遮光時と、の光量の変化を検出することによって実現可能である。

具体的に、ＨＭＤは、赤外線センサ受光器における赤外線ビームの受光時に非装着状態検出信号を、遮蔽物による遮光時には装着状態検出信号を検出して、非装着状態検出信号の検出された再生時刻を開始位置、装着状態検出信号の検出された再生時刻を終了位置として、セグメントを規定する。このような構成によれば、ＨＭＤの装着・非装着に基づいて未視聴区間を設定し、この区間の画像を提供することが可能である。

また、ディスプレイの前面に眼球検出センサを設けて、眼球の動きによって視聴・未視聴を判断しても良い。眼球の動きの検出には、例えば、利用者の眼球に赤外線を照射して、その反射光から利用者の視線ベクトルと、視線の対象位置とを算出することが可能である。利用者の視線が所定の時間以上ディスプレイから逸れている場合、この間を未視聴区間として設定すれば良い。このような場合には、ＨＭＤ以外の端末、例えば携帯電話やポータブルプレーヤのような機器においても、本発明を適用することが可能である。

なお、未視聴区間の通知タイミングや通知手段は、上記のような通知画面８１０の表示に限定されない。例えば、コンテンツデータのプレイリスト等を表示する際、リストにアイコンを表示して、利用者に未視聴区間を有するコンテンツデータを通知するような構成としても良い。また、音声やＬＥＤの発光等によって、未視聴区間の存在を通知しても良い。

さらに、ダイジェストおよびセグメントの再生中には、現在の再生時刻や、チャプタの番号、および、セグメント繋ぎ部で画像がスキップされることを示すような情報を表示し、利用者に現在の再生位置を知らせるような構成としても良い。

また、利用者がＨＭＤ２や図示しないＰＣによって画像データを録画および生成し、これをサーバ３へと送信（アップロード）して、サーバ３にセグメントを管理させることも可能である。

さらに、本発明のＨＭＤは、退避位置検出信号を受信した際に、表示部１６への電力の供給を停止し、不要な電力の消費を抑制することが可能である。

なお、本発明のＨＭＤは、片眼で映像を見る構成となっているが、両眼で映像を見るような構成としても良い。

本発明の第一の実施形態にかかるＨＭＤ１の斜視図である。 ＨＭＤ１の機能的な構成を示すブロック図である。 ＨＭＤ１の備えるセグメントデータテーブルの概略図である。 ＨＭＤ１の備えるメタデータの概略図である。 ＨＭＤ１の表示する通知画面の概略図である。 （ａ）（ｂ）（ｃ）画像再生部１１３の実行するダイジェスト再生処理の一例を示す概略図である。 情報取得部１１１の実行する処理を示すフローチャートである。 本発明の第二の実施形態にかかるコンテンツ配信システムの構成を示すブロック図である。 コンテンツ配信システムの各装置の動作例を示すタイムチャートである。 ＨＭＤ１の電気的な構成を示すブロック図である。

符号の説明

１・２：ＨＭＤ、３：サーバ、１０・２０：制御装置、１１：頭部装着帯、１２：音声出力部、１３Ａ、１３Ｂ：筐体、１４：支持部、１５：アーム部、１６：表示部、１７：操作部、１０１：制御部、１１１：情報取得部、２１１：信号取得部、１１２・２１２：情報通知部、１１３：画像再生部、２１３：ストリーミング再生部、１０２・２０２：記憶部、１０３：アーム位置検出部、１３１：近接センサ、１０４・３０３：入出力インターフェース部。

Claims (6)

1. 利用者の視線の動きから画像データの未視聴区間を設定して、前記未視聴区間が設定されていることの通知と、前記未視聴区間の再生と、を行う制御手段
   を備えることを特徴とする端末装置。
2. 表示手段と、
   前記表示手段の位置から前記表示手段に表示する画像データの未視聴区間を設定して、前記未視聴区間が設定されていることの通知と、前記未視聴区間の再生と、を行う制御手段
   を備えることを特徴とするヘッドマウントディスプレイ装置。
3. 請求項２に記載のヘッドマウントディスプレイ装置であって、
   前記制御手段は、前記表示手段の位置が、利用者の眼前以外の位置に移動したと判断してから、利用者の眼前に移動したと判断するまでの間を、未視聴区間として設定する
   ことを特徴とするヘッドマウントディスプレイ装置。
4. 請求項２または３に記載のヘッドマウントディスプレイ装置であって、
   前記制御手段は、複数の未視聴区間を含むダイジェストの画像データを生成する
   ことを特徴とするヘッドマウントディスプレイ装置。
5. 請求項２または３に記載のヘッドマウントディスプレイ装置であって、
   前記制御手段は、前記未視聴区間を、前記画像データにチャプタとして設定する
   ことを特徴とするヘッドマウントディスプレイ装置。
6. 表示手段と、前記表示手段の位置を検出する検出手段と、画像データに存在する未視聴区間を通知して、サーバから配信される前記画像データを再生する制御手段と、を有するヘッドマウントディスプレイ装置と、
   前記検出手段によって検出された表示手段の位置から、前記画像データについて、未視聴区間を設定し、複数の前記未視聴区間を含むダイジェストの画像データを生成して、前記ダイジェストの画像データを、ネットワークを介して前記ヘッドマウントディスプレイ装置へ配信する制御手段、を有するサーバと、
   を備えることを特徴とするコンテンツ配信システム。

Images