JP2019211877A - 筒状映像処理装置、筒状映像処理システム及び筒状映像処理方法 - Google Patents

Abstract

【課題】頭部装着型映像表示装置を装着した場合でも、手足を自由に動かすことができ、映像とリアリティを体験することができ、周囲に安全な映像の制御を行う筒状映像処理装置を提供する。【解決手段】頭部装着型映像表示装置７に表示する映像の取得と出力を制御する筒状映像処理装置１０であって、頭部装着型映像表示装置の装着者１００の身体に関する状態情報を取得し、その取得した状態情報に基づき、頭部装着型映像表示装置の表示部に表示する映像の設定を変更し、変更された設定の映像で頭部装着型映像表示装置に表示することを特徴とする。【選択図】図１

Description

本発明は、頭部装着型映像表示装置を装着した装着者に表示する映像の制御を行う筒状映像処理装置、及び筒状映像処理方法に関する。

近年、仮想現実（ＶＲ：Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）や拡張現実（ＡＲ：Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）、複合現実（ＭＲ：Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）といった技術向上し、特にＶＲに関しては、映し出される仮想空間内の映像に「触れる」という印象や体験が得られるようなクオリティやリアリティのある操作や視聴が可能となってきている。

これらの操作や視聴は、利用者の頭部に装着される頭部装着型映像表示装置（ＨＭＤ：Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）と呼ばれる表示部を頭部に装着し、その表示部を介して観ることできる。ＨＭＤには、装着型デバイスとＨＭＤに内蔵されたジャイロセンサーや地磁気センサー（コンパス）、加速度センサーを用いて装着者の頭の動きや視線方向を検出し、それらの装着者からのセンサーの入力に応じて表示内容を変化させながらＨＭＤの表示部に表示される映像の情報処理を行う。

例えば、クオリティは表示される映像の質に関する表現であり、リアリティはＨＭＤの仮想空間を「触れる」という表現になる。リアリティの場合は、ＶＲの可能性を広げたものであり、例えば、サッカー、ボクシング、バスケットボール、野球、陸上競技など、激しいスポーツにおいてもＶＲでの体感が可能となってきている。これからはより一層、ＨＭＤで表示される表示部の表示面積が広く、クオリティ面では、画質の高い解像度と広い視野角の表示部を備えるＨＭＤでの閲覧が可能となる。

一般的に、これら映像のＨＭＤで見る場合は、利用者はＨＭＤを頭部に装着し、椅子に座った状態、あるいは、立っている場合は、ある程度の周囲スペースを確保し、映像を楽しむ。

また最近において、より軽量なメガネ型の拡張現実ウェアラブルコンピュータが出てきており、例えば、装着者が着用するホロレンズ（登録商標）を通じて、装着者に視認される現実空間に様々な情報を埋め込み、ハンズフリーな状態でメガネの先に情報を表示される。表示に対する操作は、コントロ−ラーなどの操作デバイスを持つことなく、装着者自身の発話（自然言語音声コマンド）や視野前方に指先などでジェスチャーすることで、これらジェスチャー行為をメガネに備わるセンサーが判別し、所定のアプリケーションや通常に閲覧などしているインターネットを使用することができるようになっている。

特許文献１には、頭部装着型映像表示装置を頭部に装着させた装着者に対して、２以上の映像を表示し、装着者と略同一の視点で現実空間をライブ映像と重ね合わせて表示することについて開示されている。

しかしながら、このようなメガネ型の表示デバイスでは、アプリケーションやインターネットなどの情報を表示するための表示部の表示領域が狭い。そのため、その表示領域の中に複数の情報目の前の現実場面と重ね合わさり表示するのは、映像自体が仮想現実の世界に没入できるように制作されているため、周囲に危険が迫っていても気付きにくいケースがある。

例えば、事故の一例として、ＨＭＤを頭に装着した装着者が、ＶＲの映像サービスを受けている最中に誤って転倒し、手前にあったガラス製のテーブルに激突し、その割れたガラスで傷を負ったケースがある。立ってＶＲの映像を楽しむ場合は、ＨＭＤの表示部に表示される映像が原因で、恐怖を感じるような映像の場合は、無意識にしゃがみこんだり、何かしらの物体とぶつかりそうになるような映像の場合は、急に避けたり、手で払い除けたりする。そのため、ＨＭＤの映像を見ている装着者だけでなく、周囲でＨＭＤの装着者を見ているだけの傍観者も危険となることがある。

一方、ＶＲの新しい映像サービスで、仮想空間を「触れる」というリアリティさの表現の演出がある。装着者は、この高いリアリティさにより、映し出される色々なアクションを通じて体を動かすが、前述のように椅子に座っている場合でも、立位で映像を見る場合でも、大きな動きをとる可能性がある。事前に分かっている、説明を受け理解したとしても、ＶＲで表示される映像のリアリティさ、クオリティさにより、装着者自身だけでなく、周囲の傍観者を危険に巻き込んでしまうことがある。

危険への対応や対策を最優先とすることで、ＨＭＤに表示される映像を見る際、シートに着座したり、安全バーに捉まって体験することもある。このような場合だと、映像で表示されるコンテンツの種類が、例えば、グランドや大草原を歩く・走る、というようなシーンの場合は、手や足、全身を使ったコンテンツやアクションのような場合、装着者は自分の思いに合った動きが取りづらく、リアリティさに欠けてしまう。そのため、せっかくのリアリティ、クオリティの高いコンテンツが準備されていたとしても、制限されることとなり、ＨＭＤで映し出される仮想空間内の映像に「触れる」という表現、印象の体験を受けることができない。

特開２０１５−４９４８号公報

そこで、本発明は、前述した問題に鑑みて案出されたものであり、その目的とするところは、頭部装着型映像表示装置を装着した場合でも、手足を自由に動かすことができ、映像とリアリティを体験することができ、周囲に安全な映像の制御を行う筒状映像処理装置を提供することにある。

請求項１記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力とを制御する筒状映像処理装置であって、頭部装着型映像表示装置を頭部に装着した装着者を被覆する筒状の被覆部と、被覆部の内側に備わり装着者の身体に関する状態情報に含まれる身体情報、バイタル情報、または映像情報の少なくとも何れかの情報を取得する状態取得部と、頭部装着型映像表示装置に表示する映像を記録する映像記録部と、映像記録部に記録される映像の制御を行う映像制御部とを備え、映像制御部は、状態取得部で取得した身体に関する状態情報に基づき、頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

請求項２記載の発明は、請求項１記載の発明において、状態取得部は、被覆部の内部設定に備わるセンサー、動的測定装置、または撮像部であることを特徴とする。

請求項３記載の発明は、請求項１又は２記載の発明において、装着者に関する視線、呼吸、顔の筋肉、頭部、首、手、腕、身体、足、重心、または声の少なくとも何れかに関するデータであることを特徴とする。

請求項４記載の発明は、請求項１〜３記載の何れか１項記載の発明において、バイタル情報は、装着者に関する心拍数、体温、覚醒状態、興奮状態、リラックス状態に関するデータであることを特徴とする。

請求項５記載の発明は、請求項１〜４の何れか１項記載の発明において、装着者に関する顔、表情、全身、着衣、姿勢、またはポーズの少なくとも何れかに関する画像または映像であることを特徴とする。

請求項６記載の発明は、請求項１〜５の何れか１項記載の発明において、状態取得部で取得した状態情報に基づき、頭部装着型映像表示装置に表示する映像のシーン及び登場キャラクターに関するシナリオ、役割、映像及び画像に関する設定を変更し、該変更した設定で映像を表示することを特徴とする。

請求項７記載の発明は、請求項１〜６の何れか１項記載の発明において、映像のシーンは、少なくとも試合観戦、街中、学校、公園、電車内、飲食店を含む日常生活に関する場面であり、役割は、少なくとも舞台主役、ゲーム主役、スポーツ主役、学校主役を含む日常生活に関する主人公の立場であることを特徴とする。

請求項８記載の発明は、請求項１〜７の何れか１項記載の発明において、変更した設定で表示される映像の視聴前、視聴中、視聴後における装着者の身体情報及びバイタル情報を映像記録部に記録し、該記録した履歴データに基づいて、該装着者の視聴前、視聴中、視聴後における乖離率を算出することを特徴とする。

請求項９記載の発明は、請求項８記載の発明において、算出された乖離率に基づいて、映像の設定をさらに変更することを特徴とする。

請求項１０に記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力とを制御する筒状映像処理システムであって、頭部装着型映像表示装置を頭部に装着した装着者を被覆する筒状の被覆部と、被覆部の内側に備わり装着者の身体に関する状態情報に含まれる身体情報、バイタル情報、または映像情報の少なくとも何れかの情報を取得する状態取得部と、頭部装着型映像表示装置に表示する映像を記録する映像記録部と、映像記録部に記録される映像の制御を行う映像制御部とを備え、映像制御部は、状態取得部で取得した身体に関する状態情報に基づき、頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

請求項１１記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力を制御する筒状映像処理方法であって、頭部装着型映像表示装置を頭部に装着した装着者を被覆する筒状の被覆部の内側に備わる状態取得部を介して、装着者の身体に関する状態情報に含まれる身体情報、バイタル情報、または映像情報の少なくとも何れかの情報を取得する第一工程と、頭部装着型映像表示装置に表示する映像を記録する第二工程と、映像記録部に記録される映像の制御を行う第三工程とを備え、身体に関する状態情報に基づき、頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

請求項１〜１０記載の発明によれば、頭部装着型映像表示装置を頭に装着した装着者を被覆する筒状の被覆部を備え、この中で装着者は仰臥位で映像を表示する。このため装着者は、転んだり、倒れたりということがない。これにより、頭部装着型映像表示装置を装着した場合でも、手足を自由に動かすことができ、映像とリアリティある体験を安全な体勢で体験することが可能となる。

さらに、本筒状映像処理装置に備わる筒状の被覆部は、この筒状の被覆部の内部には装着者の身体に関する状態情報を取得する状態取得部を備える。このため、この状態情報に含まれる身体情報、バイタル情報、または映像情報の少なくとも何れかの情報を取得することができる。これにより、装着者の頭部や目線の動き、または身体の情報に基づき、頭部装着型映像表示装置で表示する映像の動きを装着者の状態情報に応じて制御することができ、よりリアリティある仮想空間の表示が可能となる。

請求項２記載の発明によれば状態取得部は、筒状の被覆部の内部に備わり、装着者の身体に関する状態情報を取得する。このため、被覆部の内部に備わる状態取得部と装着者との距離を一定に保つことができる。これにより、映像とリアリティある体験をすることが可能となる。

さらに、装着者の背景や周囲に余計な物や他の人が映りこむことがない。これにより、装着者の姿勢や動き、表情を検出できる。また、装着者の画像を撮影し、切り出すことができる。このため、映像とリアリティある体験をすることが可能となる。

請求項３記載の発明によれば、身体情報は、装着者に関する視線、呼吸、顔の筋肉、頭部、首、手、腕、身体、足、重心、または声の少なくとも何れかに関するデータである。これにより、装着者の細かい姿勢や動き、顔の表情などの変化を測定することができる。このため、映像とリアリティある体験をすることが可能となる。

請求項４記載の発明によれば、バイタル情報は、装着者に関する心拍数、体温、覚醒状態、興奮状態、リラックス状態の少なくとも何れかに関するデータ含む。これにより、装着者の細かい姿勢や動き、顔の表情などの変化を測定することができる。このため、映像とリアリティある体験をすることが可能となる。

請求項５記載の発明によれば、装着者に関する顔、表情、全身、着衣、姿勢、またはポーズの少なくとも何れかに関する画像または映像を取得する。これにより、装着者の細かい姿勢や動き、顔の表情などの変化を測定することができる。このため、映像とリアリティある体験をすることが可能となる。

請求項６記載の発明によれば、取得した状態情報に基づき、頭部装着型映像表示装置に表示する映像のシーン及び登場キャラクターに関するシナリオ、役割、映像及び画像に関する設定を変更する。これにより、変更した設定で映像を表示することができる。これにより、このため、映像とリアリティある体験をすることが可能となる。

請求項７記載の発明によれば、映像のシーンは、少なくとも試合観戦、街中、学校、公園、電車内、飲食店を含む日常生活に関する場面である。これにより、役割は、少なくとも舞台主役、ゲーム主役、スポーツ主役、学校主役を含む日常生活に関する主人公の立場とすることが可能となる。このため、映像とリアリティある体験をすることが可能となる。

請求項８記載の発明によれば、状態取得部は、変更した設定で表示される映像の視聴前、視聴中、視聴後における装着者の身体情報及びバイタル情報を記録する。このため、記録した履歴データに基づいて、該装着者の視聴前、視聴中、視聴後における乖離率を算出することができる。これにより、映像とリアリティある体験をすることが可能となる。

請求項９記載の発明によれば、映像制御部は、算出された乖離率に基づき、表示する映像の設定をさらに変更する。このため、算出された乖離率の変化の量に応じた映像を取得できる。これにより、映像とリアリティある体験をすることが可能となる。

請求項１０記載の発明によれば、頭部装着型映像表示装置を頭に装着した装着者を被覆する筒状の被覆部を備え、この中で装着者は仰臥位で映像を表示する。このため装着者は、転んだり、倒れたりということがない。これにより、頭部装着型映像表示装置を装着した場合でも、手足を自由に動かすことができ、映像とリアリティある体験を安全な体勢で体験することが可能となる。

請求項１１記載の発明によれば、頭部装着型映像表示装置を頭に装着した装着者を被覆する筒状の被覆部を備え、この中で装着者は仰臥位で映像を表示する。このため装着者は、転んだり、倒れたりということがない。これにより、頭部装着型映像表示装置を装着した場合でも、手足を自由に動かすことができ、映像とリアリティある体験を安全な体勢で体験することが可能となる。

図１（ａ）は、本発明を適用した筒状映像処理装置の正面図であり、図１（ｂ）は、本発明を適用した筒状映像処理装置の右側面図であり、図１（ｃ）は、本発明を適用した筒状映像処理装置の上面図である。 図２（ａ）は、本発明を適用した筒状映像処理装置の正面図であり、図２（ｂ）は、本発明を適用した筒状映像処理装置の右側面図であり、図２（ｃ）は、本発明を適用した筒状映像処理装置の上面図である。 図３（ａ）は、本発明を適用した筒状映像処理装置の正面図であり、図３（ｂ）は、本発明を適用した筒状映像処理装置の右側面図であり、図３（ｃ）は、本発明を適用した筒状映像処理装置の上面図である。 図４（ａ）は、本発明を適用した筒状映像処理装置の正面図であり、図４（ｂ）は、本発明を適用した筒状映像処理装置の右側面図であり、図４（ｃ）は、本発明を適用した筒状映像処理装置の上面図である。 図５は、実施形態における全体構成図の一例を示すブロック図である。 図６は、実施形態における参照データテーブル（登録コンテンツ）の一例を示す模式図である。 図７は、実施形態における参照データテーブル（効果情報）の一例を示す模式図である。 図８は、実施形態における参照データテーブルの一例を示す模式図である。 図９は、実施形態における参照データテーブルの一例を示す模式図である。 図１０は、実施形態における参照データテーブルの一例を示す模式図である。 図１１は、実施形態における筒状映像処理装置の動作の一例を示すフローチャートである。 図１２は、実施形態における設定の変更の一例を示す模式図である。 図１３は、実施形態における頭部装着型映像表示装置での表示の一例を示す模式図である。 図１４は、実施形態における筒状映像処理装置の動作の第２変形例を示すフローチャートである。

以下、本発明の実施形態における筒状映像処理装置の一例について、図面を参照しながら説明する。なお、各図における符号については、同様の構成をもった構造には、特別な事情のない限り、同じ符号を用いるものとする。

（実施形態：筒状映像処理装置１０の構成）
図１を参照して、実施形態における筒状映像処理装置１０の構成の一例について説明する。図１（ａ）は、本発明を適用した筒状映像処理装置１０の正面図であり、図１（ｂ）は、本発明を適用した筒状映像処理装置１０の右側面図であり、図１（ｃ）は、本発明を適用した筒状映像処理装置１０の上面図である。

図１（ａ）〜（ｃ）に示すように、筒状映像処理装置１０は、筒状の被覆部１、被覆部１の内側の内壁部２、撮像部３、センサー４、映像制御部５、通信部６を備え、装着者１００は頭部装着型映像表示装置７を頭部に装着し、情報通信端末（スマートフォン）１３が備わる。被覆部１は、頭部装着型映像表示装置を頭部に装着した装着者を被覆する。被覆部１の内側の内壁部２には、装着者１００の身体に関する状態情報として、身体情報、バイタル情報、映像情報を取得する。身体情報およびバイタル情報はセンサー４、映像情報は撮像部３により状態取得部１２（図示せず）の状態情報として、装着者１００に関する情報として対応付けられる。映像制御部５は、頭部装着型映像表示装置７に表示する映像を記録する。映像制御部５は、頭部装着型映像表示装置７に表示する映像の制御を行う。映像制御部５は、状態取得部１２で取得した装着者１００の身体に関する状態情報に基づき、映像記録部１１から装着者１００によって選択された映像の設定を変更し、設定を変更した映像を頭部装着型映像表示装置７に表示させる。

筒状映像処理装置１０の入口は、被覆部１の前後の開口部となる。また、被覆部１は、筒状の形状の他に、四角柱などの形状でもよい。さらに、被覆部１は、マット状の平面の形状であり、その端から丸めることで、筒状を形成するようにしてもよい。被覆部１の内部を照らす照明具（例えば、ＬＥＤ照明など）が内壁部２の上面に備わる（図示せず）。

被覆部１の内部の内壁部２は、例えば、スポンジ状やクッションなどの弾力性のある素材で形成されている。これにより、装着者１００が被覆部１の内部で手足を動かして内壁にぶつかったとしても、怪我することがない。なお、被覆部１は構造上、弾性ある構造としているが、より空間を広く持たせた複数階層の構造体としてもよい。さらに、被覆部１の外面を硬い素材の構造で覆い、内部は柔らかいソフトな素材としてもよい。被覆部１の左右上下の内壁部２の色は、例えば白系色の他に、グリーン系地またはブルー系地であってもよい。内壁部２の色をグリーン系地またはブルー系地とした場合は、被覆部１の内部をカメラなどの撮像部３で撮影すると、映像制御部５の処理で、仰臥位した状態で撮影された装着者１００（対象物）と装着者１００の背景（被覆部１の床面部）の画像を判別し、装着者１００の画像領域だけを切り出すことができる。これにより、内壁部２の背景色と異なる色の装着者１００の身体の部分だけを区別することが可能となり、映像制御部５での処理において、他の画像や映像の一部分、または背景に重ね合わせて表示するよう編集や設定が可能となる。

なお、撮像部３は、被覆部１の内部を動画または静止画で撮影可能である。撮影した動画または静止画は、筒状映像処理装置１０の映像記録部１１に記録される。また、所定の動画映像などのコンテンツも同様に映像記録部１１に記録される。これらの映像は、筒状映像処理システム２０（図示せず）の映像記録部２８（図示せず）にも記録されており、通信部６の処理により、映像のダウンロード、オンデマンドの視聴が可能となる。

撮像部３は、例えば、カメラ機能付きの情報通信端末（スマートフォン）１３などであってもよい。カメラ機能付きの情報通信端末（スマートフォン）１３に画像切り分けの機能を有している場合は、前述の背景と装着者１００の切り分け処理は、カメラ機能付きの情報通信端末（スマートフォン）１３側で行われ、切り出した装着者１００の画像だけを被覆部１に送信してもよい。さらに撮像部３は、被覆部１の内壁部２の一部に固定されるが、取り外しが可能なように設置されてもよい。情報通信端末（スマートフォン）１３は装着者１００が使用している機器であってもよく、その場合、被覆部１、頭部装着型映像表示装置７などとの通信設定、認証などの設定の後に、装着者１００の情報通信端末（スマートフォン）１３を介した操作や設定、撮像機能の使用、装着者１００の情報通信端末（スマートフォン）１３の記憶部（メモリー）に記録されている画像などの登録やクラウドに登録してある画像などの呼び出しが可能となる。そしてそれらは、頭部装着型映像表示装置７での表示や頭部装着型映像表示装置７から情報通信端末（スマートフォン）１３の操作も可能となる。

センサー４は、装着者１００の状態情報に含まれる情報のうち、身体情報とバイタル情報を取得する。センサー４は、身体情報として、装着者１００に関する視線、呼吸、顔の筋肉、頭部、首、手、腕、身体、足、重心、または声の少なくとも何れかに関するデータを取得する。また、バイタル情報として、装着者１００に関する心拍数、体温、覚醒状態、興奮状態、またはリラックス状態の少なくとも何れかに関するデータを取得する。これら取得した情報は、筒状映像処理装置１０の映像記録部１１、または筒状映像処理システム２０の映像管理サーバ２１の管理情報データベース２７（図示せず）または映像記録部２８に装着者１００の情報と対応付けられて記録される。

センサー４は、仰臥位の装着者１００の全身が計測できるように、被覆部１の内部の上側に装着される。これにより、装着者１００の動きに変化があっても、仰臥位の位置からの距離を一定とすることができ、装着者１００の正確な身体や手足などの部位の検知や計測、また、装着者１００の全身や頭、手、足などの画像の判別が容易となる。なお、被覆部１は、外観の形状が筒状であるため、内壁部２に備わる照明具（図示せず）により、内部の明るさを均一に照らすことが可能となるので、マーカーセンサーなどをカメラで識別する場合であっても、正確にマーカーの位置を検出することができる。さらに、コンテンツの設定情報（シーン、登場人物、役割、ＢＧＭなど）と画像や映像など対応づけて映像記録部１１が記録する。

映像制御部５は、ＣＰＵと、ＲＯＭと、ＲＡＭと、記憶部と、Ｉ／Ｆなどを備える。これら各構成は、内部バスにより接続される。ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）は、筒状映像処理装置１０全体を制御する。ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）は、ＣＰＵの動作コードを格納する。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）は、ＣＰＵの動作時に使用される作業領域である。記憶部は、各種情報が記憶される。記憶部として、例えばＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）の他、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）や超小型のカード型などのデータ保存装置（開示せず）が用いられる。

さらに、映像制御部５は、状態取得部１２で取得した状態情報に基づき、頭部装着型映像表示装置７に表示する映像のシーン及び登場キャラクターに関するシナリオ、役割、映像及び画像に関する設定を変更する。そして変更した設定で、頭部装着型映像表示装置７の表示部に表示する。映像のシーンは、映像記録部１１（または映像記録部２８）に格納されているコンテンツの内容で分類されており、例えば、少なくとも試合観戦、街中、学校、公園、電車内、飲食店を含む日常生活に関する場面である。また、登場キャラクターの役割は、例えば、少なくとも舞台主役、ゲーム主役、スポーツ主役、学校主役を含む日常生活に関する主人公の立場である。

また、映像制御部５は、状態取得部１２によって取得される装着者１００の映像の視聴前、視聴中、視聴後における状態情報（身体情報、バイタル情報）を映像記録部１１に記録する。映像制御部５は、記録した履歴データに基づいて、装着者１００の視聴前、視聴中、視聴後における乖離率を算出する。そして、上記映像制御部は、算出した乖離率に基づいて、映像の各シーンにおける設定をさらに変更する。例えば、視聴前と視聴後の乖離率が高い場合は、映像が合っていないと判断し、次回の視聴では乖離率を低くするような映像を提示する。または、別のシーンや登場キャラクターの設定を行う。

被覆部１は、被覆部１の内部に状態取得部１２を備え、状態取得部１２は複数の撮像部３、センサー４で構成される他、例えば図３に示す動的測定装置（マット）８を備える。映像制御部５、上位システムである映像管理サーバ２１との通信を行う通信部６を備える。他の装置や機器との通信（連携）は、各機器に備わる通信機能を介して設定される。例えば、筒状映像処理装置１０の電源を入れ、頭部装着型映像表示装置７との通信接続の設定などにより行われる。通信接続は、例えば、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、Ｗｉ-Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）などであり、この通信機能を備える情報通信端末（スマートフォン）１３や他の機器とも同様に設定することができる。センサー４は、装着者１００の身体情報、バイタル情報を計測する。センサー４は、身体の動きを感知、計測するセンサーの他に、声を集積する音声センサーであってもよく、また、装着者１００が身に付けたり、装着するセンサーであってもよい。

次に、図２を参照して、実施形態における筒状映像処理装置１０の構成の一例について説明する。図２（ａ）は、本発明を適用した筒状映像処理装置の正面図であり、図２（ｂ）は、本発明を適用した筒状映像処理装置の右側面図であり、図２（ｃ）は、本発明を適用した筒状映像処理装置の上面図である。

図１との違いは、図２で示される被覆部１の内部に装着されるライン状のセンサー４は、被覆部１の中に仰臥位する装着者１００の身体情報をより正確に計測できるように内壁部２の面に沿って装着される。これにより、装着者１００の上半身、下半身などと分けて状態情報の取得が可能となる。

次に、図３を参照して、実施形態における筒状映像処理装置１０の構成の一例について説明する。図３（ａ）は、本発明を適用した筒状映像処理装置の正面図であり、図３（ｂ）は、本発明を適用した筒状映像処理装置の右側面図であり、図３（ｃ）は、本発明を適用した筒状映像処理装置の上面図である。

図１〜２との違いは、図３で示される被覆部１の内部の底面に動的測定装置（マット）８を備える。このマットは、例えば低反発の素材で形成されるマットであってもよい。これにより装着者１００は、身体が包まれ、無重力状態にいるような感覚で、手足を自由に動かすことが可能となる。色は、装着者１００の動きを映像から判別する場合は、例えば、グリーン系地またはブルー系地となるが、映像以外のセンサーで装着者１００の動きを検知、計測する場合は、他の色であってもよい。

さらに、マットは仰臥位する装着者１００の体重や体温を検知するセンサー、またはマイクを備えていてもよい。これにより、装着者１００の体温や体重移動のデータ、または装着者１００の声を計測でき、その計測されたデータや蓄積されたデータ量の推移、装着者１００の映像の視聴前後の気持ち（バイタル情報）の差分を示す乖離の度合いに応じた映像の制御を行う。

次に、図４を参照して、実施形態における筒状映像処理装置１０の構成の一例について説明する。図４（ａ）は、本発明を適用した筒状映像処理装置の正面図であり、図４（ｂ）は、本発明を適用した筒状映像処理装置の右側面図であり、図４（ｃ）は、本発明を適用した筒状映像処理装置の上面図である。

図１〜３との違いは、図４で示される被覆部１の下位に収納部９及びローラーを備える。収納部９は、収納部９の内部に空間があり、収納部９の上面が開口することで、被覆部１を収納部９の内部に収納することができる。被覆部１は、例えば、収納部９が開口されると、収納部９から自然と広がるような形状や構成、材質であってもよい。

ローラーは、被覆部１の下位に備わる。可動は、センサー４によって取得された状態情報に基づき装着者１００の動きに応じて可動する。または、映像制御部５によって装着者１００が装着する頭部装着型映像表示装置７で表示される映像の設定内容に合わせ可動する。可動は、筒状の被覆部１の下位の弧形状に合わせ左右に可動する。ローラーの可動は、例えば、小型のモーター機構により可動するようにしてもよい。

図５を参照して、実施形態における全体構成の一例について説明する。筒状映像処理装置１０は、例えば公衆通信網３０（ネットワーク）、Ｗｉ-Ｆｉ、Ｂｌｕｅｔｏｏｔｈなどを介して、筒状映像処理装置１０の筒状映像処理システム２０と接続されるほか、例えばコンテンツプロバイダー４０などと接続されてもよい。

筒状映像処理装置１０は、前述の被覆部１、映像制御部５、通信部６、映像記録部１１、状態取得部１２により構成される。被覆部１は装着者１００を被覆する筒状の形状を有しており、その内部に内壁部２をさらに備え、内壁部２には装着者１００の状態情報を取得する。状態取得部１２は、さらに撮像部３（カメラ）、センサー４、装着者１００が装着する頭部装着型映像表示装置７、動的測定装置８（マット）と接続される。

撮像部３は、被覆部１の内部に備わるが、例えば、モニターカメラや装着者１００が保有するカメラ機能付きの情報通信端末（スマートフォン）１３であってもよい。撮像部３は、装着者１００の姿勢や表情、動きを撮影するカメラを制御するカメラ制御部、撮影した画像または映像を映像制御部５に送信する映像送受信部、撮影した画像または映像を撮影時の設定と対応付けて記憶する映像記憶部などにより構成される。

センサー４は、例えば、装着者１００の身体の動きや状態などを計測する各種センサーの対象計測部、計測状態を判定する状態判定部、音声などを集音するマイクにより構成される。例えば、センサー４で取得した各情報の値に不具合がある場合は、情報判定部の判定の結果に応じて、取得する設定値が変更される。

頭部装着型映像表示装置７は、装着者１００の頭部に装着され、頭部装着型映像表示装置７の表示部（図示せず）に映像が表示される。さらに頭部装着型映像表示装置７に備わるスピーカ（イヤホン）により音声が出力され、筒状映像処理装置１０の映像制御部５と連動した処理が行われる。

さらに、頭部装着型映像表示装置７は、頭部装着型映像表示装置７で映像の表示や効果の程度を制御する映像制御部、音声の大小や効果音などを制御する音声制御部、それらの表示の状態または装着者１００の頭部の位置や傾きを判定する状態判定部を備える。

筒状映像処理システム２０、例えば、映像管理サーバ２１などで電子機器が用いられる。映像管理サーバ２１は、管理部２２内にＣＰＵと、ＲＯＭと、ＲＡＭと、記憶部と、Ｉ／Ｆとを備える。これら各構成は、内部バスにより接続される。

ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）は、映像管理サーバ２１全体を制御する。ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）は、ＣＰＵの動作コードを格納する。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）は、ＣＰＵの動作時に使用される作業領域である。記憶部は、各種情報が記憶される。記憶部として、例えばＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）の他、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）やフロッピーディスクなどのデータ保存装置（開示せず）が用いられる。

なお、例えば映像管理サーバ２１は、図示しないＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）を有してもよい。ＧＰＵを有することで、通常よりも高速演算処理が可能となる。筒状映像処理装置１０についても、同様の構成を有する。

さらに、映像制御部５、コンテンツ登録部２５、状態判定部２６を備える。映像制御部５は、筒状映像処理装置１０に送信する映像の制御を行う。例えば、複数の筒状映像処理装置１０が接続されるような場合、統合的な映像制御を行う。

ここで、図６を参照して、実施形態における登録コンテンツのコンテンツ登録テーブル２００の一例について説明する。コンテンツ登録部２５は、例えば、コンテンツ登録テーブル２００に示すような新規コンテンツの登録を行う。新規コンテンツには、設定情報として、例えば、コンテンツタイトル、カテゴリ、映像時間、シーン、登場キャラクター、課金などの情報が付されている。

頭部装着型映像表示装置７における通常表示は、コンテンツ登録テーブル２００に設定されている初期情報に基づき映像が表示されるが、例えば、状態取得部１２による装着者１００の状態または装着者１００の設定指示に基づき、映像のシーン、登場キャラクターが変更され、変更されたシーンなどの設定で映像が表示される。各設定は、接続される頭部装着型映像表示装置７または情報通信端末（スマートフォン）１３の操作で行われる。

なお、各コンテンツの映像のシーンは、各コンテンツ、カテゴリに応じて、複数設定され、例えば、コンテンツタイトルが『ハイスクールメモリーズ（文化祭編）』、コンテンツのカテゴリは『学園ロマンス』、映像の時間は『ｈｈ：ｍｍ：ｄｄ』、このコンテンツのシーンは『１（学校）、２（街中）、３（公園）、・・・』と複数あり、登場キャラクターは『本人（装着者１００）、主役、主役の彼女、主役の友人、・・・』、そのコンテンツの閲覧する課金として『￥３００』が設定される。

なお、シーンは、カテゴリの『学園ロマンス』の設定として、例えば、試合観戦、街中、学校、公園、電車内、飲食店を含む日常生活などに関する場面がある。また、登場キャラクターの役割は、例えば、舞台主役、ゲーム主役、スポーツ主役、学校主役を含む日常生活に関する主人公の立場がある。これらは、各コンテンツのカテゴリによって設定されており、その他のコンテンツ、カテゴリでは、別の設定がなされる。

次に、図７を参照して、実施形態における効果情報の効果情報テーブル３００の一例について説明する。コンテンツ登録部２５は、筒状映像処理装置１０に備わる各装置の効果として、例えば、コンテンツタイトル、映像の効果、音響の効果、振動などのバイブレーションの効果、背景画像との重ね合わせ効果などが合わせて登録を行う。

これらの制御は映像制御部５によって制御され、頭部装着型映像表示装置７での表示の他に、マット、ローラーが筒状映像処理装置１０に備わる場合は、それらの効果の制御を行う。初期状態では、効果情報テーブルに設定の各情報に基づいて映像表示と合わせた効果が行われるが、例えば、状態取得部１２による装着者１００の状態または装着者１００の設定指示に基づき、映像の効果（映像）、効果（音響）、効果（バイブ）が変更され、変更された効果の設定で映像が表示される。

例えば、コンテンツタイトルが『ハイスクールメモリーズ（文化祭編）』、効果（映像）〜効果（バイブ）は『モード（文化祭）』が設定される。映像制御部５は、頭部装着型映像表示装置７での表示、筒状映像処理装置１０に備わる傾きや振動などの効果と映像の各シーンに合わせ行う。これにより、文化祭の雰囲気にあった効果を映像制御部５で制御され、映像に合った表示や音声、傾きなどを体験できる。

なお、効果（背景映像）は、装着者１００の状態情報に基づいて、背景映像への合成の有無を設定する。例えば、この効果設定が『合成オン』の場合は、シーン、登場キャラクターでの合成が可能となり、重ね合わされた映像で表示される。各状態情報に基づき変更され、変更された映像が頭部装着型映像表示装置７に表示される。

管理情報データベース２７は、例えば、筒状映像処理システム２０で管理するそれぞれの装着者１００に関する氏名、年齢、性別、趣向などの利用者情報、表示したコンテンツに関する情報、各々対応付けて登録する。

映像記録部２８は、例えば、コンテンツ登録テーブル２００に示すような頭部装着型映像表示装置７で表示する映像などのコンテンツに関する情報を記録する。Ｉ／Ｆは、通信部６として、公衆通信網３０（ネットワーク）を介して各種映像の提供サービスを行うコンテンツプロバイダー４０などとの各種情報および新作コンテンツなどの送受信を行うためのインターフェースである。Ｉ／Ｆは、入力部分との情報の送受信を行うためのインターフェースである。

各入力部分として、頭部装着型映像表示装置７のインターフェースの他に、例えば音声入力または外部情報端末などが用いられる。頭部装着型映像表示装置７は、図示しない表示部に表示される入力部分をジェスチャーなどの入力指示を介して、各種情報または映像制御部５、外部接続機器からの制御コマンドなどが実行される。Ｉ／Ｆは、出力部分との各種情報の送受信を行うためのインターフェースである。出力部分は、映像制御部５により映像記録部１１に保存された各種情報に基づき変更された映像または画像を表示する。出力部分として、頭部装着型映像表示装置７のディスプレイが用いられる。

次に、図８を参照して、実施形態における身体情報の身体情報テーブル４００の一例について説明する。筒状映像処理装置１０の状態取得部１２は、映像を視聴する前、視聴中、視聴後の頭部装着型映像表示装置７を装着する装着者１００の身体情報を取得する。その取得した身体情報と比較されるためのパターンデータである。身体情報テーブル４００に設定される身体情報の乖離パターンとして、例えば、身体情報（視線、呼吸、顔の筋肉、頭・首、手・腕、身体、足、重心、声、など）で各々設定される。

次に、図９を参照して、実施形態におけるバイタルデータのバイタル情報テーブル５００の一例について説明する。筒状映像処理装置１０の状態取得部１２は、映像を視聴する前、視聴中、視聴後の頭部装着型映像表示装置７を装着する装着者１００のバイタル情報を取得する。その取得したバイタル情報と乖離率のパターンデータとを比較する。バイタル情報テーブル５００に設定されるバイタル情報の乖離パターンとしては、例えば、バイタル情報（心拍数、体温、睡眠状態など）で各々設定される所定の数値範囲と比較され、その差分値などから乖離パターンが決定される。

次に、図１０を参照して、実施形態における乖離判定の乖離判定テーブル６００の一例について説明する。筒状映像処理装置１０の状態取得部１２は、映像を視聴する前、視聴中、視聴後の頭部装着型映像表示装置７を装着する装着者１００の身体情報およびバイタル情報を各々取得し、取得した身体情報およびバイタル情報に基づいて、映像の視聴前、視聴中の各シーン、視聴後の乖離率を各コンテンツで判定する。

状態取得部１２は、この判定された乖離率に基づいて、例えば、表示する映像の設定を変更する。例えば、判定した乖離率が小さければ、選択した映像の種類や各設定が合っていると判断し、一方、乖離率が大きければ、選択した映像の種類や各設定に相違があると判断し、相違に応じた処理を行う。例えば、変更の幅を少なくする、あるいは、効果を控えめとするような設定を行い、その変更設定でそれ以降のシーン映像の表示を行う。

（実施形態：筒状映像処理装置１０の動作）
次に、本実施形態における筒状映像処理装置１０の動作の一例について説明する。図１１は、本実施形態における筒状映像処理装置１０の動作の一例を示すフローチャートである。

＜接続準備手段Ｓ１００〜接続確認手段Ｓ１０１＞
先ず、筒状映像処理装置１０は、頭部装着型映像表示装置７を頭部に装着した装着者１００の、頭部装着型映像表示装置７の表示部を介して各機器の接続状態を確認する。この準備は、装着者１００が保有する情報通信端末（スマートフォン）１３から行ってもよく、各機器が備える共通の通信方法を介して、被覆部１の内部の機器と確認がされ、その確認結果は、頭部装着型映像表示装置７の表示部または装着者１００が保有する情報通信端末（スマートフォン）１３の表示部に表示される。

＜状態情報取得手段Ｓ１０２〜状態登録手段Ｓ１０５＞
次に、状態取得部１２は、内壁部２に備わる撮像部３およびセンサー４、装着者１００の頭部に装着される頭部装着型映像表示装置７から装着者１００の身体情報、バイタル情報、映像情報を各々取得する。ここで、状態情報（身体情報、バイタル情報および映像情報）を取得できない状態の装置があれば、装着者１００の表示部にアラートを出して、各情報の取得を繰り返す。取得した各情報は、筒状映像処理装置１０の記録部に記録してもよい。

例えば、装着者１００に身体の位置や部位を識別するマーカーが備わる場合は、その身体情報と対応付け、撮像部３で取得した映像情報が対応付けて各センサー、撮像部で取得した画像を記録する。その記録された各々の情報（身体情報、バイタル情報、映像情報）に基づいて、装着者１００の状態のみを判別するようにしてもよい。

判別は、状態取得部１２によって取得した各情報に基づいて、例えば、装着者１００の身体に関する体型（身長、体型、厚みなど）や各部位の時間後との変化量から動きを判別する。その判別の結果から、その装着者１００を『細身：長身：俊敏』、または『中肉：小柄：ゆっくり』などとし、選択した映像のシーンやキャラクターのスタイルや動きに関する設定の変更の候補として表示される。

なお、映像情報は、撮像部３で撮影されるリアルタイムでの装着者１００の撮影でなくてもよく、撮像部３の映像記録部１１、または映像管理サーバ２１側の映像記録部２８、あるいは情報通信端末（スマートフォン）１３の記憶部（図示せず）に保存されている画像でもよい。この場合、状態取得部１２の映像情報の確認の処理で、装着者１００によって（映像管理サーバ２１側の映像記録部２８）に記録されている映像が選択され、選択された映像を装着者１００の映像としてもよい。この場合、例えば顔の映像は映像記録部１１（映像管理サーバ２１側の映像記録部２８）に記録されている画像とし、装着者１００の動きをセンサー４で取得した身体情報としてもよい。

＜映像確認手段Ｓ１０６〜変更設定登録手段Ｓ１０９＞
次に、映像記録部１１（映像記録部２８）で選択された頭部装着型映像表示装置７に表示する映像の確認を行う。表示する映像は、例えば、コンテンツ登録テーブル２００に示すような形式で映像の各コンテンツが登録されており、一覧表示が可能である。一覧表示された結果、自分が入りこみたいコンテンツの映像を選択し、表示の順番や登場キャラクターの設定を確認する。なお、コンテンツ一本の選択も可能だが、例えば、自分が主役となりたいコンテンツや、記憶に残っているシーンなどを選択することも可能である。この場合、そのシーンだけ映像に入り込こむことが可能で、表示される。

さらに、複数の異なるコンテンツの映像を選択することもでき、ある同一主役で異なる映像の表示を楽しむことも可能である。この場合、コンテンツ映像のタイトルと所望のシーンを複数選択し、複数選択したコンテンツのタイトル、シーンなどの表示全体の設定を確認の後、登録を行う。登録された設定で各コンテンツ、各シーンなどが登録される。
＜詳細設定登録手段Ｓ１１０〜詳細設定解除手段Ｓ１１３＞
次に、登場キャラクター、振る舞いなどに関する設定を行う。変更設定登録手段Ｓ１０９において、コンテンツ、シーンの設定がされているので、これら設定されたコンテンツ、シーンを繋ぎ合わせ、その繋ぎ合わせたシーンでのシナリオ、登場キャラクター、役割を設定する。登場キャラクターは、例えば、本人（装着者１００）の設定であってもいいし、そのコンテンツのキャラクターの映像は元のコンテンツの設定であってもよく、動きだけを被覆部１の内部の自分の動きと連動させてもよい。

このような設定とすることで、理想のシーンやキャラクターの表示で、状態取得された被覆部１の内部の自分の動きでキャラクターの動きで表示することが可能となる。撮像された自分の映像と置き換えて表示する場合は、内壁部２がグリーン地、またはブルー地の被覆部１が望ましい。このような内壁部２であれば、撮像部３で撮影した装着者１００の映像から、背景映像と装着者１００の画像の領域を判別し、装着者１００だけを切り出すことができる。そして、グリーン地またはブルー地の背景だった部分に、他のコンテンツの映像や画像を重ね合わせる処理を映像制御部５にて行い、頭部装着型映像表示装置７の表示部に表示する。

ここで、図１２および図１３を参照して、実施形態における筒状映像処理装置１０における映像の重ね合わせ表示の一例について説明する。図１２は実施形態における設定の変更の一例を示す模式図である。図１２（ａ）は、本発明を適用した筒状映像処理装置の上面図であり、状態取得部１２により装着者１００の状態情報に含まれる身体情報、バイタル情報および映像情報が取得される。これらの画像は、すでに装着者１００によって表示したい映像が選択され（例：バスケットボール）、そのシーンおよび登場キャラクターが設定されていることとする。

図１２（ｂ）〜（ｃ）は、コンテンツの登場キャラクターとして設定されているキャラクターの一例で、例えば、（ｂ）が『ボールマン』、（ｃ）が『ロボット』、（ｄ）が『バスケットボール選手』と設定されているものとする。装着者１００は、キャラクターの動きだけを用意されている登場キャラクターで楽しみたいときは、自分の画像の映像の登録の設定は行わずに、映像記録部１１に登録済みのキャラクターを選択し、設定した後、映像や効果を楽しむ。

例えば、（ｄ）を選択した場合は、選択した映像で、バスケットボール選手になりきった動き、またはバスケットボール選手の目線での動きの映像として表示される。例えば、この時のバスケットボール選手の映像は、動きの他に取得された状態情報に含まれるバイタル情報に応じて変更することが可能である。変更すると、バスケットボール選手の動きが変化する。例えば、取得したバイタルデータの心拍数が高ければ、高い数値のパターンが決定される、この心拍数におうじてバスケットボール選手の動きが変化するよう構成してもよい。

図１３は、実施形態における頭部装着型映像表示装置での表示の一例を示す模式図である。例えば、映像のタイトルを『バスケットボール試合観戦』、シーンを『ダンクシュート』、キャラクターを『主将』などとして設定した場合、指定した条件（シーン、キャラクター、役割など）で選択したシーン、キャラクターで映像を楽しむことができる。これにより、普段の自分の生活や環境では体験することのできない激しい動きやプレイを、頭部装着型映像表示装置７の映像や筒状映像処理装置１０に備わる効果を通して体験することができる。装着者１００は、激しく動いたとしても、被覆部１で全身を覆われており、仰臥位した状態で視聴するので倒れたり、転んだりすることがない。

装着者１００の動きは、内壁部２に備わる状態取得部１２の各センサーにより、装着者１００の動きを計測し、その計測した動きを頭部装着型映像表示装置７の映像で表示できる。被覆部１の内壁部２に備わるセンサー４は、他の形状として、例えば装着者１００が着込むようなセンサー（識別マーカーなど）などがプリント、または装着された着衣であってもよい。この場合、装着者１００の着衣のセンサーの位置を状態取得部１２の撮像部３で取得し、その認識されたセンサー（識別マーカーなど）の位置および距離や方向に応じて、選択されているシーンやキャラクターから、各シーンやキャラクターの詳細な設定が決定され、本人の体型通りのキャラクター体型が設定され、本人の動きに応じた映像で頭部装着型映像表示装置７の表示部に表示される。

例えば、本人ではない別のキャラクター（例えば、動物や乗り物など）としてもよく、その場合、本人が痩せている場合は、別のキャラクターは痩せた動物、または細い乗り物が表示され、ゲームなどのキャラクターでも同様の設定で、状態取得部１２によって取得された各情報に基づき、元のキャラクター設定を変更でき、変更された各設定でゲームを開始するようにしてもよい。
ことが可能となる。

また、例えば、映像を『宇宙の映像』と設定した場合、状態取得部１２に備わる撮像部３で撮影された装着者１００（本人）の動きで、宇宙遊泳の疑似体験を楽しむことが可能となる。装着者１００の動きは、内壁部２の複数のセンサーによって計測され、その計測結果に応じて、映像と重ね合わせ、頭部装着型映像表示装置７の表示部に表示することが可能となる。これにより、装着者１００は、被覆部１の中でマットの上で手足を自由に動かすことができる。

さらに、表示される映像とローラー部の可動と連動し、頭部装着型映像表示装置７の表示部で表示される映像によりリアリティを体験することができる。

＜実施形態における筒状映像処理装置の動作の第２変形例＞
次に、図１４を参照して、本実施形態における筒状映像処理装置１０の動作の第２変形例について説明する。上述した第１実施例の動作と、第２変形例の動作との違いは、装着者１００が視聴する映像の視聴前、視聴中、視聴後で、身体情報、バイタル情報を取得し、取得した各情報から乖離パターンを算出し、その算出の結果に応じて、映像の設定を変更し、変更した設定で映像を表示することにある。

＜状態取得手段Ｓ２００〜視聴前モード制御手段Ｓ２０６＞
まず、筒状映像処理装置１０に備わる状態取得部１２により、装着者１００の映像を視聴する前の身体情報およびバイタル情報の各情報の取得を行う。取得した視聴前の装着者１００の身体情報およびバイタル情報から視聴前の乖離パターンを求める。同様の乖離率の算出を、映像の各シーンの視聴中に行い（視聴中の身体・バイタルチェック手段Ｓ２０７〜判定手段Ｓ２１２）と、そして、同様に視聴後の乖離率を算出も行い（市中後の乖離率算出手段）、視聴前は視聴前の乖離率に応じて、視聴中は視聴中の各シーンで算出し、視聴後は視聴中との乖離率を算出する。

ここで算出された各乖離率に応じて、その前後の数値から、表示する映像の設定を変更する。例えば、判定した乖離率が小さければ、選択した映像の種類や各設定が合っていると判断し、一方、乖離率が大きければ、選択した映像の種類や各設定に相違があると判断し、相違に応じた処理を行う。例えば、変更の幅を少なくする、あるいは、効果を控えめとするような設定を行い、その変更設定でそれ以降のシーン映像の表示を行う。

これにより、乖離率の割合により、各シーン、登場キャラクターなどの設定や変更を細かく確認できので、手足を自由に動かせる、映像とリアリティをより楽しめる設定に変更できる。

さらに、本実施形態では、１台の筒状映像処理装置１０の例について説明したが、複数の筒状映像処理装置１０が相互に複数が接続された形態であってもよい。この場合、それぞれの筒状映像処理装置１０が互いの通信部６を介して接続し合い、例えば、同じコンテンツの映像を表示し、それぞれ好きなキャラクターとして登場するようにしてもよい。

さらに、筒状映像処理システム２０として統合的に複数の筒状映像処理装置１０を管理してもよい。この場合、筒状映像処理システム２０に接続される複数の筒状映像処理装置１０の接続は、管理部２２によって確認され、それらの履歴は管理情報データベース２７に記録される。これにより、複数の利用者の身体に関する状態情報および映像の視聴履歴を保存でき、映像制御部５は、参加者ごとの状態情報の演算値などを用いることで、ゲームの場合の対戦や協力などを実行できる。

本発明の実施形態を説明したが、各実施形態は例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均などの範囲に含まれる。

１：被覆部
１０：筒状映像処理装置
１１：映像記録部
１２：状態取得部
１３：情報通信端末（スマートフォン）
２：内壁部
２０：筒状映像処理システム
２１：映像管理サーバ
２２：管理部
２５：コンテンツ登録部
２６：状態判定部
２７：管理情報データベース
２８：映像記録部
３：撮像部
３０：公衆通信網
４：センサー
４０：コンテンツプロバイダー
５：映像制御部
６：通信部
７：頭部装着型映像表示装置
８：動的測定装置
９：収納部
１００:装着者
２００：コンテンツ登録テーブル
３００：効果情報テーブル
４００：身体情報テーブル
５００：バイタル情報テーブル
６００：乖離判定テーブル
Ｓ１００：接続準備手段
Ｓ１０１：接続確認手段
Ｓ１０２：状態情報取得手段
Ｓ１０５：状態登録手段
Ｓ１０６：映像確認手段
Ｓ１０９：変更設定登録手段
Ｓ１１０：詳細設定登録手段
Ｓ１１３：詳細設定解除手段
Ｓ２００：状態取得手段
Ｓ２０６：視聴前モード制御手段
Ｓ２０７：バイタルチェック手段
Ｓ２１２：判定手段

請求項１記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力とを制御する筒状映像処理装置であって、頭部装着型映像表示装置を頭部に装着し、仰臥位する装着者を被覆し、装着者の状態又は取得した映像に連動して連動可能な筒状の被覆部と、被覆部の内側に備わり、被覆部の内部に仰臥位する装着者の身体に関する状態情報に含まれ、装着者と離間して取得する全身の計測情報とともに、装着者のバイタル情報及び映像情報を取得する状態取得部と、頭部装着型映像表示装置に表示する映像を、取得した装着者の全身の計測情報と対応付けて記録する映像記録部と、映像記録部に記録される映像の制御を行う映像制御部とを備え、映像制御部は、状態取得部で取得した仰臥位する上記装着者の身体に関する状態情報に基づき、頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

請求項７記載の発明は、請求項６記載の発明において、映像のシーンは、少なくとも試合観戦、街中、学校、公園、電車内、飲食店を含む日常生活に関する場面であり、役割は、少なくとも舞台主役、ゲーム主役、スポーツ主役、学校主役を含む日常生活に関する主人公の立場であることを特徴とする。

請求項１０に記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力とを制御する筒状映像処理システムであって、頭部装着型映像表示装置を頭部に装着し、仰臥位する装着者を被覆し、装着者の状態又は取得した映像に連動して連動可能な筒状の被覆部と、被覆部の内側に備わり、被覆部の内部に仰臥位する装着者の身体に関する状態情報に含まれ、装着者と離間して取得する全身の計測情報とともに、装着者のバイタル情報及び映像情報を取得する状態取得部と、頭部装着型映像表示装置に表示する映像を、取得した仰臥位する装着者の全身の計測情報と対応付けて記録する映像記録部と、映像記録部に記録される映像の制御を行う映像制御部とを備え、映像制御部は、状態取得部で取得した仰臥位する装着者の身体に関する状態情報に基づき、頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

請求項１１記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力を制御する筒状映像処理方法であって、頭部装着型映像表示装置を頭部に装着し、仰臥位する装着者を被覆し、装着者の状態又は取得した映像に連動して連動可能な筒状の被覆部の内側に備わり、被覆部の内部に仰臥位する装着者の身体に関する状態情報に含まれ、装着者と離間して取得する全身の計測情報とともに、装着者のバイタル情報及び映像情報を取得する第一工程と、頭部装着型映像表示装置に表示する映像を、取得した仰臥位した装着者の全身の計測情報と対応付けて記録する第二工程と、第二工程により記録される映像の制御を行う第三工程とを備え、仰臥位する装着者の身体に関する状態情報に基づき、頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

請求項１記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力とを制御する筒状映像処理装置であって、上記頭部装着型映像表示装置を頭部に装着し、仰臥位する装着者を被覆し、前記装着者の状態又は上記取得した映像に連動可能な筒状の被覆部と、上記被覆部の内側に備わり、上記被覆部の内部に仰臥位する上記装着者の身体に関する状態情報として、上記装着者と離間して取得する全身の計測情報とともに、上記装着者のバイタル情報及び映像情報を取得する状態取得部と、上記頭部装着型映像表示装置に表示する映像を、上記装着者の全身の計測情報と対応付けて記録する映像記録部と、上記映像記録部に記録される映像の制御を行う映像制御部とを備え、上記映像制御部は、上記状態取得部で取得した仰臥位する上記装着者の身体に関する状態情報に基づき、上記頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

請求項３記載の発明は、請求項１又は２記載の発明において、身体に関する状態情報は、装着者に関する視線、呼吸、顔の筋肉、頭部、首、手、腕、身体、足、重心、または声の少なくとも何れかに関するデータであることを特徴とする。

請求項８記載の発明は、請求項７記載の発明において、変更した設定で表示される映像の視聴前、視聴中、視聴後における装着者の身体情報及びバイタル情報を映像記録部に記録し、該記録した履歴データに基づいて、該装着者の視聴前、視聴中、視聴後における乖離率を算出することを特徴とする。

請求項１０に記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力とを制御する筒状映像処理システムであって、頭部装着型映像表示装置を頭部に装着し、仰臥位する装着者を被覆し、装着者の状態又は取得した映像に連動可能な筒状の被覆部と、被覆部の内側に備わり、被覆部の内部に仰臥位する装着者の身体に関する状態情報として、装着者と離間して取得する全身の計測情報とともに、装着者のバイタル情報及び映像情報を取得する状態取得部と、頭部装着型映像表示装置に表示する映像を、仰臥位する装着者の全身の計測情報と対応付けて記録する映像記録部と、映像記録部に記録される映像の制御を行う映像制御部とを備え、映像制御部は、状態取得部で取得した仰臥位する装着者の身体に関する状態情報に基づき、頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

請求項１１記載の発明は、頭部装着型映像表示装置に表示する映像の取得と出力を制御する筒状映像処理方法であって、頭部装着型映像表示装置を頭部に装着し、仰臥位する装着者を被覆し、装着者の状態又は取得した映像に連動可能な筒状の被覆部の内側に備わる状態取得部を介して、被覆部の内部に仰臥位する装着者の身体に関する状態情報として、装着者と離間して取得する全身の計測情報とともに、装着者のバイタル情報及び映像情報を取得する第一工程と、頭部装着型映像表示装置に表示する映像を、仰臥位した装着者の全身の計測情報と対応付けて記録する第二工程と、第二工程により記録される映像の制御を行う第三工程とを備え、仰臥位する装着者の身体に関する状態情報に基づき、頭部装着型映像表示装置に表示する映像の設定を変更して表示させることを特徴とする。

Claims (11)

1. 頭部装着型映像表示装置に表示する映像の取得と出力とを制御する筒状映像処理装置であって、
   上記頭部装着型映像表示装置を頭部に装着した装着者を被覆する筒状の被覆部と、
   上記被覆部の内側に備わり上記装着者の身体に関する状態情報に含まれる身体情報、バイタル情報、または映像情報の少なくとも何れかの情報を取得する状態取得部と、
   上記頭部装着型映像表示装置に表示する映像を記録する映像記録部と、
   上記映像記録部に記録される映像の制御を行う映像制御部と
   を備え、
   上記映像制御部は、上記状態取得部で取得した身体に関する状態情報に基づき、上記頭部装着型映像表示装置に表示する映像の設定を変更して表示させること
   を特徴とする筒状映像処理装置。
2. 上記状態取得部は、上記被覆部の内部に備わるセンサー、動的測定装置、または撮像部であること
   を特徴とする請求項１記載の筒状映像処理装置。
3. 上記身体情報は、上記装着者に関する視線、呼吸、顔の筋肉、頭部、首、手、腕、身体、足、重心、または声の少なくとも何れかに関するデータであること
   を特徴とする請求項１又は２記載の筒状映像処理装置。
4. 上記バイタル情報は、上記装着者に関する心拍数、体温、覚醒状態、興奮状態、リラックス状態の少なくとも何れかに関するデータであること
   を特徴とする請求項１〜３の何れか１項記載の筒状映像処理装置。
5. 上記映像情報は、上記装着者に関する顔、表情、全身、着衣、姿勢、またはポーズの少なくとも何れかに関する画像または映像であること
   を特徴とする請求項１〜４の何れか１項記載の筒状映像処理装置。
6. 上記映像制御部は、上記状態取得部で取得した状態情報に基づき、上記頭部装着型映像表示装置に表示する映像のシーン及び登場キャラクターに関するシナリオ、役割、映像及び画像に関する設定を変更し、該変更した設定で上記映像を表示すること
   を特徴とする請求項１〜５の何れか１項記載の筒状映像処理装置。
7. 上記映像のシーンは、少なくとも試合観戦、街中、学校、公園、電車内、飲食店を含む日常生活に関する場面であり、上記役割は、少なくとも舞台主役、ゲーム主役、スポーツ主役、学校主役を含む日常生活に関する主人公の立場であること
   を特徴とする請求項１〜６の何れか１項記載の筒状映像処理装置。
8. 上記状態取得部は、上記変更した設定で表示される映像の視聴前、視聴中、視聴後における上記装着者の身体情報及びバイタル情報を上記映像記録部に記録し、該記録した履歴データに基づいて、該装着者の視聴前、視聴中、視聴後における乖離率を算出すること
   を特徴とする請求項１〜７の何れか１項記載の筒状映像処理装置。
9. 上記映像制御部は、上記算出された乖離率に基づいて、上記映像の設定をさらに変更すること
   を特徴とする請求項８記載の筒状映像処理装置。
10. 頭部装着型映像表示装置に表示する映像の取得と出力とを制御する筒状映像処理システムであって、
    上記頭部装着型映像表示装置を頭部に装着した装着者を被覆する筒状の被覆部と、
    上記被覆部の内側に備わり上記装着者の身体に関する状態情報に含まれる身体情報、バイタル情報、または映像情報の少なくとも何れかの情報を取得する状態取得部と、
    上記頭部装着型映像表示装置に表示する映像を記録する映像記録部と、
    上記映像記録部に記録される映像の制御を行う映像制御部と
    を備え、
    上記映像制御部は、上記状態取得部で取得した身体に関する状態情報に基づき、上記頭部装着型映像表示装置に表示する映像の設定を変更して表示させること
    を特徴とする筒状映像処理システム。
11. 頭部装着型映像表示装置に表示する映像の取得と出力を制御する筒状映像処理方法であって、
    上記頭部装着型映像表示装置を頭部に装着した装着者を被覆する筒状の被覆部の内側に備わる状態取得部を介して、上記装着者の身体に関する状態情報に含まれる身体情報、バイタル情報、または映像情報の少なくとも何れかの情報を取得する第一工程と、
    上記頭部装着型映像表示装置に表示する映像を記録する第二工程と、
    上記映像記録部に記録される映像の制御を行う第三工程と
    を備え、
    上記身体に関する状態情報に基づき、上記頭部装着型映像表示装置に表示する映像の設定を変更して表示させること
    を特徴とする筒状映像処理方法。

Images