JPWO2016199699A1

JPWO2016199699A1 - 制御装置、制御方法及びプログラム

Info

Publication number: JPWO2016199699A1
Application number: JP2017523617A
Authority: JP
Inventors: 勇一郎中村
Original assignee: Sony Interactive Entertainment Inc
Current assignee: Sony Interactive Entertainment Inc
Priority date: 2015-06-12
Filing date: 2016-06-03
Publication date: 2017-12-14
Anticipated expiration: 2036-06-03
Also published as: US10527848B2; EP3310042A4; CN107710747A; WO2016199699A1; EP3310042B1; US20180164587A1; JP6356915B2; CN107710747B; EP3310042A1

Abstract

ヘッドマウントディスプレイの装着または脱着に応じた好適な視聴環境を提供する。制御装置（２０）は、ヘッドマウントディスプレイの装着または脱着を特定する状態特定部（２６）と、装着または脱着に応じてヘッドマウントディスプレイとは別体の表示装置（３０）の音声出力または映像出力の少なくとも一方を制御する出力制御部（２７）と、を含む。

Description

本発明は、制御装置、制御方法及びプログラムに関する。

ユーザの頭部に装着して映像等を視聴するヘッドマウントディスプレイが開発されている。今後ユーザが映像等を視聴する際に、ＴＶ受像機、ディスプレイ、携帯端末等のユーザが離れた位置から視聴する表示装置と、頭部に装着して視聴するヘッドマウントディスプレイとを切り替えて使用することが想定される。従来は、ＴＶ受像機といった据え置き型の表示装置と、携帯ゲーム機、タブレット端末等のユーザが手元で操作する携帯型の表示装置とで映像出力を切り替えることが知られている。

頭部に装着して視聴するヘッドマウントディスプレイの特性上、ユーザがヘッドマウントディスプレイを装着している状態では視界を遮られて外部を見ることはできず、さらにヘッドフォンを装着してしまえば外部の音声は不要となる。そこで、ヘッドマウントディスプレイを装着している間、不要となる表示装置の出力を制限すれば消費電力を低減できることとなる。また、表示装置の音声出力を制限することでユーザがヘッドマウントディスプレイの視聴に集中できるという効果も生じる。そして、ヘッドマウントディスプレイを脱着すると表示装置の出力が再開されるようにすれば、ユーザはヘッドマウントディスプレイを脱着してすぐに表示装置を利用できることとなる。このように、ヘッドマウントディスプレイの装着に応じて表示装置の出力を制限することで好適な視聴環境を提供することができる。

一方で、ヘッドマウントディスプレイの装着に応じて表示装置の出力を制限するだけではなく、表示装置の出力を追加することで好適な視聴環境を提供することができる場合もある。例えば、複数人で行うゲームにおいて、１人のユーザがヘッドマウントディスプレイを装着することで当該ユーザには見せるべきでない情報が表示装置に表示されるようにすると、ヘッドマウントディスプレイを用いたゲームの面白さを向上することができる。

このように、ヘッドマウントディスプレイの装着または脱着に応じて好適な視聴環境が提供されることが望まれるが、従来はヘッドマウントディスプレイの利用が考慮されていないため実現することができなかった。

本発明は、上記課題に鑑みて為されたものであり、その目的の一つは、ヘッドマウントディスプレイの装着または脱着に応じた好適な視聴環境を提供することにある。

上記課題を解決するための本発明に係る制御装置は、ヘッドマウントディスプレイの装着または脱着を特定する特定部と、前記装着または脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の音声出力または映像出力の少なくとも一方の出力を制御する出力制御部と、を含むことを特徴とする。

また、上記制御装置において、前記出力制御部は、前記ヘッドマウントディスプレイの装着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の音声出力または映像出力の少なくとも一方の出力を制限する、こととしてもよい。

また、上記制御装置において、前記出力制御部は、前記ヘッドマウントディスプレイの脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の前記出力の制限を解除する、こととしてもよい。

また、上記制御装置において、前記出力制御部は、前記ヘッドマウントディスプレイの装着に応じて前記ヘッドマウントディスプレイとは別体の表示装置を電源オフすることで前記表示装置の音声出力及び映像出力を制限する、こととしてもよい。

また、上記制御装置において、前記出力制御部は、前記ヘッドマウントディスプレイの脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置を電源オンすることで前記表示装置の音声出力及び映像出力の制限を解除する、こととしてもよい。

また、上記制御装置は、前記ヘッドマウントディスプレイを装着するユーザを特定するユーザ特定部をさらに含み、前記出力制御部は、前記ヘッドマウントディスプレイとは別体の表示装置に前記特定されるユーザと異なるユーザを対象とする、音声出力または映像出力の少なくとも一方を出力させる、こととしてもよい。

また、上記制御装置において、前記出力制御部は、前記ヘッドマウントディスプレイの脱着に応じて前記出力された音声出力または映像出力の少なくとも一方を制限する、こととしてもよい。

また、本発明に係る制御方法は、ヘッドマウントディスプレイの装着または脱着を特定する特定ステップ、前記装着または脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の音声出力または映像出力の少なくとも一方の出力を制御する出力制御ステップ、を含むことを特徴とする。

また、本発明に係るプログラムは、ヘッドマウントディスプレイの装着または脱着を特定する特定部、前記装着または脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の音声出力または映像出力の少なくとも一方の出力を制御する出力制御部、としてコンピュータを機能させる。このプログラムは、コンピュータ読み取り可能な情報記憶媒体に格納されてもよい。

第１実施形態に係る映像表示システムの全体構成の一例を示す図である。第１実施形態に係る制御装置のハードウェア構成の一例を示す図である。第１実施形態に係る表示装置のハードウェア構成の一例を示す図である。第１実施形態に係るＨＭＤのハードウェア構成の一例を示す図である。第１実施形態に係る映像表示システムの利用シーンの一例を示す図である。第１実施形態に係る映像表示システムの利用シーンの一例を示す図である。第１実施形態に係る制御装置が実現する主な機能の一例を示す機能ブロック図である。第１実施形態に係る制御装置が実行するユーザがＨＭＤを装着した場合の表示装置の出力制御処理の一例を示すフロー図である。第１実施形態に係る制御装置が実行するユーザがＨＭＤを脱着した場合の表示装置の出力制御処理の一例を示すフロー図である。第２実施形態に係る映像表示システムの利用シーンの一例を示す図である。第２実施形態に係る映像表示システムの利用シーンの一例を示す図である。第２実施形態に係る制御装置が実行するユーザがＨＭＤを装着した場合の表示装置の出力制御処理の一例を示すフロー図である。第２実施形態に係る制御装置が実行するユーザがＨＭＤを脱着した場合の表示装置の出力制御処理の一例を示すフロー図である。

［第１実施形態］
以下、本発明の一実施形態である第１実施形態について、図面を参照しながら説明する。

［システム構成］
図１は、第１実施形態に係る映像表示システム１の全体構成の一例を示す図である。図１に示すように、第１実施形態に係る映像表示システム１は、エンタテインメント装置１０、制御装置２０、表示装置３０、ヘッドマウントディスプレイ（ＨＭＤ）４０、及びカメラユニット５０を含んで構成される。エンタテインメント装置１０と制御装置２０とは、例えば、ＨＤＭＩ（登録商標）ケーブル、ＵＳＢケーブル等を介して接続されている。制御装置２０と表示装置３０とは、例えばＨＤＭＩケーブル等を介して接続されている。制御装置２０とＨＭＤ４０とは、例えば、ＨＤＭＩケーブル、ＵＳＢケーブル等を介して接続されている。エンタテインメント装置１０とカメラユニット５０とは、例えばＵＳＢケーブル等を介して接続される。

エンタテインメント装置１０は、例えば家庭用ゲーム機、ＤＶＤプレイヤ、Ｂｌｕｅ−ｒａｙ（登録商標）プレイヤ等の情報処理装置である。第１実施形態に係るエンタテインメント装置１０は、例えばインストールされているゲームプログラムの実行や読み取られる光ディスクの再生等で生成される映像を表す映像信号や音声を表す音声信号を制御装置２０に出力する。

制御装置２０は、エンタテインメント装置１０と、表示装置３０及びＨＭＤ４０と、を中継し、表示装置３０及びＨＭＤ４０を制御する情報処理装置である。第１実施形態に係る制御装置２０は、エンタテインメント装置１０から出力される映像信号や音声信号を取得して、ＨＭＤ４０用の映像信号や音声信号をＨＭＤ４０へ出力し、表示装置３０用の映像信号や音声信号を表示装置３０へ出力する。なお、ＨＭＤ４０や表示装置３０に出力される各信号は制御装置２０で変換処理がなされたものでもよく、例えば、エンタテインメント装置１０から出力されるＨＭＤ４０用の各信号を、制御装置２０が表示装置３０に適する信号に変換して出力してもよいし、エンタテインメント装置１０から出力される表示装置３０用の各信号を、制御装置２０がＨＭＤ４０に適する信号に変換して出力してもよい。

表示装置３０は、例えば家庭用テレビ受像機等のユーザが離れた位置から視聴する据え置き型の表示装置である。第１実施形態に係る表示装置３０は、制御装置２０から受信した映像信号が表す映像を第１表示部３４に表示させ、制御装置２０から受信した音声信号が表す音声を第１音声出力部３５に出力させる。

ＨＭＤ４０は、ユーザの頭部に装着され、その内部に備えられる表示デバイスを用いてユーザに静止画、動画といった映像等を提示する眼前装着型の表示装置である。第１実施形態に係るＨＭＤ４０は、制御装置２０から受信した映像信号が表す映像を第２表示部４４に表示させ、制御装置２０から受信した音声信号が表す音声を第２音声出力部４５に出力させる。

［ハードウェア構成］
図２は、第１実施形態に係る制御装置２０のハードウェア構成の一例を示す図である。図２に示すように、第１実施形態に係る制御装置２０は、制御部２１、記憶部２２、第１入出力Ｉ／Ｆ２３、第２入出力Ｉ／Ｆ２４、及び第３入出力Ｉ／Ｆ２５を含んで構成される。

制御部２１は、ＣＰＵ等のプログラム制御デバイスを含み、記憶部２２に記憶されたプログラムに従って各種の情報処理を実行する。

記憶部２２は、ＲＡＭやＲＯＭ等のメモリ素子を含み、制御部２１が実行するプログラム等を記憶する。また、記憶部２２は制御部２１のワークメモリとしても機能する。

第１入出力Ｉ／Ｆ２３は、例えばＨＤＭＩポート、ＵＳＢポート等の制御装置２０と表示装置３０とを接続するためのインタフェースである。第１入出力Ｉ／Ｆ２３は、制御部２１からの指示に従って各種の信号を表示装置３０へ出力する。また、表示装置３０から出力される信号を受信して制御部２１に出力する。

第２入出力Ｉ／Ｆ２４は、例えばＨＤＭＩポート、ＵＳＢポート等の制御装置２０とＨＭＤ４０とを接続するためのインタフェースである。第２入出力Ｉ／Ｆ２４は、制御部２１からの指示に従って各種の信号をＨＭＤ４０へ出力する。また、ＨＭＤ４０から出力される信号を受信して制御部２１に出力する。

第３入出力Ｉ／Ｆ２５は、例えばＨＤＭＩポート、ＵＳＢポート等の制御装置２０とエンタテインメント装置１０とを接続するためのインタフェースである。第３入出力Ｉ／Ｆ２５は、制御部２１からの指示に従って各種の信号をエンタテインメント装置１０へ出力する。また、エンタテインメント装置１０から出力される信号を受信して制御部２１に出力する。

図３は、第１実施形態に係る表示装置３０のハードウェア構成の一例を示す図である。図３に示すように、第１実施形態に係る表示装置３０は、制御部３１、記憶部３２、入出力Ｉ／Ｆ３３、第１表示部３４、第１音声出力部３５、及び電力供給部３６を含んで構成される。

制御部３１は、ＣＰＵ等のプログラム制御デバイスを含み、記憶部３２に記憶されたプログラムに従って各種の情報処理を実行する。

記憶部３２は、ＲＡＭやＲＯＭ等のメモリ素子を含み、制御部３１が実行するプログラム等を記憶する。また、記憶部３２は制御部３１のワークメモリとしても機能する。

入出力Ｉ／Ｆ３３は、例えばＨＤＭＩポート、ＵＳＢポート等の制御装置２０と表示装置３０とを接続するためのインタフェースである。入出力Ｉ／Ｆ３３は、制御部３１からの指示に従って各種の信号を制御装置２０へ出力する。また、制御装置２０から出力される信号を受信して制御部３１へ出力する。

第１表示部３４は、液晶ディスプレイや有機ＥＬディスプレイ等の表示デバイスであり、制御装置２０から出力される映像信号が表す映像を表示させる。

第１音声出力部３５は、例えば表示装置３０に内蔵されている内蔵スピーカ等の音声出力デバイスであり、制御装置２０から出力される音声信号が表す音声を出力させる。なお、第１音声出力部３５は表示装置３０と別体に備えられていてもよい。

電力供給部３６は、表示装置３０の各部に対して、その動作に必要な電力を供給する。電力供給部３６は、例えばスイッチング回路等を含んで構成されており、制御装置２０から出力される制御信号に応じて、表示装置３０の各部に対して個別に電力の供給又は停止をできる。これにより、表示装置３０を電源オフ状態、スリープ状態といった省電力モードで機能させることができる。

図４は、第１実施形態に係るＨＭＤ４０のハードウェア構成の一例を示す図である。図４に示すように、第１実施形態に係るＨＭＤ４０は、制御部４１、記憶部４２、入出力Ｉ／Ｆ４３、第２表示部４４、第２音声出力部４５、及びセンサ部４６を含んで構成される。

制御部４１は、ＣＰＵ等のプログラム制御デバイスを含み、記憶部４２に記憶されたプログラムに従って各種の情報処理を実行する。

記憶部４２は、ＲＡＭやＲＯＭ等のメモリ素子を含み、制御部４１が実行するプログラム等を記憶する。また、記憶部４２は制御部４１のワークメモリとしても機能する。

入出力Ｉ／Ｆ４３は、例えばＨＤＭＩポート、ＵＳＢポート等の制御装置２０とＨＭＤ４０とを接続するためのインタフェースである。入出力Ｉ／Ｆ４３は、制御部４１からの指示に従って各種の信号を制御装置２０へ出力する。また、制御装置２０から出力される信号を受信して制御部４１へ出力する。

第２表示部４４は、例えば液晶ディスプレイや有機ＥＬディスプレイ等の表示デバイスであり、制御装置２０から出力される映像信号が表す映像を表示させる。

第２音声出力部４５は、例えばイヤホン、ヘッドフォン等のユーザの耳に装着されて利用される音声出力デバイスであり、制御装置２０から出力される音声信号が表す音声を出力させる。

センサ部４６は、例えば赤外線センサや接触センサ等のセンサであり、ユーザがＨＭＤ４０を装着したか否かを検知する。例えば、ＨＭＤ４０の内部であってＨＭＤが装着された状態でユーザの顔に対向する位置（例えば、第２表示部４４に隣接する位置）に赤外線センサが備えられることとする。この場合、赤外線センサが赤外線光を対象物に照射して得られる反射光を検知することで対象物までの距離を測定することを利用して、赤外線センサまたは第２表示部４４に対向する位置にユーザの顔が位置するか否かを検知することでユーザがＨＭＤ４０を装着したか否かを検知する。なお、赤外線センサに代えてＣＣＤイメージセンサ等の撮像素子といったユーザの顔を検知可能なデバイスが備えられてもよい。また、ＨＭＤ４０がユーザに装着された状態でＨＭＤ４０とユーザとが接触する位置に接触センサが備えられれば、接触センサが接触を検知したか否かにより、ユーザがＨＭＤ４０を装着したか否かを検知することもできる。なお、第１実施形態に係るセンサ部４６が、ユーザがＨＭＤにより視界を遮られたか否かを検知してもよい。

［映像表示システムの利用シーン］
ここで、第１実施形態に係る映像表示システム１の利用シーンを説明する。

図５Ａ及び図５Ｂは、第１実施形態に係る映像表示システム１の利用シーンの一例を示す図である。図５Ａ及び図５Ｂは、１人のユーザ（ここでは、ユーザＡとする）が映像表示システム１を利用してゲームを行う状態を示しており、ユーザＡはＨＭＤ４０を装着または脱着することで、表示装置３０を用いたゲームの実行と、ＨＭＤ４０を用いたゲームの実行と、を自由に切り替えることができる。

図５Ａは、ユーザＡが表示装置３０を用いてゲームを実行している状態を示しており、表示装置３０の第１表示部３４にゲームの映像が表示され、表示装置３０の第１音声出力部３５から音声が出力されている。そして、ＨＭＤ４０はユーザＡから脱着された状態となっている。図５Ａに示すような表示装置３０から映像や音声が出力されている状態でユーザＡがＨＭＤ４０を装着すると、ＨＭＤ４０にゲームの映像や音声が出力されユーザＡはＨＭＤ４０でゲームの続きを実行する。このとき、図５Ｂに示すように、表示装置３０の第１表示部３４に映像は表示されず、表示装置３０の第１音声出力部３５から音声は出力されない。

そして、図５Ｂに示すようなユーザＡがＨＭＤ４０を装着してゲームを実行している状態でユーザＡがＨＭＤ４０を脱着すると、ＨＭＤ４０に映像や音声は出力されなくなる。このとき、図５Ａに示すように、表示装置３０の第１表示部３４にゲームの映像が表示され、表示装置３０の第１音声出力部３５から音声が出力される状態となるので、ユーザは表示装置３０を用いてゲームの続きを実行することができる。

ＨＭＤ４０の特性上、ＨＭＤ４０が装着されるとユーザは視界を遮られて外部を見ることができなくなる。つまり、外部の表示装置３０から出力される映像や音声は、ＨＭＤ４０でゲームを行うユーザにとって不要なものとなってしまう。特に、表示装置３０から出力される音声は、ＨＭＤ４０でゲームを行うユーザにとって雑音となりＨＭＤ４０の利用の妨げとなるので停止させることが望ましい。また、不要な表示装置３０の映像出力や音声出力を停止させることで、消費電力を抑えることができるという効果も生じる。そこで、第１実施形態では、ユーザがＨＭＤ４０を装着している間は表示装置３０から出力される音声や映像を制限し、ユーザがＨＭＤ４０を脱着すると表示装置３０からの音声や映像の出力を再開する、というように、ＨＭＤ４０の装着と脱着に応じて表示装置３０の出力を制御することとしている。

［機能ブロック図］
以下、第１実施形態に係る映像表示システム１が実現する機能について詳細に説明する。

図６は、第１実施形態に係る制御装置２０が実現する主な機能の一例を示す機能ブロック図である。図６に示すように、第１実施形態に係る制御装置２０は、機能的には例えば、状態特定部２６及び出力制御部２７を含んで構成される。これらの機能は、記憶部２２に記憶されたプログラムを制御部２１が実行することで実現される。このプログラムは、例えば光ディスク等のコンピュータ読み取り可能な各種の情報記憶媒体に格納されて提供されてもよいし、インターネット等の通信ネットワークを介して制御装置２０に提供されてもよい。

状態特定部２６は、ＨＭＤ４０のセンサ部４６による検知結果を取得して、検知結果に応じたＨＭＤ４０の状態を特定する。ここで、ＨＭＤ４０の状態とは、ＨＭＤ４０がユーザに装着された状態、またはＨＭＤ４０がユーザから脱着された状態を示している。具体的には、センサ部４６がユーザを検知している場合には、ＨＭＤ４０がユーザに装着された状態と特定し、センサ部４６がユーザを検知していない場合には、ＨＭＤ４０がユーザから脱着された状態と特定する。なお、ＨＭＤ４０の状態は、ユーザがＨＭＤにより視界を遮られている状態、またはユーザがＨＭＤの外部を見ることができる状態を示してもよい。

なお、状態特定部２６は、カメラユニット５０が撮像する動画像に基づいて、ＨＭＤ４０の状態を特定してもよい。この場合、カメラユニット５０がユーザの動画像を撮像し、状態特定部２６はカメラユニット５０が撮像する動画像を所定時間毎にエンタテインメント装置１０から取得する。そして、状態特定部２６は、取得した動画像を画像解析することで、ＨＭＤ４０がユーザに装着された状態か、またはＨＭＤ４０がユーザから脱着された状態かを特定する。なお、状態特定部２６は、エンタテインメント装置１０が画像解析を実行した結果を取得し、当該結果に応じてＨＭＤ４０の状態を特定することとしてもよい。

出力制御部２７は、状態特定部２６による特定結果に応じて、表示装置３０の映像出力及び／又は表示装置３０の音声出力を制御する。また、出力制御部２７は、状態特定部２６による特定結果に応じて、ＨＭＤ４０の映像出力及び／又はＨＭＤ４０の音声出力を制御する。

具体的には、状態特定部２６が、ＨＭＤ４０がユーザに装着された状態と特定した場合に、出力制御部２７は表示装置３０の第１音声出力部３５の音声出力を制限する。具体的には、出力制御部２７が表示装置３０への音声信号の出力を停止することで、表示装置３０の第１音声出力部３５から音声が出力されなくなる。また、出力制御部２７が音量を操作するための制御信号を表示装置３０へ出力することで、表示装置３０の第１音声出力部３５から出力される音声の音量を制御することができる。例えば、制御装置２０が音量をミュートする制御信号を表示装置３０へ出力すれば、表示装置３０の第１音声出力部３５から出力される音声がミュートされる。なお、制御装置２０が音量を小さくする制御信号を表示装置３０へ出力して、表示装置３０の第１音声出力部３５から出力される音声の音量を小さくすることとしてもよい。一方で、状態特定部２６が、ＨＭＤ４０がユーザに装着された状態と特定した場合に、出力制御部２７は、ＨＭＤ４０の映像出力及び／又はＨＭＤ４０の音声出力を開始する。つまり、出力制御部２７は、ＨＭＤ４０へ映像信号及び／又は音声信号を出力する。

これにより、ユーザがＨＭＤ４０を装着することで不要となる表示装置３０からの音声出力を停止または低減させることができ、外部からの雑音が減少することでユーザはＨＭＤ４０の利用に集中することができる。また、音声出力を停止または低減させることで不要な消費電力を低減させる効果もある。

次に、状態特定部２６が、ＨＭＤ４０がユーザから脱着された状態と特定した場合に、出力制御部２７は表示装置３０の第１音声出力部３５の音声出力の制限を解除する。具体的には、出力制御部２７が表示装置３０への音声信号の出力を停止していれば、出力制御部２７は表示装置３０への音声信号の出力を開始する。また、出力制御部２７が音量をミュートするまたは小さくする制御信号を表示装置３０へ出力していれば、それを解除する制御信号を表示装置３０へ出力する。これにより、表示装置３０の第１音声出力部３５からの音声出力が再開されることとなる。一方で、状態特定部２６が、ＨＭＤ４０がユーザから脱着された状態と特定した場合に、出力制御部２７は、ＨＭＤ４０の映像出力及び／又はＨＭＤ４０の音声出力を制限する。つまり、出力制御部２７は、ＨＭＤ４０への映像信号及び／又は音声信号の出力を停止する。

また、状態特定部２６が、ＨＭＤ４０がユーザに装着された状態と特定した場合に、出力制御部２７は表示装置３０の第１表示部３４の映像出力を制限してもよい。具体的には、出力制御部２７が表示装置３０への映像信号の出力を停止することで、表示装置３０の第１表示部３４に映像が出力されなくなる。これにより、ユーザがＨＭＤ４０を装着することで不要となる表示装置３０の映像出力を停止させることができ、不要な消費電力を低減することができる。

このとき、状態特定部２６が、ＨＭＤ４０がユーザから脱着された状態と特定した場合に、出力制御部２７は表示装置３０の第１表示部３４の映像出力の制限を解除する。具体的には、出力制御部２７が表示装置３０への映像信号の出力を停止していれば、出力制御部２７は表示装置３０への映像信号の出力を開始する。これにより、表示装置３０の第１表示部３４の映像出力が再開されることとなる。

また、状態特定部２６が、ＨＭＤ４０がユーザに装着された状態と特定した場合に、出力制御部２７は表示装置３０の第１表示部３４の映像出力と第１音声出力部３５の音声出力との両方を制限してもよい。具体的には、出力制御部２７が表示装置３０への映像信号及び音声信号の出力を停止することで、表示装置３０から映像も音声も出力されなくなる。また、出力制御部２７が表示装置３０の電力供給部３６を操作するための制御信号を出力することで、表示装置３０の電力供給を制御することとしてもよい。例えば、制御装置２０が表示装置３０を電源オフにする制御信号を表示装置３０へ出力すれば、電力供給部３６が表示装置３０への電力供給を停止することで第１表示部３４の映像出力及び第１音声出力部３５の音声出力を停止させる。なお、制御装置２０が表示装置３０をスリープ状態にする制御信号を表示装置３０へ出力してもよい。この場合、電力供給部３６が表示装置３０の機能の一部への電力供給を停止することで、第１表示部３４の映像出力及び第１音声出力部３５の音声出力を停止させてもよい。

このとき、状態特定部２６が、ＨＭＤ４０がユーザから脱着された状態と特定した場合に、出力制御部２７は表示装置３０の第１表示部３４の映像出力と第１音声出力部３５の音声出力との両方の制限を解除する。具体的には、出力制御部２７が表示装置３０を電源オンにする制御信号を表示装置３０へ出力すれば、電力供給部３６が表示装置３０への電力供給を開始することで第１表示部３４の映像出力及び第１音声出力部３５の音声出力が再開される。なお、出力制御部２７が表示装置３０のスリープ状態を解除する制御信号を表示装置３０へ出力してもよい。この場合、電力供給部３６が第１表示部３４及び第１音声出力部３５への電力供給を開始することで、第１表示部３４の映像出力及び第１音声出力部３５の音声出力が再開されてもよい。

これにより、ユーザがＨＭＤ４０を装着することで不要となる表示装置３０の電力供給を停止することで、外部の映像出力及び音声出力が停止しユーザがＨＭＤ４０の利用に集中できるとともに、不要な消費電力を低減させることができる。

なお、出力制御部２７が表示装置３０の画面設定を操作するための制御信号を表示装置３０へ出力することで、表示装置３０の第１表示部３４の映像出力を制御してもよい。例えば、制御装置２０が画面の明るさを低下させたり、バックライトを消灯させたりする制御信号を表示装置３０へ出力すれば、表示装置３０の第１出力部の映像出力を低減させるとともに、消費電力も低減することができる。

［出力制御処理］
ここで、第１実施形態に係る制御装置２０が実行するユーザがＨＭＤ４０を装着した場合の表示装置３０の出力制御処理の一例について図７のフロー図を参照して説明する。

まず、図５Ａに示すような表示装置３０にゲームの映像や音声が出力されている状態でユーザＡがＨＭＤ４０を装着すると、ＨＭＤ４０のセンサ部４６が検知した検知信号が制御装置２０へ送信される。

制御装置２０の状態特定部２６は、ＨＭＤ４０から送信される検知信号を取得し（Ｓ１０１）、取得した検知信号に基づいてＨＭＤ４０の状態を特定する（Ｓ１０２）。ここでは、制御装置２０の状態特定部２６は、ユーザを検知したことを示す検知信号により、ＨＭＤ４０がユーザに装着された状態と特定する。

処理Ｓ１０２において制御装置２０の状態特定部２６によりＨＭＤ４０がユーザに装着された状態と特定されたので、制御装置２０の出力制御部２７はＨＭＤ４０の出力を開始する（Ｓ１０３）。そして、制御装置２０の出力制御部２７は表示装置３０の出力を制限し（Ｓ１０４）、処理が終了する。このとき、図５Ｂに示すように、ユーザはＨＭＤ４０を装着しており、表示装置３０にゲームの映像や音声が出力されていない状態となる。

次に、第１実施形態に係る制御装置２０が実行するユーザがＨＭＤ４０を脱着した場合の表示装置３０の出力制御処理の一例について図８のフロー図を参照して説明する。

まず、図５Ｂに示すような表示装置３０にゲームの映像や音声が出力されていない状態でユーザＡがＨＭＤ４０を脱着すると、ＨＭＤ４０のセンサ部４６が検知した検知信号が制御装置２０へ送信される。

制御装置２０の状態特定部２６は、ＨＭＤ４０から送信される検知信号を取得する（Ｓ２０１）。そして、制御装置２０の状態特定部２６は、取得した検知信号からＨＭＤ４０の状態を特定する（Ｓ２０２）。ここでは、制御装置２０の状態特定部２６は、ユーザを検知していないこと示す検知信号により、ＨＭＤ４０がユーザから脱着された状態と特定する。

処理Ｓ２０２において制御装置２０の状態特定部２６によりＨＭＤ４０がユーザから脱着された状態と特定されたので、制御装置２０の出力制御部２７は表示装置３０の出力を開始する（Ｓ２０３）。そして、制御装置２０の出力制御部２７は、ＨＭＤ４０の出力を制限し（Ｓ２０４）、処理が終了する。このとき、図５Ａに示すように、ユーザはＨＭＤ４０を脱着しており、表示装置３０にゲームの映像や音声が出力されている状態となる。

［第２実施形態］
以下、本発明の別の実施形態である第２実施形態について説明する。

ＨＭＤ４０が装着されるとユーザは視界を遮られて外部を見ることができなくなるという特性を考慮すると、外部の表示装置３０にＨＭＤ４０を装着したユーザには見せるべきでない映像や聞かせるべきでない音声を出力するという利用が考えられる。そこで、第１実施形態では、ユーザがＨＭＤ４０を装着している間は表示装置３０の映像や音声の出力が制限されることとしたが、第２実施形態では、ユーザがＨＭＤ４０を装着するとＨＭＤ４０を装着したユーザと異なるユーザに向けた映像や音声が表示装置３０に出力されることとする。また、ＨＭＤ４０を装着していないユーザは、ＨＭＤ４０に出力される映像や音声を見たり聞いたりすることはできないので、ＨＭＤ４０を装着したユーザだけを対象とする映像や音声をＨＭＤ４０に出力することも考えられる。

図９Ａ及び図９Ｂは、第２実施形態に係る映像表示システム１の利用シーンの一例を示す図である。図９Ａ及び図９Ｂは、複数のユーザ（ここでは、ユーザＡ及びユーザＢとする）が映像表示システム１を用いて一緒にゲームを行う状態を示している。図９Ａは、ユーザＡ及びユーザＢが表示装置３０を用いてゲームを実行している状態を示しており、表示装置３０の第１表示部３４にゲームの映像が表示され、表示装置３０の第１音声出力部３５からゲームの音声が出力されている。そして、ＨＭＤ４０はどのユーザにも装着されていない状態となっている。図９Ａに示すような表示装置３０から映像や音声が出力されている状態でユーザＡがＨＭＤ４０を装着すると、ＨＭＤ４０にユーザＡに向けた映像や音声が出力される。このとき、図９Ｂに示すように、表示装置３０にはユーザＢに向けたゲームの映像や音声が出力され、例えば、第１表示部３４にユーザＢを対象とする画像であるユーザ対象画像３００が追加される。

そして、図９Ｂに示すようなユーザＡがＨＭＤ４０を装着している状態でユーザＡがＨＭＤ４０を脱着すると、ＨＭＤ４０に映像や音声は出力されなくなる。このとき、図９Ａに示すように、表示装置３０にゲームの映像や音声が出力されるが、図９Ｂにおいて第１表示部３４に表示されていたユーザ対象画像３００はここでは表示されなくなる。

以下、第２実施形態に係る映像表示システム１が実現する機能について詳細に説明する。

まず、第２実施形態に係る映像表示システム１は、ＨＭＤ４０のセンサ部４６と、制御装置２０の状態特定部２６及び出力制御部２７と、の機能が異なる点を除けば第１実施形態に係る映像表示システム１と同様であるため、重複する説明はここでは省略する。

第２実施形態に係るＨＭＤ４０のセンサ部４６は、ＣＣＤイメージセンサ、ＣＭＯＳイメージセンサ、赤外線イメージセンサ等の撮像素子を備え、ＨＭＤ４０がユーザに装着されたときのユーザの顔画像を撮像することでユーザを検知する。なお、赤外線センサや接触センサがユーザの検知を行い、ＣＣＤイメージセンサやＣＭＯＳイメージセンサがユーザを特定するためのユーザの顔画像を撮像することとしてもよい。

第２実施形態に係る制御装置２０の状態特定部２６は、ＨＭＤ４０のセンサ部４６による検知結果に応じて、ＨＭＤ４０の状態を特定するとともに、ＨＭＤ４０を装着したユーザを特定する。具体的には、状態特定部２６は、センサ部４６が撮像したユーザの顔画像を取得して公知の顔認識技術または虹彩認識技術を用いて特徴情報を抽出する。そして、予め登録されている登録ユーザの特徴情報と照合することでユーザを特定する。これにより、ＨＭＤ４０がユーザに装着された状態と特定するとともに、ＨＭＤ４０を装着したユーザを特定することができる。なお、ＨＭＤ４０を装着したユーザの特定は、上記の例に限定されず、例えば、ＨＭＤ４０に備えられるマイクロホンユニットが集音したユーザの発する音声から公知の音声認識により抽出した特徴情報を用いてユーザを特定してもよいし、ＨＭＤ４０を装着したユーザにログイン操作を行わせることでユーザを特定してもよい。また、カメラユニット５０が撮像したユーザの画像を用いてユーザを特定してもよい。

第２実施形態に係る出力制御部２７は、状態特定部２６による特定結果に応じて、表示装置３０の映像出力及び／又は表示装置３０の音声出力を制御する。また、第２実施形態に係る出力制御部２７は、状態特定部２６による特定結果に応じて、ＨＭＤ４０の映像出力及び／又はＨＭＤ４０の音声出力を制御する。

具体的には、第２実施形態に係る出力制御部２７は、ＨＭＤ４０がユーザに装着された状態と特定された場合に、特定されたユーザを対象とする映像及び／または音声をＨＭＤ４０に出力させる。例えば、出力制御部２７は、特定されたユーザのユーザ識別子に関連付けてエンタテインメント装置１０から送信されるチャット音声やメッセージ等をＨＭＤ４０に出力させる。このとき、出力制御部２７は、表示装置３０に映像及び／または音声を出力することができるが、ＨＭＤ４０を装着したユーザだけを対象とする映像及び／または音声の出力は制限する。

そして、状態特定部２６が、ＨＭＤ４０がユーザから脱着された状態と特定した場合に、出力制御部２７はＨＭＤ４０の映像出力及び音声出力を制限し、全ての映像及び／または音声を表示装置３０に出力する。

このように、ＨＭＤ４０を装着したユーザを特定し、特定したユーザだけを対象とする映像や音声をＨＭＤ４０に出力することで、他のユーザに知られることなく当該特定したユーザに映像や音声を提供することができる。

また、第２実施形態に係る出力制御部２７は、状態特定部２６が、ＨＭＤ４０がユーザに装着された状態と特定した場合に、特定したユーザと異なるユーザを対象とする映像及び／または音声を表示装置３０に出力させる。例えば、出力制御部２７は、特定されたユーザのユーザ識別子が関連付けられていない映像及び／または音声を表示装置３０に出力させてもよいし、カメラユニット５０等によりＨＭＤ４０を装着していない他のユーザを特定して当該他のユーザのユーザ識別子だけが関連付けられている映像及び／または音声を表示装置３０に出力させてもよい。

そして、状態特定部２６が、ＨＭＤ４０がユーザから脱着された状態と特定した場合に、出力制御部２７はＨＭＤ４０を装着したユーザと異なるユーザを対象とする映像及び／または音声の表示装置３０への出力を制限する。例えば、出力制御部２７は、特定されたユーザのユーザ識別子が関連付けられていない映像及び／または音声の表示装置３０への出力を制限したり、ＨＭＤ４０を装着していなかった他のユーザのユーザ識別子だけが関連付けられている映像及び／または音声の表示装置３０への出力を制限したりする。

このように、ＨＭＤ４０を装着したユーザを特定することで、当該ユーザがＨＭＤ４０を装着している間、当該ユーザに見せるべきでない映像や聞かせるべきでない音声を表示装置３０から出力させることができる。

ここで、第２実施形態に係る制御装置２０が実行するユーザがＨＭＤ４０を脱着した場合の表示装置３０の出力制御処理の一例について図１０のフロー図を参照して説明する。

まず、図９Ａに示すようなユーザＡ及びユーザＢが一緒に表示装置３０を利用している状態でユーザＡがＨＭＤ４０を装着すると、ＨＭＤ４０のセンサ部４６が検知した検知信号とともに、センサ部４６が撮像したユーザの顔画像が制御装置２０へ送信される。

制御装置２０の状態特定部２６は、ＨＭＤ４０から送信される検知信号とともにユーザの顔画像を取得する（Ｓ３０１）。そして、制御装置２０の状態特定部２６は、取得した検知信号に基づいてＨＭＤ４０の状態を特定し（Ｓ３０２）、取得したユーザの顔画像に基づいてユーザを特定する（Ｓ３０３）。ここでは、制御装置２０の状態特定部２６は、ユーザを検知したことを示す検知信号により、ＨＭＤ４０がユーザに装着された状態と特定する。また、制御装置２０の状態特定部２６は、例えば、予め登録されているユーザの特徴情報と、取得したユーザの顔画像から抽出される特徴情報と、を照合することでＨＭＤ４０を装着したユーザ（ここでは、ユーザＡ）を特定する。

そして、制御装置２０の出力制御部２７は、処理Ｓ３０３において制御装置２０の状態特定部２６が特定したユーザのユーザ識別子が関連付けられている映像や音声をＨＭＤ４０に出力する（Ｓ３０４）。続けて、制御装置２０の出力制御部２７は、処理Ｓ３０３において制御装置２０の状態特定部２６が特定したユーザのユーザ識別子が関連付けられていない映像や音声を表示装置３０に出力し（Ｓ３０５）、処理が終了する。

このとき、例えば、図９Ｂに示すように、ユーザＡはＨＭＤ４０を装着しており、ＨＭＤ４０を装着していないユーザＢが表示装置３０を利用している状態となる。ここで、表示装置３０には、図９Ａに示すようなユーザＡ及びユーザＢが一緒に表示装置３０を利用している状態では表示されない映像（ここでは、ユーザ対象画像３００とする）が表示される。つまり、ユーザＡがＨＭＤ４０を装着すると、ユーザＡに見せるべきでない、ユーザＢを対象とするユーザ対象画像３００が表示装置３０の第１表示部３４に表示されることとなる。

次に、第２実施形態に係る制御装置２０が実行するユーザがＨＭＤ４０を脱着した場合の表示装置３０の出力制御処理の一例について図１１のフロー図を参照して説明する。

まず、図９Ｂに示すようなユーザＡはＨＭＤ４０を装着しており、ＨＭＤ４０を装着していないユーザＢが表示装置３０を利用している状態でユーザＡがＨＭＤ４０を脱着すると、ＨＭＤ４０のセンサ部４６が検知した検知信号が制御装置２０へ送信される。

制御装置２０の状態特定部２６は、ＨＭＤ４０から送信される検知信号を取得する（Ｓ４０１）。そして、制御装置２０の状態特定部２６は、取得した検知信号からＨＭＤ４０の状態を特定する（Ｓ４０２）。ここでは、制御装置２０の状態特定部２６は、ユーザを検知していないこと示す検知信号により、ＨＭＤ４０がユーザから脱着された状態と特定する。

処理Ｓ４０２において制御装置２０の状態特定部２６によりＨＭＤ４０がユーザから脱着された状態と特定されたので、制御装置２０の出力制御部２７はすべてのユーザ（ここでは、ユーザＡ及びユーザＢ）に関連付けられる映像や音声を表示装置３０に出する（Ｓ４０３）。そして、制御装置２０の出力制御部２７は、ＨＭＤ４０の出力を制限し（Ｓ４０４）、処理が終了する。このとき、図９Ａに示すように、ユーザＡ及びユーザＢが表示装置３０を用いて一緒にゲームを実行している状態となり、表示装置３０の第１表示部３４にゲームの映像が表示されるが、ユーザ対象画像３００は表示されない。

なお、本発明は上述の実施形態に限定されるものではない。

例えば、状態特定部２６がエンタテインメント装置１０に含まれることとしてもよい。この場合、ＨＭＤ４０のセンサ部４６が検知した検知信号は制御装置２０を介してエンタテインメント装置１０へ送信され、エンタテインメント装置１０が受信した検知信号に応じてＨＭＤ４０の状態を特定することとしてもよい。そして、エンタテインメント装置１０が特定したＨＭＤ４０の状態を示す信号が制御装置２０に送信され、制御装置２０はＨＭＤ４０の状態に応じて表示装置３０やＨＭＤ４０の出力を制御することとしてもよい。

また、状態特定部２６がＨＭＤ４０に含まれることとしてもよい。この場合、ＨＭＤ４０が、センサ部４６が検知した検知信号に応じてＨＭＤ４０の状態を特定することとしてもよい。そして、ＨＭＤ４０が特定したＨＭＤ４０の状態を示す信号が制御装置２０へ送信され、制御装置２０はＨＭＤ４０の状態に応じて表示装置３０やＨＭＤ４０の出力を制御することとしてもよい。

また、上述の実施形態では、制御装置２０とエンタテインメント装置１０とが別体の例を示したが、制御装置２０とエンタテインメント装置１０とが一体の装置であってもよい。例えば、エンタテインメント装置１０に制御装置２０が含まれているとすると、ＨＭＤ４０のセンサ部４６が検知した検知信号はエンタテインメント装置１０へ送信され、エンタテインメント装置１０が受信した検知信号に応じてＨＭＤ４０の状態を特定することとしてもよい。そして、エンタテインメント装置１０がＨＭＤ４０の状態に応じて表示装置３０やＨＭＤ４０の出力を制御することとしてもよい。

また、上述の実施形態では、映像表示システムに１つのＨＭＤ４０が含まれている例を示したが、複数のＨＭＤ４０が含まれていてもよい。この場合、制御装置２０は複数のＨＭＤ４０を接続可能に構成されていることとする。

Claims

ヘッドマウントディスプレイの装着または脱着を特定する特定部と、
前記装着または脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の音声出力または映像出力の少なくとも一方の出力を制御する出力制御部と、
を含むことを特徴とする制御装置。
前記出力制御部は、
前記ヘッドマウントディスプレイの装着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の音声出力または映像出力の少なくとも一方の出力を制限する、
ことを特徴とする請求項１に記載の制御装置。
前記出力制御部は、
前記ヘッドマウントディスプレイの脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の前記出力の制限を解除する、
ことを特徴とする請求項２に記載の制御装置。
前記出力制御部は、
前記ヘッドマウントディスプレイの装着に応じて前記ヘッドマウントディスプレイとは別体の表示装置を電源オフすることで前記表示装置の音声出力及び映像出力を制限する、
ことを特徴とする請求項２に記載の制御装置。
前記出力制御部は、
前記ヘッドマウントディスプレイの脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置を電源オンすることで前記表示装置の音声出力及び映像出力の制限を解除する、
ことを特徴とする請求項４に記載の制御装置。
前記ヘッドマウントディスプレイを装着するユーザを特定するユーザ特定部をさらに含み、
前記出力制御部は、
前記ヘッドマウントディスプレイとは別体の表示装置に前記特定されるユーザと異なるユーザを対象とする、音声出力または映像出力の少なくとも一方を出力させる、
ことを特徴とする請求項１に記載の制御装置。
前記出力制御部は、
前記ヘッドマウントディスプレイの脱着に応じて前記出力された音声出力または映像出力の少なくとも一方を制限する、
ことを特徴とする請求項６に記載の制御装置。
ヘッドマウントディスプレイの装着または脱着を特定する特定ステップ、
前記装着または脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の音声出力または映像出力の少なくとも一方の出力を制御する出力制御ステップ、
を含むことを特徴とする制御方法。
ヘッドマウントディスプレイの装着または脱着を特定する特定部、
前記装着または脱着に応じて前記ヘッドマウントディスプレイとは別体の表示装置の音声出力または映像出力の少なくとも一方の出力を制御する出力制御部、
としてコンピュータを機能させるプログラム。