JPWO2016208546A1

JPWO2016208546A1 - ヘッドマウントディスプレイ、通知装置、通知システム、通知方法及びプログラム

Info

Publication number: JPWO2016208546A1
Application number: JP2017524899A
Authority: JP
Inventors: 星野　政則; 政則星野
Original assignee: Sony Interactive Entertainment Inc
Current assignee: Sony Interactive Entertainment Inc
Priority date: 2015-06-26
Filing date: 2016-06-20
Publication date: 2017-09-21
Anticipated expiration: 2036-06-20
Also published as: CN107710749A; US10297136B2; EP3316571A4; WO2016208546A1; US20180165942A1; EP3316571A1; CN107710749B; JP6383875B2

Abstract

装着時間が所定の時間を超えた通知があってもなおユーザがヘッドマウントディスプレイの装着を続けていることを、当該ヘッドマウントディスプレイを装着していない人物が知ることができるヘッドマウントディスプレイ、通知装置、通知システム、通知方法及びプログラムを提供する。装着時間判定部（５２）は、ユーザのヘッドマウントディスプレイの装着時間を判定する。通知部（５４）は、装着時間が第１の時間を超えた際に、ユーザへの第１の通知を行い、装着時間が第１の時間よりも長い第２の時間を超えた際に、ヘッドマウントディスプレイを装着していない人物への第２の通知を行う。

Description

本発明は、ヘッドマウントディスプレイ、通知装置、通知システム、通知方法及びプログラムに関する。

例えば特許文献１〜３に記載されているような、ユーザが頭部に装着して映像を観賞等するためのヘッドマウントディスプレイ（ＨＭＤ）が知られている。このようなＨＭＤは、ＨＭＤを装着するユーザに没入感の高い映像を提供する。

特開２００４−２０５７１１号公報特開２０１２−２８８９号公報特開２０１３−２１０５８８号公報

没入感の高い映像を見ているユーザは時間の経過を忘れがちである。そこで装着時間が所定の時間を超えた際に当該ユーザに通知が行われるようにすると当該ユーザはＨＭＤを長時間装着していることを知ることができる。

ここで上記の通知が行われてもユーザがなおＨＭＤの装着を続けることがありうる。このような場合に、例えばＨＭＤの脱着を当該ユーザに指示するよう当該ユーザの保護者などを促すことができれば望ましい。しかし従来のＨＭＤでは、装着時間が所定の時間を超えた通知があってもなおユーザがＨＭＤの装着を続けていることを、例えば保護者などといった当該ＨＭＤを装着していない人物は知ることができなかった。

本発明は上記実情に鑑みてなされたものであって、その目的の一つは、装着時間が所定の時間を超えた通知があってもなおユーザがヘッドマウントディスプレイの装着を続けていることを、当該ヘッドマウントディスプレイを装着していない人物が知ることができるヘッドマウントディスプレイ、通知装置、通知システム、通知方法及びプログラムを提供することにある。

上記課題を解決するために、本発明に係るヘッドマウントディスプレイは、ユーザの前記ヘッドマウントディスプレイの装着時間を判定する装着時間判定部と、前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行う通知部と、を含む。

本発明の一態様では、前記通知部は、前記装着時間が前記第２の時間を超えた際に、前記ユーザが前記ヘッドマウントディスプレイを装着している際には前記ユーザが視覚不能なディスプレイを介して前記第２の通知を行う。

また本発明の一態様では、前記ヘッドマウントディスプレイを装着しているユーザを特定するユーザ特定部、をさらに含み、前記装着時間判定部は、特定された前記ユーザの前記ヘッドマウントディスプレイの装着時間を特定し、前記通知部は、特定された前記ユーザの前記装着時間が前記第２の時間を超えた際に、当該ユーザを特定可能な前記第２の通知を行う。

この態様では、前記通知部は、特定された前記ユーザの前記装着時間が前記第１の時間を超えた際に、前記ヘッドマウントディスプレイを装着しているユーザに依らない共通の前記第１の通知を行ってもよい。

また、本発明に係る通知装置は、ユーザのヘッドマウントディスプレイの装着時間を判定する装着時間判定部と、前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行う通知部と、を含む。

また、本発明に係る通知システムは、ユーザのヘッドマウントディスプレイの装着時間を判定する装着時間判定部と、前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行う通知部と、を含む。

また、本発明に係る通知方法は、ユーザのヘッドマウントディスプレイの装着時間を特定するステップと、前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行うステップと、を含む。

また、本発明に係るプログラムは、ユーザのヘッドマウントディスプレイの装着時間を特定する手順、前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行う手順、をコンピュータに実行させる。

本発明の一実施形態に係る映像表示システムの全体構成の一例を示す図である。本発明の一実施形態に係るヘッドマウントディスプレイの構成の一例を示す図である。本発明の一実施形態に係るヘッドマウントディスプレイで行われる、ヘッドマウントディスプレイの装着時間に応じた通知の一例を説明する説明図である。本発明の一実施形態に係るヘッドマウントディスプレイで行われる、ヘッドマウントディスプレイの装着時間に応じた通知の別の一例を説明する説明図である。本発明の一実施形態に係るヘッドマウントディスプレイで行われる、ヘッドマウントディスプレイの装着時間に応じた通知のさらに別の一例を説明する説明図である。本発明の一実施形態に係るヘッドマウントディスプレイで行われる、ヘッドマウントディスプレイの装着時間に応じた通知のさらに別の一例を説明する説明図である。本発明の一実施形態に係るヘッドマウントディスプレイで実装される機能の一例を示す機能ブロック図である。本発明の一実施形態に係るヘッドマウントディスプレイにおいて行われる処理の流れの一例を示すフロー図である。

以下、本発明の一実施形態について、図面を参照しながら説明する。

図１は、本発明の一実施形態に係る映像表示システム１０の全体構成の一例を示す図である。図２は、本実施形態に係るヘッドマウントディスプレイ（ＨＭＤ）１２の構成の一例を示す図である。

図１に示すように、本実施形態に係る映像表示システム１０は、ＨＭＤ１２とエンタテインメント装置１４と中継装置１６とディスプレイ１８とカメラマイクユニット２０とコントローラ２２とを含んでいる。

本実施形態に係るＨＭＤ１２には、例えば図２に示すように、制御部３０、記憶部３２、入出力部３４、表示部３６、音声出力部３８、センサ部４０、が含まれる。

制御部３０は、例えばＨＭＤ１２にインストールされるプログラムに従って動作するマイクロプロセッサ等のプログラム制御デバイスである。

記憶部３２は、例えばＲＯＭやＲＡＭ等の記憶素子などである。記憶部３２には、制御部３０によって実行されるプログラムなどが記憶される。

入出力部３４は、例えばＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）ポートやＵＳＢポートなどの入出力ポートである。

表示部３６は、例えば液晶ディスプレイや有機ＥＬディスプレイ等のディスプレイであり、エンタテインメント装置１４が生成する映像などを表示させる。表示部３６は、例えばエンタテインメント装置１４が出力して中継装置１６で中継される映像信号を受信して、当該映像信号が表す映像を出力するようにしてもよい。本実施形態に係る表示部３６は、例えば左目用の画像と右目用の画像を表示することによって三次元画像を表示させることができるようになっている。なお表示部３６は三次元画像の表示ができず二次元画像の表示のみができるものであっても構わない。また表示部３６が、例えば、画面上に任意の文字や記号を表示させるオンスクリーンディスプレイの機能や、表示される画面に子画面を追加する機能を備えていてもよい。また表示部３６が、受信する映像信号が表す映像を薄くしたりモノクロにしたりする機能を備えていてもよい。

音声出力部３８は、例えばヘッドホンやスピーカ等であり、エンタテインメント装置１４が生成する音声データが表す音声などを出力する。音声出力部３８は、例えばエンタテインメント装置１４が出力して中継装置１６で中継される音声信号を受信して、当該音声信号が表す音声を出力する。

また音声出力部３８が、メモリを備えており、このメモリに所定の音声を表す音声データが記憶されていてもよい。そして音声出力部３８に、このメモリに記憶されている音声データが表す音声を中継装置１６から受信した音声信号が表す音声にミキシングする音声処理を実行するオーディオＩＣが含まれていてもよい。そして音声出力部３８が、オーディオＩＣによってミキシングされた音声を出力するようにしてもよい。

センサ部４０は、本実施形態では例えば、赤外線センサ等の近接センサや接触センサなどといった、ユーザによるＨＭＤ１２の装着又は脱着を検出可能なセンサである。

なお本実施形態に係るセンサ部４０に、加速度センサやモーションセンサなどのセンサが含まれていても構わない。そしてセンサ部４０が、ＨＭＤ１２の姿勢、回転量、移動量などの計測結果を所定のフレームレートで、制御部３０に出力してもよい。そして制御部３０が、当該計測結果に基づいて、単位時間あたりのＨＭＤ１２の移動量及び回転量、すなわちＨＭＤ１２の速度及び角速度を特定してもよい。

本実施形態に係るエンタテインメント装置１４は、例えばゲームコンソール、ＤＶＤプレイヤ、Ｂｌｕ−ｒａｙ（登録商標）プレイヤなどといったコンピュータである。本実施形態に係るエンタテインメント装置１４は、例えば記憶されているゲームプログラムの実行や光ディスクに記録されたコンテンツの再生などによって映像や音声を生成する。そして本実施形態に係るエンタテインメント装置１４は、生成される映像を表す映像信号や生成される音声を表す音声信号を、中継装置１６を経由して、ＨＭＤ１２やディスプレイ１８に出力する。

本実施形態に係る中継装置１６は、例えば制御回路、画像処理回路、音声処理回路等の制御部、メモリ等の記憶部、などを備えたコンピュータである。そして本実施形態に係る中継装置１６は、エンタテインメント装置１４から出力される映像信号や音声信号を中継してＨＭＤ１２やディスプレイ１８に出力する。

そして中継装置１６が備える画像処理回路が、例えば、画面上に任意の文字や記号を表示させるオンスクリーンディスプレイの機能や、表示される画面に子画面を追加する機能を備えていてもよい。また中継装置１６が備える画像処理回路が、例えば、エンタテインメント装置１４から送信される映像信号が表す映像を加工する機能を備えていてもよい。具体的には例えば、中継装置１６が備える画像処理回路が、エンタテインメント装置１４から送信される映像信号が表す映像を薄くしたりモノクロにしたりする機能を備えていてもよい。

また中継装置１６が備えるメモリに、所定の音声を表す音声データが記憶されていてもよい。そして中継装置１６が備える音声処理回路が、例えばこのメモリに記憶された音声データが表す音声をエンタテインメント装置１４から受信した音声信号が表す音声にミキシングしてＨＭＤ１２やディスプレイ１８に出力する機能を備えていてもよい。

本実施形態に係るディスプレイ１８は、例えば液晶ディスプレイ等であり、エンタテインメント装置１４から出力される映像信号が表す映像などを表示させる。そして本実施形態では、ＨＭＤ１２を装着しているユーザは、ＨＭＤ１２を装着している際にはディスプレイ１８を視覚不能である。またディスプレイ１８が、例えば、画面上に任意の文字や記号を表示させるオンスクリーンディスプレイの機能や、表示される画面に子画面を追加する機能を備えていてもよい。またディスプレイ１８が、受信する映像信号が表す映像を薄くしたりモノクロにしたりする機能を備えていてもよい。

本実施形態に係るカメラマイクユニット２０は、例えば被写体を撮像した画像をエンタテインメント装置１４に出力するカメラ２０ａ及び周囲の音声を取得して当該音声を音声データに変換してエンタテインメント装置１４に出力するマイク２０ｂを含んでいる。また本実施形態に係るカメラ２０ａはステレオカメラである。

ＨＭＤ１２と中継装置１６とは、例えば、ＨＤＭＩケーブルやＵＳＢケーブルなどを介して接続されている。エンタテインメント装置１４と中継装置１６とは、例えば、ＨＤＭＩケーブルやＵＳＢケーブルなどを介して接続されている。中継装置１６とディスプレイ１８とは、例えば、ＨＤＭＩケーブルなどを介して接続されている。エンタテインメント装置１４とカメラマイクユニット２０とは、例えば、ＡＵＸケーブルなどを介して接続されている。

本実施形態に係るコントローラ２２は、エンタテインメント装置１４に対する操作入力を行うための操作入力装置である。ユーザは、コントローラ２２が備える方向キーやボタンを押下したり、操作スティックを傾けたりすることで、コントローラ２２を用いて各種の操作入力を行うことができる。そして本実施形態では、コントローラ２２は、操作入力に対応付けられる入力データをエンタテインメント装置１４に出力する。また本実施形態に係るコントローラ２２は、ＵＳＢポートを備えている。そしてコントローラ２２は、ＵＳＢケーブルでエンタテインメント装置１４と接続することで、有線で入力データをエンタテインメント装置１４に出力することができる。また本実施形態に係るコントローラ２２は、無線通信モジュール等を備えており、無線で入力データをエンタテインメント装置１４に出力することができるようにもなっている。

また本実施形態に係るコントローラ２２は、バイブレータなどの振動子を備えており、この振動子は、エンタテインメント装置１４から振動の強度を示す信号を受け付けた際には、当該信号に応じた強度で振動する。

本実施形態では、上述のように、ゲームプログラムの実行や光ディスクに記録された映画等のコンテンツの再生などによってエンタテインメント装置１４で生成される映像がＨＭＤ１２の表示部３６やディスプレイ１８に表示される。

そして本実施形態に係る映像表示システム１０では、ユーザのＨＭＤ１２の装着時間に応じた通知が行われる。以下、ユーザのＨＭＤ１２の装着時間に応じた通知についてさらに説明する。

図３は、本実施形態に係る映像表示システム１０で行われる、ＨＭＤ１２を装着するユーザのＨＭＤ１２の装着時間ｔに応じた通知の一例を説明する説明図である。図３の例では、以下に説明するように、ＨＭＤ１２の装着時間ｔに応じた通知の主な実行主体はＨＭＤ１２であり、また上記通知はＨＭＤ１２を装着するユーザに対して行われる。

例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第１の時間ｔ１（例えば１時間）を超えたとする。この場合は、例えば「１時間経過しています。」との音声が、中継装置１６から受信する音声信号が表す音声にミキシングされて音声出力部３８から出力される。

それでもユーザがＨＭＤ１２の装着を続け、例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第２の時間ｔ２（例えば２時間）を超えたとする。この場合は、例えば「２時間経過しています。」との音声が、中継装置１６から受信する音声信号が表す音声にミキシングされて音声出力部３８から出力される。

それでもユーザがＨＭＤ１２の装着を続け、例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第３の時間ｔ３（例えば３時間）を超えたとする。この場合は、例えば、「３時間経過しています。」との音声が、中継装置１６から受信する音声信号が表す音声にミキシングされて音声出力部３８から出力される。

それでもユーザがＨＭＤ１２の装着を続け、ユーザのＨＭＤ１２の装着時間ｔがトータルで第４の時間ｔ４（例えば４時間）を超えたとする。この場合は、例えば「音を切ります。休憩してください。」との音声が、中継装置１６から受信する音声信号が表す音声にミキシングされて音声出力部３８から出力される。そしてその後、ＨＭＤ１２が中継装置１６から受信する音声信号が表す音声の出力が抑制される。このようにして、図３の例では、ユーザのＨＭＤ１２の装着時間ｔがトータルで第４の時間ｔ４（例えば４時間）を超えると、音声出力部３８から音声が出力されないこととなる。

図４は、本実施形態に係る映像表示システム１０で行われる、ＨＭＤ１２を装着するユーザのＨＭＤ１２の装着時間ｔに応じた通知の一例を説明する説明図である。図４の例では、以下に説明するように、ＨＭＤ１２の装着時間ｔに応じた通知の主な実行主体は中継装置１６であり、また上記通知はＨＭＤ１２を装着するユーザ及びＨＭＤ１２を装着していない人物に対して行われる。

例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第１の時間ｔ１（例えば１時間）を超えたとする。この場合は例えばＨＭＤ１２には、エンタテインメント装置１４から送信される映像信号が表す映像に、子画面及び中継装置１６のオンスクリーンディスプレイ機能により実現される任意の文字が重畳された映像を表す映像信号が出力される。また例えばＨＭＤ１２には、例えば中継装置１６が備えるメモリに予め記憶された短い警告音の音声データが表す音声が、エンタテインメント装置１４から送信される音声信号が表す音声にミキシングされて出力される。そして例えばこのようにして加工された映像が表示部３６で表示され、ミキシングされた音声が音声出力部３８から出力されることとなる。そしてこの場合は例えば中継装置１６は、エンタテインメント装置１４から送信される映像信号が表す映像に子画面が重畳された映像を表す映像信号を生成して、当該映像信号をディスプレイ１８に出力する。そして例えばこのようにして加工された映像がディスプレイ１８で表示されることとなる。なおこの場合はディスプレイ１８には、エンタテインメント装置１４から送信される音声信号がそのまま出力される。

それでもユーザがＨＭＤ１２の装着を続け、例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第２の時間ｔ２（例えば２時間）を超えたとする。この場合は例えば中継装置１６は、エンタテインメント装置１４から送信される映像信号が表す映像に子画面が重畳された映像を表す映像信号を生成して、当該映像信号をＨＭＤ１２及びディスプレイ１８に出力する。また例えばＨＭＤ１２には、例えば中継装置１６が備えるメモリに予め記憶された長い警告音の音声データが表す音声が、エンタテインメント装置１４から送信される音声信号が表す音声にミキシングされて出力される。そして例えばこのようにして加工された映像が表示部３６で表示され、ミキシングされた音声が音声出力部３８から出力されることとなる。またディスプレイ１８には、例えば時間ｔ１を超えた場合と同様の映像信号及び音声信号が出力される。

それでもユーザがＨＭＤ１２の装着を続け、例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第３の時間ｔ３（例えば３時間）を超えたとする。この場合は例えば中継装置１６は、エンタテインメント装置１４から送信される映像信号が表す映像をトーンダウンさせ、さらには子画面が重畳された映像などといった、エンタテインメント装置１４から送信される映像信号が表す映像を加工した映像を生成する。そして中継装置１６は、例えば当該映像を表す映像信号をＨＭＤ１２に出力する。また例えばＨＭＤ１２には、例えば中継装置１６に予め記憶されたメッセージの音声データが表す音声が、エンタテインメント装置１４から送信される音声信号が表す音声にミキシングされて出力される。そして例えばこのようにして加工された映像が表示部３６で表示され、ミキシングされた音声が音声出力部３８から出力されることとなる。そしてこの場合は例えば中継装置１６は、エンタテインメント装置１４から送信される映像信号が表す映像に子画面が重畳された映像を表す映像信号を生成して、当該映像信号をディスプレイ１８に出力する。そのためディスプレイ１８には、例えば時間ｔ１を超えた場合と同様の映像信号が出力される。また、ディスプレイ１８には、例えば上述のメッセージの音声データが表す音声が、エンタテインメント装置１４から送信される音声信号が表す音声にミキシングされて出力される。なお図４を参照しながら説明した以上の内容は一例に過ぎず、ユーザのＨＭＤ１２の装着時間ｔがトータルで時間ｔ１、時間ｔ２、又は時間ｔ３を超えた際に、以上で説明したもの以外の映像や音声がＨＭＤ１２やディスプレイ１８に出力されてもよい。またこの場合に、ＨＭＤ１２とディスプレイ１８とに別々の映像や音声が出力されてもよい。またＨＭＤ１２の表示部３６やディスプレイ１８で、画面上に任意の文字や記号を表示させる処理や、表示される画面に子画面を追加する処理や、映像を薄くしたりモノクロにしたりする処理が実行されるようにしてもよい。

図５は、本実施形態に係る映像表示システム１０で行われる、ＨＭＤ１２を装着するユーザのＨＭＤ１２の装着時間ｔに応じた通知のさらに別の一例を説明する説明図である。図５の例では、以下に説明するように、ＨＭＤ１２の装着時間ｔに応じた通知の主な実行主体はエンタテインメント装置１４であり、また上記通知はＨＭＤ１２を装着するユーザ及びＨＭＤ１２を装着していない人物に対して行われる。なお図５の例では、エンタテインメント装置１４でゲームのプログラムが実行されていることとする。

ここで例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第１の時間ｔ１（例えば１時間）を超えたとする。この場合は例えば、ＨＭＤ１２やディスプレイ１８に表示される映像において専用のキャラクタが登場して時間ｔ１を超えたことをお知らせする。そして例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第２の時間ｔ２（例えば２時間）を超えたとする。この場合は例えば、ＨＭＤ１２やディスプレイ１８に表示される映像において再度上記の専用のキャラクタが登場して時間ｔ２を超えたことをお知らせするとともに、エンタテインメント装置１４は、コントローラ２２に所定の振動の強さを示す信号を出力する。そしてコントローラ２２は、当該信号に応じた強度で振動する。

なお例えば、専用のキャラクタが登場する代わりに、背景、看板、壁などといったゲームのプレイの進行に影響しない場所に時間ｔ１や時間ｔ２を超えたことが表示されるようにしてもよい。

また例えば、プレイされているゲームが交戦型あるいは対戦型のゲームである場合には、上記の専用のキャラクタが登場している際あるいは所定の時間を超えたことが表示されている際には、攻撃を受けない状態となるようにしてもよい。

また例えば、エンタテインメント装置１４は、上記の専用のキャラクタが登場している際あるいは所定の時間を超えたことが表示されている際には、ユーザの操作対象となるキャラクタの体力が上がらないようにしたり、上がりにくくしたりしてもよい。また例えば、上記の専用のキャラクタが登場している際あるいは所定の時間を超えたことが表示されている際には、ユーザの操作対象となるキャラクタの動きが鈍くなったり、ユーザの操作対象となるキャラクタが動けなくなったりしてもよい。

また例えば、プレイされているゲームがレーシングゲームである場合には、ユーザのＨＭＤ１２の装着時間ｔがトータルで所定の時間を超えた際に、セーフティーカーが登場してこのことを知らせるようにしてもよい。

なお図５で説明した内容は、例えばゲームプログラムのプロバイダなどに、上記の機能を実装するためのライブラリを提供し、プロバイダに当該ライブラリを用いたゲームプログラムを実装してもらうことにより実現可能である。

一般的にゲームのプレイ中などといった、没入感のあるコンテンツをユーザが楽しんでいる際に、そのコンテンツの再生が中断されるとユーザは不快である。そのため図５に示すようなＨＭＤ１２の装着時間ｔに応じた通知がされると、ユーザはコンテンツの世界観と一体化した形で通知を受けることができることとなる。

また図３や図４に示すような通知は、図５に示す通知とは異なり、実行されているプログラムや再生されているコンテンツに依存しない実装が可能となる。

また図３に示す通知では、図４や図５に示す通知よりも簡素にＨＭＤ１２の装着時間ｔに応じた通知の実装が可能となる。

以上、図３〜図５では、ＨＭＤ１２の装着時間ｔに応じた通知の処理の主な実行主体、及び、通知先となる人物が装着時間ｔの長さに依らず同じである場合について説明した。しかし、ＨＭＤ１２の装着時間ｔに応じた通知の処理の主な実行主体や、通知先となる人物が装着時間ｔの長さに応じて変化するようにしてもよい。

以下、ＨＭＤ１２の装着時間ｔに応じた通知の処理の主な実行主体、及び、通知先となる人物が装着時間ｔの長さに応じて変化する場合について、図６を参照しながら説明する。

図６に示すように、例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第１の時間ｔ１（例えば１時間）を超えたとする。この場合は図３と同様に、例えば「１時間経過しています。」との音声が、中継装置１６から受信する音声信号が表す音声にミキシングされてＨＭＤ１２の音声出力部３８から出力される。図３で説明したように、この処理の主な実行主体はＨＭＤ１２である。またこの場合、ＨＭＤ１２の装着時間ｔがトータルで時間ｔ１を超えたことは、ＨＭＤ１２を装着しているユーザには通知されるが、ＨＭＤ１２を装着していない人物には通知されない。

それでもユーザがＨＭＤ１２の装着を続け、例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第２の時間ｔ２（例えば２時間）を超えたとする。この場合は、ＨＭＤ１２には、エンタテインメント装置１４から送信される映像信号が表す映像に、子画面が重畳された映像を表す映像信号が出力される。また例えばＨＭＤ１２には、例えば中継装置１６に予め記憶された長い警告音の音声データが表す音声が、エンタテインメント装置１４から送信される音声信号が表す音声にミキシングされて出力される。そして例えばこのようにして加工された映像が表示部３６で表示され、ミキシングされた音声が音声出力部３８から出力されることとなる。そしてこの場合はディスプレイ１８では、子画面による、装着時間ｔがタイムアップであることを示す表示が開始される。この処理の主な実行主体は中継装置１６である。この場合については、ユーザのＨＭＤ１２の装着時間ｔがトータルで時間ｔ２を超えたことは、異なる形式で、ＨＭＤ１２を装着するユーザと、ＨＭＤ１２を装着していない人物、ここでは例えばディスプレイ１８の鑑賞者である人物に通知される。

それでもユーザがＨＭＤ１２の装着を続け、例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第３の時間ｔ３（例えば３時間）を超えたとする。この場合は例えば、ユーザの操作対象となるキャラクタの動きが鈍くなる。この処理の主な実行主体は、エンタテインメント装置１４である。なおこのとき、ユーザの操作対象となるキャラクタが動けなくなってもよい。なおこの場合、ディスプレイ１８においては、装着時間ｔがタイムアップであることを示す子画面の表示が継続されている。この場合は、ユーザのＨＭＤ１２の装着時間ｔがトータルで時間ｔ３を超えたことが、ＨＭＤ１２を装着するユーザにも、ＨＭＤ１２を装着していない人物、ここでは例えばディスプレイ１８の鑑賞者である人物にも通知される。

それでもユーザがＨＭＤ１２の装着を続け、例えばユーザのＨＭＤ１２の装着時間ｔがトータルで第４の時間ｔ４（例えば４時間）を超えたとする。この場合は例えば、ＨＭＤ１２で出力される映像及び音声が強制的にミュートされる。そしてディスプレイ１８には、映像及び音声が強制的にミュートされたことが追加で表示される。この処理の主な実行主体は、中継装置１６である。この場合は、ユーザのＨＭＤ１２の装着時間ｔがトータルで時間ｔ４を超えたことが、ＨＭＤ１２を装着するユーザにも、ＨＭＤ１２を装着していない人物、ここでは例えばディスプレイ１８の鑑賞者である人物にも通知される。なおこの処理を、エンタテインメント装置１４やＨＭＤ１２が実行するようにしてもよい。

以上図３〜図６で説明したように、本実施形態に係る映像表示システム１０では、ＨＭＤ１２を装着するユーザのＨＭＤ１２の装着時間ｔに応じた通知が複数回行われる。またＨＭＤ１２の装着時間ｔが長くなるに従って、段階的に通知の程度が強くなるようになっている。

例えば図６の例では、装着時間ｔが時間ｔ１を超えた通知はＨＭＤ１２が簡素に実行する。そしてその後に行われる、装着時間ｔが時間ｔ２を超えた通知は、中継装置１６が主に実行する。さらにその後に行われる、装着時間ｔが時間ｔ３を超えた通知は、エンタテインメント装置１４が主に実行する。また本実施形態では、装着時間ｔが時間ｔ３を超えた通知は、アプリケーションにより実装されることとなる。

また例えば図６の例では、装着時間ｔが時間ｔ４を超えた際に行われる映像及び音声のミュートよりも前に、装着時間ｔが時間ｔ１、ｔ２、ｔ３を超えた際にそれぞれＨＭＤ１２を装着するユーザに対する通知が行われる。そのためＨＭＤ１２を装着するユーザは故障のためにミュートされたか装着時間ｔが長いためにミュートされたかを容易に判断することができることとなる。

また例えば図６の例では、装着時間ｔが時間ｔ１を超えた通知はＨＭＤ１２を装着するユーザに対して行われる。そして時間ｔ１を超えた通知の後に行われる、装着時間ｔが時間ｔ２を超えた通知は、ＨＭＤ１２を装着していない人物、ここでは例えばディスプレイ１８の鑑賞者である人物に対して行われる。

以上説明したように、図６の例では、ＨＭＤ１２を装着するユーザの装着時間ｔが時間ｔ１を超えた際には当該ユーザには通知が行われるので、当該ユーザはＨＭＤ１２を長時間装着していることを知ることができる。しかしここで例えば、ユーザがゲームのプレイに没頭している場合などのように、当該ユーザがＨＭＤ１２の装着を続けることがありうる。このような場合に本実施形態では、ＨＭＤ１２を装着するユーザの装着時間ｔが時間ｔ１よりも長い時間ｔ２を超えた際に、ＨＭＤ１２を装着していない人物、ここでは例えばディスプレイ１８の鑑賞者である人物に対する通知が行われる。このようにして本実施形態によれば、装着時間ｔが所定の時間を超えた通知があってもなおユーザがＨＭＤ１２の装着を続けていることを、例えばディスプレイ１８の鑑賞者である人物などといったＨＭＤ１２を装着していない人物は知ることができる。そのため例えばディスプレイ１８の鑑賞者である人物に、ＨＭＤ１２の脱着を当該ユーザに指示するよう促すことができることとなる。ここでＨＭＤ１２を装着していない人物としては、例えば、当該ユーザとともにゲームをプレイしているユーザ、当該ユーザとともに映画等を鑑賞している人物、ディスプレイ１８が見える位置にいる当該ユーザの保護者、などが挙げられる。

以下、図６の例における時間ｔ１を超えた際の通知のような、ＨＭＤ１２を装着するユーザへの通知を第１の通知と呼ぶこととする。また、図６の例における時間ｔ２を超えた際の通知のような、ＨＭＤ１２を装着していないユーザへの通知を第２の通知と呼ぶこととする。

なお図６の例のように、第２の通知が、ＨＭＤ１２を装着するユーザにもＨＭＤ１２を装着していない人物へ行われるようにしてもよい。また第２の通知が、ＨＭＤ１２を装着するユーザへは行われないようにしてもよい。

なお映像表示システム１０が複数のＨＭＤ１２を含んでいる場合に、ＨＭＤ１２を装着するユーザの装着時間ｔが時間ｔ２を超えた際に、当該ＨＭＤ１２を装着しておらず別のＨＭＤ１２を装着しているユーザへの第２の通知が行われるようにしてもよい。

なお図６の例では、第２の通知は、ディスプレイ１８を介して行われたが、第２の通知はこのような通知には限定されない。例えば、ＨＭＤ１２を装着するユーザの装着時間ｔが時間ｔ２を超えた際に、当該ユーザの保護者等に電子メールが送信されるようにしてもよい。この場合は電子メールによる通知が第２の通知となる。

なお図６の例において、ユーザのＨＭＤ１２の装着時間ｔがトータルで第１の時間ｔ１（例えば１時間）を超えた際に、ディスプレイ１８で、子画面による、装着時間ｔがタイムアップであることを示す表示が開始されてもよい。

以下、以上で説明したＨＭＤ１２を装着するユーザの装着時間ｔが所定の時間を超えた際の通知を中心に、本実施形態に係るＨＭＤ１２の機能並びに本実施形態に係るＨＭＤ１２で実行される処理についてさらに説明する。

図７は、本実施形態に係るＨＭＤ１２で実装される機能の一例を示す機能ブロック図である。なお、本実施形態に係るＨＭＤ１２で、図７に示す機能のすべてが実装される必要はなく、また、図７に示す機能以外の機能が実装されていても構わない。

図７に示すように、本実施形態に係るＨＭＤ１２は、機能的には例えば、検出部５０、装着時間判定部５２、及び、通知部５４、を含んでいる。検出部５０は、センサ部４０を主として実装される。装着時間判定部５２は、制御部３０を主として実装される。通知部５４は、制御部３０、入出力部３４及び音声出力部３８を主として実装される。

そして以上の機能は、コンピュータであるＨＭＤ１２にインストールされた、以上の機能に対応する指令を含むプログラムを制御部３０で実行することにより実装されている。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介してＨＭＤ１２に供給される。

検出部５０は、ＨＭＤ１２を装着するユーザによる、ＨＭＤ１２の装着又は脱着を検出する。

装着時間判定部５２は、ＨＭＤ１２を装着するユーザのＨＭＤ１２の装着時間ｔを判定する。本実施形態では例えば、装着時間判定部５２は、検出部５０が検出するＨＭＤ１２の装着又は脱着に基づいて装着時間ｔを判定する。例えば、検出部５０の検出結果に基づいて、ユーザがＨＭＤ１２を装着していると判定される期間は装着時間ｔが加算され、ＨＭＤ１２を脱着していると判定される期間は装着時間ｔが加算されないようにしてもよい。またユーザがＨＭＤ１２を連続して脱着していると判定される期間が所定の時間を超えた場合に装着時間ｔがリセットされるようにしてもよい。またユーザがＨＭＤ１２を脱着していると判定される期間は装着時間ｔが減算されるようにしてもよい。また検出部５０が検出するＨＭＤ１２の装着又は脱着に基づいて装着時間ｔが判定される必要はなく、例えばＨＭＤ１２の電源がＯＮとなっている期間は、装着時間ｔが加算されるようにしてもよい。以上のように本実施形態において装着時間判定部５２によるＨＭＤ１２の装着時間ｔの判定方法は特に限定されない。

通知部５４は、本実施形態では例えば、ＨＭＤ１２を装着するユーザのＨＭＤ１２の装着時間ｔに応じた通知を行う。本実施形態では通知部５４は、装着時間判定部５２が判定する装着時間ｔに応じた通知を行うこととなる。また本実施形態では、通知部５４は、ユーザのＨＭＤ１２の装着時間ｔが第１の時間（図６の例では時間ｔ１）を超えた際に、当該ユーザへの第１の通知を行う。また本実施形態では、通知部５４は、ユーザのＨＭＤ１２の装着時間ｔが第１の時間よりも長い第２の時間（図６の例では時間ｔ２）を超えた際に、ＨＭＤ１２を装着していない人物への第２の通知を行う。

通知部５４は、本実施形態では、以上で説明したように様々な形式で通知を行う。例えば図３や図６の時間ｔ１で説明したように、ＨＭＤ１２単独で通知が行われる場合がある。この場合は、通知部５４は例えば、上述したような所定の音声を出力することとなる。また図４、図５、及び、図６の時間ｔ２、時間ｔ３、及び、時間ｔ４で説明したように、例えばエンタテインメント装置１４や中継装置１６が通知の主な実行主体であることもある。この場合は、通知部５４は、例えばＨＭＤ１２の装着時間ｔが上述の時間ｔ１〜ｔ４を超えたことを示す通知をエンタテインメント装置１４や中継装置１６に出力する。例えば通知部５４は、装着時間ｔが時間ｔ１を超えた際に、装着時間ｔが時間ｔ１を超えたことを示す、上述の第１の通知を行い、装着時間ｔが時間ｔ２を超えた際に、装着時間ｔが時間ｔ２を超えたことを示す、上述の第２の通知を行うこととなる。また上述したように、通知部５４が、ユーザがＨＭＤ１２を装着している際には当該ユーザが視覚不能なディスプレイ１８を介して第２の通知を行ってもよい。

そしてこの通知を受け付けたエンタテインメント装置１４や中継装置１６は、受け付けた通知に基づいて図４〜図６で説明したような通知の処理を特定して、特定された処理を実行することとなる。この場合、ＨＭＤ１２から第１の通知を受け付けたエンタテインメント装置１４や中継装置１６は、ＨＭＤ１２を装着しているユーザに対する第１の通知を行うこととなる。またＨＭＤ１２から第２の通知を受け付けたエンタテインメント装置１４や中継装置１６は、ＨＭＤ１２を装着していない人物に対する第２の通知を行うこととなる。

ここで、本実施形態に係るＨＭＤ１２において行われる処理の流れの一例を、図８に例示するフロー図を参照しながら説明する。

まず、装着時間判定部５２が、装着時間ｔを監視する（Ｓ１０１）。Ｓ１０１に示す処理では、例えば、段階的に設定された所定の時間（例えば上述の時間ｔ１、時間ｔ２、時間ｔ３、及び、時間ｔ４）に装着時間ｔが達したか否かが判定されることとなる。

そして所定の時間に達したことが判定された際には（Ｓ１０１：Ｙ）、通知部５４は、達した所定の時間に基づいて、実行すべき通知を特定する（Ｓ１０２）。そして通知部５４は、Ｓ１０２に示す処理で特定された通知を実行する（Ｓ１０３）。Ｓ１０３に示す処理では例えば、上述したような、所定の音声の出力や、エンタテインメント装置１４又は中継装置１６への、ＨＭＤ１２の装着時間ｔが所定の時間を超えたことを示す信号の出力などが行われる。そして、Ｓ１０１に示す処理に戻る。Ｓ１０３に示す処理では、上述したように、Ｓ１０２に示す処理で特定された通知に応じて、ＨＭＤ１２を装着しているユーザへの第１の通知、又は、ＨＭＤ１２を装着していないユーザへの第２の通知が行われることとなる。

なお、本発明は上述の実施形態に限定されるものではない。

例えばセンサ部４０が、例えば公知の虹彩検出技術等により、ＨＭＤ１２を装着するユーザを特定可能なカメラを備えていてもよい。そして装着時間判定部５２が、ＨＭＤ１２を装着しているユーザを特定する機能を備えていてもよい。

そして装着時間判定部５２が、ユーザ毎に装着時間ｔを管理するようにしてもよい。そして装着時間判定部５２がセンサ部４０により特定されたユーザについての装着時間ｔが所定の時間を超えたと判定した際に、通知部５４が、当該装着時間ｔに応じた上述の第１の通知や第２の通知を行うようにしてもよい。

また例えば、映像表示システム１０が複数のＨＭＤ１２を含んでいてもよい。そして、それぞれのＨＭＤ１２においてＨＭＤ１２の装着時間ｔが特定されるようにしてもよい。そして、あるＨＭＤ１２において装着時間ｔが所定の時間を超えたと装着時間判定部５２が判定した際に、このＨＭＤ１２の通知部５４が、当該装着時間ｔに応じた上述の第１の通知や第２の通知を行うようにしてもよい。ここで例えばＨＭＤ１２の通知部５４は、他のＨＭＤ１２を装着しているユーザに第２の通知を行うようにしてもよい。

また例えば、複数のＨＭＤ１２のそれぞれにおいて装着しているユーザが特定され、ユーザ毎に装着時間ｔが管理されるようにしてもよい。そしてあるＨＭＤ１２において、特定されたユーザについての装着時間ｔが所定の時間を超えたと装着時間判定部５２が判定した際に、このＨＭＤ１２の通知部５４が、当該装着時間ｔに応じた上述の第１の通知や第２の通知を行うようにしてもよい。

またユーザ毎に装着時間ｔが管理される場合には、通知部５４は、特定されたユーザのＨＭＤ１２の装着時間ｔが所定の時間（例えば時間ｔ２）を超えた際に、装着時間ｔが所定の時間を超えたと判定されたユーザを特定可能な第２の通知を行うようにしてもよい。具体的には例えば、装着時間ｔが所定の時間を超えたと判定されたユーザのＩＤや名前などといった当該ユーザの識別情報を含む第２の通知がディスプレイ１８に送信されてもよい。そして当該ユーザの識別情報がディスプレイ１８に表示されるようにしてもよい。こうすれば、ディスプレイ１８の鑑賞者である人物は、どのユーザがＨＭＤ１２の装着時間ｔが長いのかを認識できることとなる。

またこの場合、上述の第２の通知が行われる前に行われる、ＨＭＤ１２を装着しているユーザへの第１の通知では、ＨＭＤ１２を装着しているユーザに装着時間ｔが長いということが伝われば充分である。そのため、通知部５４は、特定されたユーザのＨＭＤ１２の装着時間ｔが所定の時間（例えば時間ｔ１）を超えた際に、ＨＭＤ１２を装着しているユーザに依らない共通の通知を行うようにしてもよい。具体的には例えば所定のメッセージの音声データが表す音声が音声出力部３８から出力されるようにしてもよい。

またＨＭＤ１２、エンタテインメント装置１４、中継装置１６の役割分担は上述のものに限定されない。例えば図７に例示する機能の一部又は全部が、エンタテインメント装置１４、又は、中継装置１６で実装されても構わない。あるいは図７に例示する機能が、映像表示システム１０を構成するＨＭＤ１２、エンタテインメント装置１４、又は、中継装置１６で分散して実装されていても構わない。

具体的には例えば、センサ部４０によりＨＭＤ１２の装着又は脱着が検出された際に、ＨＭＤ１２が、エンタテインメント装置１４や中継装置１６に検出結果を示す信号を出力してもよい。そして、エンタテインメント装置１４や中継装置１６が受信した信号に基づいて、ユーザのＨＭＤ１２の装着時間ｔを判定してもよい。このようにエンタテインメント装置１４や中継装置１６が装着時間判定部５２の機能を備えていてもよい。そして、エンタテインメント装置１４や中継装置１６が、エンタテインメント装置１４や中継装置１６において判定される装着時間ｔに応じた通知を行うようにしてもよい。このように、エンタテインメント装置１４や中継装置１６が上述の通知部５４の機能を備えていてもよい。

また例えば、ＨＭＤ１２の検出部５０が、カメラ２０ａで撮影される画像に基づいて、ＨＭＤ１２を装着するユーザによる、ＨＭＤ１２の装着又は脱着を検出してもよい。そしてこの場合に、ＨＭＤ１２ではなく、エンタテインメント装置１４や中継装置１６が検出部５０の機能を備えていてもよい。

また、上記の具体的な文字列や数値及び図面中の具体的な文字列や数値は例示であり、これらの文字列や数値には限定されない。

Claims

ヘッドマウントディスプレイであって、
ユーザの前記ヘッドマウントディスプレイの装着時間を判定する装着時間判定部と、
前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行う通知部と、
を含むことを特徴とするヘッドマウントディスプレイ。
前記通知部は、前記装着時間が前記第２の時間を超えた際に、前記ユーザが前記ヘッドマウントディスプレイを装着している際には前記ユーザが視覚不能なディスプレイを介して前記第２の通知を行う、
ことを特徴とする請求項１に記載のヘッドマウントディスプレイ。
前記ヘッドマウントディスプレイを装着しているユーザを特定するユーザ特定部、をさらに含み、
前記装着時間判定部は、特定された前記ユーザの前記ヘッドマウントディスプレイの装着時間を特定し、
前記通知部は、特定された前記ユーザの前記装着時間が前記第２の時間を超えた際に、当該ユーザを特定可能な前記第２の通知を行う、
ことを特徴とする請求項１又は２に記載のヘッドマウントディスプレイ。
前記通知部は、特定された前記ユーザの前記装着時間が前記第１の時間を超えた際に、前記ヘッドマウントディスプレイを装着しているユーザに依らない共通の前記第１の通知を行う、
ことを特徴とする請求項３に記載のヘッドマウントディスプレイ。
ユーザのヘッドマウントディスプレイの装着時間を判定する装着時間判定部と、
前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行う通知部と、
を含むことを特徴とする通知装置。
ユーザのヘッドマウントディスプレイの装着時間を判定する装着時間判定部と、
前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行う通知部と、
を含むことを特徴とする通知システム。
ユーザのヘッドマウントディスプレイの装着時間を特定するステップと、
前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行うステップと、
を含むことを特徴とする通知方法。
ユーザのヘッドマウントディスプレイの装着時間を特定する手順、
前記装着時間が第１の時間を超えた際に、前記ユーザへの第１の通知を行い、前記装着時間が前記第１の時間よりも長い第２の時間を超えた際に、前記ヘッドマウントディスプレイを装着していない人物への第２の通知を行う手順、
をコンピュータに実行させることを特徴とするプログラム。