JP6490804B2

JP6490804B2 - タップによって制御されるヘッドマウント型ディスプレイ装置、その制御方法、及びその制御のためのコンピュータプログラム

Info

Publication number: JP6490804B2
Application number: JP2017514798A
Authority: JP
Inventors: キョンコンナ，; クヮンジンチェ，
Original assignee: エフエックスギアインコーポレイテッド
Priority date: 2014-09-17
Filing date: 2015-09-16
Publication date: 2019-03-27
Anticipated expiration: 2035-09-16
Also published as: US20160077651A1; WO2016043515A1; CN106796452B; US9904359B2; CN106796452A; JP2017531388A; KR101839441B1; KR20160032817A

Description

実施例は、ヘッドマウント型ディスプレイ装置（Ｈｅａｄ−ＭｏｕｎｔｅｄＤｉｓｐｌａｙ；ＨＭＤ）、その制御のための方法、及びコンピュータプログラムに係り、より詳しくは、別途のコントローラなしでＨＭＤに加えられたタップ（ｔａｐ）によって制御できるように構成されたＨＭＤ及びその制御技術に関する。

ヘッドマウント型ディスプレイ装置（Ｈｅａｄ−ＭｏｕｎｔｅｄＤｉｓｐｌａｙ；ＨＭＤ）は、頭部に着用する形態の携帯ディスプレイ装置であって、表示装置をゴーグルやヘルメットのような形態で頭部に装着することによって眼前の至近距離に画像の焦点が結ぶように構成された装備である。ＨＭＤを着用したユーザは、視界全体が画像で覆われることになってバーチャルリアリティのような感じを受けることができ、軍事用、医療用、及び個人用などの多様な分野に応用されている。

一例として、日本公開特許公報第１９９９-１６１１９０では、ユーザの頭部の動きを検出し、検出された結果に基づいて表示素子に表示される情報を制御する技術を開示している。しかし、この種の従来のＨＭＤにおけるユーザの動きは表示素子に表示される視点の切り替えだけに用いられており、表示される情報に対するイベント（ｅｖｅｎｔ）処理などの制御のためには別途のコントローラ、例えば、タッチパッド、ゲームパッドなどを必要とするという短所がある。

本発明の一側面によれば、別途のコントローラなしでヘッドマウント型ディスプレイ装置（Ｈｅａｄ−ＭｏｕｎｔｅｄＤｉｓｐｌａｙ；ＨＭＤ）に加えられるタップ（ｔａｐ）を入力信号として用いてＨＭＤに表示されるイメージが制御できるように構成されたＨＭＤ及びその制御方法、並びにそのためのコンピュータプログラムを提供することができる。

一実施例に係るヘッドマウント型ディスプレイ装置（Ｈｅａｄ−ＭｏｕｎｔｅｄＤｉｓｐｌａｙ；ＨＭＤ）は、センサ部と、イメージを表示するように構成された表示部、及び前記センサ部による測定値から前記ＨＭＤに加えられたタップを測定し、前記タップを入力信号として用いて、前記表示部に表示されるイメージを制御するように構成された制御部と、を含む。

前記制御部は、前記測定値を予め設定された基準値と比較することによって前記ＨＭＤに加えられたタップ情報を検出するように構成されていてよい。このとき、前記タップ情報は、タップの有無、回数、及び位置情報を含んでいてよい。また、前記測定値及び前記基準値は、前記ＨＭＤを着用したユーザの動きまたは前記ＨＭＤで発生した音との少なくとも一方に基づく信号であってよい。

前記制御部は、前記タップを前記入力信号として用いて、前記表示部に表示されるイメージの種類、出力部分、出力形態、及び再生速度の一つ以上を変化させるように構成されていてもよい。

一実施例に係るＨＭＤの制御方法は、前記ＨＭＤにイメージを表示する段階と、前記ＨＭＤに加えられたタップを測定する段階、及び前記ＨＭＤに加えられたタップを入力信号として用いて、前記ＨＭＤに表示されるイメージを制御する段階と、を含む。

前記タップを測定する段階は、前記ＨＭＤのセンサによって得られた測定値を予め設定された基準値と比較することによって前記ＨＭＤに加えられたタップ情報を検出する段階を含んでいてよい。このとき、前記タップ情報は、タップの有無、回数、及び位置情報を含んでいてよい。また、前記測定値及び前記基準値は、前記ＨＭＤを着用したユーザの動きまたは前記ＨＭＤで発生した音との少なくとも一方に基づく信号であってよい。

前記ＨＭＤに表示されるイメージを制御する段階は、前記タップを前記入力信号として用いて、前記ＨＭＤに表示されるイメージの種類、出力部分、出力形態、及び再生速度の一つ以上を変化させる段階を含んでいてもよい。
一実施例に係るコンピュータプログラムは、ＨＭＤに結合されて、前記ＨＭＤの制御方法を行うように媒体に記録されたものであってよい。

本発明の一側面に係るヘッドマウント型ディスプレイ装置（Ｈｅａｄ−ＭｏｕｎｔｅｄＤｉｓｐｌａｙ；ＨＭＤ）及びその制御方法を用いると、ＨＭＤに加えられるタップ（ｔａｐ）を入力信号として用いてＨＭＤに表示されるイメージを制御することによって、別途のコントローラがなくてもイベント（ｅｖｅｎｔ）処理などが可能であるという利点がある。

一実施例に係るヘッドマウント型ディスプレイ装置（Ｈｅａｄ−ＭｏｕｎｔｅｄＤｉｓｐｌａｙ；ＨＭＤ）のブロック図である。一実施例に係るＨＭＤで用いられる例示的な基準信号の波形を示すグラフである。一実施例に係るＨＭＤで用いられる例示的な基準信号の波形を示すグラフである。一実施例に係るＨＭＤで用いられる例示的な基準信号の波形を示すグラフである。一実施例に係るＨＭＤで用いられる例示的な基準信号の波形を示すグラフである。一実施例に係るＨＭＤで用いられる例示的な基準信号の波形を示すグラフである。一実施例に係るＨＭＤで用いられる例示的な基準信号の波形を示すグラフである。

以下、図面を参照して本発明の実施例について詳述する。
図１は、一実施例に係るヘッドマウント型ディスプレイ装置（Ｈｅａｄ−ＭｏｕｎｔｅｄＤｉｓｐｌａｙ；ＨＭＤ）のブロック図である。

図１を参照すると、本実施例に係るＨＭＤは、センサ部１０、表示部２０、及び制御部３０を含む。一実施例において、ＨＭＤは、通信部４０及び／または格納部５０を更に含んでいてよい。本実施例に係るＨＭＤは、ユーザが頭部にＨＭＤを着用できるように構成され、必要に応じて一つまたは複数の固定手段（図示せず）を含んでいてよい。例えば、実施例に係るＨＭＤは、ゴーグル（ｇｏｇｇｌｅ）またはヘルメットのような形態で実現されていてよいが、必ずしもこれらに限定されるものではない。

実施例に係るＨＭＤは、全てがハードウェアであるか、または全てがソフトウェアであるか、または部分的にハードウェアで部分的にソフトウェアである側面を有していてよい。例えば、本明細書においてＨＭＤを構成する各「部（ｕｎｉｔ）」は、ハードウェア及びこれを駆動させるための運用ソフトウェアを通称するものであってよい。また、ハードウェアは、ＣＰＵまたは他のプロセッサ（ｐｒｏｃｅｓｓｏｒ）を含むデータ処理機器であってよい。また、ハードウェアによって駆動されるソフトウェアは、実行中のプロセス、オブジェクト（ｏｂｊｅｃｔ）、実行ファイル（ｅｘｅｃｕｔａｂｌｅ）、実行スレッド（ｔｈｒｅａｄｏｆｅｘｅｃｕｔｉｏｎ）、プログラム（ｐｒｏｇｒａｍ）などを指すものであってよい。

また、実施例に係るＨＭＤを構成する各部は、必ずしも物理的に区分される別個の構成要素を指すものを意図しない。図１においてセンサ部１０、表示部２０、及び制御部３０などを互いに区分される別個のブロックにて図示しているが、実施例によっては、センサ部１０、表示部２０、及び制御部３０の一部または全てを一つの素子として集積化することもできる。例えば、マイクロプロセッサ（ｍｉｃｒｏｐｒｏｃｅｓｓｏｒ）のような処理手段、加速度センサ、及びタッチスクリーンを備えたスマートフォン（ｓｍａｒｔｐｈｏｎｅ）が前述したセンサ部１０、表示部２０、及び制御部３０の一つ以上に該当することがあり、このようなスマートフォンが頭部に装着可能な他の部材（図示せず）に結合されて実施例に係るＨＭＤを構成することもできる。すなわち、本明細書に記載されたＨＭＤは、他の部材を介してヘッドマウント用として使用可能なスマートフォンであってもよい。

センサ部１０は、ＨＭＤに加えられるタップ（ｔａｐ）を検出するための基礎になる測定値を得るための部分である。例えば、センサ部１０は、加速度計（ａｃｃｅｌｅｒｏｍｅｔｅｒ）、磁気計（ｍａｇｎｅｔｏｍｅｔｅｒ）及び／またはジャイロスコープ（ｇｙｒｏｓｃｏｐｅ）などのようにＨＭＤを着用したユーザの動きを測定することができる一つ以上のセンサからなるものであってよい。この場合、これらのセンサによる測定値をタップに対応する動きの基準値と比較することでＨＭＤに加えられたタップを測定することができる。または、センサ部１０は、マイクのように音を測定することができる一つ以上のセンサからなるものであってもよく、この場合は、ＨＭＤがタップされるときに発生する音を用いてタップを測定することができる。タップの具体的な測定過程については後述する。

センサ部１０がユーザの動きを測定するように構成された一つまたは複数のセンサからなる場合、センサ部１０の測定値は、タップの検出だけでなくユーザの視点に応じて表示されるイメージに対応する視点を変化させるのにも用いられ得る。これは、広視野角イメージの一部を出力しながらＨＭＤを着用したユーザの頭部が動くことに対応してイメージの表示される部分を移動させることによってユーザが現実感を感じられるようにし、従来のＨＭＤに用いられるのと同じ表示形態である。例えば、ユーザが頭部を右側に回すと、表示部２０に表示されるイメージ全体をこれに対応して左側に移動させることによって、ユーザをしてイメージにて表示された仮想空間で首を回して右側を眺めたように感じさせることである。しかし、これは例示的なものに過ぎず、他の実施例において、センサ部１０は、ＨＭＤに加えられたタップのみを測定するために備えられ、ユーザの動きは、センサ部１０ではない別途の装置によって測定されてもよい。

表示部２０は、ユーザの眼付近に位置してイメージを表示するための部分である。表示部２０は、液晶表示装置（ＬｉｑｕｉｄＣｒｙｓｔａｌＤｉｓｐｌａｙ；ＬＣＤ）または他の適切な画像表示素子を含んでいてよい。また、表示部２０は、画像表示素子によって表示されるイメージの焦点がユーザの眼またはその付近に結ぶようにするための凸レンズなどの一つ以上の光学素子をさらに含んでいてもよい。本明細書において表示部２０に表示されるイメージは、写真のような単一のイメージまたは映像のような一連の連続したイメージをいずれも含むものと意図される。例えば、映像及び／または音声を含む動画などのコンテンツ（ｃｏｎｔｅｎｔｓ）も本明細書に記載されたイメージに含まれ得る。

一実施例において、ＨＭＤは通信部４０を更に含み、表示部２０に表示されるイメージは、通信部４０によりネットワークを介して遠隔サーバ（図示せず）から受信するものであってよい。例えば、通信部４０は、ストリーミング（ｓｔｒｅａｍｉｎｇ）方式にてイメージを受信することもできる。また、ＨＭＤは、通信部４０を介して遠隔サーバにデータを転送することもできる。他の実施例において、表示部２０に表示されるイメージは、格納部５０に予め格納されていたものであってよい。格納部５０は、表示部２０に表示されるイメージまたは他の更なるデータを格納してもよい。

制御部３０は、センサ部１０及び表示部２０に通信可能に接続され、センサ部１０による測定値からＨＭＤに加えられたタップを検出する。また、制御部３０は、タップが検出されると、これを入力信号として用いて、表示部２０に表示されるイメージを制御する。制御部３０は、タップを入力信号としてイメージに関連付けられた様々なイベント（ｅｖｅｎｔ）を処理することができ、ここで、イベント処理は、イメージの種類、出力部分、出力形態、再生速度などの変化を指すものであってよい。例えば、表示されるイメージの選択、イメージの再生開始及び中断、イメージが時系列的な動画の場合、早送り（ｆａｓｔｆｏｒｗａｒｄ）、巻き戻し（ｒｅｗｉｎｄ）、再生速度の増加及び減少、出力ボリュームの増加及び減少、全画面（ｆｕｌｌｓｃｒｅｅｎ）モードのような表示形態の切替、イメージ上に表示されるメニュー、ボタン（ｂｕｔｔｏｎ）またはアイコン（ｉｃｏｎ）などのユーザインタフェース（ｕｓｅｒｉｎｔｅｒｆａｃｅ）の操作がイベント処理に該当され得るが、これらに限定されるものではない。イメージがゲーム、バーチャルリアリティ（ＶｉｒｔｕａｌＲｅａｌｉｔｙ；ＶＲ）または拡張現実（ＡｕｇｍｅｎｔｅｄＲｅａｌｉｔｙ；ＡＲ）アプリケーションの一部である場合は、かかるアプリケーションとの相互作用がＨＭＤをタップすることによって行われていてもよい。

ＨＭＤにタップが加えられていない状態では、制御部３０は、通常のＨＭＤと同様に、ユーザの動きに応じてイメージに対応する視点が変化するように表示部２０に表示されるイメージを制御することができる。例えば、ユーザが頭部を右側に回すと、制御部３０は、表示部２０に表示されるイメージ全体をこれに対応して左側に移動させる。しかし、センサ部１０による測定値からＨＭＤにタップが加えられたことが検出されると、制御部３０は、タップを入力信号として表示部１０に表示されるイメージを制御するように構成される。したがって、本実施例に係るＨＭＤを着用したユーザは、別途のコントローラがなくても自身の頭部をタップするだけでイメージと相互作用することができる。

一実施例において、制御部３０は、タップ検出部３１及び基準値格納部３２を含む。タップ検出部３１は、センサ部１０による測定値を基準値格納部３２に予め設定された基準値と比較することによってＨＭＤに加えられたタップを検出するように構成される。タップ検出部３１は、ＨＭＤに加えられたタップを検出することができるように構成される。タップ検出部３１は、ＨＭＤへのタップのために別途に備えられた特定の接触部（図示せず）に加えられるタップを検出するように構成されていてもよく、またはＨＭＤの任意の部分に加えられるタップを検出するように構成されていてもよい。また、一実施例において、タップ検出部３１は、更に、ＨＭＤへのタップが加えられた部分がどの部分であるかが判別できるように構成されていてよい。センサ部１０の測定値及び基準値格納部３２に格納された基準値は、タップを検出するためのセンサ部１０がどのような種類のセンサで構成されたかに応じて適切な形態を有していてよい。

一実施例において、前記測定値及び前記基準値のそれぞれは、ＨＭＤを着用したユーザの動きに基づく信号であってよく、動きに基づく信号は、速度、加速度、角速度、及び／または方位の一つ以上を用いたものであってよい。センサ部１０が振動を測定できる一つ以上のセンサで構成された場合、ユーザがＨＭＤの任意の部分の表面をタップすると、振動によってセンサ部１０に測定される振動には突然の信号大きさの変化またはパターンの変化が生じる。この結果、タップ検出部３１では、ユーザの通常の頭部の動きと装置へのタップとを区分することができ、通常の頭部の動きではないタップが検出されると、タップ情報を入力信号としてイメージを制御することができる。

他の実施例において、前記測定値及び前記基準値のそれぞれは、ＨＭＤで発生した音に基づく信号であってよい。センサ部１０が音を測定することができる一つ以上のセンサで構成された場合、ユーザがＨＭＤの表面をタップすると、センサ部１０で測定される信号の大きさが増加するようになる。このとき、タップ検出部３１では、センサ部１０の測定信号の増加からＨＭＤがタップされたことを把握することができ、タップ情報を入力信号としてイメージを制御することができる。

タップ情報の検出過程について具体的に説明する。タップ検出部３１では、センサ部１０の測定値と基準値格納部３２に予めデータベース化されて格納されたタップ基準信号のテンプレートマッチング（ｔｅｍｐｌａｔｅｍａｔｃｈｉｎｇ）を用いて比較して類似度を算出することができる。類似度の算出アルゴリズムとしては、正規化相互相関（ｎｏｒｍａｌｉｚｅｄｃｒｏｓｓｃｏｒｒｅｌａｔｉｏｎ）アルゴリズムを用いてよく、その結果、類似度は下記の式１のように算出される。
式１

前記式１中、Ｓ（ｘ）はセンサ部１０の測定信号であり、Ｔ（ｘ）は予め格納されたタップ基準信号である。δ_Ｓ及びδ_Ｔは、それぞれ測定信号と基準信号の標準偏差であり、Ｓ_{ａｖｅｒａｇｅ}及びＴ_{ａｖｅｒａｇｅ}は、それぞれ測定信号と基準信号の平均である。特定時間区間の間に測定された信号に対し、前記式１にて算出された類似度が所定の閾値以上である場合、タップ検出部３１は、ＨＭＤがタップされたと決定することができる。

基準信号が更に細分化されていれば、タップ検出部３１は、タップの有無及び回数だけでなく、タップされた位置情報をも含むタップ情報を得ることができる。すなわち、ＨＭＤの上下・左右方向別の基準信号または他の方式にて区分された各位置別の基準信号を予め格納し、センサ部１０の測定値を各位置別の基準信号と比較して、最も類似度の高い基準信号に対応する位置がタップされたと決定することができる。
しかし、前述したタップ情報の算出過程は単に例示的なものであって、他の実施例に係るＨＭＤでは、前述した方式ではない他の方式にてＨＭＤに加えられたタップを検出するように構成されていてもよい。

図２ａ乃至図２ｅは、一実施例に係るＨＭＤで用いられる例示的な基準信号の波形を示すグラフであって、加速度計を利用した基準信号の波形を示す。
図２ａ乃至図２ｅの各グラフの点線四角形内に示されたように、タップを示す基準信号は、タップによって特定の区間で測定値が急増するピークを有する。例えば、ピークでの加速度測定値は約８．５ｍ／ｓ^２であってよいが、これに限定されるものではない。センサ部の測定値をこのような基準信号と比較した結果、類似度が予め決められた閾値（例えば、７０％）以上の場合にタップがあったと決定することができる。

図３は、一実施例に係るＨＭＤで用いられるまた他の例示的な基準信号の波形を示すグラフであって、音を用いた基準信号を示す。
図２を参照して前述した加速度に基づく基準信号と同様に、音を用いた基準信号もタップによって特定区間で測定値が急増するピークを有する。一例において、基準信号で音測定値はピークのときに約−５ｄＢであり、最低値が約−７５ｄＢであってよいが、これに限定されるものではない。センサ部の測定値をこのような基準信号と比較した結果、類似度が予め決められた閾値（例えば、７０％）以上の場合にタップがあったと決定することができる。

しかし、図２及び図３を参照して前述した基準信号の波形は単に例示的なものであって、センサの測定値がタップか否かを決定するための基準信号の種類、波形、及び信号の大きさなどは、使用するセンサの感度及び適用アプリケーションなどにより適宜決定すればよい。

以上で説明した実施例に係るＨＭＤの動作及びこれを制御するための方法は、少なくとも部分的にコンピュータプログラムで実現され、コンピュータ読み取り可能な記録媒体に記録することができる。前記コンピュータ読み取り可能な記録媒体は、コンピュータ読み取り可能なデータが格納されるあらゆる種類の記録装置を含む。コンピュータ読み取り可能な記録媒体の例としては、ＲＯＭ、ＲＡＭ、ＣＤ−ＲＯＭ、磁気テープ、フロッピーディスク、光データ記憶装置などがあり、また、搬送波（ｃａｒｒｉｅｒｗａｖｅ）（例えば、インターネットを介した伝送の形態）で実現されることも含む。また、コンピュータ読み取り可能な記録媒体は、ネットワークに接続されたコンピュータシステムに分散され、分散方式にてコンピュータ読み取り可能なコードが格納され実行されていてもよい。また、本実施例を実現するための機能的なプログラム、コード、及びコードセグメント（ｓｅｇｍｅｎｔ）は本実施例の属する技術分野における通常の技術者によって容易に理解できるはずである。

以上、本発明を図面に示された実施例を参考にして説明してきたが、これは例示的なものに過ぎず、当該分野における通常の知識を有する者であればそれより種々の変形及び実施例の変形が可能であるという点が理解できるであろう。なお、このような変形は本発明の技術的保護範囲内にあるとみなすべきである。したがって、本発明の真の技術的保護範囲は、特許請求の範囲の技術的思想によって決定されるべきである。

実施例は、ヘッドマウント型ディスプレイ装置（Ｈｅａｄ−ＭｏｕｎｔｅｄＤｉｓｐｌａｙ；ＨＭＤ）とその制御のための方法、及びコンピュータプログラムに関する。

Claims

ヘッドマウント型ディスプレイ装置であって、
センサ部と、
イメージを表示する表示部、及び制御部を備え、
該制御部は、
前記センサ部によって得られた測定値が、前記ヘッドマウント型ディスプレイ装置を装着したユーザの動きまたは前記ヘッドマウント型ディスプレイ装置に加えられたタップのいずれかを示すかどうかを、前記測定値と予め設定された基準値との間の類似度を、正規化相互相関アルゴリズムを用いて演算することによって決定し、該正規化相互相関アルゴリズムは、所定の時間内の測定値の平均値と所定の時間内にセンサ部によって得られた測定値の標準偏差と予め設定された基準値の平均値と予め設定された基準値の標準偏差を使用し、且つ
演算された類似度が所定の閾値以上である場合にはタップが発生したと判断し、演算された類似度が所定の閾値未満である場合にユーザのタップでない動きが発生したと判断することによって決定し、
ユーザの動きを示す前記センサ部によって得られる測定値に応じて、前記ヘッドマウント型ディスプレイ装置を装着したユーザの動きに応じてイメージの視点を変更し、
ヘッドマウント型ディスプレイ装置に加えられたタップを示すセンサ部によって得られる測定値に応じて、タップを入力信号として用いることにより表示部に表示されるイメージを制御し、
測定値と予め設定された基準値との間の類似度は、前記測定値の誤差と前記基準値の誤差の和を、前記測定値と前記基準値のそれぞれの標準偏差で割った数の平均値であり、
前記測定値と予め設定された基準値との間の類似度は以下の式によって演算され、

ここでＳ(ｘ)は測定値を表し、Ｔ(ｘ)は基準値を表し、Ｓ_{ａｖｅｒａｇｅ}は測定値の平均値を表し、Ｔ_{ａｖｅｒａｇｅ}は基準値の平均値を表し、δ_Ｓは測定値の標準偏差を表し、δ_Ｔは基準値の標準偏差を表す、ヘッドマウント型ディスプレイ装置。
前記測定値及び前記基準値は、前記ヘッドマウント型ディスプレイ装置を着用したユーザの動きと前記ヘッドマウント型ディスプレイ装置で発生した音との少なくとも一方に基づく信号である、請求項１に記載のヘッドマウント型ディスプレイ装置。
前記制御部は、前記タップを前記入力信号として用いて、前記表示部に表示されるイメージの種類、出力部分、出力形態、及び再生速度の一つ以上を変化させる、請求項１に記載のヘッドマウント型ディスプレイ装置。
ヘッドマウント型ディスプレイ装置の制御方法であって、
前記ヘッドマウント型ディスプレイ装置にイメージを表示する段階と、
センサ部によって得られた測定値が、前記ヘッドマウント型ディスプレイ装置を装着したユーザの動きまたは前記ヘッドマウント型ディスプレイ装置に加えられたタップのいずれかを示すかどうかを前記測定値と予め設定された基準値との間の類似度に基づいて決定する段階と、
ユーザの動きを示す前記センサ部によって得られる測定値に応じて、前記ヘッドマウント型ディスプレイ装置を装着した前記ユーザの動きに応じて前記イメージの視点を変更する段階と、
ヘッドマウント型ディスプレイ装置に加えられたタップを示すセンサ部によって得られる測定値に応じて、タップを入力信号として用いることにより表示部に表示されるイメージを制御する段階であって、
センサ部によって得られた測定値が、前記ヘッドマウント型ディスプレイ装置を装着したユーザの動きまたは前記ヘッドマウント型ディスプレイ装置に加えられたタップのいずれかを示すかどうかを決定する段階は、
所定の時間内に得られる測定値の平均値と所定の時間内に得られる測定値の標準偏差と予め設定された基準値の平均値と予め設定された基準値の標準偏差を使用する正規化相互相関アルゴリズムを用いて、前記測定値と予め設定された基準値との間の類似度を演算する段階と、
演算された類似度が所定の閾値以上である場合にはタップが発生したと判断する段階と、
演算された類似度が所定の閾値未満である場合にユーザのタップでない動きが発生したと判断する段階を含み、
測定値と予め設定された基準値との間の類似度は、前記測定値の誤差と前記基準値の誤差の和を、前記測定値と前記基準値のそれぞれの標準偏差で割った数の平均値であり、
前記測定値と予め設定された基準値との間の類似度は以下の式によって演算され、

ここでＳ(ｘ)は測定値を表し、Ｔ(ｘ)は基準値を表し、Ｓ_{ａｖｅｒａｇｅ}は測定値の平均値を表し、Ｔ_{ａｖｅｒａｇｅ}は基準値の平均値を表し、δ_Ｓは測定値の標準偏差を表し、δ_Ｔは基準値の標準偏差を表す、ヘッドマウント型ディスプレイ装置の制御方法。
前記測定値及び前記基準値は、前記ヘッドマウント型ディスプレイ装置を着用したユーザの動きと前記ヘッドマウント型ディスプレイ装置で発生した音との少なくとも一方に基づく信号である、請求項４に記載のヘッドマウント型ディスプレイ装置の制御方法。
前記ヘッドマウント型ディスプレイ装置に表示されるイメージを制御する段階は、前記タップを前記入力信号として用いて、前記ヘッドマウント型ディスプレイ装置に表示されるイメージの種類、出力部分、出力形態、及び再生速度の一つ以上を変化させる段階を含む、請求項４に記載のヘッドマウント型ディスプレイ装置の制御方法。
非一時的な媒体に格納されたコンピュータプログラムであって、前記コンピュータプログラムは、
ヘッドマウント型ディスプレイ装置にイメージを表示する段階と、
センサ部によって得られた測定値が、前記ヘッドマウント型ディスプレイ装置を装着したユーザの動きまたは前記ヘッドマウント型ディスプレイ装置に加えられたタップのいずれかを示すかどうかを、前記測定値と予め設定された基準値との間の類似度に基づいて決定する段階と、
ユーザの動きを示す前記センサ部によって得られる測定値に応じて、前記ヘッドマウント型ディスプレイ装置を装着したユーザの動きに応じてイメージの視点を変更する段階と、
ヘッドマウント型ディスプレイ装置に加えられたタップを示すセンサ部によって得られる測定値に応じて、タップを入力信号として用いることにより表示部に表示されるイメージを制御する段階を備え、
センサ部によって得られた測定値が、前記ヘッドマウント型ディスプレイ装置を装着したユーザの動きまたは前記ヘッドマウント型ディスプレイ装置に加えられたタップのいずれかを示すかどうかを決定する段階は、
所定の時間内に得られる測定値の平均値と所定の時間内に得られる測定値の標準偏差と予め設定された基準値の平均値と予め設定された基準値の標準偏差を使用する正規化相互相関アルゴリズムを用いて、前記測定値と予め設定された基準値との間の類似度を演算する段階と、
演算された類似度が所定の閾値以上である場合にはタップが発生したと判断する段階と、
演算された類似度が所定の閾値未満である場合にユーザのタップでない動きが発生したと判断する段階を含み、
測定値と予め設定された基準値との間の類似度は、前記測定値の誤差と前記基準値の誤差の和を、前記測定値と前記基準値のそれぞれの標準偏差で割った数の平均値であり、
前記測定値と予め設定された基準値との間の類似度は以下の式によって演算され、

ここでＳ(ｘ)は測定値を表し、Ｔ(ｘ)は基準値を表し、Ｓ_{ａｖｅｒａｇｅ}は測定値の平均値を表し、Ｔ_{ａｖｅｒａｇｅ}は基準値の平均値を表し、δ_Ｓは測定値の標準偏差を表し、δ_Ｔは基準値の標準偏差を表す、コンピュータプログラム。