JP6932917B2 - 頭部装着型表示装置、プログラム、及び頭部装着型表示装置の制御方法 - Google Patents

Description

本発明は、頭部装着型表示装置、プログラム、及び頭部装着型表示装置の制御方法に関する。

従来、マーカーを移動操作して、例えば、表示されたメニューを選択したり、表示されたオブジェクトを指定したりするポインティングデバイスが知られている。ポインティングデバイスとして、使用者の頭部の動きを検出し、検出した頭部の動きに応じてマーカーを移動操作することも行われている（例えば、特許文献１参照）。
特許文献１は、頭部に装着された複数個の発信装置から発信される超音波や、電磁波等に基づいて頭部の位置や向きの変化を検出し、検出した頭部の位置や向きの変化に対応してディスプレイ上の特定の位置を指示する頭部駆動型ポインティング装置を開示する。

特開平６−１８７０９２号公報

ところで、頭部装着型表示装置において頭部の動きによりマーカーを操作する場合、使用者はマーカーを移動させる間、頭部を傾け続けなければならず、無理な体勢を維持し続けなければならない場合があった。また、トラックパッド等の操作部を操作して、マーカーを目的の位置に移動させる場合、操作部が固定されていないと、使用者がイメージした通りにマーカーを動かすことは容易ではなく、操作性を欠くという課題がある。このため、頭部装着型表示装置の操作性の向上が望まれていた。
本発明は、操作性を向上させ、頭部装着型表示装置の使い勝手を向上させることを目的とする。

上記課題を解決するため、本発明は、使用者の頭部に装着される頭部装着型表示装置であって、外景を透過し、前記外景とともに視認できるように表示画像を表示領域に表示する表示部と、指示位置を示すマーカーを前記表示部により前記表示領域に表示させる表示制御部と、第１操作と、第２操作とを検出する検出部と、を備え、前記表示制御部は、前記検出部が検出する前記第１操作に応じて前記マーカーの位置を移動させ、前記第１操作に応じた前記マーカーの位置の移動後に、前記検出部が検出する前記第２操作に応じて、前記マーカーの位置を、前記第１操作に応じた前記マーカーの位置の移動とは異なる態様で移動させる。
本発明によれば、マーカーの位置を第１操作と第２操作とで異なる態様で移動させることができる。従って、マーカーを複数の態様で移動させることができるため、マーカーの操作の操作性を向上させ、頭部装着型表示装置の使い勝手を向上させることができる。

また、本発明は、前記検出部は、前記使用者の動作を前記第１操作及び前記第２操作の少なくともいずれかとして検出する。
本発明によれば、使用者の動作によりマーカーの位置を移動させることができる。

また、本発明は、前記検出部は、前記頭部装着型表示装置の備える操作部が受け付ける操作を第１操作として検出し、前記頭部の動きを第２操作として検出する。
本発明によれば、操作部の操作と、頭部の動きとによってマーカーの位置を移動させることができる。

また、本発明は、前記外景を撮像する撮像部を備え、前記表示制御部は、前記撮像部の撮像画像に基づき、前記マーカーに重なって視認される対象物体を特定する第１の動作モードと、前記表示領域に表示される複数の前記表示画像から前記マーカーの位置に対応する前記表示画像を特定する第２の動作モードとを切り替えて実行することを特徴とする。
本発明によれば、マーカーにより対象物体を特定し、表示画像を特定することができる。

また、本発明は、前記表示制御部は、前記第１の動作モードを実行中である場合と、前記第２の動作モードを実行中である場合とで、前記マーカーを異なる態様で移動させる。
本発明によれば、動作モードを変更することで、マーカーを異なる態様で移動させることができる。

また、本発明は、前記表示制御部は、前記第１の動作モードの実行中に、前記検出部により前記第１操作又は前記第２操作が検出された場合に、前記第１操作又は前記第２操作に応じて前記マーカーを前記使用者が視認する前記外景を基準として移動させ、前記第２の動作モードを実行中に、前記検出部により前記第１操作又は前記第２操作が検出された場合に、前記第１操作又は前記第２操作に応じて前記マーカーを前記使用者が視認する前記表示画像を基準として移動させる。
本発明によれば、頭部装着型表示装置の動作モードが第１の動作モードであるときに、第１操作又は第２操作が検出されると、外景を基準としてマーカーを移動させることができる。また、頭部装着型表示装置の動作モードが第２の動作モードであるときに、第１操作又は第２操作が検出されると、表示画像を基準としてマーカーを移動させることができる。

また、本発明は、前記表示制御部は、前記第２操作に応じて前記マーカーを移動させる場合の移動量を、前記第１操作に応じて前記マーカーを移動させる場合の移動量よりも小さくする。
本発明によれば、マーカーの移動量が第２操作よりも大きい第１操作によりマーカーを移動させた後に、マーカーの移動量が第１操作よりも小さい第２操作によりマーカーを移動させることができる。従って、マーカーを対象物体又は表示画像に近づけるための操作の回数を低減し、マーカーの移動量が小さい第２操作によりマーカーを対象物体又は表示画像の位置に微調整することができる。

また、本発明は、前記使用者が前記表示部を透過して視認する前記対象物体までの距離を検出する距離検出部を備え、前記表示制御部は、前記距離検出部が検出する前記対象物体までの距離に応じて、前記マーカーを異なる態様で移動させる。
本発明によれば、対象物体までの距離に応じて、マーカーを異なる態様で移動させることができる。従って、マーカーの操作の操作性を向上させ、頭部装着型表示装置の使い勝手を向上させることができる。

また、本発明は、前記表示制御部は、前記距離検出部が検出する前記対象物体までの距離がしきい値よりも大きい場合に、前記検出部が検出する操作を前記第１操作とし、前記距離検出部が検出する前記対象物体までの距離がしきい値以下である場合に、前記検出部が検出する操作を前記第２操作とし、前記第１操作により前記マーカーを移動させる移動量を、前記第２操作により前記マーカーを移動させる移動量よりも小さくする。
本発明によれば、対象物体までの距離がしきい値よりも大きい場合には、検出部が検出する操作を、マーカーの移動量が第２操作よりも大きい第１操作とし、第１操作によりマーカーを移動させることができる。また、対象物体までの距離がしきい値以下である場合には、検出部が検出する操作を、マーカーの移動量が第１操作よりも小さい第２操作とし、第２操作によりマーカーを移動させることができる。
従って、マーカーを対象物体に近づけるための操作の回数を低減し、マーカーの移動量が小さい第２操作によりマーカーを対象物体又は表示画像の位置に微調整することができる。

上記課題を解決するため、本発明は、使用者の頭部に装着される頭部装着型表示装置であって、外景を透過し、前記外景とともに視認できるように表示画像を表示領域に表示する表示部と、前記外景を撮像する撮像部と、指示位置を示すマーカーを前記表示部により前記表示領域に表示させる表示制御部と、を備え、前記表示制御部は、前記撮像部の撮像画像に基づき、前記マーカーに重なって視認される対象物体を特定する第１の動作モードと、前記表示領域に表示される複数の前記表示画像から前記マーカーの位置に対応する前記表示画像を特定する第２の動作モードと、を切り替えて実行する。
本発明によれば、動作モードを変更することで、マーカーを異なる態様で移動させることができる。

また、本発明は、操作を検出する検出部を備え、前記表示制御部は、前記第１の動作モードの実行中に、前記検出部により操作が検出された場合に、検出された前記操作に応じて前記マーカーを前記使用者が視認する前記外景を基準として移動させ、前記第２の動作モードの実行中に、前記検出部により操作が検出された場合に、検出された前記操作に応じて前記マーカーを前記使用者が視認する前記表示画像を基準として移動させる。
本発明によれば、頭部装着型表示装置の動作モードが第１の動作モードであるときに操作が検出されると、外景を基準としてマーカーを移動させることができる。また、頭部装着型表示装置の動作モードが第２の動作モードであるときに操作が検出されると、表示画像を基準としてマーカーを移動させることができる。

また、本発明は、前記検出部は、頭部装着型表示装置の備える操作部が受け付ける操作を第１操作として検出し、前記使用者の頭部の動きを第２操作として検出し、前記表示制御部は、前記検出部が検出する前記第１操作に応じて前記マーカーの位置を移動させ、前記第１操作に応じた前記マーカーの位置の移動後に、前記検出部が検出する前記第２操作に応じて前記マーカーの位置を移動させ、前記第２操作に応じて前記マーカーを移動させる場合の移動量を、前記第１操作に応じて前記マーカーを移動させる場合の移動量よりも小さくする。
本発明によれば、マーカーの移動量が第２操作よりも大きい第１操作によりマーカーを移動させた後に、マーカーの移動量が第１操作よりも小さい第２操作によりマーカーを移動させることができる。従って、マーカーを対象物体又は表示画像に近づけるための操作の回数を低減し、マーカーの移動量が小さい第２操作によりマーカーを対象物体又は表示画像の位置に微調整することができる。

上記課題を解決するため、本発明は、外景を透過し、前記外景とともに視認できるように表示画像を表示領域に表示する表示部と、指示位置を示すマーカーを前記表示部により前記表示領域に表示させる表示制御部と、第１操作と、第２操作とを検出する検出部と、を備え、使用者の頭部に装着される頭部装着型表示装置に実装されるコンピューターに実行させるプログラムであって、コンピューターに、前記検出部が検出する前記第１操作に応じて前記マーカーの位置を移動させる手順と、前記第１操作に応じた前記マーカーの位置の移動後に、前記検出部が検出する前記第２操作に応じて、前記マーカーの位置を、前記第１操作に応じた前記マーカーの位置の移動とは異なる態様で移動させる手順と、を実行させる。
本発明によれば、マーカーの位置を第１操作と第２操作とで異なる態様で移動させることができる。従って、マーカーを複数の態様で移動させることができるため、マーカーの操作の操作性を向上させ、頭部装着型表示装置の使い勝手を向上させることができる。

上記課題を解決するため、本発明は、外景を透過し、前記外景とともに視認できるように表示画像を表示領域に表示する表示部と、指示位置を示すマーカーを前記表示部により前記表示領域に表示させる表示制御部と、第１操作と、第２操作とを検出する検出部と、を備え、使用者の頭部に装着される頭部装着型表示装置の制御方法であって、前記検出部が検出する前記第１操作に応じて前記マーカーの位置を移動させるステップと、前記第１操作に応じた前記マーカーの位置の移動後に、前記検出部が検出する前記第２操作に応じて、前記マーカーの位置を、前記第１操作に応じた前記マーカーの位置の移動とは異なる態様で移動させるステップと、を有することを特徴とする。
本発明によれば、マーカーの位置を第１操作と第２操作とで異なる態様で移動させることができる。従って、マーカーを複数の態様で移動させることができるため、マーカーの操作の操作性を向上させ、頭部装着型表示装置の使い勝手を向上させることができる。

ＨＭＤの外観図。 ＨＭＤの光学系の構成を示す要部平面図。 画像表示部の構成を示す斜視図。 ＨＭＤのブロック図。 制御装置の機能ブロック図。 使用者の視界を示す図。 使用者が首を傾けた状態で見る視界を示す図。 使用者が首を傾けた状態で見る視界を示す図。 ポインターをターゲットの近傍に移動させた場合に表示される拡大画像を示す図。 ターゲットまでの距離と、ポインターの移動距離との関係を示す図。 ＨＭＤの動作を示すフローチャート。 使用者の靴底又は靴内部に装着した検知装置の配置図。 使用者の靴底又は靴内部に装着した検知装置の配置図。 使用者の靴底又は靴内部に装着した検知装置の配置図。

図１は、本発明を適用したＨＭＤ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ：頭部装着型表示装置）１００の外観構成を示す外観図である。
ＨＭＤ１００は、使用者（ユーザー）の頭部に装着された状態で使用者に虚像を視認させる画像表示部２０（表示部）と、画像表示部２０を制御する制御装置１０と、を備える表示装置である。

制御装置１０は、図１に示すように平たい箱形のケース１０Ａ（筐体又は本体ともいえる）を備える。ケース１０Ａは、ボタン１１、ＬＥＤインジケーター１２、トラックパッド１４、上下キー１５、切替スイッチ１６及び電源スイッチ１８の各部を備える。ボタン１１、トラックパッド１４、上下キー１５、切替スイッチ１６及び電源スイッチ１８は、使用者により操作される被操作部である。また、ＬＥＤインジケーター１２は、例えばＨＭＤ１００の動作状態を示す副表示部として機能する。使用者は、被操作部を操作することにより、ＨＭＤ１００を操作できる。制御装置１０は、ＨＭＤ１００のコントローラーとして機能する。

画像表示部２０は、使用者の頭部に装着される装着体であり、本実施形態では眼鏡形状を有する。画像表示部２０は、右保持部２１と、左保持部２３と、前部フレーム２７とを有する本体に、右表示ユニット２２、左表示ユニット２４、右導光板２６及び左導光板２８を備える。
右保持部２１及び左保持部２３は、それぞれ、前部フレーム２７の両端部から後方に延び、眼鏡のテンプル（つる）のように、使用者の頭部に画像表示部２０を保持する。ここで、前部フレーム２７の両端部のうち、画像表示部２０の装着状態において使用者の右側に位置する端部を端部ＥＲとし、使用者の左側に位置する端部を端部ＥＬとする。右保持部２１は、前部フレーム２７の端部ＥＲから、画像表示部２０の装着状態において使用者の右側頭部に対応する位置まで延伸して設けられる。左保持部２３は、端部ＥＬから、画像表示部２０の装着状態において使用者の左側頭部に対応する位置まで延伸して設けられる。

右導光板２６及び左導光板２８は、前部フレーム２７に設けられる。右導光板２６は、画像表示部２０の装着状態において使用者の右眼の眼前に位置し、右眼に画像を視認させる。左導光板２８は、画像表示部２０の装着状態において使用者の左眼の眼前に位置し、左眼に画像を視認させる。

前部フレーム２７は、右導光板２６の一端と左導光板２８の一端とを互いに連結した形状を有し、この連結位置は、使用者が画像表示部２０を装着する装着状態で、使用者の眉間に対応する。前部フレーム２７は、右導光板２６と左導光板２８との連結位置において、画像表示部２０の装着状態で使用者の鼻に当接する鼻当て部を設けてもよい。この場合、鼻当て部と、右保持部２１及び左保持部２３とにより画像表示部２０を使用者の頭部に保持できる。また、右保持部２１及び左保持部２３に、画像表示部２０の装着状態において使用者の後頭部に接するベルト（図示略）を連結してもよく、この場合、ベルトによって画像表示部２０を使用者の頭部に保持できる。

右表示ユニット２２は、右導光板２６による画像の表示を実現する。右表示ユニット２２は、右保持部２１に設けられ、装着状態において使用者の右側頭部の近傍に位置する。左表示ユニット２４は、左導光板２８による画像の表示を実現する。左表示ユニット２４は、左保持部２３に設けられ、装着状態において使用者の左側頭部の近傍に位置する。

本実施形態の右導光板２６及び左導光板２８は、光透過性の樹脂等によって形成される光学部であり、例えばプリズムであり、右表示ユニット２２及び左表示ユニット２４が出力する画像光を、使用者の眼に導く。
右導光板２６及び左導光板２８の表面に、調光板（図示略）を設けてもよい。調光板は、光の波長域により透過率が異なる薄板上の光学素子であり、いわゆる波長フィルターとして機能する。調光板は、例えば、使用者の眼の側と反対の側である前部フレーム２７の表側を覆うように配置される。この調光板の光学特性を適宜選択することにより、可視光、赤外光及び紫外光等の任意の波長域の光の透過率を調整することができ、外部から右導光板２６及び左導光板２８に入射し、右導光板２６及び左導光板２８を透過する外光の光量を調整できる。

画像表示部２０は、右表示ユニット２２及び左表示ユニット２４がそれぞれ生成する画像光を、右導光板２６及び左導光板２８に導く。右導光板２６及び左導光板２８に導かれた画像光は使用者の右眼と左眼に入射して、使用者に虚像を視認させる。これにより、画像表示部２０は画像を表示する。

使用者の前方から、右導光板２６及び左導光板２８を透過して外光が使用者の眼に入射する場合、使用者の眼には、虚像を構成する画像光及び外光が入射することとなり、虚像の視認性が外光の強さに影響される。このため、例えば前部フレーム２７に調光板を装着し、調光板の光学特性を適宜選択又は調整することによって、虚像の視認のしやすさを調整できる。典型的な例では、ＨＭＤ１００を装着した使用者が少なくとも外の景色を視認できる程度の光透過性を有する調光板を用いることができる。また、調光板を用いると、右導光板２６及び左導光板２８を保護し、右導光板２６及び左導光板２８の損傷や汚れの付着等を抑制する効果が期待できる。調光板は、前部フレーム２７、又は、右導光板２６及び左導光板２８のそれぞれに対し着脱可能としてもよく、複数種類の調光板を交換して装着可能としてもよく、調光板を省略してもよい。

カメラ６１は、画像表示部２０の前部フレーム２７に配設される。カメラ６１の構成及び配置は、使用者が画像表示部２０を装着した状態で視認する外景方向を撮像するように決められる。例えば、カメラ６１は、前部フレーム２７の前面において、右導光板２６及び左導光板２８を透過する外光を遮らない位置に設けられる。図１の例で、カメラ６１は、前部フレーム２７の端部ＥＲ側に配置されるが、カメラ６１を端部ＥＬ側に配置してもよく、また、右導光板２６と左導光板２８との連結部に配置してもよい。
カメラ６１は、本発明の「撮像部」に相当する。

カメラ６１は、ＣＣＤやＣＭＯＳ等の撮像素子及び撮像レンズ等を備えるデジタルカメラである。本実施形態のカメラ６１は単眼カメラであるが、ステレオカメラで構成してもよい。カメラ６１は、ＨＭＤ１００の表側方向、換言すれば、ＨＭＤ１００を装着した状態における使用者の視界方向の少なくとも一部の外景（実空間）を撮像する。別の表現では、カメラ６１は、使用者の視界と重なる範囲又は方向を撮像し、使用者が注視する方向を撮像する。カメラ６１の画角の方向及び広さは適宜設定可能である。本実施形態では、後述するように、カメラ６１の画角が、使用者が右導光板２６及び左導光板２８を通して視認する外界を含む。より好ましくは、カメラ６１の画角は、右導光板２６及び左導光板２８を透過して視認可能な使用者の視界の全体を撮像できるように設定される。
カメラ６１は、制御部１５０（図５）が備える撮像制御部１４７の制御に従って撮像を実行する。カメラ６１は、撮像画像データを、後述するインターフェイス２１１を介して制御部１５０に出力する。

ＨＭＤ１００は、予め設定された測定方向に位置する測定対象物までの距離を検出する距離センサー（図示略）を備えてもよい。距離センサーは、例えば、前部フレーム２７において右導光板２６と左導光板２８との連結部分に配置できる。この場合、画像表示部２０の装着状態において、距離センサーの位置は、水平方向では使用者の両眼のほぼ中間であり、鉛直方向では使用者の両眼より上である。距離センサーの測定方向は、例えば、前部フレーム２７の表側方向とすることができ、言い換えればカメラ６１の撮像方向と重複する方向である。距離センサーは、例えば、ＬＥＤやレーザーダイオード等の光源と、光源が発する光が測定対象物に反射する反射光を受光する受光部とを有する構成とすることができる。距離センサーは、制御部１５０の制御に従い、三角測距処理や時間差に基づく測距処理を実行すればよい。また、距離センサーは、超音波を発する音源と、測定対象物で反射する超音波を受信する検出部とを備える構成としてもよい。この場合、距離センサーは、制御部１５０の制御に従い、超音波の反射までの時間差に基づき測距処理を実行すればよい。

図２は、画像表示部２０が備える光学系の構成を示す要部平面図である。図２には説明のため使用者の左眼ＬＥ及び右眼ＲＥを図示する。
図２に示すように、右表示ユニット２２及び左表示ユニット２４は、左右対称に構成される。右表示ユニット２２は、使用者の右眼ＲＥに画像を視認させる構成として、画像光を発するＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）ユニット２２１と、ＯＬＥＤユニット２２１が発する画像光Ｌを導くレンズ群等を備えた右光学系２５１とを備える。画像光Ｌは、右光学系２５１により右導光板２６に導かれる。

ＯＬＥＤユニット２２１は、ＯＬＥＤパネル２２３と、ＯＬＥＤパネル２２３を駆動するＯＬＥＤ駆動回路２２５とを有する。ＯＬＥＤパネル２２３は、有機エレクトロルミネッセンスにより発光してＲ（赤）、Ｇ（緑）、Ｂ（青）の色光をそれぞれ発する発光素子を、マトリクス状に配置して構成される自発光型の表示パネルである。ＯＬＥＤパネル２２３は、Ｒ、Ｇ、Ｂの素子を１個ずつ含む単位を１画素として、複数の画素を備え、マトリクス状に配置される画素により画像を形成する。ＯＬＥＤ駆動回路２２５は、制御部１５０（図５）の制御に従って、ＯＬＥＤパネル２２３が備える発光素子の選択及び発光素子への通電を実行して、ＯＬＥＤパネル２２３の発光素子を発光させる。ＯＬＥＤ駆動回路２２５は、ＯＬＥＤパネル２２３の裏面すなわち発光面の裏側に、ボンディング等により固定される。ＯＬＥＤ駆動回路２２５は、例えばＯＬＥＤパネル２２３を駆動する半導体デバイスで構成され、ＯＬＥＤパネル２２３の裏面に固定される基板（図示略）に実装されてもよい。この基板には温度センサー２１７が実装される。
なお、ＯＬＥＤパネル２２３は、白色に発光する発光素子をマトリクス状に配置し、Ｒ、Ｇ、Ｂの各色に対応するカラーフィルターを重ねて配置する構成であってもよい。また、Ｒ、Ｇ、Ｂの色光をそれぞれ放射する発光素子に加え、Ｗ（白）の光を発する発光素子を備えるＷＲＧＢ構成のＯＬＥＤパネル２２３を用いてもよい。

右光学系２５１は、ＯＬＥＤパネル２２３から射出された画像光Ｌを並行状態の光束にするコリメートレンズを有する。コリメートレンズにより並行状態の光束にされた画像光Ｌは、右導光板２６に入射する。右導光板２６の内部において光を導く光路には、画像光Ｌを反射する複数の反射面が形成される。画像光Ｌは、右導光板２６の内部で複数回の反射を経て右眼ＲＥ側に導かれる。右導光板２６には、右眼ＲＥの眼前に位置するハーフミラー２６１（反射面）が形成される。画像光Ｌは、ハーフミラー２６１で反射して右眼ＲＥに向けて右導光板２６から射出され、この画像光Ｌが右眼ＲＥの網膜に像を結び、使用者に画像を視認させる。

また、左表示ユニット２４は、使用者の左眼ＬＥに画像を視認させる構成として、画像光を発するＯＬＥＤユニット２４１と、ＯＬＥＤユニット２４１が発する画像光Ｌを導くレンズ群等を備えた左光学系２５２とを備える。画像光Ｌは、左光学系２５２により左導光板２８に導かれる。

ＯＬＥＤユニット２４１は、ＯＬＥＤパネル２４３と、ＯＬＥＤパネル２４３を駆動するＯＬＥＤ駆動回路２４５とを有する。ＯＬＥＤパネル２４３は、ＯＬＥＤパネル２２３と同様に構成される自発光型の表示パネルである。ＯＬＥＤ駆動回路２４５は、制御部１５０（図５）の制御に従って、ＯＬＥＤパネル２４３が備える発光素子の選択及び発光素子への通電を実行して、ＯＬＥＤパネル２４３の発光素子を発光させる。ＯＬＥＤ駆動回路２４５は、ＯＬＥＤパネル２４３の裏面すなわち発光面の裏側に、ボンディング等により固定される。ＯＬＥＤ駆動回路２４５は、例えばＯＬＥＤパネル２４３を駆動する半導体デバイスで構成され、ＯＬＥＤパネル２４３の裏面に固定される基板（図示略）に実装されてもよい。この基板には、温度センサー２３９が実装される。

左光学系２５２は、ＯＬＥＤパネル２４３から射出された画像光Ｌを並行状態の光束にするコリメートレンズを有する。コリメートレンズにより並行状態の光束にされた画像光Ｌは、左導光板２８に入射する。左導光板２８は、画像光Ｌを反射する複数の反射面が形成された光学素子であり、例えばプリズムである。画像光Ｌは、左導光板２８の内部で複数回の反射を経て左眼ＬＥ側に導かれる。左導光板２８には、左眼ＬＥの眼前に位置するハーフミラー２８１（反射面）が形成される。画像光Ｌは、ハーフミラー２８１で反射して左眼ＬＥに向けて左導光板２８から射出され、この画像光Ｌが左眼ＬＥの網膜に像を結び、使用者に画像を視認させる。

この構成によれば、ＨＭＤ１００は、シースルー型の表示装置として機能する。すなわち、使用者の右眼ＲＥには、ハーフミラー２６１で反射した画像光Ｌと、右導光板２６を透過した外光ＯＬとが入射する。また、左眼ＬＥには、ハーフミラー２８１で反射した画像光Ｌと、ハーフミラー２８１を透過した外光ＯＬとが入射する。このように、ＨＭＤ１００は、内部で処理した画像の画像光Ｌと外光ＯＬとを重ねて使用者の眼に入射させ、使用者にとっては、右導光板２６及び左導光板２８を透かして外景が見え、この外景に重ねて、画像光Ｌによる画像が視認される。
ハーフミラー２６１、２８１は、右表示ユニット２２及び左表示ユニット２４がそれぞれ出力する画像光を反射して画像を取り出す画像取り出し部であり、表示部ということができる。

なお、左光学系２５２と左導光板２８とを総称して「左導光部」とも呼び、右光学系２５１と右導光板２６とを総称して「右導光部」と呼ぶ。右導光部及び左導光部の構成は上記の例に限定されず、画像光を用いて使用者の眼前に虚像を形成する限りにおいて任意の方式を用いることができ、例えば、回折格子を用いても良いし、半透過反射膜を用いても良い。

図１に戻り、制御装置１０及び画像表示部２０は、接続ケーブル４０により接続される。接続ケーブル４０は、ケース１０Ａの下部に設けられるコネクター（図示略）に着脱可能に接続され、左保持部２３の先端から、画像表示部２０の内部に設けられる各種回路に接続する。接続ケーブル４０は、デジタルデータを伝送するメタルケーブル又は光ファイバーケーブルを有し、アナログ信号を伝送するメタルケーブルを有していてもよい。接続ケーブル４０の途中には、コネクター４６が設けられる。コネクター４６は、ステレオミニプラグを接続するジャックであり、コネクター４６及び制御装置１０は、例えばアナログ音声信号を伝送するラインで接続される。図１に示す構成例では、ステレオヘッドホンを構成する右イヤホン３２と左イヤホン３４、及びマイク６３を有するヘッドセット３０が、コネクター４６に接続される。
制御装置１０と画像表示部２０とを無線接続してもよい。例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）、無線ＬＡＮ（Ｗｉ−Ｆｉ（登録商標）を含む）等の規格に準拠した無線通信により、制御装置１０と画像表示部２０とが制御信号やデータを相互に送受信する構成としてもよい。

マイク６３は、例えば図１に示すように、マイク６３の集音部が使用者の視線方向を向くように配置され、音声を集音して、音声信号を音声インターフェイス１８２（図４）に出力する。マイク６３は、例えばモノラルマイクであってもステレオマイクであってもよく、指向性を有するマイクであってもよいし、無指向性のマイクであってもよい。

制御装置１０は、使用者により操作される被操作部として、ボタン１１、ＬＥＤインジケーター１２、トラックパッド１４、上下キー１５、切替スイッチ１６、及び電源スイッチ１８を備える。これらの被操作部はケース１０Ａの表面に配置される。

ボタン１１は、制御装置１０を操作するためのキーやスイッチを備え、これらのキーやスイッチは押圧操作により変位する。例えば、ボタン１１は、制御装置１０が実行するオペレーティングシステム１４３（図５参照）等に関する操作を行うためのメニューキー、ホームキー、「戻る」キーを含む。
ＬＥＤインジケーター１２は、ＨＭＤ１００の動作状態に対応して点灯し、又は点滅する。上下キー１５は、右イヤホン３２及び左イヤホン３４から出力する音量の増減の指示入力や、画像表示部２０の表示の明るさの増減の指示入力に利用される。切替スイッチ１６は、上下キー１５の操作に対応する入力を切り替えるスイッチである。電源スイッチ１８は、ＨＭＤ１００の電源のオン／オフを切り替えるスイッチであり、例えばスライドスイッチである。

トラックパッド１４は、接触操作を検出する操作面を有し、操作面に対する操作に応じて操作信号を出力する。操作面における検出方式は限定されず、静電式、圧力検出式、光学式或いは他の方式を採用できる。トラックパッド１４への接触（タッチ操作）は、タッチセンサー（図示略）により検出される。トラックパッド１４にはＬＥＤ表示部１７が設置される。ＬＥＤ表示部１７は複数のＬＥＤを備え、それぞれのＬＥＤの光はトラックパッド１４を透過して、操作用のアイコン等を表示する。このアイコン等はソフトウェアボタンとして機能する。トラックパッド１４は、本発明の「検出部」に相当する。

図３は、画像表示部２０の構成を示す斜視図であり、画像表示部２０を使用者の頭部側から見た要部構成を示す。この図３は、画像表示部２０の使用者の頭部に接する側、言い換えれば使用者の右眼ＲＥ及び左眼ＬＥに見える側である。別の言い方をすれば、右導光板２６及び左導光板２８の裏側が見えている。
図３では、使用者の右眼ＲＥに画像光を照射するハーフミラー２６１、及び左眼ＬＥに画像光を照射するハーフミラー２８１が、略四角形の領域として見える。また、ハーフミラー２６１、２８１を含む右導光板２６及び左導光板２８の全体が、上述したように外光を透過する。このため、使用者には、右導光板２６及び左導光板２８の全体を透過して外景が視認され、ハーフミラー２６１、２８１の位置に矩形の表示画像が視認される。

カメラ６１は、画像表示部２０において右側の端部に配置され、使用者の両眼が向く方向、すなわち使用者にとって前方を撮像する。カメラ６１の光軸は、右眼ＲＥ及び左眼ＬＥの視線方向を含む方向とされる。使用者がＨＭＤ１００を装着した状態で視認できる外景は、無限遠とは限らない。例えば、使用者が両眼で、使用者の前方に位置する対象物体を注視する場合、使用者から対象物体までの距離は、３０ｃｍ〜１０ｍ程度であることが多く、１ｍ〜４ｍ程度であることが、より多い。そこで、ＨＭＤ１００について、通常使用時における使用者から対象物体までの距離の上限、及び下限の目安を定めてもよい。この目安は調査や実験により求めてもよいし使用者が設定してもよい。カメラ６１の光軸、及び画角は、通常使用時における対象物体までの距離が、設定された上限の目安に相当する場合、及び下限の目安に相当する場合に、この対象物体が画角に含まれるように設定されることが好ましい。

一般に、人間の視野角は水平方向におよそ２００度、垂直方向におよそ１２５度とされ、そのうち情報受容能力に優れる有効視野は水平方向に３０度、垂直方向に２０度程度である。さらに、人間が注視する注視点が迅速に安定して見える安定注視野は、水平方向に６０〜９０度、垂直方向に４５度〜７０度程度とされている。注視点が使用者の前方に位置する対象物体であるとき、使用者の視野において、右眼ＲＥ及び左眼ＬＥのそれぞれの視線を中心として水平方向に３０度、垂直方向に２０度程度が有効視野である。また、水平方向に６０〜９０度、垂直方向に４５度〜７０度程度が安定注視野であり、水平方向に約２００度、垂直方向に約１２５度が視野角となる。さらに、使用者が右導光板２６及び左導光板２８を透過して視認する実際の視野を、実視野（ＦＯＶ：Ｆｉｅｌｄ Ｏｆ Ｖｉｅｗ）と呼ぶことができる。図１及び図２に示す本実施形態の構成で、実視野は、右導光板２６及び左導光板２８を透過して使用者が視認する実際の視野に相当する。実視野は、視野角及び安定注視野より狭いが、有効視野より広い。

カメラ６１の画角は、使用者の視野よりも広い範囲を撮像可能であることが好ましく、具体的には、画角が、少なくとも使用者の有効視野よりも広いことが好ましい。また、画角が、使用者の実視野よりも広いことがより好ましい。さらに好ましくは、画角が、使用者の安定注視野よりも広く、最も好ましくは、画角が使用者の両眼の視野角よりも広いことがより好ましい。

カメラ６１が、撮像レンズとして、いわゆる広角レンズを備え、広い画角を撮像できる構成としてもよい。広角レンズには、超広角レンズ、準広角レンズと呼ばれるレンズを含んでもよいし、単焦点レンズであってもズームレンズであってもよく、複数のレンズからなるレンズ群をカメラ６１が備える構成であってもよい。

図４は、ＨＭＤ１００を構成する各部の構成を示すブロック図である。
制御装置１０は、プログラムを実行してＨＭＤ１００を制御するメインプロセッサー１４０を備える。メインプロセッサー１４０には、不揮発性記憶部１２１及びメモリー１２３及びが接続される。また、メインプロセッサー１４０には、入力装置としてトラックパッド１４及び操作部１１０が接続される。また、メインプロセッサー１４０には、センサー類として、６軸センサー１１１、磁気センサー１１３が接続される。また、メインプロセッサー１４０には、ＧＰＳ受信部１１５、通信部１１７、ビーコン受信部１１９、音声コーデック１８０、外部コネクター１８４、外部メモリーインターフェイス１８６、ＵＳＢコネクター１８８、センサーハブ１９２及びＦＰＧＡ１９４が接続される。これらは外部とのインターフェイスとして機能する。

メインプロセッサー１４０は、制御装置１０が内蔵するコントローラー基板１２０に実装される。コントローラー基板１２０には、メインプロセッサー１４０に加えて、メモリー１２３、ビーコン受信部１１９、不揮発性記憶部１２１等が実装されてもよい。本実施形態では、６軸センサー１１１、磁気センサー１１３、ＧＰＳ受信部１１５、通信部１１７、メモリー１２３、不揮発性記憶部１２１、音声コーデック１８０等がコントローラー基板１２０に実装される。また、外部コネクター１８４、外部メモリーインターフェイス１８６、ＵＳＢコネクター１８８、センサーハブ１９２、ＦＰＧＡ１９４、及びインターフェイス１９６をコントローラー基板１２０に実装した構成であってもよい。

メモリー１２３は、メインプロセッサー１４０がプログラムを実行する場合に、実行されるプログラム、及び処理されるデータを一時的に記憶するワークエリアを構成する。不揮発性記憶部１２１は、フラッシュメモリーやｅＭＭＣ（ｅｍｂｅｄｄｅｄ Ｍｕｌｔｉ Ｍｅｄｉａ Ｃａｒｄ）で構成される。不揮発性記憶部１２１は、メインプロセッサー１４０が実行するプログラムや、メインプロセッサー１４０がプログラムを実行して処理する各種データを記憶する。

メインプロセッサー１４０は、トラックパッド１４から入力される操作信号に基づいて、トラックパッド１４の操作面に対する接触操作を検出し、操作位置を取得する。
操作部１１０は、ボタン１１及びＬＥＤ表示部１７を含む。操作部１１０は、ボタン１１が有するボタンやスイッチ等の操作子が操作された場合に、操作された操作子に対応する操作信号をメインプロセッサー１４０に出力する。

ＬＥＤ表示部１７は、メインプロセッサー１４０の制御に従って、ＬＥＤインジケーター１２の点灯、及び消灯を制御する。また、ＬＥＤ表示部１７は、トラックパッド１４（図１）の直下に配置されるＬＥＤ（図示略）、及びこのＬＥＤを点灯させる駆動回路を含む構成であってもよい。この場合、ＬＥＤ表示部１７は、メインプロセッサー１４０の制御に従って、ＬＥＤを点灯、点滅、消灯させる。

６軸センサー１１１は、３軸加速度センサー及び３軸ジャイロ（角速度）センサーを備えるモーションセンサー（慣性センサー）である。６軸センサー１１１は、上記のセンサーがモジュール化されたＩＭＵ（Ｉｎｅｒｔｉａｌ Ｍｅａｓｕｒｅｍｅｎｔ Ｕｎｉｔ）を採用してもよい。
磁気センサー１１３は、例えば、３軸の地磁気センサーである。
６軸センサー１１１及び磁気センサー１１３は、検出値を、予め指定されたサンプリング周期に従ってメインプロセッサー１４０に出力する。また、６軸センサー１１１及び磁気センサー１１３は、メインプロセッサー１４０の要求に応じて、メインプロセッサー１４０により指定されたタイミングで、検出値をメインプロセッサー１４０に出力する。

ＧＰＳ受信部１１５は、図示しないＧＰＳアンテナを備え、ＧＰＳ衛星から送信されるＧＰＳ信号を受信する。ＧＰＳ受信部１１５は、受信したＧＰＳ信号をメインプロセッサー１４０に出力する。また、ＧＰＳ受信部１１５は、受信したＧＰＳ信号の信号強度を計測し、メインプロセッサー１４０に出力する。信号強度には、例えば、受信信号強度（ＲＳＳＩ：Ｒｅｃｅｉｖｅｄ Ｓｉｇｎａｌ Ｓｔｒｅｎｇｔｈ Ｉｎｄｉｃａｔｉｏｎ）、電界強度、磁界強度、信号雑音比（ＳＮＲ： Ｓｉｇｎａｌ ｔｏ Ｎｏｉｓｅ ｒａｔｉｏ）等の情報を用いることができる。

通信部１１７は、外部の機器との間で無線通信を実行する。通信部１１７は、アンテナ、ＲＦ回路、ベースバンド回路、通信制御回路等を備えて構成され、又はこれらが統合されたデバイスで構成される。通信部１１７は、例えば、Ｂｌｕｅｔｏｏｔｈ、無線ＬＡＮ（Ｗｉ−Ｆｉを含む）等の規格に準拠した無線通信を行う。

ビーコン受信部１１９は、ビーコン信号の送信装置（図示略）から送信されるビーコン信号を受信する。ビーコン受信部１１９は、受信したビーコン信号に含まれるビーコンＩＤを検出する。ビーコンＩＤは、送信装置の識別情報である。また、ビーコン受信部１１９は、受信したビーコン信号の電波強度（ＲＳＳＩ：Received Signal Strength Indication）を検出し、検出した電波強度により送信装置との間の距離を推定する。ビーコン信号は、例えば、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、Ｂｌｕｅｔｏｏｔｈ、或いはＢｌｕｅｔｏｏｔｈ Ｌｏｗ Ｅｎｅｒｇｙ、Ｂｌｕｅｔｏｏｔｈ Ｓｍａｒｔ、ｉＢｅａｃｏｎ（登録商標）等の近距離無線通信の規格に準拠した信号が使用される。
ビーコン受信部１１９は、本発明の「距離検出部」に相当する。

音声インターフェイス１８２は、音声信号を入出力するインターフェイスである。本実施形態では、音声インターフェイス１８２は、接続ケーブル４０に設けられたコネクター４６（図１）を含む。コネクター４６はヘッドセット３０に接続される。音声インターフェイス１８２が出力する音声信号は右イヤホン３２、及び左イヤホン３４に入力され、これにより右イヤホン３２及び左イヤホン３４が音声を出力する。また、ヘッドセット３０が備えるマイク６３は、音声を集音して、音声信号を音声インターフェイス１８２に出力する。マイク６３から音声インターフェイス１８２に入力される音声信号は、外部コネクター１８４に入力される。

音声コーデック１８０は、音声インターフェイス１８２に接続され、音声インターフェイス１８２を介して入出力される音声信号のエンコード及びデコードを行う。音声コーデック１８０はアナログ音声信号からデジタル音声データへの変換を行うＡ／Ｄコンバーター、及びその逆の変換を行うＤ／Ａコンバーターを備えてもよい。例えば、本実施形態のＨＭＤ１００は、音声を右イヤホン３２及び左イヤホン３４により出力し、マイク６３で集音する。音声コーデック１８０は、メインプロセッサー１４０が出力するデジタル音声データをアナログ音声信号に変換して、音声インターフェイス１８２を介して出力する。また、音声コーデック１８０は、音声インターフェイス１８２に入力されるアナログ音声信号をデジタル音声データに変換してメインプロセッサー１４０に出力する。

外部コネクター１８４は、メインプロセッサー１４０と通信する外部の装置を接続するコネクターである。外部コネクター１８４は、例えば、外部の装置をメインプロセッサー１４０に接続して、メインプロセッサー１４０が実行するプログラムのデバッグや、ＨＭＤ１００の動作のログの収集を行う場合に、この外部の装置を接続するインターフェイスである。

外部メモリーインターフェイス１８６は、可搬型のメモリーデバイスを接続可能なインターフェイスであり、例えば、カード型記録媒体を装着してデータの読取が可能なメモリーカードスロットとインターフェイス回路とを含む。この場合のカード型記録媒体のサイズ、形状、規格は制限されず、適宜に変更可能である。

ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）コネクター１８８は、ＵＳＢ規格に準拠したコネクターとインターフェイス回路とを備える。ＵＳＢコネクター１８８は、ＵＳＢメモリーデバイス、スマートフォン、コンピューター等を接続できる。ＵＳＢコネクター１８８のサイズや形状、適合するＵＳＢ規格のバージョンは適宜に選択、変更可能である。

センサーハブ１９２及びＦＰＧＡ１９４は、インターフェイス（Ｉ／Ｆ）１９６を介して、画像表示部２０に接続される。センサーハブ１９２は、画像表示部２０が備える各種センサーの検出値を取得してメインプロセッサー１４０に出力する。また、ＦＰＧＡ１９４は、メインプロセッサー１４０と画像表示部２０の各部との間で送受信するデータの処理、及びインターフェイス１９６を介した伝送を実行する。

ＨＭＤ１００は、バイブレーター１９を備える。バイブレーター１９は、モーター、偏心した回転子（いずれも図示略）を備え、その他の必要な構成を備えてもよい。バイブレーター１９は、メインプロセッサー１４０の制御に従って上記モーターを回転させることにより、振動を発生する。ＨＭＤ１００は、例えば、操作部１１０に対する操作を検出した場合、ＨＭＤ１００の電源がオン／オフされる場合、或いはその他の場合に、所定の振動パターンでバイブレーター１９により振動を発生する。

画像表示部２０の右表示ユニット２２及び左表示ユニット２４は、それぞれ、制御装置１０に接続される。図１に示すように、ＨＭＤ１００では左保持部２３に接続ケーブル４０が接続され、この接続ケーブル４０に繋がる配線が画像表示部２０の内部に敷設され、右表示ユニット２２と左表示ユニット２４のそれぞれが制御装置１０に接続される。

右表示ユニット２２は、表示ユニット基板２１０を有する。表示ユニット基板２１０には、インターフェイス１９６に接続されるインターフェイス（Ｉ／Ｆ）２１１、インターフェイス２１１を介して制御装置１０から入力されるデータを受信する受信部（Ｒｘ）２１３、及びＥＥＰＲＯＭ２１５が実装される。
インターフェイス２１１は、受信部２１３、ＥＥＰＲＯＭ２１５、温度センサー２１７、カメラ６１、照度センサー６５、及びＬＥＤインジケーター６７を、制御装置１０に接続する。

ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）２１５は、各種のデータをメインプロセッサー１４０が読み取り可能に記憶する。ＥＥＰＲＯＭ２１５は、例えば、画像表示部２０が備えるＯＬＥＤユニット２２１、２４１の発光特性や表示特性に関するデータ、右表示ユニット２２又は左表示ユニット２４が備えるセンサーの特性に関するデータなどを記憶する。具体的には、ＯＬＥＤユニット２２１、２４１のガンマ補正に係るパラメーター、温度センサー２１７、２３９の検出値を補償するデータ等を記憶する。これらのデータは、ＨＭＤ１００の工場出荷時の検査によって生成され、ＥＥＰＲＯＭ２１５に書き込まれ、出荷後はメインプロセッサー１４０がＥＥＰＲＯＭ２１５のデータを利用して処理を行える。

カメラ６１は、インターフェイス２１１を介して入力される信号に従って撮像を実行し、撮像画像データ、又は撮像結果を示す信号を制御装置１０に出力する。
照度センサー６５は、図１に示すように、前部フレーム２７の端部ＥＲに設けられ、画像表示部２０を装着する使用者の前方からの外光を受光するよう配置される。照度センサー６５は、受光量（受光強度）に対応する検出値を出力する。
ＬＥＤインジケーター６７は、図１に示すように、前部フレーム２７の端部ＥＲにおいてカメラ６１の近傍に配置される。ＬＥＤインジケーター６７は、カメラ６１による撮像を実行中に点灯して、撮像中であることを報知する。

温度センサー２１７は、温度を検出し、検出温度に対応する電圧値又は抵抗値を、検出値として出力する。温度センサー２１７は、ＯＬＥＤパネル２２３（図２）の裏面側に実装される。温度センサー２１７は、例えばＯＬＥＤ駆動回路２２５と同一の基板に実装されてもよい。この構成により、温度センサー２１７は、主としてＯＬＥＤパネル２２３の温度を検出する。

受信部２１３は、インターフェイス２１１を介してメインプロセッサー１４０が送信するデータを受信する。受信部２１３は、ＯＬＥＤユニット２２１で表示する画像の画像データを受信した場合に、受信した画像データを、ＯＬＥＤ駆動回路２２５（図２）に出力する。

左表示ユニット２４は、表示ユニット基板２１０を有する。表示ユニット基板２１０には、インターフェイス１９６に接続されるインターフェイス（Ｉ／Ｆ）２３１、インターフェイス２３１を介して制御装置１０から入力されるデータを受信する受信部（Ｒｘ）２３３が実装される。また、表示ユニット基板２１０には、６軸センサー２３５及び磁気センサー２３７が実装される。
インターフェイス２３１は、受信部２３３、６軸センサー２３５、磁気センサー２３７、及び温度センサー２３９を、制御装置１０に接続する。

６軸センサー２３５は、３軸加速度センサー及び３軸ジャイロ（角速度）センサーを備えるモーションセンサー（慣性センサー）である。６軸センサー２３５は、上記のセンサーがモジュール化されたＩＭＵを採用してもよい。６軸センサー２３５は、本発明の「検出部」に相当する。
磁気センサー２３７は、例えば、３軸の地磁気センサーである。

温度センサー２３９は、温度を検出し、検出温度に対応する電圧値又は抵抗値を、検出値として出力する。温度センサー２３９は、ＯＬＥＤパネル２４３（図２）の裏面側に実装される。温度センサー２３９は、例えばＯＬＥＤ駆動回路２４５と同一の基板に実装されてもよい。この構成により、温度センサー２３９は、主としてＯＬＥＤパネル２４３の温度を検出する。
また、温度センサー２３９が、ＯＬＥＤパネル２４３又はＯＬＥＤ駆動回路２４５に内蔵されてもよい。また、上記基板は半導体基板であってもよい。具体的には、ＯＬＥＤパネル２４３が、Ｓｉ−ＯＬＥＤとして、ＯＬＥＤ駆動回路２４５等とともに統合半導体チップ上の集積回路として実装される場合、この半導体チップに温度センサー２３９を実装してもよい。

右表示ユニット２２が備えるカメラ６１、照度センサー６５、温度センサー２１７、及び左表示ユニット２４が備える６軸センサー２３５、磁気センサー２３７、温度センサー２３９は、センサーハブ１９２に接続される。センサーハブ１９２は、メインプロセッサー１４０の制御に従って各センサーのサンプリング周期の設定及び初期化を行う。センサーハブ１９２は、各センサーのサンプリング周期に合わせて、各センサーへの通電、制御データの送信、検出値の取得等を実行する。また、センサーハブ１９２は、予め設定されたタイミングで、右表示ユニット２２及び左表示ユニット２４が備える各センサーの検出値を、メインプロセッサー１４０に出力する。センサーハブ１９２は、各センサーの検出値を、メインプロセッサー１４０に対する出力のタイミングに合わせて一時的に保持する機能を備えてもよい。また、センサーハブ１９２は、各センサーの出力値の信号形式、又はデータ形式の相違に対応し、統一されたデータ形式のデータに変換して、メインプロセッサー１４０に出力する機能を備えてもよい。
また、センサーハブ１９２は、メインプロセッサー１４０の制御に従ってＬＥＤインジケーター６７への通電を開始及び停止させ、カメラ６１が撮像を開始及び終了するタイミングに合わせて、ＬＥＤインジケーター６７を点灯又は点滅させる。

制御装置１０は、電源部１３０を備え、電源部１３０から供給される電力により動作する。電源部１３０は、充電可能なバッテリー１３２、及びバッテリー１３２の残容量の検出及びバッテリー１３２への充電の制御を行う電源制御回路１３４を備える。電源制御回路１３４はメインプロセッサー１４０に接続され、バッテリー１３２の残容量の検出値、又は電圧の検出値をメインプロセッサー１４０に出力する。また、電源部１３０が供給する電力に基づき、制御装置１０から画像表示部２０に電力を供給してもよい。また、電源部１３０から制御装置１０の各部及び画像表示部２０への電力の供給状態を、メインプロセッサー１４０が制御可能な構成としてもよい。

図５は、制御装置１０の制御系を構成する記憶部１２５及び制御部１５０の機能ブロック図である。図５に示す記憶部１２５は、不揮発性記憶部１２１（図４）により構成される論理的な記憶部であり、ＥＥＰＲＯＭ２１５を含んでもよい。また、制御部１５０及び制御部１５０が有する各種の機能部は、メインプロセッサー１４０がプログラムを実行することによって、ソフトウェアとハードウェアとの協働により形成される。制御部１５０及び制御部１５０を構成する各機能部は、例えば、メインプロセッサー１４０、不揮発性記憶部１２１及びメモリー１２３により構成される。

制御部１５０は、記憶部１２５が記憶するデータを利用して各種処理を実行し、ＨＭＤ１００を制御する。
記憶部１２５は、制御部１５０が処理する各種のデータを記憶する。記憶部１２５は、設定データ１２７及びコンテンツデータ１２８を記憶する。
設定データ１２７は、ＨＭＤ１００の動作を設定する各種の設定値を含む。また、制御部１５０がＨＭＤ１００を制御する際にパラメーター、行列式、演算式、ＬＵＴ（ＬｏｏｋＵｐ Ｔａｂｌｅ）等を用いる場合、これらを設定データ１２７に含めてもよい。

コンテンツデータ１２８は、制御部１５０の制御によって画像表示部２０が表示する画像や映像を含むコンテンツのデータであり、画像データ又は映像データを含む。また、コンテンツデータ１２８は、音声データを含んでもよい。また、コンテンツデータ１２８は複数の画像の画像データを含んでもよく、この場合、これら複数の画像は同時に画像表示部２０に表示される画像に限定されない。
また、コンテンツデータ１２８は、コンテンツを画像表示部２０により表示する際に、制御装置１０によって使用者の操作を受け付け、受け付けた操作に応じた処理を制御部１５０が実行する、双方向型のコンテンツであってもよい。この場合、コンテンツデータ１２８は、操作を受け付ける場合に表示するメニュー画面の画像データ、メニュー画面に含まれる項目に対応する処理等を定めるデータ等を含んでもよい。

制御部１５０は、オペレーティングシステム（ＯＳ）１４３、画像処理部１４５、撮像制御部１４７、操作制御部１４９、検出制御部１５１及び表示制御部１５３の機能を有する。操作制御部１４９及び検出制御部１５１は、本発明の「検出部」に相当する。
オペレーティングシステム１４３の機能は、記憶部１２５が記憶する制御プログラムの機能であり、その他の各部は、オペレーティングシステム１４３上で実行されるアプリケーションプログラムの機能である。

画像処理部１４５は、画像表示部２０により表示する画像又は映像の画像データに基づいて、右表示ユニット２２及び左表示ユニット２４に送信する信号を生成する。画像処理部１４５が生成する信号は、垂直同期信号、水平同期信号、クロック信号、アナログ画像信号等であってもよい。
また、画像処理部１４５は、必要に応じて、画像データの解像度を右表示ユニット２２及び左表示ユニット２４に適した解像度に変換する解像度変換処理を行ってもよい。また、画像処理部１４５は、画像データの輝度や彩度を調整する画像調整処理、３Ｄ画像データから２Ｄ画像データを作成し、又は２Ｄ画像データから３Ｄ画像データを生成する２Ｄ／３Ｄ変換処理等を実行してもよい。画像処理部１４５は、これらの画像処理を実行した場合、処理後の画像データに基づき画像を表示するための信号を生成して、接続ケーブル４０を介して画像表示部２０に送信する。
画像処理部１４５は、メインプロセッサー１４０がプログラムを実行して実現される構成のほか、メインプロセッサー１４０と別のハードウェア（例えば、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ））で構成してもよい。

撮像制御部１４７は、カメラ６１を制御して撮像を実行させ、撮像画像データを生成し、記憶部１２５に一時的に記憶する。また、カメラ６１が撮像画像データを生成する回路を含むカメラユニットとして構成される場合、撮像制御部１４７は撮像画像データをカメラ６１から取得して、記憶部１２５に一時的に記憶する。

操作制御部１４９は、トラックパッド１４及び操作部１１０における操作を検出し、操作に対応する操作データを出力する。操作制御部１４９は、例えば、操作部１１０のボタン等が操作された場合、操作内容を示す操作データを生成して、表示制御部１５３に出力する。表示制御部１５３は、操作制御部１４９から入力される操作データに従って表示状態を変更する。
また、操作制御部１４９は、トラックパッド１４における操作を検出した場合に、トラックパッド１４における操作位置の座標を取得する。操作制御部１４９は、操作位置の軌跡を生成する。操作位置の軌跡は、トラックパッド１４のタッチ操作が解除されない間、すなわち使用者の手や指操作体がトラックパッド１４に接触した状態が継続する間の操作位置の軌跡である。操作制御部１４９は、検出した操作位置の軌跡を示す操作データを表示制御部１５３に出力する。操作制御部１４９は、本発明の「検出部」に相当する。

検出制御部１５１は、６軸センサー２３５の検出値に基づいて使用者の頭部の動きを検出する。６軸センサー２３５は、所定の周期（例えば、５０ｍｓｅｃ）毎にサンプリングを実行し、検出結果を示すアナログ電圧値を出力する。出力された電圧値は、Ａ／Ｄ変換器（図示略）によってデジタル信号に変換され、制御部１５０に出力される。
６軸センサー２３５の角速度センサーは、内蔵する検出機構の測定基準点において、図１に示すＸ軸まわりの回転（ピッチ角）、Ｙ軸回りの回転（ヨー角）、及びＺ軸まわりの回転（ロール角）を検出する。Ｘ軸、Ｙ軸及びＺ軸は、図１に示すように相互に直交する３軸方向であり、Ｚ軸方向が鉛直方向に対応し、Ｘ軸方向が使用者の頭部の左右方向に対応し、Ｙ軸方向が使用者の頭部の前後方向に対応する。
検出制御部１５１は、６軸センサー２３５の検出値によりＸ軸まわりの回転（ピッチ角）を検出して、使用者が顔を上げる又は下げる動きを検出する。また、検出制御部１５１は、６軸センサー２３５の検出値によりＹ軸まわりの回転（ヨー角）を検出して、使用者が首を左肩又は右肩の方向に傾ける動きを検出する。また、検出制御部１５１は、６軸センサー２３５の検出値によりＺ軸まわりの回転（ロール角）を検出して、使用者が顔を左又は右に回す動きを検出する。以下では、顔を上げるや下げる動き、首を左肩又は右肩の方向に傾ける動き、顔を左又は右に回す動きを総称して、頭部の傾きという。
検出制御部１５１は、６軸センサー２３５の検出値に基づき、頭部の傾きの方向と、傾いた頭部の角度とを示す情報を操作データとして生成し、生成した操作データを表示制御部１５３に出力する。

表示制御部１５３は、右表示ユニット２２及び左表示ユニット２４を制御する制御信号を生成し、この制御信号により、右表示ユニット２２及び左表示ユニット２４のそれぞれによる画像光の生成及び射出を制御する。具体的には、表示制御部１４７は、ＯＬＥＤ駆動回路２２５、２４５を制御して、ＯＬＥＤパネル２２３、２４３による画像の表示を実行させる。表示制御部１４７は、画像処理部１４５が出力する信号に基づきＯＬＥＤ駆動回路２２５、２４５がＯＬＥＤパネル２２３、２４３に描画するタイミングの制御、ＯＬＥＤパネル２２３、２４３の輝度の制御等を行う。

また、表示制御部１５３は、操作制御部１４９から入力される操作データに従って表示領域３１０に表示させるポインター３０１（図６）の位置を移動させる。ポインター３０１は、表示領域３１０における指示位置を示し、本発明の「マーカー」に相当する。また、ポインター３０１に変えて、カーソルや、目印、文字、記号、標識、矢印、ゲームのキャラクターをマーカーとして用いることもできる。
表示制御部１５３は、操作制御部１４９から操作データとして、操作面上の移動距離と、移動方向とを示すデータが入力される。表示制御部１５３は、入力された操作データに基づき、ポインター３０１を移動させる移動方向と、移動距離とを示す制御信号を生成し、生成した制御信号を右表示ユニット２２及び左表示ユニット２４に出力する。
また、表示制御部１５３は、検出制御部１５１から入力される操作データに従って表示領域３１０に表示されたポインター３０１（図６）の位置を移動させる。表示制御部１５３には、検出制御部１５１から操作データとして、頭部の傾きを検出した方向と、傾いた頭部の角度とを示すデータが入力される。表示制御部１５３は、入力された操作データに基づいて、ポインター３０１を移動させる移動方向と、移動距離とを示す制御信号を生成する。
表示制御部１５３は、例えば、入力される操作データから頭部の傾きが検出された方向を特定し、この特定した方向に対応する表示領域３１０の方向にポインター３０１を移動させる制御信号を生成してもよい。また、表示制御部１５３は、操作データから頭部の傾きが検出された方向を特定すると共に、傾いた頭部の角度を特定してもよい。そして、表示制御部１５３は、特定した方向に対応する表示領域３１０の方向に移動させ、特定した頭部の角度に対応する速度で移動させるようにポインター３０１を制御する制御信号を生成する。
表示制御部１５３は、生成した制御信号を右表示ユニット２２及び左表示ユニット２４に出力する。

また、表示制御部１５３は、キャリブレーションを実行して、表示領域３１０の座標と、カメラ６１の撮像画像とを対応付けるパラメーターを生成する。
表示制御部１５３は、画像表示部２０にキャリブレーション用画像を表示させながら、キャリブレーション用画像に対応した参照実物体を、カメラ６１の撮像画像データから認識し、追跡する。この状態で、使用者が、トラックパッド１４等のユーザーインターフェイスを介してキャリブレーション用画像の位置を画像表示部２０上で移動させる。そして、使用者が、キャリブレーション用画像と参照実物体とが重なる（位置、大きさ、向きの少なくとも１つがほぼ一致する）ように知覚したタイミングにて、ユーザーインターフェイスを介して表示制御部１５３に通知する。表示制御部１５３は、取得した通知に応じて、当該タイミングでの参照実物体の検出結果（撮像画像データ上の位置）と、表示領域３１０でのキャリブレーション用画像の表示位置とを対応付けるパラメーターを生成する。表示制御部１５３は、生成されたパラメーターを記憶部１２５に記憶させる。
このパラメーターは、ポインター３０１により選択される対象物体を特定する際に使用される。制御部１５０は、カメラ６１の撮像画像データを取得し、ポインター３０１が表示された表示領域３１０の座標を、撮像画像データ上の座標に変換して、対象物体を特定する。

ＨＭＤ１００は、コンテンツの供給元となる種々の外部機器を接続するインターフェイス（図示略）を備えてもよい。例えば、ＵＳＢインターフェイス、マイクロＵＳＢインターフェイス、メモリーカード用インターフェイス等の有線接続に対応したインターフェイスであってもよく、無線通信インターフェイスで構成してもよい。この場合の外部機器は、ＨＭＤ１００に画像を供給する画像供給装置であり、パーソナルコンピューター（ＰＣ）、携帯電話端末、携帯型ゲーム機等が用いられる。この場合、ＨＭＤ１００は、これらの外部機器から入力されるコンテンツデータに基づく画像や音声を出力できる。

図６は、使用者が画像表示部２０越しに視認する視界３００を示す図である。
使用者は、現実世界（以下、外景という）に存在する人や、建物、道路、その他の物体（以下、これらを総称して対象物体という）と、画像表示部２０が表示する表示画像とを画像表示部２０越しに視認する。画像表示部２０が表示する表示画像には、例えば、ポインター３０１や、画像や映像等のコンテンツが含まれる。画像表示部２０が制御部１５０の制御に従って、コンテンツデータを再生することで、表示領域３１０にコンテンツが再生される。表示領域３１０は、画像表示部２０が表示画像を表示可能な領域を示す。

使用者は、第１操作と、第２操作とを行って、ポインター３０１を目的の位置（以下、ターゲットという）に移動させる。例えば、使用者が自動販売機３２０の飲料を購入する場合、ターゲットは、購入する商品の商品ボタンとなる。使用者は、表示領域３１０内に表示されたポインター３０１を、第１操作及び第２操作によりターゲットの位置まで移動させる。

本実施形態は、第１操作に応じてポインター３０１の位置を移動させる場合と、第２操作に応じてポインター３０１の位置を移動させる場合とで異なる態様で移動させる。例えば、第１操作に応じてポインター３０１を移動させる場合と、第２操作に応じてポインター３０１を移動させる場合とで、ポインター３０１の移動量（例えば、移動距離や、移動速度、加速度等）を変更する。
操作によってポインター３０１を移動させる移動距離を小さく設定した場合、又は移動速度を遅く設定した場合、ポインター３０１の位置とターゲットとの距離が離れていると、ポインター３０１をターゲットの近くまで移動させるのに時間がかかる。また、操作によってポインター３０１を移動させる移動距離を大きく設定した場合、又は移動速度を速く設定した場合、ポインター３０１をターゲットの位置に位置合わせする微調整が難しくなる場合がある。
このため、本実施形態のＨＭＤ１００は、ポインター３０１の移動距離、移動速度又は加速度の少なくともいずれかが異なる第１操作と、第２操作との２つの操作により、ポインター３０１をターゲットの位置に移動させる。なお、ターゲットは、画像表示部２０が表示させる表示画像であってもよいし、外景として視認する対象物体であってもよい。

第１操作は、第２操作よりも先に行われる。第１操作は、ポインター３０１をターゲットの近傍に短時間で移動させるための操作である。また、第２操作は、ポインター３０１の位置を微調整して、ポインター３０１をターゲットの位置に移動させる操作である。
例えば、第１操作及び第２操作が、スイッチやボタンの押下操作であると仮定する。この場合、第１操作による押下操作を１回受け付けた場合にポインター３０１を移動させる移動距離、移動速度又は加速度を、第２操作による押下操作を１回受け付けた場合にポインター３０１を移動させる移動距離、移動速度又は加速度よりも大きく設定する。移動距離、移動速度又は加速度は、本発明の「移動量」に相当する。
また、第１操作及び第２操作が、操作面に対する接触操作であり、検出した操作面上での指の接触距離に応じてポインター３０１を移動させる操作であると仮定する。この場合、第１操作である指の接触距離に対応してポインター３０１を移動させる移動距離、移動速度又は加速度を、第２操作である指の接触距離に対応してポインター３０１を移動させる移動距離、移動速度又は加速度よりも大きく又は速く設定する。
また、第１操作及び第２操作が、操作面に対する接触操作や、使用者の頭部の傾きを検出してポインター３０１を移動させる操作であり、接触操作や頭部の傾きが検出された検出時間に対応した距離だけポインター３０１を移動させる操作であると仮定する。この場合、第１操作の検出時間に対応してポインター３０１を移動させる移動距離、移動速度又は加速度を、第２操作の検出時間に対応してポインター３０１を移動させる移動距離、移動速度又は加速度よりも大きく又は速く設定する。

本実施形態では、トラックパッド１４の操作に応じてポインター３０１を移動させる操作を第１操作とする。トラックパッド１４を操作して、ポインター３０１をターゲットの位置に移動させる場合、トラックパッド１４が固定されていないと、使用者がイメージした通りにポインター３０１を動かすことは容易ではなかった。このため、本実施形態では、トラックパッド１４の操作を、ターゲットの近傍にポインター３０１を移動させる操作として用いる。
また、本実施形態では、使用者の頭部の傾きを操作として検出し、検出した操作に応じてポインター３０１を移動させる操作を第２操作とする。使用者が頭部を傾けて行うポインター３０１の操作は、本発明の「使用者の動作」に相当する。頭部を傾けてポインター３０１を操作する場合、使用者は頭部を操作が完了するまで傾け続けなければならず、無理な体勢を維持し続けなければならない場合があった。しかし、本実施形態では、第２操作の前に行われる第１操作によって、ポインター３０１が既にターゲットの近傍に移動しているので、第２操作を行う時間を短縮することができる。

図６に示すｘ軸は表示領域３１０の水平方向を示し、ｙ軸は表示領域３１０の奥行き方向を示し、ｚ軸は表示領域３１０の鉛直方向（上下方向）を示す。
図１に示す使用者の頭部のＸ軸まわりの回転が検出された場合、制御部１５０は、例えば、ポインター３０１を図６に示すｚ軸方向、すなわち表示領域３１０の鉛直方向に移動させる。また、図１に示す使用者の頭部のＹ軸まわりの回転が検出された場合、制御部１５０は、例えば、ポインター３０１を図６に示すｙ軸方向、すなわち表示領域３１０の奥行き方向に移動させる。また、図１に示す使用者の頭部のＺ軸まわりの回転が検出された場合、制御部１５０は、例えば、ポインター３０１を図６に示すｘ軸方向、すなわち表示領域３１０の水平方向に移動させる。
なお、使用者が頭部を傾ける方向と、ポインター３０１を移動させる移動方向との対応付けは、上述したものに限定されるものではなく、任意に設定することができる。

また、本実施形態は、ポインター３０１を移動させる操作を第１操作から第２操作に切り替えるタイミングを、使用者の手や指（以下、手指という）がトラックパッド１４から離れたか否かを検出することで行う。制御部１５０は、トラックパッド１４の操作面への接触が検出される間は、使用者がトラックパッド１４を操作する意志があると判断し、トラックパッド１４の操作によりポインター３０１を移動させる。また、制御部１５０は、操作面への接触が検出できなくなり、手指が操作面から離れた場合、トラックパッド１４を操作する意志がなくなったと判定し、ポインター３０１を移動させる操作を、第２操作に切り替える。
また、第１操作から第２操作への切り替えは、操作面への接触が検出されるか否かに限定されない。例えば、予め設定されたボタン１１や、上下キー１５、切替スイッチ１６が操作された場合や、トラックパッド１４を予め設定された回数叩く操作を受け付けた場合に、第１操作から第２操作へ切り替えてもよい。また、マイク６３から入力される音声により第１操作から第２操作に切り替えてもよい。例えば、フィンガースナップの音や、使用者が発した言葉をマイク６３から入力し、入力した音声データが予め設定された音声データに一致した場合に、第１操作から第２操作に切り替えてもよい。

本実施形態では、トラックパッド１４によるポインター３０１の操作を第１操作とし、使用者の頭部の傾きに基づくポインター３０１の操作を第２操作としたが、第１操作及び第２操作は、これらの操作に限定されるものではない。例えば、使用者の頭部の傾きを検出してポインター３０１を移動させる操作を第１操作とし、トラックパッド１４によるポインター３０１の操作を第２操作としてもよい。また、第１操作及び第２操作のいずれか一方に、ハンドサインやジェスチャーを用いてもよい。ハンドサインやジェスチャーは、本発明の「使用者の動作」に相当する。ハンドサインやジェスチャーにより第１又は第２操作を行う場合、記憶部１２５に、ハンドサインやジェスチャーの特定に用いる辞書を事前に記憶させておく。例えば、辞書には、指の位置や形状を示すデータがハンドサインごとに登録される。また、ジェスチャーが予め設定された手の形状（形態）を予め設定された順番に行うものである場合、各形状（形態）における指の位置や形状等を示すデータがジェスチャーごとに辞書に登録される。制御部１５０は、カメラ６１の撮像画像から使用者の手や指が撮像された領域（以下、手指領域という）を検出し、検出した手指領域から手指の形状や位置を検出して、辞書に登録されたデータとのマッチングによりハンドサインやジェスチャーを認識する。
また、制御部１５０は、使用者の手の爪や、使用者が手指に嵌めた指輪、腕に嵌めた腕輪や、時計、バンドの動きを第１操作及び第２操作のいずれか一方として検出してもよい。制御部１５０は、カメラ６１の撮像画像から使用者の手の爪や、使用者が手指に嵌めた指輪、腕に嵌めた腕輪や、時計、バンドの動きを検出し、検出した動きに応じてポインター３０１を移動させる。

制御部１５０は、動作モードとして第１の動作モードと第２の動作モードとを備え、これらの動作モードを切り替えて実行する。第１の動作モードは、使用者が画像表示部２０越しに視認する外景に含まれる対象物体（図７では自動販売機３２０）をターゲットとし、ターゲットとしての対象物体をポインター３０１により指示するモードである。第２の動作モードは、画像表示部２０が表示する複数の表示画像をターゲットとし、ターゲットとしての表示画像をポインター３０１により指示するモードである。
第１の動作モードと第２の動作モードとの動作モードの切替えは、例えば、ボタン１１や、上下キー１５、切替スイッチ１６等の操作を受け付けた場合に行ってもよい。また、トラックパッド１４を予め設定された回数叩く操作を受け付けた場合に、動作モードの切替えを行ってもよい。

また、ＨＭＤ１００に視線センサー（図史略）を搭載し、この視線センサーが検出する視線方向に対象物体が存在するか、表示画像が存在するかによって第１の動作モードと第２の動作モードとを切り替えてもよい。
ここで、視線センサーについて説明する。
視線センサー６８は、使用者の右眼ＲＥ、及び、左眼ＬＥのそれぞれに対応するように、右導光板２６と左導光板２８との中央位置に一対設けられる。視線センサーは、例えば、使用者の右眼ＲＥと左眼ＬＥとをそれぞれ撮像する一対のカメラで構成される。視線センサーは、制御部１５０の制御に従って撮像を行い、制御部１５０が、撮像画像データから右眼ＲＥ及び左眼ＬＥの眼球表面における反射光や瞳孔の画像を検出し、視線方向を特定する。
制御部１５０は、視線センサーにより検出される視線方向に対象物体が存在する場合、ＨＭＤ１００の動作モードを第１の動作モードに設定する。また、制御部１５０は、視線センサーにより検出される視線方向に表示画像が存在する場合、ＨＭＤ１００の動作モードを第２の動作モードに設定する。

図７及び図８は、使用者が首を左側に傾けた状態で見る視界３００を示す図である。図７は、外景内の対象物体として自動販売機３２０が見える状態を示し、図８は、画像表示部２０が表示する表示画像として、ワープロソフトウェアの表示画面３０２が見える状態を示す。
使用者は、第２操作によってポインター３０１を操作する場合、首を左肩側又は右肩側に傾ける動作を行う場合がある。このとき、表示領域３１０も使用者の首の傾きに応じて傾くが、画像表示部２０越しに見る対象物体は傾かないため、図７に示すように使用者には対象物体である自動販売機３２０が傾いて見える。
また、制御部１５０は、６軸センサー２３５の検出値に基づいて、画像表示部２０が表示する表示画像の傾きを調整する。すなわち、表示画像は、図８に示すように頭部の傾きに応じて傾いた表示となり、使用者には、表示画像が水平に見える。

制御部１５０は、動作モードが第１の動作モードであって、６軸センサー２３５の検出値により画像表示部２０の傾きを検出した場合、検出した傾きに応じて、ポインター３０１を対象物体に対して水平になるように移動させる。すなわち、第１の動作モードでは、対象物体を基準として、ポインター３０１を移動させる。図７には、対象物体である自動販売機３２０に対してポインター３０１を水平に移動させる様子を示す。
また、制御部１５０は、動作モードが第２の動作モードであって、６軸センサー２３５の検出値により画像表示部２０の傾きを検出した場合、検出した傾きに合わせてポインター３０１を移動させる。すなわち、第２の動作モードでは、表示画像を基準として、ポインター３０１を移動させる。図８には、表示画像であるワープロソフトウェアの表示画面３０２の傾きに合わせてポインター３０１を移動させる様子を示す。

図９は、第１操作によりポインター３０１をターゲットの近傍に移動させた場合に表示される表示画像を示す図である。
第１操作によりポインター３０１を操作し、ポインター３０１をターゲットの近くに移動させると、図９に示すようにポインター３０１の近くに存在するターゲットが拡大表示される。
制御部１５０は、カメラ６１が撮像する撮像画像データを取得し、取得した撮像画像データから対象物体を検出する。制御部１５０は、ポインター３０１の表示位置から予め設定された範囲内に対象物体を検出すると、この対象物体の画像を撮像画像データから抽出し、抽出した対象物体の画像を拡大して表示領域３１０に表示させる。
また、制御部１５０は、ポインター３０１の表示位置から予め設定された範囲内に対象物体を検出された場合に、対象物体の画像を拡大表示させるか否かを問い合わせる表示を表示領域３１０に表示させてもよい。制御部１５０は、例えば、対象物体の画像を拡大表示させる旨の指示をボタン１１やトラックパッド１４により受け付けた場合に、対象物体の画像を拡大して表示領域３１０に表示させる。拡大して表示された対象物体の画像を拡大画像３０３という。

使用者は、拡大画像３０３が表示された状態で、ポインター３０１がターゲットに重なるように、第２操作によりポインター３０１の位置を微調整する。使用者は、ポインター３０１がターゲットに重なると、確定操作を行う。制御部１５０は、確定操作を受け付けると、ポインター３０１の表示位置に重なるターゲットが選択されたと判定する。確定操作には、第２操作である使用者の頭部の傾きを検出してポインター３０１を移動させる操作以外の操作が用いられる。確定操作は、例えば、トラックパッド１４の操作面を叩く操作であってもよいし、ボタン１１、上下キー１５、切替スイッチ１６等の操作であってもよい。
また、ＨＭＤ１００は、無線接続した外部の装置から送信される信号を受信した場合に、確定操作を受け付けたと判定してもよい。外部の装置には、例えば、使用者の腕等の装着されるウェアラブル端末等を用いることができる。使用者は、ポインター３０１がターゲットに重なると、ウェアラブル端末により予め設定された操作を入力する。ウェアラブル端末は、予め設定された操作を受け付けると、ＨＭＤ１００に所定の信号を送信する。ＨＭＤ１００の制御部１５０は、ウェアラブル端末から所定の信号を受信した場合、確定操作を受け付けたと判定する。

図１０は、ターゲットまでの距離と、ポインター３０１の移動距離との関係を示す図である。
上述した説明では、第１操作によりポインター３０１を操作する場合と、第２操作によりポインター３０１を操作する場合とで、ポインター３０１の移動距離や、移動速度、加速度を変更した。
これ以外の動作として、ＨＭＤ１００とターゲットとの距離に応じて、ポインター３０１の移動の態様である移動距離や、移動速度、加速度を変更してもよい。例えば、図１０に示すようにターゲットがビーコン信号を送信するビーコン送信部３２１を備える場合、ＨＭＤ１００は、ターゲットから送信されるビーコン信号をビーコン受信部１１９で受信する。制御部１５０は、受信したビーコン信号の電波強度に基づき、ターゲットまでの距離を推定する。制御部１５０は、推定したターゲットまでの距離に応じて、第１又は第２操作により移動させるポインター３０１の移動距離や、移動速度、加速度を変更する。

本実施形態は、図１０に示すように、ＨＭＤ１００とターゲットとの距離が距離Ａである場合のポインター３０１の移動距離を、ターゲットとの距離が距離Ｂである場合のポインター３０１の移動距離よりも小さく設定する。距離Ａはしきい値よりも大きく、距離Ｂはしきい値よりも小さいと仮定する。
例えば、制御部１５０は、ビーコン信号の電波強度に基づいて推定した距離と、予め設定されたしきい値とを比較して、ＨＭＤ１００とターゲットとの距離がしきい値として設定された距離よりも大きいか否かを判定する。
制御部１５０は、ＨＭＤ１００とターゲットとの距離がしきい値よりも大きい（離れている）場合、第１操作であるトラックパッド１４の操作を検出し、検出した第１操作に応じてポインター３０１の位置を移動させる。また、制御部１５０は、ターゲットとの距離がしきい値よりも大きい（離れている）場合に、第１操作により移動させるポインター３０１の移動距離を第１距離とする。
また、制御部１５０は、ターゲットとの距離がしきい値以下（近い）である場合、第２操作である頭部の傾きを検出し、検出した傾きに応じてポインター３０１の位置を移動させる。また、制御部１５０は、ターゲットとの距離がしきい値以下の場合、第２操作により移動させるポインター３０１の距離を第２距離とする。
第２距離は、第１距離よりも大きい値に設定される。すなわち、ＨＭＤ１００とターゲットとの距離が近くなるほど、ポインター３０１の移動距離が大きくなるように設定する。

ＨＭＤ１００とターゲットとの間が離れている場合、使用者の視界３００内でのターゲット（自動販売機３２０や商品ボタン）のサイズは小さい。第１操作によるポインター３０１の移動距離を大きく設定すると、ポインター３０１がターゲットから大きく外れてしまう場合がある。このため、ＨＭＤ１００とターゲットとの間の距離がしきい値よりも離れている場合、ポインター３０１の移動距離を小さく設定する。また、ＨＭＤ１００とターゲットとの間が近い場合、使用者の視界３００内でのターゲットのサイズは大きい。このため、ポインター３０１の移動距離を大きく設定しても、ポインター３０１がターゲットから大きく外れる場合は少ない。このため、ＨＭＤ１００とターゲットとの間の距離がしきい値よりも近い場合、ポインター３０１の移動距離を大きく設定する。

また、ポインター３０１の移動距離を、ターゲットとＨＭＤ１００との距離に応じて連続的に変更してもよい。制御部１５０は、ビーコン信号の電波強度に基づいてターゲットまでの距離を推定し、推定した距離に応じて第１又は第２操作によりポインター３０１を移動させる移動距離を変更する。制御部１５０は、ターゲットとの距離が近くなるほど、第１又は第２操作によりポインター３０１を移動させる距離が大きくなるように設定する。
また、上述した説明とは逆に、ＨＭＤ１００とターゲットとの距離が近くなるほど、第１又は第２操作によりポインター３０１を移動させる距離を小さくなるように設定してもよい。
また、上述した説明では、ターゲットとの距離がしきい値よりも大きい場合には第１操作を選択し、ターゲットとの距離がしきい値以下の場合には第２操作を選択した。これ以外に、第１操作と第２操作とのいずれか一方の操作によりポインター３０１の位置を移動させてもよい。すなわち、ターゲットとの距離がしきい値よりも大きい場合と、しきい値以下の場合との両方において、第１操作又は第２操作のいずれか一方によりポインター３０１を操作してもよい。
また、図１０の説明では、ターゲットから送信されるビーコン信号の電波強度に基づきＨＭＤ１００との距離を推定したが、ＨＭＤ１００がカメラ６１としてステレオカメラを備える場合、このカメラ６１の撮像画像によりターゲットまでの距離を求めてもよい。

図１１は、ＨＭＤ１００の動作を示すフローチャートである。
制御部１５０は、トラックパッド１４の操作面に対する接触操作を検出したか否かを判定する（ステップＳ１）。制御部１５０は、トラックパッド１４から入力される操作信号に基づき、接触操作を検出したか否かを判定する（ステップＳ１）。制御部１５０は、接触操作を検出していない場合（ステップＳ１／ＮＯ）、接触操作を検出するまで待機し、他に実行可能な処理があればこの処理を実行する。また、制御部１５０は、接触操作を検出した場合（ステップＳ１／ＹＥＳ）、ポインター３０１を移動させる（ステップＳ２）。制御部１５０がポインター３０１を移動させる移動距離は、操作面上での使用者の手指の移動距離に対応する距離であり、移動方向は、操作面上での使用者の手指の移動方向に対応する方向である。

次に、制御部１５０は、使用者の手指等が操作面に接触しているか否かを判定する（ステップＳ３）。本実施形態は、手指等の操作面への接触が継続している間は、第１操作である操作面に対する接触操作によりポインター３０１を移動させる。また、手指等の操作面への接触が検出されなくなると、制御部１５０は、ポインター３０１の操作を、第１操作から第２操作に切り替える。制御部１５０は、第２操作では、使用者の頭部の傾きを検出し、検出した頭部の傾きに応じてポインター３０１を移動させる。
制御部１５０は、操作面への接触を検出した場合（ステップＳ３／ＹＥＳ）、ステップＳ１に戻り接触操作を検出したか否かを判定し（ステップＳ１）、検出した接触操作に応じてポインター３０１を移動させる（ステップＳ２）。

また、制御部１５０は、操作面への接触が検出できない場合（ステップＳ３／ＮＯ）、ポインター３０１の操作を第２操作に切り替える。制御部１５０は、まず、６軸センサー２３５の検出値を取得する（ステップＳ４）。
制御部１５０は、取得した６軸センサー２３５の検出値に基づき使用者の頭部の傾きが検出されたか否かを判定する（ステップＳ５）。制御部１５０は、使用者の頭部に傾きがないと判定した場合（ステップＳ５／ＮＯ）、ポインター３０１の操作を終了させる終了操作を受け付けたか否かを判定する（ステップＳ６）。制御部１５０は、終了操作を受け付けていない場合（ステップＳ６／ＮＯ）、ステップＳ４の判定に戻り、引き続き６軸センサー２３５の検出値に基づき使用者の頭部の傾きを検出する（ステップＳ５）。また、制御部１５０は、終了操作を受け付けた場合（ステップＳ６／ＹＥＳ）、この処理フローを終了する。

また、制御部１５０は、使用者の頭部に傾きがあると判定した場合（ステップＳ５／ＹＥＳ）、画像表示部２０が左又は右に傾いた状態であるか否かを判定する（ステップＳ７）。この判定では、使用者が頭部を左又は右に傾ける動きを行ったか否かが判定される。使用者の頭部が左又は右に傾くと、使用者が画像表示部２０越しに視認する外景内の対象物体が左又は右に傾いた状態で視認される。そこで、制御部１５０は、画像表示部２０が左右に傾いた状態であると判定される場合に、この画像表示部２０の傾きに対応するようにポインター３０１の移動を制御する。

制御部１５０は、画像表示部２０が左又は右に傾いた状態ではないと判定した場合（ステップＳ７／ＮＯ）、６軸センサー２３５の検出値に基づき使用者の頭部の傾きを検出し、検出した傾きに対応する方向にポインター３０１を移動させる（ステップＳ８）。
例えば、使用者の顔を上に向ける動作が検出された場合、制御部１５０は、ポインター３０１を図６に示すｚ軸の正方向である上方に移動させる。また、使用者の顔を下に向ける動作が検出された場合、制御部１５０は、ポインター３０１をｚ軸の負方向である下方に移動させる。
また、使用者の顔を左に向ける、すなわち、Ｚ軸まわりの左回転が検出された場合、制御部１５０は、ポインター３０１を図６に示すｘ軸の正方向である左方向に移動させる。また、使用者の顔を右に向ける、すなわち、Ｚ軸まわりの右回転が検出された場合、制御部１５０は、ポインター３０１を図６に示すｘ軸の負方向である右方向に移動させる。
また、制御部１５０は、対象物体を基準としてポインター３０１を移動させる場合に、磁気センサー２３７の検出値に基づき、ポインター３０１を水平に移動させてもよい。

また、制御部１５０は、画像表示部２０が左又は右に傾いた状態であると判定した場合（ステップＳ７／ＹＥＳ）、制御部１５０の動作モードが第１の動作モードであるか否かを判定する（ステップＳ９）。第１の動作モードでは、ポインター３０１を水平方向に移動させる場合に、外景に対して水平になるようにポインター３０１を移動させる。使用者の頭部が左又は右に傾いた状態では、使用者には、画像表示部２０越しに見える外景内の対象物体も傾いて見える。このため、制御部１５０は、動作モードが第１の動作モードの場合（ステップＳ９／ＹＥＳ）、ポインター３０１を、対象物体を基準にして移動させる（ステップＳ１０）。すなわち、制御部１５０は、ポインター３０１が外景内の対象物体に対して水平に移動するように表示を調整する（ステップＳ１０）。制御部１５０は、６軸センサー２３５の検出値に基づき、Ｙ軸まわりの回転角を検出して、画像表示部２０の傾きを判定する。制御部１５０は、判定した画像表示部２０の傾きに基づき、ポインター３０１が対象物体に対して水平に移動するように表示を調整する（ステップＳ１０）。

また、制御部１５０は、動作モードが第１の動作モードではなく（ステップＳ９／ＮＯ）、第２の動作モードであると判定した場合、ポインター３０１を、表示画像を基準にして移動させる（ステップＳ１１）。すなわち、制御部１５０は、ポインター３０１を、表示画像に対して水平になるように表示を調整する。制御部１５０は、ポインター３０１を移動させると、ステップＳ４に戻り６軸センサー２３５の検出値を新たに取得して、頭部の傾きを検出する（ステップＳ５）。

制御部１５０は、ステップＳ５の判定において、頭部の傾きが検出されない場合（ステップＳ５／ＮＯ）、確定操作を受け付けたか否かを判定する（ステップＳ６）。制御部１５０は、例えば、トラックパッド１４の操作面を叩く操作を受け付けた場合に、確定操作を受け付けたと判定する。制御部１５０は、確定操作を受け付けた場合、ポインター３０１と重なる位置のターゲットが選択されたと判定し、選択されたターゲットに応じた処理を実行する。制御部１５０は、ターゲットが対象物体である場合、キャリブレーションにより生成したパラメーターを取得し、取得したパラメーターに基づいて、ポインター３０１が表示された表示領域３１０の座標を、撮像画像データ上の座標に変換する。そして、制御部１５０は、変換した撮像画像データ上の座標に写った対象物体を特定し、特定した対象物体に応じた処理を実行する。例えば、ターゲットとして、自動販売機３２０の商品ボタンが選択された場合、制御部１５０は、この自動販売機３２０と無線通信を行って、選択された商品ボタンの商品を購入する処理を実行する。また、制御部１５０は、ターゲットとして表示画像が選択された場合、この表示画像に対応付けられた処理を実行する。例えば、表示画像がメニュー画面であり、ポインター３０１によりメニュー画面の項目が選択された場合、制御部１５０は、選択された項目に対応する処理を実行する。

図１２は、使用者の靴底又は靴内部に装着した検知装置の配置を示す配置図である。
上述した実施形態は、ＨＭＤ１００により第１操作及び第２操作を検出する構成であったが、外部の装置により第１操作又は第２操作を検出する構成であってもよい。図１２には、使用者の靴底又は靴内部に検知装置３３０を配置し、この検知装置３３０により第１操作又は第２操作を検出する構成を示す。検知装置３３０は、例えば、足裏に生じる圧力を検出する圧力センサーと、近距離無線通信によりＨＭＤ１００と無線通信を行って、圧力センサーが検出した検出値をＨＭＤ１００に送信する通信装置（ともに不図示）とを備える。

図１２には、右足の靴底又は靴内部であって、靴の中央部に検知装置３３０を配置した例を示す。使用者は、ポインター３０１を移動させる方向に応じて、爪先側（前側）、踵側（後側）、左側、右側のいずれかの方向に体重をかける。検知装置３３０は、前後左右の４方向のうち、圧力が最も高い方向を検出し、検出した方向を示す信号をＨＭＤ１００に送信する。ＨＭＤ１００は、検知装置３３０から送信される信号に基づいて、前後左右の４方向のうちのいずれの方向が選択されたのかを判定する。ＨＭＤ１００は、判定した方向に対応する方向にポインター３０１を移動させる。
例えば、使用者が体重を爪先側にかけた場合、制御部１５０は、ポインター３０１を図６に示すｚ軸の正方向である上方に移動させる。また、使用者が体重を踵側にかけた場合、制御部１５０は、ポインター３０１をｚ軸の負方向である下方に移動させる。また、使用者が体重を左側にかけた場合、制御部１５０は、ポインター３０１を図６に示すｘ軸の正方向である左方向に移動させる。また、使用者が体重を右側にかけた場合、制御部１５０は、ポインター３０１を図６に示すｘ軸の負方向である右方向に移動させる。また、例えば、ポインター３０１を表示領域の奥行方向（Ｙ軸方向）に移動させたい場合、前後左右の４方向に順番に体重がかかるように円運動を行う。制御部１５０は、例えば、前、右、後、左の右回転が検出された場合、ポインター３０１を図６に示すｙ軸の正方向である手前側に移動させる。また、制御部１５０は、例えば、前、左、後、右の左回転が検出された場合、ポインター３０１を図６に示すｙ軸の負方向である奥側に移動させる。

図１３は、検知装置の他の配置例を示す図である。
図１２には、靴底又は靴内部に１つの検知装置３３０を設けた例を示したが、図１３に示すように靴底又は靴内部の中央に１つの検知装置３３１を配置し、爪先側に２つの検知装置３３２、３３３を配置してもよい。検知装置３３１、３３２、３３３の構成は、図１２に示す検知装置３３０と同一であるが、検知装置３３１、３３２及び３３３は、各検知装置３３１、３３２及び３３３がそれぞれに備える圧力センサーが検出する圧力の検出値をＨＭＤ１００に送信する。
使用者が前方（爪先側）に体重をかけると、検知装置３３２及び３３３の検出値は上昇し、検知装置３３１の検出値は下降する。また、使用者が後方（踵側）に体重をかけると、検知装置３３１の検出値は上昇し、検知装置３３２及び３３３の検出値は下降する。
また、使用者が体重を左側又は右側にかけた場合、検知装置３３２の検出値と、検知装置３３３の検出値とが大きく異なる値になる。使用者が体重を左側にかけた場合、検知装置３３２の検出値が上昇し、検知装置３３３の検出値が下降する。また、使用者が体重を右側にかけた場合、検知装置３３２の検出値が下降し、検知装置３３３の検出値が上昇する。

図１４は、検知装置の他の例を示す図である。
図１４に示す検知装置の配置例は、左右の両足の靴底又は靴内部に、検知装置３３４、３３５をそれぞれ配置した例を示す。検知装置３３４、３３５の構成は、図１２に示す検知装置３３０と同一であるが、図１２に示す検知装置３３０と同様に前後左右の４方向のうち、圧力が最も高い方向を検出し、検出した方向を示す信号をＨＭＤ１００に送信する。
使用者は、例えば、ポインター３０１の表示位置に表示された表示画像を拡大表示させる操作を入力すると仮定する。この場合、使用者は、両足の爪先の内側に体重をかけ、両足の爪先を広げる動作、すなわち両足の爪先を離す動作を行う。この場合、左足の検知装置３３４は、左足の内側（右側）の圧力が高いと判定し、右側の圧力が高いことを示す信号をＨＭＤ１００に送信する。また、右足の検知装置３３５は、右足の内側（左側）の圧力が高いと判定し、左側の圧力が高いことを示す信号をＨＭＤ１００に送信する。
ＨＭＤ１００は、左足の検知装置３３４から受信した信号により、左足の右側の圧力が高いと判定し、右足の検知装置３３５から受信した信号により、右足の左側の圧力が高いと判定した場合、ピンチアウトの操作が入力されたと判定する。この場合、ＨＭＤ１００の制御部１５０は、例えば、ポインター３０１と重なる位置に表示された表示画像を拡大表示させる。本実施形態では、ピンチアウトの操作を表示画像の拡大に対応付けた例を説明したが、ポインター３０１と重なる位置に表示された表示画像を選択する選択操作や、操作を確定させる確定操作に対応付けてもよい。

使用者は、例えば、ポインター３０１の表示位置に表示された表示画像を縮小表示させる操作を入力すると仮定する。この場合、使用者は、両足の爪先の内側に体重をかけ、広げた両足の爪先を閉じる動作を行う。この場合、左足の検知装置３３４は、左足の外側（左側）の圧力が高いと判定し、左側の圧力が高いことを示す信号をＨＭＤ１００に送信する。また、右足の検知装置３３５は、右足の外側（右側）の圧力が高いと判定し、右側の圧力が高いことを示す信号をＨＭＤ１００に送信する。
ＨＭＤ１００は、左足の検知装置３３４から受信した信号により、左足の左側の圧力が高いと判定し、右足の検知装置３３５から受信した信号により、右足の右側の圧力が高いと判定した場合、ピンチインの操作が入力されたと判定する。この場合、ＨＭＤ１００の制御部１５０は、例えば、ポインター３０１と重なる位置に表示された表示画像を縮小表示させる。本実施形態では、ピンチインの操作を表示画像の拡大に対応付けた例を説明したが、ポインター３０１と重なる位置に表示された表示画像を選択する選択操作や、操作を確定させる確定操作に対応付けてもよい。

以上、詳細に説明したように本実施形態のＨＭＤ１００は、画像表示部２０と、表示制御部１５３と、トラックパッド１４と、操作制御部１４９と、６軸センサー２３５と、検出制御部１５１とを備える。
画像表示部２０は、外景を透過し、外景とともに視認できるように表示画像を表示領域３１０に表示する。表示制御部１５３は、指示位置を示すポインター３０１を画像表示部２０により表示領域３１０に表示させる。トラックパッド１４及び操作制御部１４９は、第１操作であるトラックパッド１４の操作面に対する操作を検出し、操作に対応する操作データを出力する。また、６軸センサー２３５及び検出制御部１５１は、第２操作としての使用者の頭部の傾きを検出し、検出した頭部の傾きに応じた操作データを出力する。表示制御部１５３は、検出部が検出する第１操作に応じてポインター３０１の位置を移動させる。また、表示制御部１５３は、第１操作に応じたポインター３０１の位置の移動後に、検出制御部１５１が検出する第２操作に応じて、ポインター３０１の位置を、第１操作に応じたポインター３０１の位置の移動とは異なる態様で移動させる。
従って、ポインター３０１の移動の態様が増えるため、ポインター３０１を操作する場合の操作性を向上させ、ＨＭＤ１００の使い勝手を向上させることができる。

また、６軸センサー２３５及び検出制御部１５１は、使用者の動作を第２操作として検出するが、使用者の動作を第１操作として検出することも可能である。
従って、使用者の動作によってポインター３０１の位置を移動させることができる。

また、ＨＭＤ１００は、外景を撮像するカメラ６１を備える。
表示制御部１６３は、カメラ６１の撮像画像に基づき、ポインター３０１に重なって視認される対象物体を特定する第１の動作モードを備える。また、表示制御部１６３は、表示領域３１０に表示される複数の表示画像からポインター３０１の位置に対応する表示画像を特定する第２の動作モードを備える。表示制御部１６３は、第１の動作モードと第２の動作モードとを切り替えて実行する。
従って、ポインター３０１の移動により対象物体を特定することも、表示画像を特定することもできる。

また、本発明は、表示制御部１５３は、第１の動作モードを実行中である場合と、第２の動作モードを実行中である場合とで、ポインター３０１の位置を異なる態様で移動させる。
従って、ポインター３０１により特定する対象が対象物体であるか表示画像であるかに応じてポインター３０１の位置の移動の態様を変更することができる。

また、６軸センサー２３５及び検出制御部１５１は、第２操作として使用者の頭部の傾きを検出する。表示制御部１５３は、第１の動作モードの実行中に、検出制御部１５１により頭部の傾きが検出された場合は、ポインター３０１を、使用者が視認する外景を基準として移動させる。また、表示制御部１５３は、第２の動作モードの実行中に、検出制御部１５１により頭部の傾きが検出された場合は、ポインター３０１を、使用者が視認する表示画像を基準として移動させる。
従って、第１の動作モードの実行中は、使用者が第２操作により頭部を傾けても、ポインター３０１の位置を、外景を基準として移動させることができる。また、第２の動作モードの実行中は、ポインター３０１の位置を、表示画像を基準として移動させることができる。

また、表示制御部１５３は、第２操作に応じてポインター３０１を移動させる場合の移動量を、第１操作に応じてポインター３０１を移動させる場合の移動量よりも小さくする。
従って、第２操作よりも移動量が大きい第１操作によりポインター３０１を移動させた後に、第１操作よりも移動量が小さい第２操作によりポインター３０１を移動させることができる。従って、第１操作によりポインター３０１を移動させ、その後、第２操作によりポインター３０１の位置を調整することができる。

また、ＨＭＤ１００は、ビーコン信号により対象物体までの距離を検出するビーコン受信部１１９を備える。
表示制御部１５３は、ビーコン受信部１１９が検出する対象物体までの距離に応じて、ポインター３０１を異なる態様で移動させる。
従って、ポインター３０１の操作の操作性を向上させ、ＨＭＤ１００の使い勝手を向上させることができる。

また、表示制御部１５３は、対象物体までの距離がしきい値よりも大きい場合に、操作制御部１４９が検出する操作を第１操作とし、対象物体までの距離がしきい値以下である場合に、検出制御部１５１が検出する操作を第２操作とする。
表示制御部１５３は、第１操作によりポインター３０１を移動させる移動量を、第２操作によりポインター３０１を移動させる移動量よりも小さくする。
従って、対象物体までの距離がしきい値よりも大きい場合、ポインター３０１の移動量を小さくして、第１操作によりポインター３０１の位置が大きく移動してしまうことを防止することができる。

なお、この発明は上記各実施形態の構成に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能である。
例えば、上述した実施形態では、制御装置１０が画像表示部２０と有線接続される構成を例示したが、本発明はこれに限定されず、制御装置１０に対して画像表示部２０が無線接続される構成であってもよい。この場合の無線通信方式は通信部１１７が対応する通信方式として例示した方式を採用してもよいし、その他の通信方式であってもよい。

また、制御部１５０は、ＨＭＤ１００が第１操作を検出する状態にある場合には、第１操作を検出する状態であることを示す画像やメッセージを生成し、生成した画像やメッセージを画像表示部２０により表示させる。また、制御部１５０は、ＨＭＤ１００が第２操作を検出する状態にある場合には、第２操作を検出する状態であることを示す画像やメッセージを生成し、生成した画像やメッセージを画像表示部２０により表示させる。
また、制御部１５０は、ＨＭＤ１００の動作モードが第１の動作モードである場合に、動作モードが第１の動作モードであることを示す画像やメッセージを生成し、生成した画像やメッセージを画像表示部２０により表示させる。また、制御部１５０は、ＨＭＤ１００の動作モードが第２の動作モードである場合に、動作モードが第２の動作モードであることを示す画像やメッセージを生成し、生成した画像やメッセージを画像表示部２０により表示させる。

また、制御装置１０が備える一部の機能を画像表示部２０に設けてもよく、制御装置１０を複数の装置により実現してもよい。すなわち、制御装置１０は、箱形のケース１０Ａを備える構成に限定されない。例えば、制御装置１０に代えて、使用者の身体、着衣又は、使用者が身につける装身具に取り付け可能なウェアラブルデバイスを用いてもよい。この場合のウェアラブルデバイスは、例えば、時計型の装置、指輪型の装置、レーザーポインター、マウス、エアーマウス、ゲームコントローラー、ペン型のデバイス等であってもよい。

さらに、上記各実施形態では、画像表示部２０と制御装置１０とが分離され、接続ケーブル４０を介して接続された構成を例に挙げて説明した。本発明はこれに限定されず、制御装置１０と画像表示部２０とが一体に構成され、使用者の頭部に装着される構成とすることも可能である。

また、制御装置１０として、ノート型コンピューター、タブレット型コンピューター又はデスクトップ型コンピューターを用いてもよい。また、制御装置１０として、ゲーム機や携帯型電話機やスマートフォンや携帯型メディアプレーヤーを含む携帯型電子機器、その他の専用機器等を用いてもよい。

また、上記各実施形態において、使用者が表示部を透過して外景を視認する構成は、右導光板２６及び左導光板２８が外光を透過する構成に限定されない。例えば外景を視認できない状態で画像を表示する表示装置にも適用可能である。具体的には、カメラ６１の撮像画像、この撮像画像に基づき生成される画像やＣＧ、予め記憶された映像データや外部から入力される映像データに基づく映像等を表示する表示装置に、本発明を適用できる。この種の表示装置としては、外景を視認できない、いわゆるクローズ型の表示装置を含むことができる。また、上記実施形態で説明したように実空間に重ねて画像を表示するＡＲ表示や、撮像した実空間の画像と仮想画像とを組み合わせるＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）表示といった処理を行わない表示装置に本発明を適用できる。また、仮想画像を表示するＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）表示といった処理を行わない表示装置にも本発明を適用できる。例えば、外部から入力される映像データ又はアナログ映像信号を表示する表示装置も、本発明の適用対象として勿論含まれる。

また、例えば、画像表示部２０に代えて、例えば帽子のように装着する画像表示部等の他の方式の画像表示部を採用してもよく、使用者の左眼ＬＥに対応して画像を表示する表示部と、使用者の右眼ＲＥに対応して画像を表示する表示部とを備えていればよい。また、本発明の表示装置は、例えば、自動車や飛行機等の車両に搭載されるヘッドマウントディスプレイとして構成されてもよい。また、例えば、ヘルメット等の身体防護具に内蔵されたヘッドマウントディスプレイとして構成されてもよい。この場合、使用者の身体に対する位置を位置決めする部分、及び当該部分に対し位置決めされる部分を装着部とすることができる。

また、画像光を使用者の眼に導く光学系として、右導光板２６及び左導光板２８の一部に、ハーフミラー２６１、２８１により虚像が形成される構成を例示した。本発明はこれに限定されず、右導光板２６及び左導光板２８の全面又は大部分を占める面積を有する表示領域に、画像を表示する構成としてもよい。この場合、画像の表示位置を変化させる動作において、画像を縮小する処理を含めてもよい。
さらに、本発明の光学素子は、ハーフミラー２６１、２８１を有する右導光板２６、左導光板２８に限定されず、画像光を使用者の眼に入射させる光学部品であればよく、具体的には、回折格子、プリズム、ホログラフィー表示部を用いてもよい。

また、図４、図５等に示した各機能ブロックのうち少なくとも一部は、ハードウェアで実現してもよいし、ハードウェアとソフトウェアの協働により実現される構成としてもよく、図に示した通りに独立したハードウェア資源を配置する構成に限定されない。また、制御部１５０が実行するプログラムは、不揮発性記憶部１２１又は制御装置１０内の他の記憶装置（図示略）に記憶されてもよい。また、外部の装置に記憶されたプログラムを通信部１１７や外部コネクター１８４を介して取得して実行する構成としてもよい。また、制御装置１０に形成された構成のうち、操作部１１０が使用者インターフェイス（ＵＩ）として形成されてもよい。

また、図１１に示すフローチャートの処理単位は、ＨＭＤ１００の制御部１５０の処理を理解容易にするために、主な処理内容に応じて分割したものであり、処理単位の分割の仕方や名称によって本発明が制限されることはない。また、制御部１５０の処理は、処理内容に応じて、さらに多くの処理単位に分割することもできるし、１つの処理単位がさらに多くの処理を含むように分割することもできる。また、上記のフローチャートの処理順序も、図示した例に限られるものではない。

１…システム、１０…制御装置、１０Ａ…ケース、１１…ボタン、１２、６７…ＬＥＤインジケーター、１４…トラックパッド、１５…上下キー、１６…切替スイッチ、１７…ＬＥＤ表示部、１８…電源スイッチ、１９…バイブレーター、２０…画像表示部(表示部)、２１…右保持部、２２…右表示ユニット、２３…左保持部、２４…左表示ユニット、２６…右導光板、２７…前部フレーム、２８…左導光板、３０…ヘッドセット、３２…右イヤホン、３４…左イヤホン、４０…接続ケーブル、４６…コネクター、６１…カメラ（撮像部）、６３…マイク、６５…照度センサー、１００…ＨＭＤ（受信装置、表示装置）、１１０…操作部、１１１…６軸センサー、１１３…磁気センサー、１１５…ＧＰＳ受信部、１１７…通信部、１１９…ビーコン受信部（距離検出部）、１２０…コントローラー基板、１２１…不揮発性記憶部、１２３…メモリー、１２５…記憶部、１２７…設定データ、１２８…コンテンツデータ、１３０…電源部、１３２…バッテリー、１３４…電源制御回路、１４０…メインプロセッサー、１４３…オペレーティングシステム、１４５…画像処理部、１４７…撮像制御部、１４９…操作制御部（検出部）、１５０…制御部、１５１…検出制御部（検出部）、１５３…表示制御部、１８０…音声コーデック、１８２…音声インターフェイス、１８４…外部コネクター、１８６…外部メモリーインターフェイス、１８８…ＵＳＢコネクター、１９２…センサーハブ、１９４…ＦＰＧＡ、１９６…インターフェイス、２００…ビーコン装置、２１１…インターフェイス、２１３…受信部、２１５…ＥＥＰＲＯＭ、２１７…温度センサー、２２１…ＯＬＥＤユニット、２２３…ＯＬＥＤパネル、２２５…ＯＬＥＤ駆動回路、２３１…インターフェイス、２３３…受信部、２３５…６軸センサー（検出部）、２３７…磁気センサー、２３９…温度センサー、２４１…ＯＬＥＤユニット、２４３…ＯＬＥＤパネル、２４５…ＯＬＥＤ駆動回路、２５１…右光学系、２５２…左光学系、２６１、２８１…ハーフミラー、３００…視界、３０１…ポインター、３０３…拡大画像、３１０…表示領域、３２０…自動販売機、３３０〜３３５…検知装置。

Claims (7)

1. 使用者の頭部に装着され、表示画像を外景とともに視認可能に表示領域に表示する表示部と、
   指示位置を示すマーカーを前記表示部により前記表示領域に表示させる表示制御部と、
   操作を検出する検出部と、
   前記外景を撮像する撮像部と、
   前記表示部の傾きを検出する傾き検出部と、を備え、
   前記表示制御部は、
   前記撮像部の撮像画像に基づき、前記マーカーに重なって視認される対象物体を特定する第１の動作モードと、前記表示領域に表示される複数の前記表示画像から前記マーカーの位置に対応する前記表示画像を特定する第２の動作モードと、を切り替えて実行し、
   前記第１の動作モードを実行しているときに前記検出部により第１操作又は前記第１操作とは異なる第２操作が検出されると、検出された前記第１操作又は前記第２操作の検出時間に応じて、前記対象物体を基準として前記マーカーを移動させ、
   前記第２の動作モードを実行しているときに前記検出部により前記第１操作又は前記第２操作が検出されると、検出された前記第１操作又は前記第２操作の検出時間に応じて、前記表示部の前記表示領域の傾きに合わせて前記マーカーを移動させ、
   前記第１操作及び前記第２操作の検出時間に対応する前記マーカーの移動量は、前記第２操作よりも前記第１操作が大きい頭部装着型表示装置。
2. 前記表示制御部は、前記第１の動作モードの実行中に、前記検出部により前記第１操作又は前記第２操作が検出された場合、前記表示部が表示する前記表示画像の傾きによらず、前記マーカーを水平に移動させ、
   前記第２の動作モードを実行中に、前記検出部により前記第１操作又は前記第２操作が検出された場合、前記表示部が表示する前記表示画像の傾きに合わせて前記マーカーを移動させる請求項１記載の頭部装着型表示装置。
3. 前記使用者が前記表示部を透過して視認する対象物体までの距離を検出する距離検出部を備え、
   前記表示制御部は、前記距離検出部が検出する前記対象物体までの距離がしきい値よりも大きい場合に、前記検出部が検出した操作を前記第１操作と判定し、前記距離検出部が検出する前記対象物体までの距離がしきい値以下である場合に、前記検出部が検出した操作を前記第２操作と判定する請求項１又は２に記載の頭部装着型表示装置。
4. 前記検出部は、前記使用者の動作を前記第１操作又は前記第２操作として検出する請求項１から３のいずれか一項に記載の頭部装着型表示装置。
5. 前記使用者の操作を受け付ける操作部を備え、
   前記検出部は、前記操作部が受け付けた操作を前記第１操作として検出し、前記使用者の前記頭部の動きを前記第２操作として検出する請求項１から３のいずれか一項に記載の頭部装着型表示装置。
6. 使用者の頭部に装着され、表示画像を外景とともに視認可能に表示領域に表示する表示部と、指示位置を示すマーカーを前記表示部により前記表示領域に表示させる表示制御部と、操作を検出する検出部と、前記外景を撮像する撮像部と、前記表示部の傾きを検出する傾き検出部と、を備える頭部装着型表示装置に実装されるコンピューターに実行させるプログラムであって、
   コンピューターに、
   前記撮像部の撮像画像に基づき、前記マーカーに重なって視認される対象物体を特定する第１の動作モードと、前記表示領域に表示される複数の前記表示画像から前記マーカーの位置に対応する前記表示画像を特定する第２の動作モードと、を切り替えて実行させ、
   前記第１の動作モードを実行しているときに前記検出部により第１操作又は前記第１操作とは異なる第２操作が検出されると、検出された前記第１操作又は前記第２操作の検出時間に応じて、前記対象物体を基準として前記マーカーを移動させ、
   前記第２の動作モードを実行しているときに前記検出部により前記第１操作又は前記第２操作が検出されると、検出された前記第１操作又は前記第２操作の検出時間に応じて、前記表示部の前記表示領域の傾きに合わせて前記マーカーを移動させ、
   前記第１操作及び前記第２操作の検出時間に対応する前記マーカーの移動量は、前記第２操作よりも前記第１操作が大きいプログラム。
7. 使用者の頭部に装着され、表示画像を外景とともに視認可能に表示領域に表示する表示部と、指示位置を示すマーカーを前記表示部により前記表示領域に表示させる表示制御部と、操作を検出する検出部と、前記外景を撮像する撮像部と、前記表示部の傾きを検出する傾き検出部と、を備える頭部装着型表示装置の制御方法であって、
   前記撮像部の撮像画像に基づき、前記マーカーに重なって視認される対象物体を特定する第１の動作モードと、前記表示領域に表示される複数の前記表示画像から前記マーカーの位置に対応する前記表示画像を特定する第２の動作モードと、を切り替えて実行し、
   前記第１の動作モードを実行しているときに前記検出部により第１操作又は前記第１操作とは異なる第２操作が検出されると、検出された前記第１操作又は前記第２操作の検出時間に応じて、前記対象物体を基準として前記マーカーを移動させ、
   前記第２の動作モードを実行しているときに前記検出部により前記第１操作又は前記第２操作が検出されると、検出された前記第１操作又は前記第２操作の検出時間に応じて、前記表示部の前記表示領域の傾きに合わせて前記マーカーを移動させ、
   前記第１操作及び前記第２操作の検出時間に対応する前記マーカーの移動量は、前記第２操作よりも前記第１操作が大きい頭部装着型表示装置の制御方法。
   

Images