JP6565202B2 - 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム - Google Patents

Description

本発明は、透過型の頭部装着型表示装置に関する。

従来、使用者の眼前で画像を表示することのできる頭部装着型表示装置が、種々、提案されている。これらの頭部装着型表示装置の一つとして、特許文献１に示すように、位置を調整可能に設けられ、使用者の音声を集音するマイク部を備えたものがある。この頭部装着型表示装置では、マイク部を用いた通話動作を、マイク部の調整位置に応じてオンオフ切り替えることができることから、操作性が向上される。

特開２０１２−１９１６２４号公報

しかしながら、前記従来の頭部装着型表示装置では、通話動作の切り替えの操作性を向上できるだけで、頭部装着型表示装置の主要な動作についての操作性の向上に関しては、十分な工夫がなされていないのが実情であった。そのほか、従来の頭部装着型表示装置においては、セキュリティの向上、省電力化、装置構成のコンパクト化、低コスト化、省資源化、製造の容易化等が望まれていた。

本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の
形態として実現することが可能である。
［形態１］
本開示の一形態によれば、画像を表示する画像表示部を備える頭部装着型表示装置が提供される。この形態の頭部装着型表示装置は、音声を電気信号に変換する音声入力部を有し、前記音声入力部の位置を複数のポジションの間で切り換え可能なマイク部と、前記音声入力部が前記複数のポジションのうちのいずれのポジションに位置するかを判定するポジション判定部と、前記判定されたポジションに基づいて、前記音声入力部の動作、および前記画像表示部による表示態様を、前記音声入力部の動作と前記画像表示部による表示態様との組み合わせであって予め記憶された２以上の組み合わせのうちのいずれかに切り替えるモード切替制御部と、を備える。

（１）本発明の一形態は、画像を表示する画像表示部を備える頭部装着型表示装置である。この頭部装着型表示装置は、音声を電気信号に変換する音声入力部を有し、前記音声入力部の位置を複数のポジションの間で切り換え可能なマイク部と、前記音声入力部が前記複数のポジションのうちのいずれのポジションに位置するかを判定するポジション判定部と、前記判定されたポジションに基づいて、前記音声入力部の動作、および前記画像表示部による表示態様をそれぞれ切り替えるモード切替制御部と、を備える。この形態の頭部装着型表示装置によれば、音声入力部のポジションに応じて、音声入力部の動作、および画像表示部による表示態様が切り替わる。このために、音声入力部を用いた動作だけでなく、頭部装着型表示装置の主要な動作である画像表示部による表示態様も切り替えることができる。したがって、操作性を向上することができるという効果を奏する。

（２）前記形態の頭部装着型表示装置において、前記画像表示部は、外景を透過し得る構成であってもよい。この構成によれば、透過型の部装着型表示装置において、操作性を向上することができる。

（３）前記形態の頭部装着型表示装置において、音声を出力する音声出力部を備え、前記モード切替制御部は、前記判定されたポジションに基づいて、さらに前記音声出力部の動作を切り替えるようにしてもよい。この形態の頭部装着型表示装置によれば、音声入力部のポジションに応じて、音声出力部の動作も切り替わる。したがって、操作性をより向上することができる。

（４）前記形態の頭部装着型表示装置において、前記モード切替制御部は、前記判定されたポジションが、前記複数のポジションの中で使用者の口に一番近いポジションであるときに、前記音声入力部および前記音声出力部をそれぞれ動作状態として外部との通話を可能とする通話モードへの切り替えを行うようにしてもよい。この形態の頭部装着型表示装置によれば、通話モードへの切り替えの操作性を向上することができる。

（５）前記形態の頭部装着型表示装置において、外景の少なくとも一部を撮影するカメラを備え、前記モード切替制御部は、前記通話モードの際の前記画像表示部による表示態様の切り替えとして、前記カメラを用いた撮影のための画面に表示を切り替えるようにしてもよい。この形態の頭部装着型表示装置によれば、通話モードの最中に、簡単な操作で撮影が可能となることから、操作性をより向上することができる。

（６）前記形態の頭部装着型表示装置において、前記モード切替制御部は、前記判定されたポジションが、前記複数のポジションの中で使用者の口から一番遠いポジションであるときに、前記音声出力部を動作状態とし、前記画像表示部に所定の画像を表示するモードへの切り替えを行うようにしてもよい。この形態の頭部装着型表示装置によれば、簡単な操作で画像の閲覧が可能となることから、操作性をより向上することができる。

（７）前記形態の頭部装着型表示装置において、前記モード切替制御部は、前記判定されたポジションが、前記複数のポジションの中の使用者の口に一番近いポジションと前記使用者の口から一番遠いポジションとの間の所定のポジションであるときに、前記音声入力部を動作状態にし、前記音声入力部で取得された音声に応じた操作項目を命令するためのメニュー画面を表示するメニューモードへの切り替えを行うようにしてもよい。この形態の頭部装着型表示装置によれば、簡単な操作でメニュー画面を表示することが可能となることから、操作性をより向上することができる。

（８）前記形態の頭部装着型表示装置において、前記ポジション判定部によって判定されたポジションが、所定のポジションであるときに、前記音声入力部を動作状態にし、前記音声入力部で取得された音声に応じた操作項目を命令するためのメニュー画面を表示するメニューモードへの切り替えを行うようにしてもよい。この形態の頭部装着型表示装置によれば、簡単な操作でメニュー画面を表示することが可能となることから、操作性をより向上することができる。

上述した本発明の各形態の有する複数の構成要素はすべてが必須のものではなく、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、適宜、前記複数の構成要素の一部の構成要素について、その変更、削除、新たな他の構成要素との差し替え、限定内容の一部削除を行なうことが可能である。また、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、上述した本発明の一形態に含まれる技術的特徴の一部または全部を上述した本発明の他の形態に含まれる技術的特徴の一部または全部と組み合わせて、本発明の独立した一形態とすることも可能である。

例えば、本発明の一形態は、画像表示部と、マイク部と、ポジション判定部と、モード切替制御部と、の４つの要素の内の一つ以上の要素を備えた装置として実現可能である。すなわち、この装置は、画像表示部を有していてもよく、有していなくてもよい。また、装置は、マイク部を有していてもよく、有していなくてもよい。また、装置は、ポジション判定部を有していてもよく、有していなくてもよい。また、装置は、モード切替制御部を有していてもよく、有していなくてもよい。表示部は、例えば、画像を表示するものとしてもよい。マイク部は、例えば、音声を電気信号に変換する音声入力部を有し、音声入力部の位置を複数のポジションの間で切り換え可能なようにしてもよい。ポジション判定部は、例えば、音声入力部が複数のポジションのうちのいずれのポジションに位置するかを判定するようにしてもよい。モード切替制御部は、例えば、前記判定されたポジションに基づいて、音声入力部の動作、および画像表示部による表示態様をそれぞれ切り替えるようにしてもよい。こうした装置は、例えば、頭部装着型表示装置として実現できるが、頭部装着型表示装置以外の他の装置としても実現可能である。このような形態によれば、使用者の操作性の向上や、検出精度の向上、装置構成のコンパクト化、低コスト化、省資源化、製造の容易化等の種々の課題の少なくとも１つを解決することができる。前述した頭部装着型表示装置の各形態の技術的特徴の一部または全部は、いずれもこの装置に適用することが可能である。

本発明は、頭部装着型表示装置以外の種々の形態で実現することも可能である。例えば、表示装置、頭部装着型表示装置の制御方法、表示装置の制御方法、頭部装着型表示システム、表示システム、頭部装着型表示システムの機能を実現するためのコンピュータープログラム、そのコンピュータープログラムを記録した記録媒体、表示システムの機能を実現するためのコンピュータープログラム、そのコンピュータープログラムを記録した記録媒体等の形態で実現できる。

本発明の第１実施形態における頭部装着型表示装置の概略構成を示す説明図である。 ＨＭＤの構成を機能的に示すブロック図である。 ＨＭＤによる拡張現実表示の一例を示す説明図である。 マイクロフォンの回動の様子を示す説明図である。 モード切替処理の手順を示すフローチャートである。 通話モードによるカメラ撮影画面の一例を示す説明図である。 メニューモードによるメニュー画面の一例を示す説明図である。 発話モードによるマイクマークの一例を示す説明図である。 視聴モードによる映像再生画面の一例を示す説明図である。 ワイヤレスイヤホンマイクを示す説明図である。 変形例におけるＨＭＤの外観の構成を示す説明図である。

Ａ．第１実施形態：
Ａ−１．頭部装着型表示装置の基本構成：
図１は、本発明の第１実施形態における頭部装着型表示装置の概略構成を示す説明図である。頭部装着型表示装置１００は、頭部に装着する表示装置であり、ヘッドマウントディスプレイ（Head Mounted Display、ＨＭＤ）とも呼ばれる。ＨＭＤ１００は、グラスを通過して視認される外界の中に画像が浮かび上がる透過型の頭部装着型表示装置である。

ＨＭＤ１００は、使用者の頭部に装着可能はヘッドフォン部９０と、使用者の頭部に装着された状態において使用者に虚像を視認させる画像表示部２０と、使用者の頭部に装着された状態において使用者の音声を取得するマイク部３０と、画像表示部２０、マイク部３０、およびヘッドフォン部９０を制御する制御部（コントローラー）１０と、を備えている。

ヘッドフォン部９０は、頭部に沿って装着可能なように湾曲したヘッドバンド９１と、ヘッドバンド９１の両端に設けられた右左のイヤーカップ９２，９３とを備える。右側のイヤーカップ９２の内部には音響の右チャンネル用のスピーカー９４(図２）が設けられており、左側のイヤーカップ９３の内部には音響の左チャンネル用のスピーカー９５が設けられている。ヘッドバンド９１には、画像表示部２０が固定した形で取り付けられている。

画像表示部２０は、使用者の頭部に装着される装着体であり、本実施形態では眼鏡形状を有している。画像表示部２０は、右保持部２１と、右表示駆動部２２と、左保持部２３と、左表示駆動部２４と、右光学像表示部２６と、左光学像表示部２８と、を含んでいる。右光学像表示部２６および左光学像表示部２８は、それぞれ、使用者がヘッドバンド９１を装着した際に使用者の右および左の眼前に位置する。右光学像表示部２６の一端と左光学像表示部２８の一端とは、使用者が画像表示部２０を装着した際の使用者の眉間に対応する位置で、互いに接続されている。

右保持部２１は、右光学像表示部２６の他端である端部ＥＲから略水平方向に延び、ヘッドバンド９１の右側の端部付近に固定されている。同様に、左保持部２３は、左光学像表示部２８の他端である端部ＥＬから略水平方向に延び、ヘッドバンド９１の左側の端部付近に固定されている。右保持部２１および左保持部２３は、ヘッドバンド９１を頭部に装着した使用者の眼前に光学像表示部２６，２８が位置するよう、光学像表示部２６，２８を保持する。

右表示駆動部２２は、右保持部２１の内側、換言すれば、使用者が画像表示部２０を装着した際の使用者の頭部に対向する側に配置されている。また、左表示駆動部２４は、左保持部２３の内側に配置されている。なお、以降では、右保持部２１および左保持部２３を区別せず「保持部」として説明する。同様に、右表示駆動部２２および左表示駆動部２４を区別せず「表示駆動部」として説明し、右光学像表示部２６および左光学像表示部２８を区別せず「光学像表示部」として説明する。

表示駆動部は、液晶ディスプレイ（Liquid Crystal Display、以下「ＬＣＤ」と呼ぶ）２４１、２４２や投写光学系２５１、２５２等を含む（図２参照）。表示駆動部の構成の詳細は後述する。光学部材としての光学像表示部は、導光板２６１、２６２（図２参照）と調光板とを含んでいる。導光板２６１、２６２は、光透過性の樹脂材料等によって形成され、表示駆動部から出力された画像光を使用者の眼に導く。調光板は、薄板状の光学素子であり、画像表示部２０の表側（使用者の眼の側とは反対の側）を覆うように配置されている。調光板は、導光板２６１、２６２を保護し、導光板２６１、２６２の損傷や汚れの付着等を抑制する。また、調光板の光透過率を調整することによって、使用者の眼に入る外光量を調整して虚像の視認のしやすさを調整することができる。なお、調光板は省略可能である。

マイク部３０は、マイクロフォン３１と、アーム３２と、連結部３３と、を有する。マイクロフォン３１は、音声を電気信号に変換する音声入力部であり、アーム３２の先端に接続されている。アーム３２のマイクロフォン３１とは反対側の端部は、連結部３３によって、画像表示部２０の右イヤーカップ９２の上面９２ａに連結されている。連結されることで、マイクロフォン３１は、使用者の口の前に位置する。なお、連結部３３は、アーム３２を回動可能に、かつ任意のポジションに固定可能に連結するが、詳細については後述する。

画像表示部２０、マイク部３０、およびヘッドフォン部９０の一体物と、制御部１０との間は、接続コード４０によって接続される。接続コード４０の一端は、ヘッドフォン部９０の右イヤーカップ９２内に挿入され、必要に応じて分岐され、画像表示部２０の左右の表示駆動部２２，２４、左右のスピーカー９４，９５や、マイク部３０のマイクロフォン３１に接続されている。接続コード４０の他端は、制御部１０に接続されている。接続コード４０における右イヤーカップ９２と反対側の端部と、制御部１０とのそれぞれには、互いに嵌合するコネクター（図示省略）が設けられており、接続コード４０のコネクターと制御部１０のコネクターとの嵌合／嵌合解除により、上記の一体物と制御部１０との間が接続されたり切り離されたりする。接続コード４０には、例えば、金属ケーブルや光ファイバーを採用することができる。

制御部１０は、ＨＭＤ１００を制御するための装置である。制御部１０は、点灯部１２と、タッチパッド１４と、十字キー１６と、電源スイッチ１８とを含んでいる。点灯部１２は、ＨＭＤ１００の動作状態（例えば、電源のＯＮ／ＯＦＦ等）を、その発光態様によって通知する。点灯部１２としては、例えば、ＬＥＤ（Light Emitting Diode）を用いることができる。タッチパッド１４は、タッチパッド１４の操作面上での接触操作を検出して、検出内容に応じた信号を出力する。タッチパッド１４としては、静電式や圧力検出式、光学式といった種々のタッチパッドを採用することができる。十字キー１６は、上下左右方向に対応するキーへの押下操作を検出して、検出内容に応じた信号を出力する。電源スイッチ１８は、スイッチのスライド操作を検出することで、ＨＭＤ１００の電源の状態を切り替える。

図２は、ＨＭＤ１００の構成を機能的に示すブロック図である。制御部１０は、入力情報取得部１１０と、記憶部１２０と、電源１３０と、無線通信部１３２と、ＧＰＳモジュール１３４と、ＣＰＵ１４０と、インターフェイス１８０と、送信部（Ｔｘ）５１および５２とを備え、各部は図示しないバスにより相互に接続されている。

入力情報取得部１１０は、例えば、タッチパッド１４や十字キー１６、電源スイッチ１８などに対する操作入力に応じた信号を取得する。記憶部１２０は、ＲＯＭ、ＲＡＭ、ＤＲＡＭ、ハードディスク等によって構成されている。

電源１３０は、ＨＭＤ１００の各部に電力を供給する。電源１３０としては、例えば、リチウムポリマーバッテリー、リチウムイオンバッテリーなどの二次電池を用いることができる。さらに、二次電池に替えて、一次電池や燃料電池でもよいし、無線給電を受けて動作するようにしてもよい。さらには、太陽電池とキャパシターから給電を受けるようにしてもよい。無線通信部１３２は、無線ＬＡＮやＢｌｕｅｔｏｏｔｈ（登録商標）、ｉＢｅａｃｏｎ（登録商標）といった所定の無線通信規格に則って、他の機器との間で無線通信を行う。ＧＰＳモジュール１３４は、ＧＰＳ衛星からの信号を受信することにより、自身の現在位置を検出する。

ＣＰＵ１４０は、記憶部１２０に格納されているコンピュータープログラムを読み出して実行することにより、オペレーティングシステム（ОＳ）１５０、画像処理部１６０、表示制御部１６２、ポジション判定部１６４、モード切替制御部１６６、および音声処理部１７０として機能する。

画像処理部１６０は、インターフェイス１８０や無線通信部１３２を介して入力されるコンテンツ（映像）に基づいて信号を生成する。そして、画像処理部１６０は、生成した信号を、接続コード４０を介して画像表示部２０に供給することで、画像表示部２０を制御する。画像表示部２０に供給するための信号は、アナログ形式とディジタル形式の場合で異なる。アナログ形式の場合、画像処理部１６０は、クロック信号ＰＣＬＫと、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃと、画像データＤａｔａとを生成し、送信する。具体的には、画像処理部１６０は、コンテンツに含まれる画像信号を取得する。取得した画像信号は、例えば動画像の場合、一般的に１秒あたり３０枚のフレーム画像から構成されているアナログ信号である。画像処理部１６０は、取得した画像信号から垂直同期信号ＶＳｙｎｃや水平同期信号ＨＳｙｎｃ等の同期信号を分離し、それらの周期に応じて、ＰＬＬ回路等によりクロック信号ＰＣＬＫを生成する。画像処理部１６０は、同期信号が分離されたアナログ画像信号を、Ａ／Ｄ変換回路等を用いてディジタル画像信号に変換する。画像処理部１６０は、変換後のディジタル画像信号を、ＲＧＢデータの画像データＤａｔａとして、１フレームごとに記憶部１２０内のＤＲＡＭに格納する。

一方、ディジタル形式の場合、画像処理部１６０は、クロック信号ＰＣＬＫと、画像データＤａｔａとを生成し、送信する。具体的には、コンテンツがディジタル形式の場合、クロック信号ＰＣＬＫが画像信号に同期して出力されるため、垂直同期信号ＶＳｙｎｃおよび水平同期信号ＨＳｙｎｃの生成と、アナログ画像信号のＡ／Ｄ変換とが不要となる。なお、画像処理部１６０は、記憶部１２０に格納された画像データＤａｔａに対して、解像度変換処理や、輝度、彩度の調整といった種々の色調補正処理や、キーストーン補正処理等の画像処理を実行してもよい。

画像処理部１６０は、生成されたクロック信号ＰＣＬＫ、垂直同期信号ＶＳｙｎｃ、水平同期信号ＨＳｙｎｃと、記憶部１２０内のＤＲＡＭに格納された画像データＤａｔａとを、送信部５１，５２を介してそれぞれ送信する。なお、送信部５１を介して送信される画像データＤａｔａを「右眼用画像データＤａｔａ１」とも呼び、送信部５２を介して送信される画像データＤａｔａを「左眼用画像データＤａｔａ２」とも呼ぶ。送信部５１、５２は、制御部１０と画像表示部２０との間におけるシリアル伝送のためのトランシーバーとして機能する。

表示制御部１６２は、右表示駆動部２２および左表示駆動部２４を制御する制御信号を生成する。具体的には、表示制御部１６２は、制御信号により、右ＬＣＤ制御部２１１による右ＬＣＤ２４１の駆動ＯＮ／ＯＦＦや、右バックライト制御部２０１による右バックライト２２１の駆動ＯＮ／ＯＦＦ、左ＬＣＤ制御部２１２による左ＬＣＤ２４２の駆動ＯＮ／ＯＦＦや、左バックライト制御部２０２による左バックライト２２２の駆動ＯＮ／ＯＦＦなどを個別に制御することにより、右表示駆動部２２および左表示駆動部２４のそれぞれによる画像光の生成および射出を制御する。表示制御部１６２は、右ＬＣＤ制御部２１１と左ＬＣＤ制御部２１２とに対する制御信号を、送信部５１および５２を介してそれぞれ送信する。同様に、表示制御部１６２は、右バックライト制御部２０１と左バックライト制御部２０２とに対する制御信号を、それぞれ送信する。

ポジション判定部１６４は、後述するポジションセンサー３５と協働して、マイク部３０のマイクロフォン３１がいずれのポジションに位置するかを判定する。モード切替制御部１６６は、前記判定されたポジションに基づいて、マイクロフォン３１の動作、および画像表示部２０による表示態様をそれぞれ切り替える。ポジション判定部１６４およびモード切替制御部１６６の構成については、後ほど詳述する。

音声処理部１７０は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、連結部材４６に接続された右イヤーカップ９２内のスピーカー９４および左イヤーカップ９３内のスピーカー９５に対して供給する。なお、例えば、Ｄｏｌｂｙ（登録商標）システムを採用した場合、音声信号に対する処理がなされ、右左のスピーカー９４，９５からは、それぞれ、例えば周波数等が変えられた異なる音が出力される。

インターフェイス１８０は、制御部１０に対して、コンテンツの供給元となる種々の外部機器ＯＡを接続するためのインターフェイスである。外部機器ОＡとしては、例えば、パーソナルコンピューターＰＣや携帯電話端末ＰＨ、ゲーム端末ＧＭ等がある。インターフェイス１８０としては、例えば、ＵＳＢインターフェイスや、マイクロＵＳＢインターフェイス、メモリーカード用インターフェイス等を用いることができる。

画像表示部２０は、右表示駆動部２２と、左表示駆動部２４と、右光学像表示部２６としての右導光板２６１と、左光学像表示部２８としての左導光板２６２と、カメラ６１（図１も参照）と、９軸センサー６６と、を備えている。

カメラ６１は、ＲＧＢカメラであり、使用者が画像表示部２０を装着した際の使用者の鼻根部に対応する位置に配置されている。そのため、カメラ６１は、ＨＭＤ１００の所定の向き、すなわち、使用者が画像表示部２０を頭部に装着した状態において使用者が向いている方向の外界をカラー撮像する。なお、カメラ６１は、ＲＧＢカメラに換えて、白黒カメラとすることができる。

９軸センサー６６は、加速度（３軸）、角速度（３軸）、地磁気（３軸）を検出するモーションセンサーであり、本実施形態では使用者の眉間に対応する位置に配置されている。９軸センサー６６は、画像表示部２０に設けられているため、画像表示部２０が使用者の頭部に装着されているときには、使用者の頭部の動きを検出する。検出された頭部の動きから画像表示部２０の向き、すなわち、使用者の視界が特定される。

右表示駆動部２２は、受信部（Ｒｘ）５３と、光源として機能する右バックライト（ＢＬ）制御部２０１および右バックライト（ＢＬ）２２１と、表示素子として機能する右ＬＣＤ制御部２１１および右ＬＣＤ２４１と、右投写光学系２５１とを含んでいる。なお、右バックライト制御部２０１と、右ＬＣＤ制御部２１１と、右バックライト２２１と、右ＬＣＤ２４１とを総称して「画像光生成部」とも呼ぶ。

受信部５３は、制御部１０と画像表示部２０との間におけるシリアル伝送のためのレシーバーとして機能する。右バックライト制御部２０１は、入力された制御信号に基づいて、右バックライト２２１を駆動する。右バックライト２２１は、例えば、ＬＥＤやエレクトロルミネセンス（ＥＬ）等の発光体である。右ＬＣＤ制御部２１１は、受信部５３を介して入力されたクロック信号ＰＣＬＫと、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃと、右眼用画像データＤａｔａ１とに基づいて、右ＬＣＤ２４１を駆動する。右ＬＣＤ２４１は、複数の画素をマトリクス状に配置した透過型液晶パネルである。右ＬＣＤ２４１は、マトリクス状に配置された各画素位置の液晶を駆動することによって、右ＬＣＤ２４１を透過する光の透過率を変化させることにより、右バックライト２２１から照射される照明光を、画像を表す有効な画像光へと変調する。

右投写光学系２５１は、右ＬＣＤ２４１から射出された画像光を並行状態の光束にするコリメートレンズによって構成される。右光学像表示部２６としての右導光板２６１は、右投写光学系２５１から出力された画像光を、所定の光路に沿って反射させつつ使用者の右眼ＲＥに導く。光学像表示部は、画像光を用いて使用者の眼前に虚像を形成する限りにおいて任意の方式を用いることができ、例えば、回折格子を用いてもよいし、半透過反射膜を用いてもよい。なお、ＨＭＤ１００が画像光を出射することを、本明細書では「画像を表示する」とも呼ぶ。

左表示駆動部２４は、右表示駆動部２２と同様の構成を有している。すなわち、左表示駆動部２４は、受信部（Ｒｘ）５４と、光源として機能する左バックライト（ＢＬ）制御部２０２および左バックライト（ＢＬ）２２２と、表示素子として機能する左ＬＣＤ制御部２１２および左ＬＣＤ２４２と、左投写光学系２５２とを含んでいる。右ＬＣＤ２４１と同様に、左ＬＣＤ２４２は、マトリクス状に配置された各画素位置の液晶を駆動することによって、左ＬＣＤ２４２を透過する光の透過率を変化させることにより、左バックライト２２２から照射される照明光を、画像を表す有効な画像光へと変調する。なお、本実施形態ではバックライト方式を採用することとしたが、フロントライト方式や、反射方式を用いて画像光を射出してもよい。

また、制御部１０は、マイクロフォン３１から出力される音声信号や、後述するポジションセンサー３５から出力されるポジション信号などを受信し、これら信号に応じた各種の処理を実行する。ポジションセンサー３５からのポジション信号は、制御部１０内のポジション判定部１６４に送られる。

図３は、ＨＭＤ１００による拡張現実表示の一例を示す説明図である。図３では、使用者の視界ＶＲを例示している。上述のようにして、ＨＭＤ１００の使用者の両眼に導かれた画像光が使用者の網膜に結像することにより、使用者は拡張現実（ＡＲ）としての画像ＶＩを視認する。図３の例では、画像ＶＩは、ＨＭＤ１００のＯＳの待ち受け画面である。また、光学像表示部２６，２８が外界ＳＣからの光を透過することで、使用者は外界ＳＣを視認する。このように、本実施形態のＨＭＤの使用者は、視界ＶＲのうち画像ＶＩが表示された部分については、画像ＶＩと、画像ＶＩの背後に外界ＳＣと、を見ることができる。また、視界ＶＲ１のうち画像ＶＩが表示されていない部分については、外界ＳＣだけを見ることができる。

Ａ−２．マイクロフォンの回動：
図４は、マイクロフォン３１の回動の様子を示す説明図である。図示は、画像表示部２０とマイクロフォン３１の軌跡とを右側から見た図である。アーム３２（図１）が連結部３３周りを回動されることで、マイクロフォン３１は、連結部３３を中心とする円軌道ＣＯ上を段階的に移動することが可能となる。本実施形態では、マイクロフォン３１は、円軌道ＣＯ上における４つのポジション、すなわち、第１〜第４のポジションＰ１，Ｐ２，Ｐ３，Ｐ４に移動することが可能となっている。この移動は、使用者による手動によるものであるが、各ポジションＰ１〜Ｐ３には止まりやすく、各ポジションＰ１〜Ｐ３の中間位置には止まりにくいように、機械的な工夫がなされている。なお、ここで言う「ポジション」は、ＨＭＤ１００は使用者と共に移動することから、絶対的な位置ではなく、ＨＭＤ１００の所定の位置（例えば、画像表示部２０）に対する相対的な位置である。

第１のポジションＰ１は、使用者の口の前方の位置であり、第１〜第４のポジションＰ１〜Ｐ４の中では口から一番近い位置である。第３のポジションＰ３は、使用者の鼻よりも少しだけ上の位置である。第２のポジションＰ２は、第１のポジションＰ１と第３のポジションＰ３との中間の位置である。第４のポジションＰ４は、使用者の額の前方の位置であり、第１〜第４のポジションＰ１〜Ｐ４の中では口から一番遠い位置である。

図１、図２に示すように、連結部３３の付近にポジションセンサー３５が設けられており、ポジションセンサー３５から出力されるポジション信号に基づいて、制御部１０のポジション判定部１６４（図２）は、マイクロフォン３１が第１〜第４のポジションＰ１〜Ｐ４のいずれにあるかを判別している。ポジションセンサー３５は、本実施形態では、ロータリタイプの抵抗式のポテンショメータである。なお、ポジションセンサー３５は、ポテンショメータに換えて、マグネットを用いたセンサー、ロータリーエンコーダ、光学式のセンサー等とすることもできる。ポジション判定部１６４の判定結果は，モード切替制御部１６６に送られる（図２）。ポジション判定部１６４およびモード切替制御部１６６は、記憶部１２０に記憶されている所定のプログラムをＣＰＵ１４０が実行することで、機能的に実現される。所定のプログラムの詳細について、以下に説明する。

Ａ−３．モード切替処理：
図５は、モード切替処理の手順を示すフローチャートである。モード切替処理は、ＣＰＵ１４０によって実行されるもので、マイク部３０のマイクロフォン３１の位置が、前述した第１ないし第４のポジションの間で切り替わったときに、マイクロフォン３１の動作や、画像表示部２０による虚像としての画像の表示の態様等を変更する処理である。このモード切替処理の開始トリガーは、任意に定めることができる。例えば、ＨＭＤ１００が起動されたこと、換言すれば、電源のＯＮを検出したことを開始トリガーとしてもよい。また、例えば、ＯＳ１５０や、特定のアプリケーションからの処理開始要求を開始トリガーとしてもよい。モード切替処理は、開始後、所定時間毎に繰り返し実行される。

図示するように、処理が開始されると、ＣＰＵ１４０は、ポジションセンサー３５からポジション信号を取得する（ステップＳ１１０）。次いで、ＣＰＵ１４０は、ステップＳ１１０によって取得されたポジション信号に基づいて、マイクロフォン３１が第１〜第４のポジションＰ１〜Ｐ４のうちのいずれのポジションに位置するかを判定する（ステップＳ１２０）。

続いて、ＣＰＵ１４０は、ステップＳ１２０によって判定されたポジションが、前回このモード切替処理を実行したときに判定されたポジションに対して変化があるか否かを判定する（ステップＳ１３０）。ここで、変化がないと判定されたときには、「リターン」に抜けて、モード切替処理を一旦終了する。

一方、ステップＳ１３０で、変化があると判定された場合には、ステップＳ１２０によって判定されたポジションが、第１〜第４のポジションＰ１〜Ｐ４のうちのいずれであるかを判定する（ステップＳ１４０）。

ステップＳ１４０による判定結果が第１のポジションＰ１であるときには、ＣＰＵ１４０は、通話モードに処理を移行する（ステップＳ１５０）。通話モードでは、ＣＰＵ１４０は、マイクロフォン３１および右左のスピーカー９４，９５をともに動作状態に移行し（ステップＳ１５１）、インターフェイス１８０（図２）を介して携帯電話端末ＰＨ（図２）と通信を行って、携帯電話端末ＰＨ内の通話関連の電源をオンにする（ステップＳ１５２）。これによって、使用者は、ＨＭＤ１００を装着したまま、マイクロフォン３１および右左のスピーカー９４，９５を使用して電話通話を行うことができる。なお、携帯電話端末ＰＨ（図２）を用いた通話に換えて、特定の電話回線を用いた通話、電話網としてインターネットを用いた通話等、種々の回線による通話としてもよい。

通話モードでは、ＣＰＵ１４０は、さらに、画像表示部２０にカメラ撮影画面を表示させることによって、カメラ６１を撮影スタンバイ状態に移行する（ステップＳ１５３）。

図６は、通話モードによるカメラ撮影画面の一例を示す説明図である。図示は、図３と同様に、使用者の視界ＶＲを例示するものである。視界ＶＲには、外界ＳＣに重ね合わせて、カメラ撮影画面ＶＡを拡張現実として視認することができる。カメラ撮影画面ＶＡは、操作画面部ＶＡ１と、撮影画像表示部ＶＡ２とを有する。操作画面部ＶＡ１は、使用者によるカメラ操作を受け付ける部分であり、本実施形態では、撮影を実行指示するための撮影ボタンＳＢを有する。カメラマークＭＣは、カメラ撮影画面ＶＡであることを示すマークである。使用者は、制御部１０のタッチパッド１４や十字キー１６を操作することによって、操作ボタンＳＴを押下指示することができる。タッチパッド１４や十字キー１６に換えて、使用者の視線方向を図示しない視線方向検出部によって検出して、その視線方向から操作ボタンＳＴが押下指示される構成としてもよい。

また、視界ＶＲの右隅には、電話回線が繋がって、いわゆるオフフック状態にあることを示す電話マークＭＴが表示されている。これによって、使用者は、電話回線が繋がって、通話が可能なことを、即座に認識することができる。

上記通話モードによれば、使用者は、ＨＭＤ１００を装着したまま、第三者と通話することができ、その通話の最中に、使用者が向いている方向の外界を、カメラ６１によって簡単な操作で撮像することができる。例えば、工場で作業しながら第３者の指導を受ける際に、手許の画像を送りたい場合に、通話モードは有効である。図５のステップＳ１５３の実行後、「リターン」に抜けて、モード切替処理を一旦終了する。

ステップＳ１４０による判定結果が第２のポジションＰ２（図４参照）であるときには、ＣＰＵ１４０は、メニューモードに処理を移行する（ステップＳ１６０）。メニューモードでは、ＣＰＵ１４０は、マイクロフォン３１を動作状態に移行する（ステップＳ１６１）とともに、このアプリケーションのメニュー画面を画像表示部２０に表示させる（ステップＳ１６２）。

図７は、メニューモードによるメニュー画面の一例を示す説明図である。図示は、図３と同様に、使用者の視界ＶＲを例示するものである。視界ＶＲには、外界ＳＣに重ね合わせて、第１ないし第４のメニュー画面ＶＢ１，ＶＢ２，ＶＢ３，ＶＢ４を拡張現実として視認することができる。各メニュー画面ＶＢ１〜ＶＢ４には、カメラ関連、マイク関連等の種類別に区分けされた操作項目が一覧表示されている。操作者は、各メニュー画面ＶＢ１〜ＶＢ４に記載された操作項目を視認して、所望の操作項目を音声にて命令する。ＨＭＤ１００は、マイクロフォン３１によって音声を収集し、その収集された音声を音声認識し、音声認識の結果に応じた操作項目の命令を実行することができる。

第２の操作画面ＶＢ２は、複数のカラーボタンＣＢを有する。各カラーボタンＣＢは、色づけされている。操作者は、「赤色」、「黄色」というように色を発音することで、各色に対応した操作内容を命令することもできる。

視界ＶＲの右上には、音声認識中であることを示すマイクマークＭＭが表示されている。これによって、使用者は、視認されるメニュー画面ＶＢ１〜ＶＢ４の操作項目を音声にて命令できることがわかる。図５のステップＳ１５３の実行後、「リターン」に抜けて、モード切替処理を一旦終了する。

図５のステップＳ１４０による判定結果が第３のポジションＰ３（図４参照）であるときには、ＣＰＵ１４０は、発話モードに処理を移行する（ステップＳ１７０）。発話モードでは、ＣＰＵ１４０は、マイクロフォン３１を動作状態に移行する（ステップＳ１７１）とともに、画像表示部２０にマイクマークを表示させる（ステップＳ１７２）。

図８は、発話モードによるマイクマークの一例を示す説明図である。図示は、図３と同様に、使用者の視界ＶＲを例示するものである。視界ＶＲには、外界ＳＣに重ね合わせて、マイクを示すマイクマークＭＭを拡張現実として視認することができる。操作者は、マイクマークＭＭを視認することで、マイクロフォン３１が動作状態であることを知ることができる。工場で作業している第３者に対して命令を音声にて伝える場合に有効である。図５のステップＳ１５３の実行後、「リターン」に抜けて、モード切替処理を一旦終了する。

図５のステップＳ１４０による判定結果が第４のポジションＰ４（図４参照）であるときには、ＣＰＵ１４０は、視聴モードに処理を移行する（ステップＳ１８０）。視聴モードでは、ＣＰＵ１４０は、右左のスピーカー９４，９５を動作状態に移行する（ステップＳ１８１）とともに、映像再生画面を画像表示部２０に表示させる（ステップＳ１８２）。

図９は、視聴モードによる映像再生画面の一例を示す説明図である。図示は、図３と同様に、使用者の視界ＶＲを例示するものである。視界ＶＲには、外界ＳＣに重ね合わせて、映像再生画面ＶＣを拡張現実として視認することができる。映像再生画面ＶＣは、操作画面部ＶＣ１と、映像表示部ＶＣ２とを有する。操作画面部ＶＣ１は、使用者による操作を受け付ける部分であり、映像再生を実行指示するための各種のボタンが備えられている。映像表示部ＶＣ２には、再生した映像が表示される。使用者は、制御部１０のタッチパッド１４や十字キー１６を操作することによって、操作画面部ＶＣ１内のボタンを押下指示することができる。タッチパッド１４や十字キー１６に換えて、使用者の視線方向を図示しない視線方向検出部によって検出して、その視線方向から各ボタンが押下指示される構成としてもよい。

視界ＶＲの右上には、視聴中であることを示すスピーカーマークＭＳが表示されている。上記視聴モードによって、使用者は、映像を簡単な操作で再生することができる。なお、本実施形態の変形例として、視聴モードに換えて、Ｗｅｂ検索を行うＷｅｂモードとしてもよい。Ｗｅｂモードでは、ステップＳ１８２の処理を、Ｗｅｂ閲覧画面を画像表示部２０に表示させる構成とする。さらに、映像再生やＷｅｂ閲覧に換えて、所定の画像を表示させる構成としてもよい。図５に戻って、ステップＳ１５３の実行後、「リターン」に抜けて、モード切替処理を一旦終了する。

上記モード切替処理において、ステップＳ１１０およびＳ１２０の処理を実行するＣＰＵ１４０の機能がポジション判定部１６４（図２）に対応し、ステップＳ１３０ないしＳ１８２の処理を実行するＣＰＵ１４０の機能がモード切替制御部１６６（図２）に対応する。

本実施形態では、使用者は、第２のポジションＰ２であるホームモードを、マイクロフォン３１の基本位置として、通話する際には、アーム３２を下げて、マイクロフォン３１を第１のポジションＰ１に切り替える。発話する際には、基本位置からアーム３２を１段階上げて、マイクロフォン３１を第３のポジションＰ３に切り替える。視聴する際には、基本位置からアーム３２を２段階上げて、マイクロフォン３１を第４のポジションＰ４に切り替える。

以上のように構成された第１実施形態のＨＭＤ１００によれば、マイク部３０のマイクロフォン３１のポジションに応じて、マイクロフォン３１の動作、および画像表示部２０による表示画面が切り替わる。表示画面は、ＧＵＩ（グラフィカルユーザインタフェース）として機能する。このために、マイクロフォンを用いた動作だけでなく、ＨＭＤ１００の主要な動作である画像表示部２０による表示態様も切り替えることができる。したがって、操作性を向上することができるという効果を奏する。

Ｂ．第２実施形態：
本発明の第２実施形態を次に説明する。第２実施形態のＨＭＤは、第１実施形態のＨＭＤ１００と比較して、ヘッドフォン部９０とマイク部３０に換えてワイヤレスイヤホンマイクを備えることとが相違し、残余の点では同一である。同一の部分については、第１実施形態と同一の符号を付し、その説明を省略する。すなわち、第２実施形態のＨＭＤは、制御部１０と、画像表示部２０と、ワイヤレスイヤホンマイクと、を備える。なお、第１実施形態における画像表示部２０は、ヘッドフォン部９０のヘッドバンド９１に固定した形で取り付けられていたが、第２実施形態における画像表示部２０は、保持部２１および左保持部２３を眼鏡のテンプル（つる）のようにして、使用者の頭部に保持される。

図１０は、ワイヤレスイヤホンマイク２９０を示す説明図である。ワイヤレスイヤホンマイク２９０は、箱形の本体部２９２と、イヤーピース部２９４とを有する。イヤーピース部２９４は、本体部２９２における長手方向の一端側の側面に立設され、音声出力部を内蔵する。本体部２９２における長手方向の他端側の先端には、音声入力部としてのマイクロフォン２９６が設けられている。ワイヤレスイヤホンマイク２９０は、Ｂｌｕｅｔｏｏｔｈ（登録商標）によって制御部１０との間で無線通信を行う。Ｂｌｕｅｔｏｏｔｈに換えて、ｉＢｅａｃｏｎ（登録商標）や無線ＬＡＮ等によるものとしてもよい。

使用者は、イヤーピース部２９４を耳ＥＲの穴に挿入することによって、ワイヤレスイヤホンマイク２９０を装着する。図示では、ワイヤレスイヤホンマイク２９０は、その長手方向が鉛直方向となるように装着されているが、使用者は、装着した状態で、イヤーピース部２９４を軸として、ワイヤレスイヤホンマイク２９０を回動させることができる。このために、第２実施形態でも、第１実施形態と同様に、マイクロフォン２９６は、イヤーピース部２９４を軸とする円軌道ＣＷ上をポジション移動できる。

本体部２９２には、６軸センサー２９８が設けられており、６軸センサー２９８によってワイヤレスイヤホンマイク２９０の長手方向の向きを検出することができる。６軸センサー２９８によって検出された向きは、無線通信によって制御部１０に送られる。制御部１０は、６軸センサー２９８によって検出された向きからマイクロフォン２９６のポジションを判定し、第１実施形態のモード切替処理（図５）と同様の処理を行うことによって、マイクロフォン２９６のポジションに基づいて、マイクロフォン２９６の動作および画像表示部２０による表示態様をそれぞれ切り替える。

以上のように構成された第２実施形態のＨＭＤによれば、第１実施形態と同様に、マイクロフォンを用いた動作だけでなく、画像表示部２０による表示態様も切り替えることができる。したがって、第１実施形態と同様に、操作性を向上することができるという効果を奏する。

Ｃ．変形例：
なお、この発明は前記第１および第２実施形態およびそれらの変形例に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能であり、例えば、次のような変形も可能である。

Ｃ−１．変形例１：
第１実施形態では、連結部３３によってアーム３２を回動可能に連結することによって、アーム３２の先端のマイクロフォン３１の位置が複数のポジションの間で切り換え可能な構成としていた。これに対して、変形例として、連結部を回動しない、単に固定するものとし、アームをフレキシブルアームに換えた構成としてもよい。フレキシブルアームは、湾曲自在で、かつ、形状を維持可能な棒状部材であり、例えば、蛇腹状の金属部材、あるいはプラスチック製である。フレキシブルアームによって、マイクロフォンの位置を多数のポジションの間で切り換えることができる。いずれのポジションに位置するかの判定は、撮像センサーによってマイクロフォンを撮影し、撮影画像からマイクロフォンの向きや位置を検出することによって行われる。かかる構成によっても、第１実施形態と同様な効果を奏することができる。

Ｃ−２．変形例２：
第１および第２実施形態では、マイクロフォンの取り得るポジションの数を４つとしたが、これに換えて、３つとしてもよい。例えば、図４における第１のポジションＰ１、第２のポジションＰ２、および第４のポジションＰ４としてもよい。また、２つとしてもよい。例えば、図４における第１のポジションＰ１、および第２のポジションＰ２としてもよい。さらに、３を上回る数としてもよい。なお、所定のデバイスをオン／オフするだけでは、２つのポジションをとることになるが、３以上の数のポジションとすることで、多さいな制御が可能となる。

Ｃ−３．変形例３：
第１実施形態では、マイクロフォンのポジションは、アーム３２の連結部３３に対するマイクロフォンの相対的な位置であり、第２実施形態では、マイクロフォンのポジションは、イヤーピース部２９４に対するマイクロフォンの相対的な位置であった。すなわち、マイクロフォンとマイクロフォンを回動する軸と相対的な位置を、マイクロフォンのポジションとした。これに対して、マイクロフォンのポジションを、ＨＭＤの使用者の口に対するマイクロフォンの位置としてもよい。

Ｃ−４．変形例４：
第１および第２実施形態では、表示態様の切り替えを、表示画面を別のものに切り替えることとしたが、これに換えて、同じ種類の表示画面において、表示項目の一つを別のものに切り替える構成としてもよい。すなわち、表示画面全体を切り替えるものであってもよいし、表示画面の一部を切り替えるものとしてもよい。

Ｃ−５．変形例５：
第１および第２実施形態に換えて、モード切替制御部により切り替える表示態様を、音声入力部のポジションを示す画像を表示するものとしてもよい。

Ｃ−６．変形例６：
マイク部は、第１実施形態では、画像表示部に連結されたアームにマイクロフォンを接続した構成とし、第２実施形態では、ワイヤレスイヤホンマイクとした。これらに換えて、ヘッドフォンとマイクロフォンとを有するワイヤレスヘッドセットとしてもよい。ワイヤレスヘッドセットは、Ｂｌｕｅｔｏｏｔｈ（登録商標）によって制御部と接続される。また、マイク部は、音声入力部を備えた腕時計型のウェアラブルデバイスや、音声入力部を備えた指輪型のウェアラブルデバイス等としてもよい。これらウェアラブルデバイスは、制御部に対して、Ｂｌｕｅｔｏｏｔｈや、ｉＢｅａｃｏｎ、無線ＬＡＮ等によって無線接続される。

Ｃ−７．その他の変形例：
上記実施形態では、ヘッドマウントディスプレイの構成について例示した。しかし、ヘッドマウントディスプレイの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、各構成部の追加・削除・変換等を行うことができる。

上記実施形態における、制御部と、画像表示部とに対する構成要素の割り振りは、あくまで一例であり、種々の態様を採用可能である。例えば、以下のような態様としてもよい。（ｉ）制御部にＣＰＵやメモリー等の処理機能を搭載、画像表示部には表示機能のみを搭載する態様、（ｉｉ）制御部と画像表示部との両方にＣＰＵやメモリー等の処理機能を搭載する態様、（ｉｉｉ）制御部と画像表示部とを一体化した態様（例えば、画像表示部に制御部が含まれ眼鏡型のウェアラブルコンピューターとして機能する態様）、（ｉｖ）制御部の代わりにスマートフォンや携帯型ゲーム機を使用する態様、（ｖ）制御部と画像表示部とを無線通信かつワイヤレス給電可能な構成とすることにより接続部（コード）を廃した態様。

上記実施形態では、説明の便宜上、制御部が送信部を備え、画像表示部が受信部を備えるものとした。しかし、上記実施形態の送信部および受信部は、いずれも、双方向通信が可能な機能を備えており、送受信部として機能することができる。また、例えば、図２に示した制御部は、有線の信号伝送路を介して画像表示部と接続されているものとした。しかし、制御部と、画像表示部とは、無線ＬＡＮや赤外線通信やＢｌｕｅｔｏｏｔｈ（登録商標）等の無線の信号伝送路を介した接続により接続されていてもよい。

例えば、上記実施形態で示した制御部、画像表示部の構成は任意に変更することができる。具体的には、例えば、制御部からタッチパッドを省略し、十字キーのみで操作する構成としてもよい。また、制御部に操作用スティック等の他の操作用インターフェイスを備えてもよい。また、制御部にはキーボードやマウス等のデバイスを接続可能な構成として、キーボードやマウスから入力を受け付けるものとしてもよい。また、例えば、タッチパッドや十字キーによる操作入力のほか、フットスイッチ（使用者の足により操作するスイッチ）による操作入力を取得してもよい。例えば、画像表示部に赤外線センサー等の視線検知部を設けた上で、使用者の視線を検知し、視線の動きに対応付けられたコマンドによる操作入力を取得してもよい。例えば、カメラを用いて使用者のジェスチャーを検知し、ジェスチャーに対応付けられたコマンドによる操作入力を取得してもよい。ジェスチャー検知の際は、使用者の指先や、使用者の手に付けられた指輪や、使用者の手にする医療器具等を動き検出のための目印にすることができる。フットスイッチや視線による操作入力を取得可能とすれば、使用者が手を離すことが困難である作業においても、入力情報取得部は、使用者からの操作入力を取得することができる。

図１１は、変形例におけるＨＭＤの外観の構成を示す説明図である。図１１（Ａ）の例の場合、画像表示部２０ｘは、右光学像表示部２６に代えて右光学像表示部２６ｘを備え、左光学像表示部２８に代えて左光学像表示部２８ｘを備えている。右光学像表示部２６ｘと左光学像表示部２８ｘとは、上記実施形態の光学部材よりも小さく形成され、ＨＭＤの装着時における使用者の右眼および左眼の斜め上にそれぞれ配置されている。図１１（Ｂ）の例の場合、画像表示部２０ｙは、右光学像表示部２６に代えて右光学像表示部２６ｙを備え、左光学像表示部２８に代えて左光学像表示部２８ｙを備えている。右光学像表示部２６ｙと左光学像表示部２８ｙとは、上記実施形態の光学部材よりも小さく形成され、ＨＭＤの装着時における使用者の右眼および左眼の斜め下にそれぞれ配置されている。このように、光学像表示部は使用者の眼の近傍に配置されていれば足りる。また、光学像表示部を形成する光学部材の大きさも任意であり、光学像表示部が使用者の眼の一部分のみを覆う態様、換言すれば、光学像表示部が使用者の眼を完全に覆わない態様のＨＭＤとして実現することもできる。

例えば、ヘッドマウントディスプレイは、両眼タイプの透過型ヘッドマウントディスプレイであるものとしたが、単眼タイプのヘッドマウントディスプレイとしてもよい。また、使用者がヘッドマウントディスプレイを装着した状態において外景の透過が遮断される非透過型ヘッドマウントディスプレイとして構成してもよい。

例えば、画像処理部、表示制御部、音声処理部等の機能部は、ＣＰＵがＲＯＭやハードディスクに格納されているコンピュータープログラムをＲＡＭに展開して実行することにより実現されるものとして記載した。しかし、これら機能部は、当該機能を実現するために設計されたＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）を用いて構成されてもよい。

例えば、上記実施形態では、画像表示部を眼鏡のように装着するヘッドマウントディスプレイであるとしているが、画像表示部が通常の平面型ディスプレイ装置（液晶ディスプレイ装置、プラズマディスプレイ装置、有機ＥＬディスプレイ装置等）であるとしてもよい。この場合にも、制御部と画像表示部との間の接続は、有線の信号伝送路を介した接続であってもよいし、無線の信号伝送路を介した接続であってもよい。このようにすれば、制御部を、通常の平面型ディスプレイ装置のリモコンとして利用することもできる。

また、画像表示部として、第１実施形態のようにヘッドバンドを掛けることによって装着する構成や、第２実施形態のように眼鏡のように装着する構成に代えて、例えば帽子のように装着する画像表示部といった他の形状の画像表示部を採用してもよい。また、スピーカーは、イヤホンに換えてもよく、イヤホンは、耳掛け型やヘッドバンド型を採用してもよい。また、例えば、自動車や飛行機等の車両に搭載されるヘッドアップディスプレイ（ＨＵＤ、Head-Up Display）として構成されてもよい。また、例えば、ヘルメット等の身体防護具に内蔵されたヘッドマウントディスプレイとして構成されてもよい。

例えば、上記実施形態では、表示駆動部は、バックライトと、バックライト制御部と、ＬＣＤと、ＬＣＤ制御部と、投写光学系を用いて構成されるものとした。しかし、上記の態様はあくまで例示である。表示駆動部は、これらの構成部と共に、またはこれらの構成部に代えて、他の方式を実現するための構成部を備えていてもよい。例えば、表示駆動部は、有機ＥＬ（有機エレクトロルミネッセンス、Organic Electro-Luminescence）のディスプレイと、有機ＥＬ制御部と、投写光学系とを備える構成としてもよい。例えば、表示駆動部は、ＬＣＤに代えてＤＭＤ（デジタル・マイクロミラー・デバイス）等を用いることもできる。例えば、表示駆動部は、ＲＧＢの各色光を発生させるための色光源とリレーレンズを含む信号光変調部と、ＭＥＭＳミラーを含む走査光学系と、これらを駆動する駆動制御回路と、を含むように構成されてもよい。このように、有機ＥＬやＤＭＤやＭＥＭＳミラーを用いても、「表示駆動部における射出領域」とは、表示駆動部から画像光が実際に射出される領域であることに変わりはなく、各デバイス（表示駆動部）における射出領域を上記実施形態と同様に制御することによって、上記実施形態と同様の効果を得ることができる。また、例えば、表示駆動部は、画素信号に応じた強度のレーザーを、使用者の網膜へ出射する１つ以上のレーザーを含むように構成されてもよい。この場合、「表示駆動部における射出領域」とは、表示駆動部から画像を表すレーザー光が実際に射出される領域を表す。レーザー（表示駆動部）におけるレーザー光の射出領域を上記実施形態と同様に制御することによって、上記実施形態と同様の効果を得ることができる。

本発明は、上述の実施形態や実施例、変形例に限られるものではなく、その趣旨を逸脱しない範囲において種々の構成で実現することができる。例えば、発明の概要の欄に記載した各形態中の技術的特徴に対応する実施形態、実施例、変形例中の技術的特徴は、上述の課題の一部または全部を解決するために、あるいは、上述の効果の一部または全部を達成するために、適宜、差し替えや組み合わせを行うことが可能である。また、その技術的特徴が本明細書中に必須なものとして説明されていなければ、適宜、削除することが可能である。

１０…制御部（コントローラー）
１２…点灯部
１４…タッチパッド
１６…十字キー
１８…電源スイッチ
２０…画像表示部
２１…右保持部
２２…右表示駆動部
２３…左保持部
２４…左表示駆動部
２６…右光学像表示部
２８…左光学像表示部
３０…マイク部
３１…マイクロフォン
３２…アーム
３３…連結部
４０…接続コード
５１…送信部
５２…送信部
５３…受信部
５４…受信部
６１…カメラ
９０…ヘッドフォン部
９１…ヘッドバンド
９２，９３…イヤーカップ
９４,９５…右スピーカー
１００…頭部装着型表示装置（ＨＭＤ）
１１０…入力情報取得部
１２０…記憶部
１３０…電源
１３２…無線通信部
１４０…ＣＰＵ
１６０…画像処理部
１６２…表示制御部
１６４…ポジション判定部
１６６…モード切替制御部
１７０…音声処理部
１８０…インターフェイス
２０１…右バックライト制御部
２０２…左バックライト制御部
２１１…右ＬＣＤ制御部
２１２…左ＬＣＤ制御部
２２１…右バックライト
２２２…左バックライト
２４１…右ＬＣＤ
２４２…左ＬＣＤ
２５１…右投写光学系
２５２…左投写光学系
２６１…右導光板
２６２…左導光板
２９０…ワイヤレスイヤホンマイク２９０
２９２…本体部
２９４…イヤーピース部
２９６…マイクロフォン
２９８…６軸センサー
ＰＣ…パーソナルコンピューター
ＰＨ…携帯電話端末
ＧＭ…ゲーム

Claims (10)

1. 画像を表示する画像表示部を備える頭部装着型表示装置であって、
   音声を電気信号に変換する音声入力部を有し、前記音声入力部の位置を複数のポジションの間で切り換え可能なマイク部と、
   前記音声入力部が前記複数のポジションのうちのいずれのポジションに位置するかを判定するポジション判定部と、
   前記判定されたポジションに基づいて、前記音声入力部の動作、および前記画像表示部による表示態様を、前記音声入力部の動作と前記画像表示部による表示態様との組み合わせであって予め記憶された２以上の組み合わせのうちのいずれかに切り替えるモード切替制御部と、
   を備える頭部装着型表示装置。
2. 請求項１に記載の頭部装着型表示装置であって、
   前記画像表示部は、外景を透過し得る、頭部装着型表示装置。
3. 請求項１または請求項２に記載の頭部装着型表示装置であって、
   音声を出力する音声出力部を備え、
   前記モード切替制御部は、
   前記判定されたポジションに基づいて、さらに前記音声出力部の動作を切り替える、頭部装着型表示装置。
4. 請求項３に記載の頭部装着型表示装置であって、
   前記モード切替制御部は、
   前記判定されたポジションが、前記複数のポジションの中で使用者の口に一番近いポジションであるときに、前記音声入力部および前記音声出力部をそれぞれ動作状態として外部との通話を可能とする通話モードへの切り替えを行う、頭部装着型表示装置。
5. 請求項４に記載の頭部装着型表示装置であって、
   外景の少なくとも一部を撮影するカメラを備え、
   前記モード切替制御部は、
   前記通話モードの際の前記画像表示部による表示態様の切り替えとして、前記カメラを用いた撮影のための画面に表示を切り替える、頭部装着型表示装置。
6. 請求項４または請求項５に記載の頭部装着型表示装置であって、
   前記モード切替制御部は、
   前記判定されたポジションが、前記複数のポジションの中で使用者の口から一番遠いポジションであるときに、前記音声出力部を動作状態とし、前記画像表示部に所定の画像を表示するモードへの切り替えを行う、頭部装着型表示装置。
7. 請求項６に記載の頭部装着型表示装置であって、
   前記モード切替制御部は、
   前記判定されたポジションが、前記複数のポジションの中の使用者の口に一番近いポジションと前記使用者の口から一番遠いポジションとの間の所定のポジションであるときに、前記音声入力部を動作状態にし、前記音声入力部で取得された音声に応じた操作項目を命令するためのメニュー画面を表示するメニューモードへの切り替えを行う、頭部装着型表示装置。
8. 請求項１または請求項２に記載の頭部装着型表示装置であって、
   前記モード切替制御部は、
   前記ポジション判定部によって判定されたポジションが、所定のポジションであるときに、前記音声入力部を動作状態にし、前記音声入力部で取得された音声に応じた操作項目を命令するためのメニュー画面を表示するメニューモードへの切り替えを行う、頭部装着型表示装置。
9. 画像を表示する画像表示部と、音声を電気信号に変換する音声入力部を有し、前記音声入力部の位置を複数のポジションの間で切り換え可能なマイク部と、を備える頭部装着型表示装置の制御方法であって、
   前記音声入力部が前記複数のポジションのうちのいずれのポジションに位置するかを判定する工程と、
   前記判定されたポジションに基づいて、前記音声入力部の動作、および前記画像表示部による表示態様を、前記音声入力部の動作と前記画像表示部による表示態様との組み合わせであって予め記憶された２以上の組み合わせのうちのいずれかに切り替える工程と、
   を備える、頭部装着型表示装置の制御方法。
10. 画像を表示する画像表示部と、音声を電気信号に変換する音声入力部を有し、前記音声入力部の位置を複数のポジションの間で切り換え可能なマイク部と、を備える頭部装着型表示装置を制御するためのコンピュータープログラムであって、
    前記音声入力部が前記複数のポジションのうちのいずれのポジションに位置するかを判定する機能と、
    前記判定されたポジションに基づいて、前記音声入力部の動作、および前記画像表示部による表示態様を、前記音声入力部の動作と前記画像表示部による表示態様との組み合わせであって予め記憶された２以上の組み合わせのうちのいずれかに切り替える機能と、
    をコンピューターに実現させる、コンピュータープログラム。

Images