JP2019109849A - 透過型頭部装着型表示装置、表示制御方法、およびコンピュータープログラム - Google Patents

Abstract

【課題】検索対象物を指し示すキーワードが曖昧である場合における検索対象物を検索する際の操作性を向上させ、また、検索対象物に関連する情報を容易に取得可能な技術を提供する。【解決手段】透過型頭部装着型表示装置であって、外景を透過し外景とともに視認できるように表示対象物の画像を表示する画像表示部と、予め定められたジェスチャーであって、表示された表示対象物の画像に対するジェスチャーを検出するジェスチャー検出部と、検出されたジェスチャーに応じた表示態様で表示対象物の画像を表示させることと、検出されたジェスチャーに応じた関連情報であって、表示対象物に関連する関連情報を表示させることと、のうち、少なくとも一方を実行する表示制御部と、を備える、透過型頭部装着型表示装置。【選択図】図８

Description

本発明は、透過型頭部装着型表示装置に関する。

頭部に装着されてユーザーの視野領域内に画像等を表示する頭部装着型表示装置（ヘッドマウントディスプレイ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ、ＨＭＤ））として、装着時に画像とともに外界の風景を透過視認できる透過型の頭部装着型表示装置が知られている。頭部装着型表示装置は、例えば、液晶ディスプレイと光源とを利用して生成された画像光を、投写光学系および導光板等を利用してユーザーの眼に導くことにより、ユーザーに虚像を認識させる。特許文献１には、透過型の頭部装着型表示装置を装着したユーザーが、所定の操作機器（例えば、ＤＶＤプレーヤー）を制御するための手段として、ユーザーが外界の風景を透過視認できる領域において操作機器を指で触れるジェスチャーが検出された場合に、電源のオン／オフ等の操作機器の操作に対応づけられるボタンを操作機器に重畳して表示し、ユーザーがかかるボタンを選択するジェスチャーを行うことにより、選択された操作を実行可能な技術が開示されている。特許文献２には、電子テキスト中で、ユーザーの示したキーワードおよび該キーワードに関連がある文等を強調して表示する技術が開示されている。

特開２０１２−１８１８０９号公報 特開２００６−１９０２９８号公報

しかし、特許文献１および特許文献２に記載の技術は、ユーザーが操作機器の操作対象や、キーワードを予め認識していることを前提としている。したがって、例えば、ユーザーが検索対象物を指し示すキーワードを知らない、或いは不確かなまま、かかる検索対象物をブラウジング（検索）しようとした場合、比較的少ない回数で所望の検索対象物の情報を得ることは困難である。そこで、検索対象物を指し示すキーワードが曖昧である場合における検索対象物を検索する際の操作性を向上させ、また、検索対象物に関連する情報を容易に取得可能な技術が望まれている。

本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態として実現することが可能である。

（１）本発明の一実施形態によれば、透過型頭部装着型表示装置が提供される。この透過型頭部装着型表示装置は；外景を透過し外景とともに視認できるように表示対象物の画像を表示する画像表示部と；予め定められたジェスチャーであって、表示された前記表示対象物の画像に対するジェスチャーを検出するジェスチャー検出部と；検出された前記ジェスチャーに応じた表示態様で前記表示対象物の画像を表示させることと、検出された前記ジェスチャーに応じた関連情報であって、前記表示対象物に関連する関連情報を表示させることと、のうち、少なくとも一方を実行する表示制御部と；を備える。

この形態の透過型頭部装着型表示装置によれば、予め定められたジェスチャーであって、表示された表示対象物の画像に対するジェスチャーを検出するジェスチャー検出部と、検出されたジェスチャーに応じた表示態様で表示対象物の画像を表示させることと、検出されたジェスチャーに応じた関連情報であって、表示対象物に関連する関連情報を表示させることと、のうち、少なくとも一方を実行する表示制御部と、を備えるので、検出されたジェスチャーに応じた表示態様で表示対象物の画像を表示させることによって、表示対象物の画像を表示させる際の操作性を向上でき、検出されたジェスチャーに応じた関連情報であって表示対象物に関連する関連情報を表示させることによって、表示対象物に関連する情報を容易に取得できる。すなわち、この形態の透過型頭部装着型表示装置によれば、表示対象物を検索する際の操作性を向上でき、また、表示対象物に関連する情報を容易に取得できる。

（２）上記形態の透過型頭部装着型表示装置において、前記表示制御部は、前記関連情報を表示させることを実行する場合に、検出された前記ジェスチャーの位置に応じて、前記関連情報の内容を変更して表示させてもよい。この形態の透過型頭部装着型表示装置によれば、検出されたジェスチャーの位置に応じて、関連情報の内容が変更して表示されるので、使用者は、ジェスチャーを行う位置によって異なる関連情報を取得でき、種々の関連情報を容易に取得できる。

（３）上記形態の透過型頭部装着型表示装置において、キーワードの入力を受け付ける入力受付部を；さらに備え；前記表示制御部は、受け付けられた前記キーワードにより特定される表示対象物の画像を、受け付けられた前記キーワードの種類に応じて、前記キーワードにより特定される該表示対象物が実際に使用される状態を模した表示態様で表示させてもよい。この形態の透過型頭部装着型表示装置によれば、受け付けられたキーワードにより特定される表示対象物の画像が、受け付けられたキーワードの種類に応じて、該表示対象物が実際に使用される状態を模した表示態様で表示されるので、使用者は、表示対象物が実際に使用される状態を容易に想像することができ、使用者の利便性を向上できる。

（４）上記形態の透過型頭部装着型表示装置において、キーワードの入力を受け付ける入力受付部を；さらに備え；前記表示制御部は、受け付けられた前記キーワードにより特定される表示対象物の画像を、受け付けられた前記キーワードの種類に応じて、前記キーワードにより特定される該表示対象物が実際に提示される態様を模した提示態様で表示させてもよい。この形態の透過型頭部装着型表示装置によれば、受け付けられたキーワードにより特定される表示対象物の画像が、受け付けられたキーワードの種類に応じて、該表示対象物が実際に提示される態様を模した提示態様で表示されるので、使用者は、直感的に表示対象物を認識することができ、使用者の利便性を向上できる。

（５）上記形態の透過型頭部装着型表示装置において、前記画像表示部は、前記表示対象物の画像とは異なる画像であって、前記表示対象物が実際に提示される際に用いられる提示用物の画像である対象物提示用画像を、さらに表示し；前記ジェスチャー検出部は、前記対象物提示用画像に対するジェスチャーを、さらに検出し；前記表示制御部は、検出された前記対象物提示用画像に対するジェスチャーに応じて、前記表示対象物の画像を追加して表示させてもよい。この形態の透過型頭部装着型表示装置によれば、表示対象物が実際に提示される際に用いられる提示用物の画像である対象物提示用画像が表示され、検出された対象物提示用画像に対するジェスチャーに応じて、表示対象物の画像が追加して表示されるので、使用者は、対象物提示用画像に対してジェスチャーを行うことによって、より多くの表示対象物の画像を表示させることができ、表示対象物の画像を表示させる際の操作性を向上できるので、使用者の利便性を向上できる。

（６）上記形態の透過型頭部装着型表示装置において、前記入力受付部は、文字による前記キーワードの入力と、音声による前記キーワードの入力と、のうち、少なくとも一方の入力を受け付けてもよい。この形態の透過型頭部装着型表示装置によれば、文字によるキーワードの入力と、音声によるキーワードの入力と、のうち、少なくとも一方の入力が受け付けられるので、使用者は、キーワードを文字あるいは音声により入力することができ、使用者の利便性を向上できる。

（７）上記形態の透過型頭部装着型表示装置において、前記表示制御部は、前記表示対象物の画像を視差のついた立体として表示させてもよい。この形態の透過型頭部装着型表示装置によれば、表示対象物の画像が視差のついた立体として表示されるので、表示対象物の画像を目立たせることができ、表示対象物の画像の視認性を向上できる。

（８）上記形態の透過型頭部装着型表示装置において、前記表示対象物の画像は、予め定められた種類の検索の結果であってもよい。この形態の透過型頭部装着型表示装置によれば、表示対象物の画像は、予め定められた種類の検索の結果であるので、表示対象物を検索する際の操作性を向上できる。

本発明は、種々の形態で実現することも可能である。例えば、透過型頭部装着型表示装置における表示制御方法、かかる表示制御方法を実現するためのコンピュータープログラム、かかるコンピュータープログラムを記録した記録媒体等の形態で実現できる。

本発明の実施形態としての頭部装着型表示装置の概略構成を示す説明図である。 画像表示部が備える光学系の構成を示す要部平面図である。 使用者から見た画像表示部の要部構成を示す図である。 カメラの画角を説明するための図である。 ＨＭＤ１００の構成を機能的に示すブロック図である。 制御装置の構成を機能的に示すブロック図である。 ＨＭＤ１００による拡張現実感表示の一例を示す説明図である。 表示対象物表示制御処理の処理手順を示すフローチャートである。 ステップＳ１０５実行後の使用者の視界の一例を模式的に示す説明図である。 ステップＳ１２０実行後の使用者の視界の一例を模式的に示す説明図である。 ジェスチャーの種類と関連情報の内容との対応関係の一例を示す説明図である。 ステップＳ１３０実行後の使用者の視界の一例を模式的に示す説明図である。 第２実施形態における表示対象物表示制御処理の処理手順を示すフローチャートである。 第２実施形態における表示対象物表示制御処理の処理手順を示すフローチャートである。 ステップＳ１２２実行後の使用者の視界の一例を模式的に示す説明図である。 ステップＳ１３０実行後の使用者の視界の一例を模式的に示す説明図である。 ステップＳ１３０実行後の使用者の視界の一例を模式的に示す説明図である。 ステップＳ１３０実行後の使用者の視界の一例を模式的に示す説明図である。 他の実施形態１における表示対象物画像の表示態様の一例を模式的に示す説明図である。

Ａ．第１実施形態：
Ａ１．透過型表示装置の全体構成：
図１は、本発明の実施形態としての頭部装着型表示装置１００の概略構成を示す説明図である。頭部装着型表示装置１００は、使用者の頭部に装着する表示装置であり、ヘッドマウントディスプレイ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ、ＨＭＤ）とも呼ばれる。ＨＭＤ１００は、グラスを通過して視認される外界の中に画像が浮かび上がるシースルー型（透過型）の頭部装着型表示装置である。

ＨＭＤ１００は、使用者に画像を視認させる画像表示部２０と、画像表示部２０を制御する制御装置（コントローラー）１０とを備えている。

画像表示部２０は、使用者の頭部に装着される装着体であり、本実施形態では眼鏡形状を有する。画像表示部２０は、右保持部２１と、左保持部２３と、前部フレーム２７とを有する支持体に、右表示ユニット２２と、左表示ユニット２４と、右導光板２６と、左導光板２８とを備える。

右保持部２１および左保持部２３は、それぞれ、前部フレーム２７の両端部から後方に延び、眼鏡のテンプル（つる）のように、使用者の頭部に画像表示部２０を保持する。ここで、前部フレーム２７の両端部のうち、画像表示部２０の装着状態において使用者の右側に位置する端部を端部ＥＲとし、使用者の左側に位置する端部を端部ＥＬとする。右保持部２１は、前部フレーム２７の端部ＥＲから、画像表示部２０の装着状態における使用者の右側頭部に対応する位置まで延伸して設けられている。左保持部２３は、前部フレーム２７の端部ＥＬから、画像表示部２０の装着状態における使用者の左側頭部に対応する位置まで延伸して設けられている。

右導光板２６および左導光板２８は、前部フレーム２７に設けられている。右導光板２６は、画像表示部２０の装着状態における使用者の右眼の眼前に位置し、右眼に画像を視認させる。左導光板２８は、画像表示部２０の装着状態における使用者の左眼の眼前に位置し、左眼に画像を視認させる。

前部フレーム２７は、右導光板２６の一端と左導光板２８の一端とを互いに連結した形状を有する。この連結位置は、画像表示部２０の装着状態における使用者の眉間の位置に対応する。前部フレーム２７には、右導光板２６と左導光板２８との連結位置において、画像表示部２０の装着状態において使用者の鼻に当接する鼻当て部が設けられていてもよい。この場合、鼻当て部と右保持部２１と左保持部２３とによって、画像表示部２０を使用者の頭部に保持できる。また、右保持部２１および左保持部２３に対して、画像表示部２０の装着状態において使用者の後頭部に接するベルトを連結してもよい。この場合、ベルトによって画像表示部２０を使用者の頭部に強固に保持できる。

右表示ユニット２２は、右導光板２６による画像の表示を行う。右表示ユニット２２は、右保持部２１に設けられ、画像表示部２０の装着状態における使用者の右側頭部の近傍に位置する。左表示ユニット２４は、左導光板２８による画像の表示を行う。左表示ユニット２４は、左保持部２３に設けられ、画像表示部２０の装着状態における使用者の左側頭部の近傍に位置する。

本実施形態の右導光板２６および左導光板２８は、光透過性の樹脂等によって形成される光学部（例えばプリズム）であり、右表示ユニット２２および左表示ユニット２４が出力する画像光を使用者の眼に導く。なお、右導光板２６および左導光板２８の表面には、調光板が設けられてもよい。調光板は、光の波長域により透過率が異なる薄板状の光学素子であり、いわゆる波長フィルターとして機能する。調光板は、例えば、前部フレーム２７の表面（使用者の眼と対向する面とは反対側の面）を覆うように配置される。調光板の光学特性を適宜選択することにより、可視光、赤外光、および紫外光等の任意の波長域の光の透過率を調整することができ、外部から右導光板２６および左導光板２８に入射し、右導光板２６および左導光板２８を透過する外光の光量を調整できる。

画像表示部２０は、右表示ユニット２２および左表示ユニット２４がそれぞれ生成する画像光を、右導光板２６および左導光板２８に導き、この画像光によって、自身を透過して視認される外界の風景ともに、画像（拡張現実感（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ、ＡＲ）画像）を使用者に視認させる（これを「画像を表示する」とも呼ぶ）。使用者の前方から右導光板２６および左導光板２８を透過して外光が使用者の眼に入射する場合、使用者の眼には、画像を構成する画像光と、外光とが入射する。このため、使用者における画像の視認性は、外光の強さに影響を受ける。

このため、例えば前部フレーム２７に調光板を装着し、調光板の光学特性を適宜選択あるいは調整することによって、画像の視認のしやすさを調整することができる。典型的な例では、ＨＭＤ１００を装着した使用者が少なくとも外の景色を視認できる程度の光透過性を有する調光板を選択することができる。また、太陽光を抑制して、画像の視認性を高めることができる。また、調光板を用いると、右導光板２６および左導光板２８を保護し、右導光板２６および左導光板２８の損傷や汚れの付着等を抑制する効果が期待できる。調光板は、前部フレーム２７、あるいは、右導光板２６および左導光板２８のそれぞれに対して着脱可能としてもよい。また、複数種類の調光板を交換して着脱可能としてもよく、調光板を省略してもよい。

カメラ６１は、画像表示部２０の前部フレーム２７に配置されている。カメラ６１は、前部フレーム２７の前面において、右導光板２６および左導光板２８を透過する外光を遮らない位置に設けられる。図１の例では、カメラ６１は、前部フレーム２７の端部ＥＲ側に配置されている。カメラ６１は、前部フレーム２７の端部ＥＬ側に配置されていてもよく、右導光板２６と左導光板２８との連結部に配置されていてもよい。

カメラ６１は、ＣＣＤやＣＭＯＳ等の撮像素子、および、撮像レンズ等を備えるデジタルカメラである。本実施形態のカメラ６１は単眼カメラであるが、ステレオカメラを採用してもよい。カメラ６１は、ＨＭＤ１００の表側方向、換言すれば、画像表示部２０の装着状態において使用者が視認する視界方向の、少なくとも一部の外界（実空間）を撮像する。換言すれば、カメラ６１は、使用者の視界と重なる範囲または方向を撮像し、使用者が視認する方向を撮像する。カメラ６１の画角の広さは適宜設定できる。本実施形態では、カメラ６１の画角の広さは、使用者が右導光板２６および左導光板２８を透過して視認可能な使用者の視界の全体を撮像するように設定される。カメラ６１は、制御機能部１５０（図６）の制御に従って撮像を実行し、得られた撮像データを制御機能部１５０へ出力する。

ＨＭＤ１００は、予め設定された測定方向に位置する測定対象物までの距離を検出する測距センサーを備えていてもよい。測距センサーは、例えば、前部フレーム２７の右導光板２６と左導光板２８との連結部分に配置することができる。測距センサーの測定方向は、ＨＭＤ１００の表側方向（カメラ６１の撮像方向と重複する方向）とすることができる。測距センサーは、例えば、ＬＥＤやレーザーダイオード等の発光部と、光源が発する光が測定対象物に反射する反射光を受光する受光部と、により構成できる。この場合、三角測距処理や、時間差に基づく測距処理により距離を求める。測距センサーは、例えば、超音波を発する発信部と、測定対象物で反射する超音波を受信する受信部と、により構成してもよい。この場合、時間差に基づく測距処理により距離を求める。測距センサーは、カメラ６１と同様に、制御機能部１５０の指示に従って測距し、検出結果を制御機能部１５０へ出力する。

図２は、画像表示部２０が備える光学系の構成を示す要部平面図である。説明の便宜上、図２には使用者の右眼ＲＥおよび左眼ＬＥを図示する。図２に示すように、右表示ユニット２２と左表示ユニット２４とは、左右対称に構成されている。

右眼ＲＥに画像（ＡＲ画像）を視認させる構成として、右表示ユニット２２は、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）ユニット２２１と、右光学系２５１とを備える。ＯＬＥＤユニット２２１は、画像光を発する。右光学系２５１は、レンズ群等を備え、ＯＬＥＤユニット２２１が発する画像光Ｌを右導光板２６へと導く。

ＯＬＥＤユニット２２１は、ＯＬＥＤパネル２２３と、ＯＬＥＤパネル２２３を駆動するＯＬＥＤ駆動回路２２５とを有する。ＯＬＥＤパネル２２３は、有機エレクトロルミネッセンスにより発光し、Ｒ（赤）、Ｇ（緑）、Ｂ（青）の色光をそれぞれ発する発光素子により構成される自発光型の表示パネルである。ＯＬＥＤパネル２２３は、Ｒ、Ｇ、Ｂの素子を１個ずつ含む単位を１画素とした複数の画素が、マトリクス状に配置されている。

ＯＬＥＤ駆動回路２２５は、後述の制御機能部１５０（図６）の制御に従って、ＯＬＥＤパネル２２３が備える発光素子の選択および通電を実行し、発光素子を発光させる。ＯＬＥＤ駆動回路２２５は、ＯＬＥＤパネル２２３の裏面、すなわち発光面の裏側に、ボンディング等により固定されている。ＯＬＥＤ駆動回路２２５は、例えばＯＬＥＤパネル２２３を駆動する半導体デバイスで構成され、ＯＬＥＤパネル２２３の裏面に固定される基板に実装されてもよい。この基板には、後述する温度センサー２１７（図５）が実装される。なお、ＯＬＥＤパネル２２３は、白色に発光する発光素子をマトリクス状に配置し、Ｒ、Ｇ、Ｂの各色に対応するカラーフィルターを重ねて配置する構成を採用してもよい。また、Ｒ、Ｇ、Ｂの色光をそれぞれ放射する発光素子に加えて、Ｗ（白）の光を放射する発光素子を備えるＷＲＧＢ構成のＯＬＥＤパネル２２３が採用されてもよい。

右光学系２５１は、ＯＬＥＤパネル２２３から射出された画像光Ｌを並行状態の光束にするコリメートレンズを有する。コリメートレンズにより並行状態の光束にされた画像光Ｌは、右導光板２６に入射する。右導光板２６の内部において光を導く光路には、画像光Ｌを反射する複数の反射面が形成される。画像光Ｌは、右導光板２６の内部で複数回の反射を経て右眼ＲＥ側に導かれる。右導光板２６には、右眼ＲＥの眼前に位置するハーフミラー２６１（反射面）が形成される。画像光Ｌは、ハーフミラー２６１で反射後、右導光板２６から右眼ＲＥへと射出され、この画像光Ｌが右眼ＲＥの網膜で像を結ぶことで、使用者に画像を視認させる。

左眼ＬＥに画像（ＡＲ画像）を視認させる構成として、左表示ユニット２４は、ＯＬＥＤユニット２４１と、左光学系２５２とを備える。ＯＬＥＤユニット２４１は画像光を発する。左光学系２５２は、レンズ群等を備え、ＯＬＥＤユニット２４１が発する画像光Ｌを左導光板２８へと導く。ＯＬＥＤユニット２４１は、ＯＬＥＤパネル２４３と、ＯＬＥＤパネル２４３を駆動するＯＬＥＤ駆動回路２４５を有する。各部の詳細は、ＯＬＥＤユニット２２１、ＯＬＥＤパネル２２３、ＯＬＥＤ駆動回路２２５と同じである。ＯＬＥＤパネル２４３の裏面に固定される基板には、温度センサー２３９（図５）が実装される。また、左光学系２５２の詳細は上述の右光学系２５１と同じである。

以上説明した構成によれば、ＨＭＤ１００は、シースルー型の表示装置として機能することができる。すなわち使用者の右眼ＲＥには、ハーフミラー２６１で反射した画像光Ｌと、右導光板２６を透過した外光ＯＬとが入射する。使用者の左眼ＬＥには、ハーフミラー２８１で反射した画像光Ｌと、左導光板２８を透過した外光ＯＬとが入射する。このように、ＨＭＤ１００は、内部で処理した画像の画像光Ｌと外光ＯＬとを重ねて使用者の眼に入射させる。この結果、使用者にとっては、右導光板２６および左導光板２８を透かして外界の風景（実世界）が見えると共に、この外界に重なるようにして画像光Ｌによる虚像（虚像画像、ＡＲ画像）が視認される。

なお、右光学系２５１および右導光板２６を総称して「右導光部」とも呼び、左光学系２５２および左導光板２８を総称して「左導光部」とも呼ぶ。右導光部および左導光部の構成は、上述した例に限定されず、画像光を用いて使用者の眼前に画像を形成する限りにおいて任意の方式を用いることができる。例えば、右導光部および左導光部には、回折格子を用いてもよいし、半透過反射膜を用いてもよい。

図１において、制御装置１０と画像表示部２０とは、接続ケーブル４０によって接続される。接続ケーブル４０は、制御装置１０の下部に設けられるコネクターに着脱可能に接続され、左保持部２３の先端から、画像表示部２０内部の各種回路に接続する。接続ケーブル４０には、デジタルデータを伝送するメタルケーブルまたは光ファイバーケーブルを有する。接続ケーブル４０にはさらに、アナログデータを伝送するメタルケーブルを含んでもよい。接続ケーブル４０の途中には、コネクター４６が設けられている。

コネクター４６は、ステレオミニプラグを接続するジャックであり、コネクター４６と制御装置１０とは、例えばアナログ音声信号を伝送するラインで接続される。図１に示す本実施形態の例では、コネクター４６には、ステレオヘッドホンを構成する右イヤホン３２および左イヤホン３４と、マイク６３を有するヘッドセット３０とが接続されている。

マイク６３は、例えば図１に示すように、マイク６３の集音部が使用者の視線方向を向くように配置されている。マイク６３は、音声を集音し、音声信号を音声インターフェイス１８２（図５）に出力する。マイク６３は、モノラルマイクであってもステレオマイクであってもよく、指向性を有するマイクであっても無指向性のマイクであってもよい。

制御装置１０は、ＨＭＤ１００を制御するための装置である。制御装置１０は、点灯部１２と、トラックパッド１４と、方向キー１６と、決定キー１７と、電源スイッチ１８とを含んでいる。点灯部１２は、ＨＭＤ１００の動作状態（例えば、電源のＯＮ／ＯＦＦ等）を、その発光態様によって通知する。点灯部１２としては、例えば、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）を用いることができる。

トラックパッド１４は、トラックパッド１４の操作面上での接触操作を検出して、検出内容に応じた信号を出力する。トラックパッド１４としては、静電式や圧力検出式、光学式といった種々のトラックパッドを採用することができる。方向キー１６は、上下左右方向に対応するキーへの押下操作を検出して、検出内容に応じた信号を出力する。決定キー１７は、押下操作を検出して、制御装置１０において操作された内容を決定するための信号を出力する。電源スイッチ１８は、スイッチのスライド操作を検出することで、ＨＭＤ１００の電源の状態を切り替える。

図３は、使用者から見た画像表示部２０の要部構成を示す図である。図３では、接続ケーブル４０、右イヤホン３２、左イヤホン３４の図示を省略している。図３の状態では、右導光板２６および左導光板２８の裏側が視認できると共に、右眼ＲＥに画像光を照射するためのハーフミラー２６１、および、左眼ＬＥに画像光を照射するためのハーフミラー２８１が略四角形の領域として視認できる。使用者は、これらハーフミラー２６１、２８１を含む右導光板２６、左導光板２８の全体を透過して外界の風景を視認すると共に、ハーフミラー２６１、２８１の位置に矩形の表示画像を視認する。

図４は、カメラ６１の画角を説明するための図である。図４では、カメラ６１と、使用者の右眼ＲＥおよび左眼ＬＥとを平面視で模式的に示すと共に、カメラ６１の画角（撮像範囲）をθで示す。なお、カメラ６１の画角θは図示のように水平方向に拡がっているほか、一般的なデジタルカメラと同様に鉛直方向にも拡がっている。

上述のようにカメラ６１は、画像表示部２０において右側の端部に配置され、使用者の視線の方向（すなわち使用者の前方）を撮像する。このためカメラ６１の光軸は、右眼ＲＥおよび左眼ＬＥの視線方向を含む方向とされる。使用者がＨＭＤ１００を装着した状態で視認できる外界の風景は、無限遠とは限らない。例えば、使用者が両眼で対象物ＯＢを注視すると、使用者の視線は、図中の符号ＲＤ、ＬＤに示すように、対象物ＯＢに向けられる。この場合、使用者から対象物ＯＢまでの距離は、３０ｃｍ〜１０ｍ程度であることが多く、１ｍ〜４ｍであることがより多い。そこで、ＨＭＤ１００について、通常使用時における使用者から対象物ＯＢまでの距離の上限および下限の目安を定めてもよい。この目安は、予め求められＨＭＤ１００にプリセットされていてもよいし、使用者が設定してもよい。カメラ６１の光軸および画角は、このような通常使用時における対象物ＯＢまでの距離が、設定された上限および下限の目安に相当する場合において対象物ＯＢが画角に含まれるように設定されることが好ましい。

なお、一般的に、人間の視野角は水平方向におよそ２００度、垂直方向におよそ１２５度とされる。そのうち情報受容能力に優れる有効視野は水平方向に３０度、垂直方向に２０度程度である。人間が注視する注視点が迅速に安定して見える安定注視野は、水平方向に６０〜９０度、垂直方向に４５〜７０度程度とされている。この場合、注視点が対象物ＯＢ（図４）であるとき、視線ＲＤ、ＬＤを中心として水平方向に３０度、垂直方向に２０度程度が有効視野である。また、水平方向に６０〜９０度、垂直方向に４５〜７０度程度が安定注視野である。使用者が画像表示部２０を透過して右導光板２６および左導光板２８を透過して視認する実際の視野を、実視野（ＦＯＶ：Ｆｉｅｌｄ Ｏｆ Ｖｉｅｗ）と呼ぶ。実視野は、視野角および安定注視野より狭いが、有効視野より広い。

本実施形態のカメラ６１の画角θは、使用者の視野より広い範囲を撮像可能に設定される。カメラ６１の画角θは、少なくとも使用者の有効視野より広い範囲を撮像可能に設定されることが好ましく、実視野よりも広い範囲を撮像可能に設定されることがより好ましい。カメラ６１の画角θは、使用者の安定注視野より広い範囲を撮像可能に設定されることがさらに好ましく、使用者の両眼の視野角よりも広い範囲を撮像可能に設定されることが最も好ましい。このため、カメラ６１には、撮像レンズとしていわゆる広角レンズを備え、広い画角を撮像できる構成としてもよい。広角レンズには、超広角レンズ、準広角レンズと呼ばれるレンズを含んでもよい。また、カメラ６１には、単焦点レンズを含んでもよく、ズームレンズを含んでもよく、複数のレンズからなるレンズ群を含んでもよい。

図５は、ＨＭＤ１００の構成を機能的に示すブロック図である。制御装置１０は、プログラムを実行してＨＭＤ１００を制御するメインプロセッサー１４０と、記憶部と、入出力部と、センサー類と、インターフェイスと、電源部１３０とを備える。メインプロセッサー１４０には、これらの記憶部、入出力部、センサー類、インターフェイス、電源部１３０がそれぞれ接続されている。メインプロセッサー１４０は、制御装置１０が内蔵しているコントローラー基板１２０に実装されている。

記憶部には、メモリー１１８と、不揮発性記憶部１２１とが含まれている。メモリー１１８は、メインプロセッサー１４０によって実行されるコンピュータープログラム、および、処理されるデータを一時的に記憶するワークエリアを構成する。不揮発性記憶部１２１は、フラッシュメモリーやｅＭＭＣ（ｅｍｂｅｄｄｅｄ Ｍｕｌｔｉ Ｍｅｄｉａ Ｃａｒｄ）で構成される。不揮発性記憶部１２１は、メインプロセッサー１４０が実行するコンピュータープログラムや、メインプロセッサー１４０によって処理される各種のデータを記憶する。本実施形態において、これらの記憶部はコントローラー基板１２０に実装されている。

入出力部には、トラックパッド１４と、操作部１１０とが含まれている。操作部１１０には、制御装置１０に備えられた方向キー１６と、決定キー１７と、電源スイッチ１８とが含まれる。メインプロセッサー１４０は、これら各入出力部を制御すると共に、各入出力部から出力される信号を取得する。

センサー類には、６軸センサー１１１と、磁気センサー１１３と、ＧＮＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）レシーバー１１５とが含まれている。６軸センサー１１１は、３軸加速度センサーと３軸ジャイロ（角速度）センサーとを備えるモーションセンサー（慣性センサー）である。６軸センサー１１１は、これらセンサーがモジュール化されたＩＭＵ（Ｉｎｅｒｔｉａｌ Ｍｅａｓｕｒｅｍｅｎｔ Ｕｎｉｔ）を採用してもよい。磁気センサー１１３は、例えば、３軸の地磁気センサーである。ＧＮＳＳレシーバー１１５は、ＧＮＳＳを構成する人工衛星から受信した航法信号に基づいて、制御装置１０の現在位置（経度・緯度）を測位する。これらセンサー類（６軸センサー１１１、磁気センサー１１３、ＧＮＳＳレシーバー１１５）は、検出値を予め指定されたサンプリング周波数に従って、メインプロセッサー１４０へと出力する。各センサーが検出値を出力するタイミングは、メインプロセッサー１４０からの指示に応じてもよい。

インターフェイスには、無線通信部１１７と、音声コーデック１８０と、外部コネクター１８４と、外部メモリーインターフェイス１８６と、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）コネクター１８８と、センサーハブ１９２と、ＦＰＧＡ１９４と、インターフェイス１９６とが含まれている。これらは、外部とのインターフェイスとして機能する。

無線通信部１１７は、ＨＭＤ１００と外部機器との間における無線通信を実行する。無線通信部１１７は、図示しないアンテナ、ＲＦ回路、ベースバンド回路、通信制御回路等を備えて構成され、あるいはこれらが統合されたデバイスとして構成されている。無線通信部１１７は、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ−Ｆｉ（登録商標）を含む無線ＬＡＮ等の規格に準拠した無線通信を行う。

音声コーデック１８０は、音声インターフェイス１８２に接続され、音声インターフェイス１８２を介して入出力される音声信号のエンコード／デコードを行う。音声インターフェイス１８２は、音声信号を入出力するインターフェイスである。音声コーデック１８０は、アナログ音声信号からデジタル音声データへの変換を行うＡ／Ｄコンバーター、および、その逆の変換を行うＤ／Ａコンバーターを備えてもよい。本実施形態のＨＭＤ１００は、音声を右イヤホン３２および左イヤホン３４から出力し、マイク６３により集音する。音声コーデック１８０は、メインプロセッサー１４０が出力するデジタル音声データをアナログ音声信号に変換し、音声インターフェイス１８２を介して出力する。また、音声コーデック１８０は、音声インターフェイス１８２に入力されるアナログ音声信号をデジタル音声データに変換してメインプロセッサー１４０に出力する。

外部コネクター１８４は、メインプロセッサー１４０に対して、メインプロセッサー１４０と通信する外部装置（例えば、パーソナルコンピューター、スマートフォン、ゲーム機器等）を接続するためのコネクターである。外部コネクター１８４に接続された外部装置は、コンテンツの供給元となり得るほか、メインプロセッサー１４０が実行するコンピュータープログラムのデバッグや、ＨＭＤ１００の動作ログの収集に使用できる。外部コネクター１８４は種々の態様を採用できる。外部コネクター１８４としては、例えば、ＵＳＢインターフェイス、マイクロＵＳＢインターフェイス、メモリーカード用インターフェイス等の有線接続に対応したインターフェイスや、無線ＬＡＮインターフェイス、Ｂｌｕｅｔｏｏｔｈインターフェイス等の無線接続に対応したインターフェイスを採用できる。

外部メモリーインターフェイス１８６は、可搬型のメモリーデバイスを接続可能なインターフェイスである。外部メモリーインターフェイス１８６は、例えば、カード型記録媒体を装着してデータの読み書きを行うメモリーカードスロットと、インターフェイス回路とを含む。カード型記録媒体のサイズ、形状、規格等は適宜選択できる。ＵＳＢコネクター１８８は、ＵＳＢ規格に準拠したメモリーデバイス、スマートフォン、パーソナルコンピューター等を接続可能なインターフェイスである。ＵＳＢコネクター１８８は、例えば、ＵＳＢ規格に準拠したコネクターと、インターフェイス回路とを含む。ＵＳＢコネクター１８８のサイズ、形状、ＵＳＢ規格のバージョン等は適宜選択できる。

また、ＨＭＤ１００は、バイブレーター１９を備える。バイブレーター１９は、図示しないモーターと、偏芯した回転子等を備え、メインプロセッサー１４０の制御に従って振動を発生する。ＨＭＤ１００は、例えば、操作部１１０に対する操作を検出した場合や、ＨＭＤ１００の電源がオンオフされた場合等に所定の振動パターンでバイブレーター１９により振動を発生させる。バイブレーター１９は、制御装置１０に設ける構成に換えて、画像表示部２０側、例えば、画像表示部の右保持部２１（テンプルの右側部分）に設ける構成としてもよい。

センサーハブ１９２およびＦＰＧＡ１９４は、インターフェイス（Ｉ／Ｆ）１９６を介して画像表示部２０に接続されている。センサーハブ１９２は、画像表示部２０が備える各種センサーの検出値を取得して、メインプロセッサー１４０に出力する。ＦＰＧＡ１９４は、メインプロセッサー１４０と画像表示部２０の各部との間で送受信されるデータの処理およびインターフェイス１９６を介した伝送を実行する。インターフェイス１９６は、画像表示部２０の右表示ユニット２２と、左表示ユニット２４とに対してそれぞれ接続されている。本実施形態の例では、左保持部２３に接続ケーブル４０が接続され、この接続ケーブル４０に繋がる配線が画像表示部２０内部に敷設され、右表示ユニット２２と左表示ユニット２４とのそれぞれが、制御装置１０のインターフェイス１９６に接続される。

電源部１３０には、バッテリー１３２と、電源制御回路１３４とが含まれている。電源部１３０は、制御装置１０が動作するための電力を供給する。バッテリー１３２は、充電可能な電池である。電源制御回路１３４は、バッテリー１３２の残容量の検出と、ＯＳ１４３（図６）への充電の制御を行う。電源制御回路１３４は、メインプロセッサー１４０に接続され、バッテリー１３２の残容量の検出値や、バッテリー１３２の電圧の検出値をメインプロセッサー１４０へと出力する。なお、電源部１３０が供給する電力に基づいて、制御装置１０から画像表示部２０へと電力を供給してもよい。電源部１３０から制御装置１０の各部および画像表示部２０への電力の供給状態を、メインプロセッサー１４０により制御可能な構成としてもよい。

右表示ユニット２２は、表示ユニット基板２１０と、ＯＬＥＤユニット２２１と、カメラ６１と、照度センサー６５と、ＬＥＤインジケーター６７と、温度センサー２１７とを備える。表示ユニット基板２１０には、インターフェイス１９６に接続されるインターフェイス（Ｉ／Ｆ）２１１と、受信部（Ｒｘ）２１３と、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）２１５とが実装されている。受信部２１３は、インターフェイス２１１を介して制御装置１０から入力されるデータを受信する。受信部２１３は、ＯＬＥＤユニット２２１で表示する画像の画像データを受信した場合に、受信した画像データをＯＬＥＤ駆動回路２２５（図２）へと出力する。

ＥＥＰＲＯＭ２１５は、各種のデータをメインプロセッサー１４０が読み取り可能な態様で記憶する。ＥＥＰＲＯＭ２１５は、例えば、画像表示部２０のＯＬＥＤユニット２２１、２４１の発光特性や表示特性に関するデータ、右表示ユニット２２または左表示ユニット２４のセンサー特性に関するデータ等を記憶する。具体的には、例えば、ＯＬＥＤユニット２２１、２４１のガンマ補正に係るパラメーター、後述する温度センサー２１７、２３９の検出値を補償するデータ等を記憶する。これらのデータは、ＨＭＤ１００の工場出荷時の検査によって生成され、ＥＥＰＲＯＭ２１５に書き込まれる。出荷後は、メインプロセッサー１４０がＥＥＰＲＯＭ２１５のデータを読み込んで各種の処理に利用する。

カメラ６１は、インターフェイス２１１を介して入力される信号に従って撮像を実行し、撮像画像データあるいは撮像結果を表す信号を制御装置１０へと出力する。照度センサー６５は、図１に示すように、前部フレーム２７の端部ＥＲに設けられ、画像表示部２０を装着する使用者の前方からの外光を受光するように配置される。照度センサー６５は、受光量（受光強度）に対応した検出値を出力する。ＬＥＤインジケーター６７は、図１に示すように、前部フレーム２７の端部ＥＲにおいてカメラ６１の近傍に配置される。ＬＥＤインジケーター６７は、カメラ６１による撮像を実行中に点灯して、撮像中であることを報知する。

温度センサー２１７は、温度を検出し、検出した温度に対応する電圧値あるいは抵抗値を出力する。温度センサー２１７は、ＯＬＥＤパネル２２３（図２）の裏面側に実装される。温度センサー２１７は、例えばＯＬＥＤ駆動回路２２５と同一の基板に実装されてもよい。この構成により、温度センサー２１７は主としてＯＬＥＤパネル２２３の温度を検出する。なお、温度センサー２１７は、ＯＬＥＤパネル２２３あるいはＯＬＥＤ駆動回路２２５（図２）に内蔵されてもよい。例えば、ＯＬＥＤパネル２２３がＳｉ−ＯＬＥＤとしてＯＬＥＤ駆動回路２２５と共に統合半導体チップ上の集積回路として実装される場合、この半導体チップに温度センサー２１７を実装してもよい。

左表示ユニット２４は、表示ユニット基板２３０と、ＯＬＥＤユニット２４１と、温度センサー２３９とを備える。表示ユニット基板２３０には、インターフェイス１９６に接続されるインターフェイス（Ｉ／Ｆ）２３１と、受信部（Ｒｘ）２３３と、６軸センサー２３５と、磁気センサー２３７とが実装されている。受信部２３３は、インターフェイス２３１を介して制御装置１０から入力されるデータを受信する。受信部２３３は、ＯＬＥＤユニット２４１で表示する画像の画像データを受信した場合に、受信した画像データをＯＬＥＤ駆動回路２４５（図２）へと出力する。

６軸センサー２３５は、３軸加速度センサーおよび３軸ジャイロ（角速度）センサーを備えるモーションセンサー（慣性センサー）である。６軸センサー２３５は、上記のセンサーがモジュール化されたＩＭＵを採用してもよい。磁気センサー２３７は、例えば、３軸の地磁気センサーである。６軸センサー２３５と磁気センサー２３７は、画像表示部２０に設けられているため、画像表示部２０が使用者の頭部に装着されているときには、使用者の頭部の動きを検出する。検出された頭部の動きから画像表示部２０の向き、すなわち、使用者の視界が特定される。

温度センサー２３９は、温度を検出し、検出した温度に対応する電圧値あるいは抵抗値を出力する。温度センサー２３９は、ＯＬＥＤパネル２４３（図２）の裏面側に実装される。温度センサー２３９は、例えばＯＬＥＤ駆動回路２４５と同一の基板に実装されてもよい。この構成により、温度センサー２３９は主としてＯＬＥＤパネル２４３の温度を検出する。温度センサー２３９は、ＯＬＥＤパネル２４３あるいはＯＬＥＤ駆動回路２４５（図２）に内蔵されてもよい。詳細は温度センサー２１７と同様である。

右表示ユニット２２のカメラ６１、照度センサー６５、温度センサー２１７と、左表示ユニット２４の６軸センサー２３５、磁気センサー２３７、温度センサー２３９は、制御装置１０のセンサーハブ１９２に接続される。センサーハブ１９２は、メインプロセッサー１４０の制御に従って各センサーのサンプリング周期の設定および初期化を行う。センサーハブ１９２は、各センサーのサンプリング周期に合わせて、各センサーへの通電、制御データの送信、検出値の取得等を実行する。センサーハブ１９２は、予め設定されたタイミングで、右表示ユニット２２および左表示ユニット２４が備える各センサーの検出値をメインプロセッサー１４０へ出力する。センサーハブ１９２は、各センサーの検出値を一時的に保持するキャッシュ機能を備えてもよい。センサーハブ１９２は、各センサーの検出値の信号形式やデータ形式の変換機能（例えば、統一形式への変換機能）を備えてもよい。センサーハブ１９２は、メインプロセッサー１４０の制御に従ってＬＥＤインジケーター６７への通電を開始および停止させることで、ＬＥＤインジケーター６７を点灯または消灯させる。

図６は、制御装置１０の構成を機能的に示すブロック図である。制御装置１０は、機能的には、記憶機能部１２２と、制御機能部１５０とを備える。記憶機能部１２２は、不揮発性記憶部１２１（図５）により構成される論理的な記憶部である。記憶機能部１２２は、記憶機能部１２２のみを使用する構成に代えて、不揮発性記憶部１２１に組み合わせてＥＥＰＲＯＭ２１５やメモリー１１８を使用する構成としてもよい。制御機能部１５０は、メインプロセッサー１４０がコンピュータープログラムを実行することにより、すなわち、ハードウェアとソフトウェアとが協働することにより構成される。

記憶機能部１２２には、制御機能部１５０における処理に供する種々のデータが記憶されている。具体的には、本実施形態の記憶機能部１２２は、設定データ格納部１２３と、コンテンツデータ格納部１２４と、ジェスチャーデータ格納部１２５と、キーワードデータ格納部１２６と、関連情報データ格納部１２７とを備える。設定データ格納部１２３には、ＨＭＤ１００の動作に係る各種の設定値が格納されている。例えば、設定データ格納部１２３には、制御機能部１５０がＨＭＤ１００を制御する際のパラメーター、行列式、演算式、ＬＵＴ（Ｌｏｏｋ Ｕｐ Ｔａｂｌｅ）等が格納されている。

コンテンツデータ格納部１２４には、制御機能部１５０の制御によって画像表示部２０が表示する画像や映像を含むコンテンツのデータ（画像データ、映像データ、音声データ等）が格納されている。なお、コンテンツデータ格納部１２４には、双方向型のコンテンツのデータが格納されていてもよい。双方向型のコンテンツとは、操作部１１０によって使用者の操作を取得して、取得した操作内容に応じた処理を制御機能部１５０が実行し、処理内容に応じたコンテンツを画像表示部２０に表示するタイプのコンテンツを意味する。この場合、コンテンツのデータには、使用者の操作を取得するためのメニュー画面の画像データ、メニュー画面に含まれる項目に対応する処理を定めるデータ等を含みうる。

ジェスチャーデータ格納部１２５には、ジェスチャーの種類と、表示対象物の関連情報の内容とが対応づけられた情報（以下、「対応情報」と呼ぶ）が格納されている。「ジェスチャー」とは、ＨＭＤ１００の使用者の体の一部の動きを意味し、本実施形態では、手の動き（動作）を意味する。また、「ジェスチャーの種類」とは、例えば、手を振る、手を握る等の手の動きの内容を意味する。なお、ジェスチャーは、ＨＭＤ１００の使用者によるジェスチャーに限られず、ＨＭＤ１００の使用者以外のジェスチャーを含んでもよい。また、ジェスチャーは、手の動き（動作）に限られず、手の指の動きでもよいし、足の動きでもよく、体の一部の動きであればよい。対応情報は、後述の表示対象物表示制御処理において、表示させる関連情報の内容を決定する際に利用される。ジェスチャーの種類および対応情報についての詳細な説明は、後述する。

キーワードデータ格納部１２６には、キーワードと、キーワードの種類とが予め対応づけられて格納されている。本実施形態において、「キーワードの種類」とは、ＨＭＤ１００の使用者により入力されたキーワードによって特定される表示対象物の画像の表示態様を決定する際に利用されるキーワードの分類を意味する。キーワードの種類は、「使用態様表示キーワード」と、「提示態様表示キーワード」と、「標準表示キーワード」と、の合計３種類が存在する。「使用態様表示キーワード」とは、表示対象物が実際に使用される状態を模した表示態様で表示対象物画像を表示させるキーワードである。「使用態様表示キーワード」に該当するキーワードは、例えば、「食べ物」が該当する。「提示態様表示キーワード」とは、表示対象物が実際に提示される態様を模した提示態様で表示対象物画像を表示させるキーワードである。「提示態様表示キーワード」に該当するキーワードは、例えば、「おしゃれ」が該当する。「標準表示キーワード」とは、使用態様表示キーワードおよび提示態様表示キーワードに該当しないキーワードであり、表示対象物画像をそのまま表示させるキーワードである。後述の表示対象物表示制御処理では、受け付けられたキーワードからキーワードの種類が特定され、特定されたキーワードの種類に応じた表示態様で表示対象物画像が表示される。

関連情報データ格納部１２７には、表示対象物と、表示対象物の関連情報とが対応づけられて格納されている。各関連情報は、予め優先度が設定されており、後述の表示対象物表示制御処理では、優先度の高い順に関連情報が表示される。なお、かかる優先度は、表示対象物表示制御処理において更新され、ジェスチャーの対象になった関連情報の優先度は上がり、ジェスチャーの対象にならなかった関連情報の優先度は下がるように変更される。本実施形態において、「ジェスチャーの対象」とは、ＨＭＤ１００の使用者がジェスチャーを行う際の対象物を意味する。ジェスチャーの対象は、例えば、画像表示部２０に表示される表示対象物画像、関連情報を示す画像が該当する。

制御機能部１５０は、記憶機能部１２２が記憶しているデータを利用して各種処理を実行することにより、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）１４３、画像処理部１４５、表示制御部１４７、撮像制御部１４９、入出力制御部１５１、ジェスチャー検出部１５３、キーワード特定部１５５としての機能を実行する。本実施形態では、ＯＳ１４３以外の各機能部は、ＯＳ１４３上で実行されるコンピュータープログラムとして構成されている。

画像処理部１４５は、画像表示部２０により表示する画像／映像の画像データに基づいて、右表示ユニット２２および左表示ユニット２４に送信する信号を生成する。画像処理部１４５が生成する信号は、垂直同期信号、水平同期信号、クロック信号、アナログ画像信号等であってもよい。画像処理部１４５は、メインプロセッサー１４０がコンピュータープログラムを実行して実現される構成のほか、メインプロセッサー１４０とは別のハードウェア（例えば、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）で構成してもよい。

なお、画像処理部１４５は、必要に応じて、解像度変換処理、画像調整処理、２Ｄ／３Ｄ変換処理等を実行してもよい。解像度変換処理は、画像データの解像度を右表示ユニット２２および左表示ユニット２４に適した解像度へと変換する処理である。画像調整処理は、画像データの輝度や彩度を調整する処理である。２Ｄ／３Ｄ変換処理は、三次元画像データから二次元画像データを生成し、あるいは、二次元画像データから三次元画像データを生成する処理である。画像処理部１４５は、これらの処理を実行した場合、処理後の画像データに基づき画像を表示するための信号を生成し、接続ケーブル４０を介して画像表示部２０へと送信する。

表示制御部１４７は、右表示ユニット２２および左表示ユニット２４を制御する制御信号を生成し、この制御信号により、右表示ユニット２２および左表示ユニット２４のそれぞれによる画像光の生成と射出とを制御する。具体的には、表示制御部１４７は、ＯＬＥＤ駆動回路２２５、２４５を制御して、ＯＬＥＤパネル２２３、２４３による画像の表示を実行させる。表示制御部１４７は、画像処理部１４５が出力する信号に基づいて、ＯＬＥＤ駆動回路２２５、２４５がＯＬＥＤパネル２２３、２４３に描画するタイミングの制御、ＯＬＥＤパネル２２３、２４３の輝度の制御等を行う。

また、表示制御部１４７は、後述の表示対象物表示制御処理において、表示対象物の画像（以下、「表示対象物画像」と呼ぶ）と、表示対象物に関連する関連情報（以下、「関連情報」と呼ぶ）と、を画像表示部２０に表示させる。後述の表示対象物表示制御処理では、表示制御部１４７は、表示対象物画像を視差のついた立体として表示させるとともに、表示対象物を示すキーワードの種類に応じた表示態様で表示対象物画像を表示させ、また、表示された表示対象物画像に対する使用者のジェスチャーの種類に応じた関連情報を表示させる。表示対象物表示制御処理についての詳細な説明は、後述する。なお、以降の説明において、表示対象物を検索対象物と呼ぶ場合がある。

撮像制御部１４９は、カメラ６１を制御して撮像を実行させ、撮像画像データを生成し、記憶機能部１２２に一時的に記憶させる。また、カメラ６１が撮像画像データを生成する回路を含むカメラユニットとして構成される場合、撮像制御部１４９は、撮像画像データをカメラ６１から取得して、記憶機能部１２２に一時的に記憶させる。

入出力制御部１５１は、トラックパッド１４（図１）と、方向キー１６と、決定キー１７とを適宜、制御して、これらから入力指令を受け付ける。受け付けられた入力指令は、ＯＳ１４３、またはＯＳ１４３と共にＯＳ１４３上で動作するコンピュータープログラムに出力される。本実施形態において、入出力制御部１５１は、後述の表示対象物表示制御処理において、画像表示部２０に表示される図示しないソフトキーボードから表示対象物を示すキーワードの文字入力を受け付ける。なお、本実施形態において、入出力制御部１５１は、課題を解決するための手段における入力受付部の下位概念に相当する。

ジェスチャー検出部１５３は、後述の表示対象物表示制御処理において、画像表示部２０に表示される表示対象物画像に対するジェスチャーを検出する。本実施形態において、「表示対象物画像に対するジェスチャー」とは、ＨＭＤ１００の使用者から見てジェスチャーが表示対象物画像から所定距離以下離れている場合のジェスチャーを意味する。ジェスチャー検出部１５３は、使用者の視界ＶＲの撮像画像を解析することにより、ジェスチャーの対象の表示対象物画像と、ジェスチャーの位置と、ジェスチャーの種類とをそれぞれ検出する。本実施形態において、「ジェスチャーの位置」とは、撮像画像におけるジェスチャーの検出位置を意味し、撮像画像におけるジェスチャーが行われた手の重心位置を意味する。なお、ジェスチャーの位置は、撮像画像におけるジェスチャーの検出位置に代えて、かかる検出位置に対応する表示領域ＰＮ内の位置でもよいし、ジェスチャーの対象となった表示対象物画像の表示位置でもよい。また、ジェスチャーの位置は、ジェスチャーが行われた手の重心位置に限らず、ジェスチャーが行われた手を含む領域の特徴点の位置でもよい。特徴点とは、例えば、かかる領域の重心点や、かかる領域の端点などを意味する。

キーワード特定部１５５は、後述の表示対象物表示制御処理において、キーワードデータ格納部１２６を参照して、受け付けられたキーワードの種類を特定する。

Ａ２．拡張現実感表示：
図７は、ＨＭＤ１００による拡張現実感表示の一例を示す説明図である。図７では、使用者の視界ＶＲを例示している。上述のようにして、ＨＭＤ１００の使用者の両眼に導かれた画像光が使用者の網膜に結像することにより、使用者は、表示領域ＰＮ内において、表示対象の対象画像ＡＩを拡張現実感（ＡＲ）として視認する。図７に示す例では、対象画像ＡＩは、ＨＭＤ１００のＯＳのメニュー画面である。メニュー画面には、例えば、「アナログ時計」、「メッセージ」、「ミュージック」、「ナビゲーション」、「カメラ」、「ブラウザー」、「カレンダー」、「電話」の各アプリケーションプログラムを起動するためのアイコン画像が含まれる。また、右導光板２６、左導光板２８が外界からの光を透過することで、使用者は外景ＳＣを視認する。このように、本実施形態のＨＭＤ１００の使用者は、視界ＶＲのうち対象画像ＡＩが表示された部分については、外景ＳＣに重なるようにして対象画像ＡＩを見ることができる。また、視界ＶＲのうち対象画像ＡＩが表示されていない部分については、外景ＳＣだけを見ることができる。

図７に示すように、対象画像ＡＩ上には、ポインター画像Ｐｔが表示されている。ポインター画像Ｐｔは、使用者が対象画像ＡＩ上に表示された各メニューを選択するために用いられる。図７に示す例では、使用者は、対象画像ＡＩ上の「ブラウザー」アイコン画像にポインター画像Ｐｔをあわせることで、「ブラウザー」メニューを選択している。使用者は、この状態で、トラックパッド１４上でタップ操作等を行うことにより、「ブラウザー」メニューを実行できる。

Ａ３．表示対象物表示制御処理：
先ず、図８に示す表示対象物表示制御処理の概要を説明する。ＨＭＤ１００の使用者が検索対象物のブラウジング（検索）をする際に、ＨＭＤ１００の使用者が検索対象物を指し示すキーワードを知っている場合、かかるキーワードを指定して検索を実行することにより、検索対象物の情報を比較的容易に取得し得る。しかし、ＨＭＤ１００の使用者が検索対象物を指し示すキーワードを知らない、或いは不確かなままである場合、比較的少ない回数で所望の検索対象物の情報を得ることは困難である。そこで、本実施形態では、検索対象物を示すキーワードの種類に応じた表示態様で検索対象物を表示し、また、表示された検索対象物に対する使用者のジェスチャーの種類に応じた関連情報を表示することによって、ＨＭＤ１００の使用者は、検索対象物の情報を容易に取得し得る。以下、詳細に説明する。

図８は、表示対象物表示制御処理の処理手順を示すフローチャートである。表示対象物表示制御処理は、予め定められた種類の検索が実行されると開始される。本実施形態において、「予め定められた種類の検索」は、ブラウジングを意味する。表示対象物表示制御処理は、図７に示す「ブラウザー」メニューが実行されて、「ブラウザー」アプリケーションが起動すると開始される。本実施形態では、ＨＭＤ１００の使用者が、自身に似合う流行の腕時計を探したいが適切なキーワードが分からずに、「腕時計、おしゃれ」というキーワードを入力した場合を例に説明する。図８に示すように、入出力制御部１５１は、キーワードの入力を受け付ける（ステップＳ１０５）。

図９は、ステップＳ１０５実行後の使用者の視界ＶＲの一例を模式的に示す説明図である。図９では、説明の便宜上、外景ＳＣの図示を省略している。図９に示すように、表示領域ＰＮには、対象画像ＡＩが表示されている。対象画像ＡＩは、「ブラウザー」アプリケーションの操作画面であり、検索ワードＫｗには「腕時計、おしゃれ」が入力されている。ＨＭＤ１００の使用者は、検索実行ボタンＢｔに図示しないポインター画像Ｐｔを重畳させてトラックパッド１４上をタップすることにより、検索を実行できる。このとき、入出力制御部１５１は、検索ワードＫｗに入力されているキーワード「腕時計」および「おしゃれ」の入力を受け付ける。

図８に示すように、ステップＳ１０５の実行後、キーワード特定部１５５は、受け付けられたキーワードを示す表示対象物を検索する（ステップＳ１１０）。具体的には、キーワード特定部１５５は、キーワードデータ格納部１２６を参照して、受け付けられたキーワードの示す表示対象物を検索する。

ステップＳ１１０の実行後、キーワード特定部１５５は、キーワードの種類を特定する（ステップＳ１１５）。具体的には、キーワード特定部１５５は、キーワードデータ格納部１２６を参照して、受け付けられたキーワードが、上述の「使用態様表示キーワード」、「提示態様表示キーワード」および「標準表示キーワード」のうちのいずれのキーワードの種類に該当するかを特定する。図９に示す例において、受け付けられたキーワードには、「おしゃれ」が含まれているため、キーワードの種類は、「使用態様表示キーワード」に特定される。

ステップＳ１１５の実行後、表示制御部１４７は、特定されたキーワードの種類に応じて、表示対象物画像を表示対象物が実際に使用される状態を模した表示態様で表示させる（ステップＳ１２０）。

図１０は、ステップＳ１２０実行後の使用者の視界ＶＲの一例を模式的に示す説明図である。図１０では、説明の便宜上、外景ＳＣの一部の図示を省略している。図１０に示すように、対象画像ＡＩには、「腕時計、おしゃれ」の検索結果として、種々の腕時計を示す表示対象物画像ＴＯ１、ＴＯ２、ＴＯ３、ＴＯ４およびＴＯ５が表示されている。また、表示対象物画像ＴＯ３は、画像表示部２０を透過して視認されるＨＭＤ１００の使用者の左腕ＬＨに重ねて表示されている。このような表示は、ＨＭＤ１００の使用者の左腕ＬＨにはめられた状態、すなわち、表示対象物である腕時計が実際に使用される状態を模している。なお、図示の便宜上、図示を省略しているが、各表示対象物画像ＴＯ１〜ＴＯ５は、視差の付いた立体として表示され、また、各表示対象物画像の相対的な大きさも実際の相対的な大きさと同様に表示されている。

図８に示すように、ステップＳ１２０の実行後、ジェスチャー検出部１５３は、表示対象物画像ＴＯ１〜ＴＯ５に対するジェスチャーを検出したか否かを判定する（ステップＳ１２５）。具体的には、ジェスチャー検出部１５３は、ＨＭＤ１００の使用者の視界ＶＲの撮像画像を解析することにより、使用者のジェスチャーを検出し、検出されたジェスチャーの位置（ジェスチャーが行われた領域）に基づいて、ジェスチャーの対象物を特定する。

表示対象物画像ＴＯ１〜ＴＯ５に対するジェスチャーを検出したと判定された場合（ステップＳ１２５：ＹＥＳ）、表示制御部１４７は、検出されたジェスチャーに応じて関連情報を表示させる（ステップＳ１３０）。本実施形態において、「応じて」とは、種類を意味する。すなわち、表示制御部１４７は、検出されたジェスチャーの種類に対応する関連情報を表示させる。

図１１は、ジェスチャーの種類と関連情報の内容との対応関係の一例を示す説明図である。対応情報ＧＬは、ジェスチャーデータ格納部１２５に予め記憶されている。図１１に示すように、対応情報ＧＬでは、ジェスチャーの種類と、関連情報の内容とが１対１に対応づけられている。なお、図１１において、関連情報の内容の欄に「−」と記載されている箇所は、ジェスチャーの種類に対して関連情報の内容が対応づけられていない。この場合、関連情報は表示されず、表示対象物画像が、ジェスチャーの種類に応じた表示態様で表示される。以下、詳細に説明する。

図１１のＮｏ．１に示すように、ジェスチャーの種類が「つかむ」である場合、関連情報は表示されず、ジェスチャーが行われた表示対象物を選択する表示がされる。本実施形態において、「つかむ」ジェスチャーとは、手のひらを開いて特定の位置で手のひらを閉じ、少し待つジェスチャーを意味する。例えば、表示対象物として、複数の果物の画像が表示されている場合に、特定の果物の画像に対する「つかむ」ジェスチャーが検出されると、かかる特定の果物を選択する表示がされる。なお、キーワードの種類が「使用態様表示キーワード」に該当する場合において、特定の表示対象物画像に対して「つかむ」ジェスチャーが検出された場合、かかる特定の表示対象物を選択する表示がされるとともに、選択された表示対象物の売れ行き等の関連情報を表示してもよい。

図１１のＮｏ．２に示すように、ジェスチャーの種類が「なでる」である場合、関連情報として、表示対象物の質感、材質が表示される。本実施形態において、「なでる」ジェスチャーとは、手のひらを開いて表示対象物の特定の場所に当てて、当てた手を動かすジェスチャーを意味する。例えば、表示対象物として複数の絨毯の画像が表示されている場合に、特定の絨毯の画像に対する「なでる」ジェスチャーが検出されると、かかる特定の絨毯の毛の太さおよび材質等の情報が表示される。

図１１のＮｏ．３に示すように、ジェスチャーの種類が「タッチ」である場合、関連情報は表示されず、ジェスチャーが行われた表示対象物を選択する表示がされる。本実施形態において、「タッチ」ジェスチャーとは、手のひら、手の指および握りこぶし等で、表示対象物を特定の位置に移動させるジェスチャー、あるいは、表示対象物を軽く触ってすぐに戻すジェスチャーを意味する。例えば、表示対象物として、位置情報および文字情報等が表示されている場合に、特定の位置情報に対する「タッチ」ジェスチャーが検出されると、かかる特定の情報を選択する表示がされる。

図１１のＮｏ．４に示すように、ジェスチャーの種類が「引っ張る」である場合、関連情報として、表示対象物の内部、機構が表示される。本実施形態において、「引っ張る」ジェスチャーとは、上述の「つかむ」ジェスチャー後に手を使用者に近づけるジェスチャーを意味する。例えば、表示対象物として、自動車の画像が表示されている場合に、かかる自動車のドアの取手部分に対する「引っ張る」ジェスチャーが検出されると、自動車の内装や、自動車の車室内の内装情報が表示される。

図１１のＮｏ．５に示すように、ジェスチャーの種類が「割る」である場合、関連情報として、表示対象物の内部、機構が表示される。本実施形態において、「割る」ジェスチャーとは、手を開き、指を伸ばして、手の側面方向に手を動かすジェスチャーを意味する。例えば、表示対象物として、りんごの画像が表示されている場合に、かかる画像に対する「割る」ジェスチャーが検出されると、りんごの断面の様子を示す情報（断面図）が表示される。

図１１のＮｏ．６に示すように、ジェスチャーの種類が「はさむ」である場合、関連情報として、表示対象物の長さが表示される。本実施形態において、「はさむ」ジェスチャーとは、両手、あるいは、手の指で表示対象物をはさむジェスチャーを意味する。例えば、表示対象物として、皿の画像が表示されている場合に、皿の直径を「はさむ」ジェスチャーが検出されると、かかる皿の直径を示す数値が表示される。

図１１のＮｏ．７に示すように、ジェスチャーの種類が「持ち上げる」である場合、関連情報として、表示対象物の重量が表示される。本実施形態において、「持ち上げる」ジェスチャーとは、上述の「つかむ」ジェスチャーの後、重力方向と反対方向へ表示対象物を移動させるジェスチャーを意味する。例えば、表示対象物として、皿の画像が表示されている場合に、かかる皿を「持ち上げる」ジェスチャーが検出されると、かかる皿の重量を示す数値が表示される。なお、例えば、自動車、家具のように、実世界において手で持ち上げることが困難である表示対象物に対しても「持ち上げる」ジェスチャーを行うことができ、かかる表示対象物の重量を示す情報が表示される。

図１１のＮｏ．８に示すように、ジェスチャーの種類が「つまむ」である場合、関連情報は表示されず、ジェスチャーが行われた表示対象物を選択する表示がされる。本実施形態において、「つまむ」ジェスチャーとは、２本以上の指で表示対象物をはさみこむように指を動かすジェスチャーを意味する。例えば、表示対象物として、いちごの画像が表示されている場合に、いちごの画像に対する「つまむ」ジェスチャーが検出されると、いちごを選択する表示がされる。

図１１のＮｏ．９に示すように、ジェスチャーの種類が「使う」である場合、関連情報として、表示対象物を実際に使用する際の情報が表示される。本実施形態において、「使う」ジェスチャーとは、表示対象物が実際に使用される状態を示すジェスチャーを意味し、表示対象物ごとに異なるジェスチャーである。例えば、表示対象物が野球のバットである場合における「使う」ジェスチャーとは、バットを振るジェスチャーが該当する。かかるジェスチャーが検出された場合、関連情報として、スイングフォームの情報が表示される。また、例えば、表示対象物が所定の食べ物である場合における「使う」ジェスチャーとは、所定の食べ物を食べる動作を示すジェスチャーが該当する。この場合、関連情報として、料理の材料、レシピおよび店舗情報等が表示される。

このように、上述のステップＳ１３０では、ＨＭＤ１００の使用者が行ったジェスチャーの種類や、ジェスチャーの対象の表示対象物に応じて、表示対象物の表示態様を異ならせて表示させる。すなわち、ＨＭＤ１００の使用者の行ったジェスチャーの対象が、使用者の所望する情報の対象であるとし、また、ＨＭＤ１００の使用者の行ったジェスチャーの種類が、使用者の所望する情報の内容であるとして、表示態様を切り替える。このように処理するのは、本実施形態では、ＨＭＤ１００の使用者が表示対象物をよく知らない場合を前提としていることから、使用者が表示対象物画像に対して直感的な操作をすることによって所望の情報を取得できるようにするためである。

図１２は、ステップＳ１３０実行後の使用者の視界ＶＲの一例を模式的に示す説明図である。図１２は、図１０に示す例について、上述のステップＳ１２５において、表示対象物画像ＴＯ３に対して、「つかむ」ジェスチャーが行われた場合を示している。図１２に示すように、対象画像ＡＩには、表示対象物画像ＴＯ３に加えて、関連情報ＲＯ１が表示されている。関連情報ＲＯ１は、例えば、表示対象物画像ＴＯ３の売れ行きを示す情報および検索された回数を示す情報等が該当する。

なお、図示は省略するが、例えば、図１０に示す例について、上述のステップＳ１２５において、表示対象物画像ＴＯ１に対して、所定のジェスチャーが行われた場合には、かかるジェスチャーの種類に応じた表示対象物画像ＴＯ１の関連情報が表示される。このように、表示制御部１４７は、表示対象物画像に対して行われるジェスチャーの位置に応じて、関連情報の対象となる表示対象物を定めるとともに、ジェスチャーの種類に応じた関連情報を表示させる。

図８に示すように、上述のステップＳ１３０の実行後、表示制御部１４７は、表示対象物表示制御処理を終了するか否かを判定する（ステップＳ１３５）。具体的には、表示制御部１４７は、「ブラウザー」アプリケーションの終了指示の有無を判定する。表示対象物表示制御処理を終了すると判定された場合（ステップＳ１３５：ＹＥＳ）、表示対象物表示制御処理は終了する。他方、表示対象物表示制御処理を終了しないと判定された場合（ステップＳ１３５：ＮＯ）、上述のステップＳ１２５に戻り、再びステップＳ１２５〜ステップＳ１３５が実行される。

上述のステップＳ１２５において、表示対象物画像ＴＯ１〜ＴＯ５に対するジェスチャーを検出していないと判定された場合（ステップＳ１２５：ＮＯ）、上述のステップＳ１３５が実行される。

以上説明した本実施形態のＨＭＤ１００によれば、予め定められたジェスチャーであって、表示された表示対象物画像に対するジェスチャーを検出するジェスチャー検出部１５３と、検出されたジェスチャーに応じた表示態様で表示対象物画像を表示させることと、検出されたジェスチャーの種類に応じた関連情報であって、表示対象物に関連する関連情報を表示させることと、を実行する表示制御部１４７と、を備える。したがって、検出されたジェスチャーに応じた表示態様で表示対象物画像を表示させることによって、表示対象物画像を表示させる際の操作性を向上でき、検出されたジェスチャーの種類に応じた関連情報であって表示対象物に関連する関連情報を表示させることによって、表示対象物に関連する情報を容易に取得できる。すなわち、ＨＭＤ１００によれば、表示対象物を検索する際の操作性を向上でき、また、表示対象物に関連する情報を容易に取得できる。

また、検出されたジェスチャーの位置に応じて、関連情報の内容が変更して表示されるので、使用者は、ジェスチャーを行う位置によって異なる関連情報を取得でき、種々の関連情報を容易に取得できる。さらに、受け付けられたキーワードにより特定される表示対象物画像が、受け付けられたキーワードの種類に応じて、該表示対象物が実際に使用される状態を模した表示態様で表示されるので、使用者は、表示対象物が実際に使用される状態を容易に想像することができ、使用者の利便性を向上できる。

加えて、文字によるキーワードの入力の入力が受け付けられるので、使用者の利便性を向上できる。また、表示対象物画像が視差のついた立体として表示されるので、表示対象物画像を目立たせることができ、表示対象物画像の視認性を向上できる。加えて、表示対象物画像は、検索対象物のブラウジング（検索）の結果であるので、検索対象物を検索する際の操作性を向上できる。

Ｂ．第２実施形態：
Ｂ１．透過型表示装置の全体構成：
第２実施形態における頭部装着型表示装置１００は、図１に示す第１実施形態における頭部装着型表示装置１００と同じであるので、その詳細な説明は省略する。

第２実施形態における制御機能部は、表示制御部１４７が表示対象物画像および関連情報に加えて対象物提示用画像を表示させる点と、ジェスチャー検出部１５３が表示対象物画像に対するジェスチャーに加えて対象物提示用画像に対するジェスチャーを検出する点とにおいて、第１実施形態における制御機能部１５０と異なる。第２実施形態における制御機能部のその他の構成は、第１実施形態の制御機能部１５０と同じであるので、その詳細な説明は省略する。

第２実施形態における表示制御部１４７は、特定されたキーワードの種類が「提示態様表示キーワード」である場合に、対象物提示用画像を表示させる。本実施形態において、「対象物提示用画像」とは、表示対象物の実際の提示態様を模すための画像であり、表示対象物が実際に提示される際に用いられる提示用物の画像を意味する。対象物提示用画像と表示対象物画像とは異なる画像である。また、「表示対象物の実際の提示態様」とは、例えば、小売店で表示対象物が販売される際の提示態様、展示会で表示対象物が展示される際の提示態様および食卓等で表示対象物が提供される際の提示態様等の実世界で用いられている種々の提示態様を含む広い概念である。

また、第２実施形態における表示制御部１４７は、対象物提示用画像に対するジェスチャーが検出された場合に、検出されたジェスチャーに応じて表示対象物画像を追加および削除して、表示対象物画像を表示させる。

第２実施形態におけるジェスチャー検出部１５３は、対象物提示用画像に対するジェスチャーを検出する。

Ｂ２．表示対象物表示制御処理：
図１３および図１４は、第２実施形態における表示対象物表示制御処理の処理手順を示すフローチャートである。第２実施形態における表示対象物表示制御処理は、ステップＳ１２０に代えてステップＳ１２０ａを実行する点と、ステップＳ１２１、ステップＳ１２２、ステップＳ１２６およびステップＳ１２７を追加して実行する点と、において、第１実施形態の表示対象物表示制御処理と異なる。第２実施形態の表示対象物表示制御処理におけるその他の手順は、第１実施形態の表示対象物表示制御処理と同じであるので、同一の手順には同一の符号を付し、その詳細な説明は省略する。

第２実施形態では、ＨＭＤ１００の使用者が、「りんご」に関する情報を探したいが適切なキーワードが分からずに、「赤い、食べ物」というキーワードを入力した場合を例に表示対象物表示制御処理の処理手順を説明する。第２実施形態の表示対象物表示制御処理では、図１３に示すように、キーワードの種類が特定されると（ステップＳ１１５）、表示制御部１４７は、特定されたキーワードの種類に応じて表示対象物画像を表示対象物の提示態様を模した提示態様で表示させる（ステップＳ１２０ａ）。第２実施形態の例では、入力されたキーワードに「食べ物」が含まれていることから、キーワードの種類が「提示態様表示キーワード」に特定されるため、表示対象物画像が表示対象物の提示態様を模した提示態様で表示されることになる。

ステップＳ１２０ａの実行後、表示制御部１４７は、対象物提示用画像を表示させるか否かを判定する（ステップＳ１２１）。具体的には、キーワードの種類と対象物提示用画像を表示させるか否かを対応づけてキーワードデータ格納部１２６に予め記憶しておき、表示制御部１４７は、キーワードデータ格納部１２６を参照して、特定されたキーワードの種類から表示対象物を提示する際に対象物提示用画像を要するか否かを判定する。

対象物提示用画像を表示させると判定された場合（ステップＳ１２１：ＹＥＳ）、表示制御部１４７は、対象物提示用画像を表示させる（ステップＳ１２２）。なお、ステップＳ１２２は、上述のステップＳ１２０ａと同時に実行してもよい。この構成は、上述のステップＳ１１５の実行後に上述のステップＳ１２１を実行することにより実現できる。

図１５は、ステップＳ１２２実行後の使用者の視界ＶＲの一例を模式的に示す説明図である。図１５では、説明の便宜上、外景ＳＣの図示を省略している。図１５に示すように、対象画像ＡＩには、表示対象物画像ＴＯ６、ＴＯ７、ＴＯ８およびＴＯ９と、対象物提示用画像ＳＯ１とが表示されている。表示対象物画像ＴＯ６〜ＴＯ９は、それぞれ、「赤い、食べ物」の検索結果を示しており、左から順に、表示対象物「りんご」の画像ＴＯ６、表示対象物「さくらんぼ」の画像ＴＯ７、表示対象物「桃」の画像ＴＯ８および表示対象物「いちご」の画像ＴＯ９である。

対象物提示用画像ＳＯ１は、ターンテーブルを示す画像であり、表示対象物である「食べ物」が実際に提示される際に用いられる提示用物の画像である。対象物提示用画像ＳＯ１は、画像に示された提示用物が実世界で実際に使用される際と同様な操作を行うことができるように構成されている。すなわち、ＨＭＤ１００の使用者は、対象物提示用画像ＳＯ１に対して、対象物提示用画像ＳＯ１に示される提示用物を実際に使用する際と同様な操作ができる。例えば、対象物提示用画像ＳＯ１に示すターンテーブルの場合、かかるターンテーブルを回す操作を行うことができる。

図１３に示すように、上述のステップＳ１２１において、対象物提示用画像を表示させないと判定された場合（ステップＳ１２１：ＮＯ）、または、上述のステップＳ１２２の実行後、図１４に示すように、上述のステップＳ１２５が実行される。ステップＳ１２５において、表示対象物画像に対するジェスチャーを検出していないと判定された場合（ステップＳ１２５：ＮＯ）、ジェスチャー検出部１５３は、対象物提示用画像ＳＯ１に対するジェスチャーを検出したか否かを判定する（ステップＳ１２６）。具体的には、上述のステップＳ１２５と同様に、ジェスチャー検出部１５３は、使用者の視界ＶＲの撮像画像を解析することにより、ジェスチャーの位置を検出して、対象物提示用画像ＳＯ１に対するジェスチャーか否かを判定する。また、ジェスチャー検出部１５３は、上述のステップＳ１２５と同様に、ジェスチャーの種類もあわせて検出する。

対象物提示用画像ＳＯ１に対するジェスチャーを検出したと判定された場合（ステップＳ１２６：ＹＥＳ）、表示制御部１４７は、検出されたジェスチャーに応じて表示対象物画像を追加して表示させる（ステップＳ１２７）。具体的には、図１５に示す例において、対象物提示用画像ＳＯ１に示すターンテーブルを時計回りに回すジェスチャーが検出された場合、表示対象物「りんご」の画像ＴＯ６が削除され、各表示対象物画像ＴＯ７〜ＴＯ９の表示位置がターンテーブルの回転方向に移動して表示され、表示対象物「いちご」の画像ＴＯ９が表示されていた位置に新たな表示対象物、例えば、「すいか」の画像が追加されて表示される。すなわち、表示制御部１４７は、ターンテーブルを回転させるジェスチャーに応じて、表示対象物画像を削除および追加して、表示対象物画像を表示させる。

図１４に示すように、上述のステップＳ１２７の実行後、または、上述のステップＳ１２６において、対象物提示用画像ＳＯ１に対するジェスチャーを検出していないと判定された場合（ステップＳ１２６：ＮＯ）、上述のステップＳ１３５が実行される。

図１６は、ステップＳ１３０実行後の使用者の視界ＶＲの一例を模式的に示す説明図である。図１６は、図１５に示す例について、上述のステップＳ１２５において、表示対象物「りんご」の画像ＴＯ６に対して、「つかむ」ジェスチャーが行われた場合を示している。図１６に示すように、対象画像ＡＩには、表示対象物「りんご」の画像ＴＯ６に加えて、関連情報ＲＯ２およびＲＯ３が表示されている。関連情報ＲＯ２は、表示対象物「りんご」の木を示す情報であり、「りんごの木」の外観を示す画像である。関連情報ＲＯ３は、表示対象物「りんご」の有名産地を示す情報であり、かかる有名産地の方向を矢印で示す画像である。有名産地の方向は、ＨＭＤ１００（制御装置１０）の現在位置に基づいて算出できる。なお、関連情報として表示させる情報の内容は、関連情報データ格納部１２７に記憶されており、関連情報に対応づけられている優先度の高い順に表示される。

図１７は、ステップＳ１３０実行後の使用者の視界ＶＲの一例を模式的に示す説明図である。図１７は、図１６に示す例について、上述のステップＳ１２５において、関連情報ＲＯ２の示す「りんごの木」に対して、「さわる」ジェスチャーが行われた場合を示している。図１７に示すように、対象画像ＡＩには、表示対象物「りんご」の画像ＴＯ６および関連情報ＲＯ２に加えて、関連情報ＲＯ４が表示されている。関連情報ＲＯ４は、ジェスチャーが行われた「りんごの木」に関連する情報である。

図１８は、ステップＳ１３０実行後の使用者の視界ＶＲの一例を模式的に示す説明図である。図１８は、図１６に示す例について、上述のステップＳ１２５において、表示対象物「りんご」の画像ＴＯ６に対して、「さわる」ジェスチャーが行われた場合を示している。図１８に示すように、対象画像ＡＩには、表示対象物「りんご」の画像ＴＯ６に加えて、関連情報ＲＯ５が表示されている。関連情報ＲＯ５は、ジェスチャーが行われた「りんご」に関連する情報である。

図１５、図１６、図１７および図１８を比較して理解できるように、表示制御部１４７は、検出されたジェスチャーの位置に応じて関連情報の内容を変更して表示させる。

以上説明した第２実施形態のＨＭＤ１００によれば、受け付けられたキーワードにより特定される表示対象物画像が、受け付けられたキーワードの種類に応じて、該表示対象物が実際に提示される態様を模した提示態様で表示されるので、使用者は、直感的に表示対象物を認識することができ、使用者の利便性を向上できる。また、表示対象物が実際に提示される際に用いられる提示用物の画像である対象物提示用画像が表示され、検出された対象物提示用画像に対するジェスチャーに応じて、表示対象物の画像が追加して表示されるので、使用者は、対象物提示用画像に対してジェスチャーを行うことによって、より多くの表示対象物画像を表示させることができ、表示対象物画像を表示させる際の操作性を向上できるので、使用者の利便性を向上できる。

Ｃ．他の実施形態：
Ｃ１．他の実施形態１：
上記第１実施形態において、特定されたキーワードの種類が「使用態様表示キーワード」である場合に、表示対象物画像は、表示対象物が実際に使用される状態を模した表示態様で表示されていたが、本発明はこれに限定されない。

図１９は、他の実施形態１における表示対象物画像の表示態様の一例を模式的に示す説明図である。図１９に示す例では、「壁掛け時計、おしゃれ」を検索した場合における使用者の視界ＶＲの一例を模式的に示している。図１９に示すように、対象画像ＡＩには、「壁掛け時計、おしゃれ」の検索結果として、種々の壁掛け時計を示す表示対象物画像ＴＯ７、ＴＯ８、ＴＯ９、ＴＯ１０およびＴＯ１１が表示されている。また、各表示対象物画像ＴＯ７〜ＴＯ１１は、小売店において壁掛け時計が実際に提示される態様を模した提示態様で表示されている。すなわち、特定されたキーワードの種類が「使用態様表示キーワード」である場合に、表示対象物画像は、表示対象物が実際に使用される状態を模した表示態様で表示されていない。このような構成においても、上記第１実施形態と同様な効果を奏する。

Ｃ２．他の実施形態２：
上記各実施形態では、受け付けられたキーワードが、「腕時計、おしゃれ」、「赤い、食べ物」および「壁掛け時計、おしゃれ」である場合における表示対象物および関連情報を例示したが、本発明はこれに限定されない。例えば、受け付けられたキーワードが「衣服」である場合、「衣服」をＨＭＤ１００の使用者が実際に身につける状態を模した表示態様で「衣服」の画像を表示してもよい。また、例えば、受け付けられたキーワードが「物理法則」である場合、物理にまつわる実世界の物、例えば、回路図、波形、計測器等の画像を表示してもよい。また、例えば、受け付けられたキーワードが「店舗情報」である場合、店舗の方向を示す矢印、地図、地球儀等の画像を表示してもよい。すなわち、一般には、受け付けられたキーワードの種類に応じて表示対象物が実際に使用される状態を模した表示態様で表示対象物画像を表示させる構成、あるいは、受け付けられたキーワードの種類に応じて表示対象物画像が実際に提示される態様を模した提示態様で表示対象物画像を表示させる構成であれば、上記各実施形態と同様な効果を奏する。

Ｃ３．他の実施形態３：
上記各実施形態において、表示制御部１４７は、検出されたジェスチャーに応じた表示態様で表示対象物画像を表示させることと、検出されたジェスチャーに応じた関連情報を表示させることと、のうちの両方を実行していたが、本発明はこれに限定されない。例えば、表示制御部１４７は、検出されたジェスチャーに応じた表示態様で表示対象物画像を表示させることのみを実行してもよい。また、例えば、検出されたジェスチャーに応じた関連情報を表示させることのみを実行してもよい。すなわち、一般には、検出されたジェスチャーに応じた表示態様で表示対象物画像を表示させることと、検出されたジェスチャーに応じた関連情報を表示させることと、のうち、少なくとも一方を実行する構成であれば、上記各実施形態と同様な効果を奏する。

Ｃ４．他の実施形態４：
上記各実施形態において、表示対象物表示制御処理のステップＳ１０５の実行後は、キーワードの入力を受け付けていなかったが、本発明はこれに限定されない。例えば、表示対象物画像を表示させた後（ステップＳ１２０またはステップＳ１２０ａの実行後）、キーワードの入力を受け付けてもよい。この構成では、ステップＳ１０５において入力したキーワードの検索結果として、使用者の所望する情報（表示対象物）を取得できなかった場合に、使用者が新たにキーワードを追加することにより、所望の情報に近づくような情報を取得できる。このような構成においても、上記各実施形態と同様な効果を奏する。

Ｃ５．他の実施形態５：
上記各実施形態において、文字によるキーワードの入力を受け付けていたが、本発明はこれに限定されない。例えば、ＨＭＤ１００の使用者の音声によるキーワードの入力を受け付けてもよい。また、例えば、文字による入力と音声による入力との両方の入力を受け付けてもよい。すなわち、一般には、文字によるキーワードの入力と、音声によるキーワードの入力と、のうち、少なくとも一方のキーワードの入力を受け付ける構成であれば、上記各実施形態と同様な効果を奏する。

Ｃ６．他の実施形態６：
上記各実施形態において、表示対象物画像は、視差のついた立体として表示されていたが、本発明はこれに限定されない。例えば、表示対象物画像は、視差のついていない平面画像として表示されてもよい。このような構成においても、上記各実施形態と同様な効果を奏する。

Ｃ７．他の実施形態７：
上記各実施形態において、ジェスチャー検出部１５３は、表示対象物画像に対するジェスチャーまたは対象物提示用画像に対するジェスチャーに加えて、「決定」を示すジェスチャーを検出してもよい。具体的には、「決定」を示すジェスチャーを予め定めておき、図８に示すステップＳ１２５の実行後に、「決定」を示すジェスチャーが検出されたか否かを判定する処理を実行してもよい。この構成では、「決定」を示すジェスチャーが検出されたと判定された場合に、上述のステップＳ１３０を実行してもよい。このような構成においても、上記各実施形態と同様な効果を奏する。

Ｃ８．他の実施形態８：
上記各実施形態において、表示制御部１４７は、関連情報データ格納部１２７を参照することにより、関連情報を取得していたが、本発明はこれに限定されない。例えば、関連情報データ格納部１２７を備えない構成においては、無線通信部１１７を介して、外部機器から関連情報を取得してもよい。このような構成においても、上記各実施形態と同様な効果を奏する。

Ｃ９．他の実施形態９：
上記各実施形態において、表示制御部１４７は、検出されたジェスチャーの位置に応じて関連情報の内容を変更して関連情報を表示させていたが、本発明はこれに限定されない。例えば、キーワードの追加入力を受け付ける構成においては、ジェスチャーの位置に代えて、追加されたキーワードの種類に応じて関連情報の内容を変更して関連情報を表示させてもよい。このような構成においても、上記各実施形態と同様な効果を奏する。

Ｃ１０．他の実施形態１０：
上記各実施形態において、キーワードの種類は３種類に分類されていたが、本発明はこれに限定されない。例えば、上述の３種類とは異なる任意の種類に分類されてもよい。また、例えば、キーワードの種類が分類されなくてもよい。この構成では、表示対象物が実際に使用される状態を模した表示態様で表示対象物画像を表示させてもよいし、表示対象物が実際に提示される状態を模した提示態様で表示対象物画像を表示させてもよいし、表示対象物画像をそのまま表示させてもよい。このような構成においても、上記各実施形態と同様な効果を奏する。

Ｃ１１．他の実施形態１１：
上記各実施形態において、受け付けられたキーワードおよび検出されたジェスチャーを履歴として記憶機能部１２２に記憶させておき、次回の表示対象物表示制御処理に利用してもよい。具体的には、受け付けられたキーワードと、ジェスチャーの対象となった表示対象物と、ジェスチャーの種類とを対応づけて記憶する。そして、記憶された情報を利用して使用者の意図を解析することにより、次回の表示対象物表示制御処理において、使用者の所望する情報をより迅速に提供し得る。

Ｃ１２．他の実施形態１２：
上記第２実施形態において、表示対象物が「食べ物」である場合における対象物提示用画像は「ターンテーブル」を示す画像であったが、本発明はこれに限定されない。例えば、表示対象物が「食べ物」である場合における対象物提示用画像は、「ビュッフェスタイル」を示す画像であってもよい。また、例えば、表示対象物が「指輪」である場合における対象物提示用画像は、「リングケース」を示す画像であってもよい。また、例えば、「指輪」が実際に提示される際にライトアップされて提示される場合には、対象物提示用画像は、「指輪」に光を当てる様子を模した画像であってもよい。すなわち、対象物提示用画像は、表示対象物の実際の提示態様を模すための画像であり、表示対象物が実際に提示される際に用いられる提示用物の画像である構成であれば、上記第２実施形態と同様な効果を奏する。

Ｃ１３．他の実施形態１３：
上記各実施形態において、ＯＬＥＤユニット２２１、２４１は、ＯＬＥＤパネルと、ＯＬＥＤパネル２２３、２４３を駆動するＯＬＥＤ駆動回路２２５、２４５とを有し、ＯＬＥＤパネル２２３、２４３は、有機エレクトロルミネッセンスにより発光しそれぞれ発する発光素子により構成される自発光型の表示パネルであったが、本発明はこれに限定されない。また、ＯＬＥＤパネル２２３、２４３は、Ｒ、Ｇ、Ｂの素子を１個ずつ含む単位を１画素とした複数の画素が、マトリクス状に配置されていたが、本発明はこれに限定されない。例えば、右表示ユニット２２および左表示ユニット２４は、それぞれ、光源部としてのＯＬＥＤパネルと、光源部が発する光を変調して複数の色光を含む画像光を出力する変調素子と、を備える映像素子として構成されてもよい。なお、ＯＬＥＤパネルが発する光を変調する変調装置は、透過型液晶パネルが採用される構成に限定されない。例えば、透過型液晶パネルに代えて反射型液晶パネルを用いてもよいし、デジタル・マイクロミラー・デバイスを用いてもよいし、レーザースキャン方式のレーザー網膜投影型のＨＭＤとしてもよい。このような構成においても、上記各実施形態と同様な効果を奏する。

Ｃ１４．他の実施形態１４：
上記各実施形態において、関連情報はジェスチャーの種類に応じた情報であったが、本発明はこれに限定されない。例えば、関連情報は、ジェスチャーの速度や強弱に応じた情報であってもよい。具体的には、「なでる」ジェスチャーの場合、関連情報は、なでる速度に応じた情報や、なでる強さに応じた情報であってもよい。すなわち、一般には、検出されたジェスチャーに応じた関連情報であって、表示対象物に関連する関連情報であれば、上記各実施形態と同様な効果を奏する。

Ｃ１５．他の実施形態１５：
上記各実施形態において、ジェスチャーの種類は、図１１に示す例に限定されない。例えば、連続する一つの領域で対象物と接するジェスチャー、互いに離れた複数の対象物と接するジェスチャー、対象物の位置を変えるジェスチャーおよび対象物の形を変えるジェスチャー等に該当する他の任意のジェスチャーであってもよい。このような構成においても、上記各実施形態と同様な効果を奏する。

Ｃ１６．他の実施形態１６：
上記各実施形態において、予め定められた種類の検索は、ブラウジングであったが、本発明はこれに限定されない。例えば、用語に基づく検索だけでなく、地図上での場所の検索であってもよい。また、例えば、関連ワードの検索であってもよい。具体的には、野球やサッカー等のスポーツの関連ワードの検索におけるルール、用具、トレーニング方法、観戦情報、チケット情報、有名選手等の検索であってもよい。また、歴史等の学習時の関連ワードの検索における人物、年号等の検索であってもよい。また、食べ物の関連ワードの検索におけるカロリー、レシピ、食材等の検索であってもよい。また、検索は、文字列入力による検索に限られず、画像マッチング、画像認証等の他の任意の検索方法であってもよく、文書検索、文字列検索、画像データの検索（画素検索）、音声データの検索（音声検索）等を含む広い概念を意味する。すなわち、一般には、表示対象物画像が予め定められた種類の検索の結果であれば、上記各実施形態と同様な効果を奏する。

本発明は、上述の実施形態に限られるものではなく、その趣旨を逸脱しない範囲において種々の構成で実現することができる。例えば、発明の概要の欄に記載した各形態中の技術的特徴に対応する実施形態中の技術的特徴は、上述の課題の一部又は全部を解決するために、あるいは、上述の効果の一部又は全部を達成するために、適宜、差し替えや、組み合わせを行うことが可能である。また、その技術的特徴が本明細書中に必須なものとして説明されていなければ、適宜、削除することが可能である。

１０…制御装置、１２…点灯部、１４…トラックパッド、１６…方向キー、１７…決定キー、１８…電源スイッチ、１９…バイブレーター、２０…画像表示部、２１…右保持部、２２…右表示ユニット、２３…左保持部、２４…左表示ユニット、２６…右導光板、２７…前部フレーム、２８…左導光板、３０…ヘッドセット、３２…右イヤホン、３４…左イヤホン、４０…接続ケーブル、４６…コネクター、６１…カメラ、６３…マイク、６５…照度センサー、６７…ＬＥＤインジケーター、１００…頭部装着型表示装置、１１０…操作部、１１１…６軸センサー、１１３…磁気センサー、１１５…ＧＮＳＳレシーバー、１１７…無線通信部、１１８…メモリー、１２０…コントローラー基板、１２１…不揮発性記憶部、１２２…記憶機能部、１２３…設定データ格納部、１２４…コンテンツデータ格納部、１２５…ジェスチャーデータ格納部、１２６…キーワードデータ格納部、１２７…関連情報データ格納部、１３０…電源部、１３２…バッテリー、１３４…電源制御回路、１４０…メインプロセッサー、１４５…画像処理部、１４７…表示制御部、１４９…撮像制御部、１５０…制御機能部、１５１…入出力制御部、１５３…ジェスチャー検出部、１５５…キーワード特定部、１８０…音声コーデック、１８２…音声インターフェイス、１８４…外部コネクター、１８６…外部メモリーインターフェイス、１８８…ＵＳＢコネクター、１９２…センサーハブ、１９６…インターフェイス、２１０…表示ユニット基板、２１１…インターフェイス、２１３…受信部、２１５…ＥＥＰＲＯＭ、２１７…温度センサー、２２１…ＯＬＥＤユニット、２２３…ＯＬＥＤパネル、２２５…ＯＬＥＤ駆動回路、２３０…表示ユニット基板、２３１…インターフェイス、２３３…受信部、２３５…６軸センサー、２３７…磁気センサー、２３９…温度センサー、２４１…ＯＬＥＤユニット、２４３…ＯＬＥＤパネル、２４５…ＯＬＥＤ駆動回路、２５１…右光学系、２５２…左光学系、２６１…ハーフミラー、２８１…ハーフミラー、ＡＩ…対象画像、Ｂｔ…検索実行ボタン、ＥＬ…端部、ＥＲ…端部、ＧＬ…対応情報、Ｋｗ…検索ワード、Ｌ…画像光、ＬＤ…視線、ＬＥ…左眼、ＬＨ…左腕、ＯＢ…対象物、ＯＬ…外光、ＰＮ…表示領域、Ｐｔ…ポインター画像、ＲＤ…視線、ＲＥ…右眼、ＲＯ１…関連情報、ＲＯ２…関連情報、ＲＯ３…関連情報、ＲＯ４…関連情報、ＲＯ５…関連情報、ＳＣ…外景、ＳＯ１…対象物提示用画像、ＴＯ１…表示対象物画像、ＴＯ２…表示対象物画像、ＴＯ３…表示対象物画像、ＴＯ４…表示対象物画像、ＴＯ５…表示対象物画像、ＴＯ６…表示対象物画像、ＴＯ７…表示対象物画像、ＴＯ８…表示対象物画像、ＴＯ９…表示対象物画像、ＴＯ１０…表示対象物画像、ＴＯ１１…表示対象物画像、ＶＲ…視界

Claims (10)

1. 透過型頭部装着型表示装置であって、
   外景を透過し外景とともに視認できるように表示対象物の画像を表示する画像表示部と、
   予め定められたジェスチャーであって、表示された前記表示対象物の画像に対するジェスチャーを検出するジェスチャー検出部と、
   検出された前記ジェスチャーに応じた表示態様で前記表示対象物の画像を表示させることと、検出された前記ジェスチャーに応じた関連情報であって、前記表示対象物に関連する関連情報を表示させることと、のうち、少なくとも一方を実行する表示制御部と、
   を備える、
   透過型頭部装着型表示装置。
2. 請求項１に記載の透過型頭部装着型表示装置において、
   前記表示制御部は、前記関連情報を表示させることを実行する場合に、検出された前記ジェスチャーの位置に応じて、前記関連情報の内容を変更して表示させる、
   透過型頭部装着型表示装置。
3. 請求項１または請求項２に記載の透過型頭部装着型表示装置において、
   キーワードの入力を受け付ける入力受付部を、さらに備え、
   前記表示制御部は、受け付けられた前記キーワードにより特定される表示対象物の画像を、受け付けられた前記キーワードの種類に応じて、前記キーワードにより特定される該表示対象物が実際に使用される状態を模した表示態様で表示させる、
   透過型頭部装着型表示装置。
4. 請求項１または請求項２に記載の透過型頭部装着型表示装置において、
   キーワードの入力を受け付ける入力受付部を、さらに備え、
   前記表示制御部は、受け付けられた前記キーワードにより特定される表示対象物の画像を、受け付けられた前記キーワードの種類に応じて、前記キーワードにより特定される該表示対象物が実際に提示される態様を模した提示態様で表示させる、
   透過型頭部装着型表示装置。
5. 請求項４に記載の透過型頭部装着型表示装置において、
   前記画像表示部は、前記表示対象物の画像とは異なる画像であって、前記表示対象物が実際に提示される際に用いられる提示用物の画像である対象物提示用画像を、さらに表示し、
   前記ジェスチャー検出部は、前記対象物提示用画像に対するジェスチャーを、さらに検出し、
   前記表示制御部は、検出された前記対象物提示用画像に対するジェスチャーに応じて、前記表示対象物の画像を追加して表示させる、
   透過型頭部装着型表示装置。
6. 請求項３から請求項５までのいずれか一項に記載の透過型頭部装着型表示装置において、
   前記入力受付部は、文字による前記キーワードの入力と、音声による前記キーワードの入力と、のうち、少なくとも一方の入力を受け付ける、
   透過型頭部装着型表示装置。
7. 請求項１から請求項６までのいずれか一項に記載の透過型頭部装着型表示装置において、
   前記表示制御部は、前記表示対象物の画像を視差のついた立体として表示させる、
   透過型頭部装着型表示装置。
8. 請求項１から請求項７までのいずれか一項に記載の透過型頭部装着型表示装置において、
   前記表示対象物の画像は、予め定められた種類の検索の結果である、
   透過型頭部装着型表示装置。
9. 外景を透過し外景とともに視認できるように表示対象物の画像を表示する画像表示部を備える透過型頭部装着型表示装置における表示制御方法であって、
   予め定められたジェスチャーであって、表示された前記表示対象物の画像に対するジェスチャーを検出する工程と、
   検出された前記ジェスチャーに応じた表示態様で前記表示対象物の画像を表示させることと、検出された前記ジェスチャーに応じた関連情報であって、前記表示対象物に関連する情報を表示させることと、のうち、少なくとも一方を実行する工程と、
   を備える、
   表示制御方法。
10. 外景を透過し外景とともに視認できるように表示対象物の画像を表示する画像表示部を備える透過型頭部装着型表示装置における表示制御を実現するためのコンピュータープログラムであって、
    予め定められたジェスチャーであって、表示された前記表示対象物の画像に対するジェスチャーを検出する機能と、
    検出された前記ジェスチャーに応じた表示態様で前記表示対象物の画像を表示させることと、検出された前記ジェスチャーに応じた関連情報であって、前記表示対象物に関連する情報を表示させることと、のうち、少なくとも一方を実行する機能と、
    をコンピューターに実現させる、
    コンピュータープログラム。

Images