JP5223835B2 - ヘッドマウントディスプレイ - Google Patents

Description

本発明は、ヘッドマウントディスプレイに関する。詳細には、撮像手段を備えたシースルー型ヘッドマウントディスプレイに関する。

従来より、コンテンツデータに応じて強度変調された光を外光と共にユーザの眼に入射させ、コンテンツデータに応じた表示を外景と重ねて行う表示手段を備え、ユーザの頭部に装着して用いられるシースルー型ヘッドマウントディスプレイ（以下、「ＨＭＤ」という）が知られている。

このＨＭＤは、作業マニュアル等のコンテンツを表示する手段として、医療、工場等の現場で活用され始めており、今後広く普及が期待されている。

特に、撮像手段を備え、ＨＭＤの装着者であるユーザの視野範囲を撮像可能としたＨＭＤは、作業状況などを撮像することができることから、作業マニュアルや作業記録などを容易に作ることができ、有用である。

このように撮像手段を備えたＨＭＤにおいて、特許文献１では、撮像範囲を示す撮像画枠を外景に重ねて表示するものが提案されている。このように撮像範囲を示す撮像画枠を表示することで、ユーザは、外景のどの範囲を撮像手段が撮像するかを容易に把握することができる。

特開２００５−２２１８８８号

しかし、上記特許文献１では、撮像画枠が断片的に撮像範囲の四隅に配置されるのみであるため、ユーザはその撮像画枠を視認しにくい。しかも、ＨＭＤを作業の補助機器として用いる場合、コンテンツを参照して作業中に外景を撮像しようとすると、表示される内容が、全体的な表示となるコンテンツから、表示面積が極めて小さい撮像画枠へと変更されてしまい、撮像画枠の把握に手間取ってしまう。

本発明は、上述したような課題に鑑みてなされたものであり、撮像範囲を明確に把握することができるＨＭＤを提供することを目的とする。

上記目的を達成するために、請求項１に係る発明は、コンテンツデータに応じて強度変調された光を外光と共にユーザの眼に入射させ、前記コンテンツデータに応じた表示を外景と重ねて行う表示手段を備えたシースルー型ヘッドマウントディスプレイにおいて、前記ユーザの視野範囲と重なる前記表示手段の表示領域の一部を撮像する撮像手段と、前記コンテンツデータを取得する取得手段と、前記取得手段で取得したコンテンツデータを加工して、当該コンテンツデータに応じた表示領域のうちの一部であって前記撮像手段の撮像範囲と重なる領域の輝度を、前記表示領域のうち前記撮像範囲と重なる領域以外の領域に対して低減させ、前記撮像範囲と重なる領域において前記ユーザによる外景の視認を可能にする加工手段と、前記取得手段で取得したコンテンツデータに応じた表示と前記加工手段によって加工したコンテンツデータに応じた表示とを選択的に前記表示手段により実行させる制御手段と、を備えることとした。
また、上記目的を達成するために、請求項２に係る発明は、コンテンツデータに応じて強度変調された光を外光と共にユーザの眼に入射させ、前記コンテンツデータに応じた表示を外景と重ねて行う表示手段を備えたシースルー型ヘッドマウントディスプレイにおいて、前記ユーザの視野範囲と重なる前記表示手段の表示領域の一部を撮像する撮像手段と、前記コンテンツデータを取得する取得手段と、前記取得手段で取得したコンテンツデータを加工して、当該コンテンツデータに応じた表示領域のうちの一部であって前記撮像手段の撮像範囲と重なる領域の輝度を、前記表示領域のうち前記撮像範囲と重なる領域以外の領域の輝度は保ちつつ低減させ、当該領域において前記ユーザによる外景の視認を可能にする加工手段と、前記取得手段で取得したコンテンツデータに応じた表示と前記加工手段によって加工したコンテンツデータに応じた表示とを選択的に前記表示手段により実行させる制御手段と、を備えることとした。

また、請求項３に係る発明は、請求項１又は請求項２に記載のシースルー型ヘッドマウントディスプレイにおいて、前記撮像手段は、前記撮像手段の撮像範囲を変更する変更手段をさらに備え、前記加工手段は、前記変更手段により変更された前記撮像手段の撮像範囲に対応させて、前記輝度を低減させる領域を変更することに特徴を有する。

また、請求項４に係る発明は、請求項３に記載のシースルー型ヘッドマウントディスプレイにおいて、前記変更手段は、ズーム光学機構及び／又はパンチルト機構を備えたことに特徴を有する。

また、請求項５に係る発明は、請求項１〜４のいずれか１項に記載のシースルー型ヘッドマウントディスプレイにおいて、前記撮像手段から出力される画像データを前記加工手段で加工したコンテンツデータと合成して、前記取得手段で取得したコンテンツデータに応じた表示領域のうち前記撮像手段の撮像範囲と重なる領域に、前記撮像手段の撮像画像を嵌め込んだ画像のデータを生成する合成手段を備えたことに特徴を有する。

また、請求項６に係る発明は、請求項１〜５のいずれか１項に記載のシースルー型ヘッドマウントディスプレイにおいて、前記制御手段は、ユーザによる所定操作に基づき、前記表示手段に表示させるコンテンツデータを、前記取得手段で取得したコンテンツデータから前記加工手段によって加工したコンテンツデータへ切り替えることに特徴を有する。

本発明では、コンテンツデータを加工して、このコンテンツデータに応じた表示領域のうち撮像手段の撮像範囲と重なる領域の輝度を低減させ、当該領域において前記ユーザによる外景の視認を可能とした。したがって、コンテンツデータに応じた表示から撮像範囲に対応する一部が、ユーザから視認可能に切り抜かれた状態となり、コンテンツデータの加工前後の表示の差が鮮明に現れるため、ユーザは撮像範囲の把握が極めて容易になる。すなわち、撮像範囲を明確に把握することができるＨＭＤを提供することができる。

本実施形態の概要を示す説明図である。 本実施形態の概要を示す説明図である。 本実施形態に係るＨＭＤの外観を示した説明図である。 画像表示ユニットの構成を示した説明図である。 本実施形態に係るＨＭＤの電気的構成及び光学的構成を示した説明図である。 表示制御部の電気的構成を示したブロック図である。 本実施形態に係るＨＭＤのメイン処理を示したフローチャートである。 スタンバイモード処理を示したフローチャートである。 カメラ調整及び画像加工処理を示したフローチャートである。 録画モード処理を示したフローチャートである。

以下、本実施形態に係るＨＭＤの一例について、図面を参照して説明する。なお、本実施形態では、ＨＭＤを、画像情報に基づいて強度変調した光を２次元的に走査し、その走査された光を当該ＨＭＤの使用者である観察者の眼に投射して網膜上に結像させる網膜走査型として説明するが、本発明はこれに限定されるものではない。すなわち、画像情報に応じて強度変調した光を観察者の眼に入射させ、当該画像情報に応じた画像を表示するシースルー型ＨＭＤであれば全てに適用することができる。

〔ＨＭＤの概要〕
まず、本実施形態に係るＨＭＤの概要について、図面を参照して説明する。図１は箱に収納された物品類を保管する作業現場において、荷山Ｎを構成する各箱Ａ〜Ｅの検品作業マニュアルの作成を開始しようとしているユーザＰを示した説明図である。なお、ここで作成しようとしている検品作業マニュアルは、文字や図形などの解説文書とともに、静止画や動画が表示されるマニュアルである。

図１（ａ）の拡大図に示すように、ＨＭＤ１は、制御ユニット部２と、画像表示ユニット４とを備えている。制御ユニット部２は、コンテンツデータ（ここでは解説文書）に応じて強度変調された光を出射し、画像表示ユニット４は、外光及び制御ユニット部２から出射された光をハーフミラー３を介してユーザＰの眼に入射する。これにより、ＨＭＤ１は、コンテンツデータに応じた表示を外景と重ね合わせて表示する。すなわち、ＨＭＤ１は、シースルー型のＨＭＤである。

また、画像表示ユニット４には、撮像手段としてのＣＣＤカメラ５ａを内蔵した撮像部５が備えられる。ＣＣＤカメラ５ａにて撮像した静止画や動画（以下、「撮像画像」という。）は、制御ユニット部２により記憶される。

そして、ユーザＰは、画像表示ユニット４により表示される解説文書を参照しながら、この解説文書の内容に合った静止画や動画を撮像して検品作業マニュアルを作成することができる。以下、荷山Ｎを構成する各箱Ａ〜Ｅの検品作業マニュアルを作成する手順を説明する。

まず、荷山Ｎを構成する各箱Ａ〜Ｅの検品作業マニュアルの作成を開始しようとするユーザＰからは、図１（ｂ）に示すように、荷山Ｎの前面に解説文書Ｋが表示されて見える。

ここで、ユーザＰが制御ユニット部２に備えられた所定のボタンを操作すると、ＨＭＤ１は撮像画像を記録可能な状態となる。なお、以下の説明においてこの状態を「スタンバイモード」といい、動画及び静止画を含め撮像画像を記録することを「録画」という。

このとき、図２（ａ）の左側の図に示すように、ユーザＰの視界内に表示されている解説文書Ｋの一部が矩形状に欠失してファインダー領域Ｆが形成され、ハーフミラー３越しに荷山Ｎの一部が視認される。なお、本概要説明では、ファインダー領域Ｆの輝度をゼロとして矩形状に欠失させることとしたが、必ずしもファインダー領域Ｆの輝度をゼロとする必要はない。例えば、荷山Ｎの一部が視認できる程度に、ファインダー領域Ｆの輝度が低減されてもよい。

このファインダー領域Ｆは、コンテンツデータに応じた表示領域のうち、撮像部５に内蔵したＣＣＤカメラ５ａの撮像範囲に対応する領域の輝度をゼロとすることで（低減することで）形成される。そのため、ファインダー領域Ｆを通して視認される荷山Ｎの一部の構図は、実際に撮像される静止画や動画の構図と略同じになる。なお、以下の説明において、コンテンツデータに応じた表示領域のうちＣＣＤカメラ５ａの撮像範囲と重なる領域を「重複領域」といい、コンテンツデータに応じた表示領域の重複領域の輝度を低減させる加工を「画像加工」といい、画像加工を行った画像を「加工画像」といい、この加工画像のデータを「加工画像データ」という。

したがって、図２（ａ）の右側の図に示すように、ユーザＰがファインダー領域Ｆ越しに箱Ａを見て、所定のボタンを操作することにより、制御ユニット部２にはユーザＰが見たファインダー領域Ｆ内の構図と略同じ構図で録画されることとなる（以下、「録画モード」という。）。

このように、本実施形態に係るＨＭＤ１は、コンテンツデータに応じた表示領域（ここでは、表示された解説文書が相当）のうち、ＣＣＤカメラ５ａの撮像範囲と重なる領域の輝度を低減させて加工画像とし、ファインダー領域ＦにおいてユーザＰによる外景の視認を可能にしている。そのため、ユーザＰはＨＭＤ１をスタンバイモードや録画モードとした際に、撮像範囲を可及的速やかに、かつ、明確に把握することが可能となる。

また、後に詳述するが、ＨＭＤ１は、ＣＣＤカメラ５ａの撮像範囲をズームしたり、パンチルトしたりする機構を備えている。

したがって、図２（ａ）に示した顔の位置のままで、例えばパンチルトを行うボタンを操作することによりＣＣＤカメラ５ａが撮像部５内で移動して、図２（ｂ）の右側の図に示すように箱Ｂを捉えるとともに、加工画像のファインダー領域Ｆの位置も移動し、ユーザＰに対して箱Ｂを視認させることとなる。以下、本実施形態に係るＨＭＤ１について、より詳細に説明する。

〔ＨＭＤ１の具体的構成及び動作〕
本実施形態に係るＨＭＤ１（図３（ａ）参照）は、ユーザＰの腰部に装着する制御ユニット部２と、ユーザＰが頭部に装着する頭部装着具６と、制御ユニット部２と頭部装着具６と接続する伝送ケーブル７とを備えている。

制御ユニット部２には、表示制御部１０が備えられている。この表示制御部１０は、同じく制御ユニット部２に内蔵した後述のコンテンツ記憶部１１に記憶されたコンテンツデータに基づいて、画像信号Ｓを形成する。また、制御ユニット部２には光源部１２が備えられている。光源部１２は、前述の画像信号Ｓに応じて各色（Ｒ,Ｇ,Ｂ）毎に強度変調されたレーザ光により形成される画像光を伝送ケーブル７へ出射する。

また、制御ユニット部２には、電源ボタン１３や操作入力部１４が配設されている。操作入力部１４は、パンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄや、録画ボタン１６ａ、録画停止ボタン１６ｂ、ズームインボタン１７ａ、ズームアウトボタン１７ｂを備えている。これらの電源ボタン１３や操作入力部１４の各ボタンは、表示制御部１０に電気的に接続されている。なお、以下、ズームインボタン１７ａ及びズームアウトボタン１７ｂを総称して「ズームボタン」ともいう。

さらに、制御ユニット部２には、標準設定と合成設定とを切り替える設定切替スイッチ１９が備えられている。この設定切替スイッチ１９は、左右方向へつまみ１９ａを移動させてモードを選択するスライドスイッチである。なお、標準設定や合成設定については後に詳述する。

また、制御ユニット部２には、外部入出力端子２０が設けられている。この外部入出力端子２０により、外部からの画像信号を入力したり、図示しないパーソナルコンピュータ等との間で画像信号を形成するためのコンテンツデータなどを送受信したりすることができる。なお、ここでコンテンツデータとは、文字を表示させるためのデータ、画像を表示させるためのデータ及び動画を表示させるためのデータのうちの少なくとも１つのデータで構成される画像情報であり、例えば、パーソナルコンピュータ等で使用される文書ファイルや画像ファイル、動画ファイル等である。

頭部装着具６は、ユーザＰの頭部に装着した状態において、伝送された画像光を走査してユーザＰの眼１１０に投射し、ユーザＰに対して画像を表示するものであり、外景を撮像する機能も有している。具体的には、図３（ａ）及び図３（ｂ）に示すように、頭部装着具６は、画像表示ユニット４と、支持フレーム２１とで構成される。

画像表示ユニット４は、図４に示すように、伝送ケーブル７より伝送されてきた画像光Ｌｂを２次元方向に走査してユーザＰの眼１１０に入射させ、ユーザＰの眼１１０の網膜上で画像光Ｌｂを２次元方向に走査する。これにより、ユーザＰに画像情報に応じた画像を視認させることができる。

この画像表示ユニット４には、ユーザＰの眼１１０と対向する位置にハーフミラー３が設けられている。外光Ｌａはハーフミラー３を透過してユーザＰの眼１１０に入射され、画像表示ユニット４から出射される画像光Ｌｂはハーフミラー３で反射してユーザＰの眼１１０に入射する。これにより、ユーザＰは外光Ｌａによる外景に画像光Ｌｂによる画像を重ねて視認することができる。なお、以下の説明において、この画像表示ユニット４と、伝送ケーブル７と、光源部１２とを併せて表示部２２と称する。この表示部２２は、コンテンツデータに応じて強度変調された光を外光と共にユーザの眼に入射させ、コンテンツデータに応じた表示を外景と重ねて行う表示手段として機能する。

このようにＨＭＤ１は、画像を光学的に導いて表示する表示部２２を備え、外光Ｌａを透過しつつ、画像光ＬｂをユーザＰの眼１１０に投射するシースルー型のヘッドマウントディスプレイである。

また、画像表示ユニット４には、その先端部２３に連結部材２４を介して撮像部５が取り付けられている。

この撮像部５の内部には、ＣＣＤカメラ５ａが配設されている。ＣＣＤカメラ５ａは、ハーフミラー３にて反射した外光Ｌａを受光することで、外景を撮像する。なお、このＣＣＤカメラ５ａは、録画ボタン１６ａが半押し状態又は全押し状態となった際に撮像動作を行う。

また、撮像部５には、ＣＣＤカメラ５ａによる撮像画像のズームを行うズーム光学機構２５と、ＣＣＤカメラ５ａを撮像部５内部で移動させるパンチルト機構２６が備えられている。このズーム光学機構２５及びパンチルト機構２６は、ＣＣＤカメラ５ａの撮像範囲を変更する変更手段として機能するものである。

特にパンチルト機構２６は、前述のファインダー領域Ｆから見える部分の外光Ｌａであってハーフミラー３にて撮像部５方向へ反射された外光Ｌａの光軸と、ＣＣＤカメラ５ａの光軸とが同一軸上となるように、ＣＣＤカメラ５ａの移動軌跡が凹球面状となるよう制御する。

次に、ＨＭＤ１の電気的構成及び光学的構成について図５を参照しながら説明する。図５に示すように、制御ユニット部２内には、表示制御部１０と、光源部１２とが備えられている。

（表示制御部１０）
表示制御部１０は、比較的大容量の記憶領域を有するコンテンツ記憶部１１に予め記憶されたコンテンツデータを読み出し、このコンテンツデータを画像信号Ｓに変換して、光源部１２に供給する。また、表示制御部１０は、外部入出力端子２０を介して外部接続した図示しない機器類から供給されるコンテンツデータを画像信号Ｓに変換し、光源部１２に供給することもできる。

また、表示制御部１０には、画像データ記憶部２７が電気的に接続されている。画像データ記憶部２７は、ＨＭＤ１が標準モードの際にＣＣＤカメラ５ａにて撮像した画像のデータや、後述する合成画像のデータを記憶する。なお、コンテンツ記憶部１１や画像データ記憶部２７は、例えば、ハードディスクの如き磁気的記憶媒体や、ＣＤ−Ｒの如き光学的記録媒体や、フラッシュメモリ等とすることができる。

また、表示制御部１０には、電源ボタン１３や操作入力部１４が電気的に接続されている。電源ボタン１３が押下されることにより、表示制御部１０は、図示しない電源部からの電力を供給したり停止したりする。また、表示制御部１０は、操作入力部１４への操作、すなわち、パンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄや、録画ボタン１６ａ、録画停止ボタン１６ｂ、ズームボタン１７ａ,１７ｂの操作を検知する。

特に、録画ボタン１６ａは、半押しした状態と、完全に押下した状態とで異なる信号を送出するスイッチとしており、表示制御部１０は、ユーザＰが録画ボタン１６ａを半押ししている状態と、完全に押下した状態とを判別可能としている。本実施形態に係るＨＭＤ１では、ユーザＰがこの録画ボタン１６ａを半押し状態としたときにスタンバイモードとなってコンテンツ画像上にファインダー領域Ｆが現れ、押下状態としたときに、録画が開始される構成としている。なお、以下の説明において、ユーザＰがこの録画ボタン１６ａを押していない状態を「解放状態」ともいう。

さらに、表示制御部１０には、標準設定と合成設定とを切り替える設定切替スイッチ１９（図１参照）が電気的に接続されている。

この設定切替スイッチ１９は、ＨＭＤ１が録画モードの際に、ＣＣＤカメラ５ａで撮像した撮像画像をそのまま録画する標準設定と、撮像画像のデータと、加工画像データとを合成して、重複領域に撮像画像を嵌め込んだ画像（以下、「合成画像」という。）を録画する合成設定とを切り替えるスイッチである。

光源部１２は、ユーザＰの眼に表示するための画像を形成する画像光を生成する部位であり、表示制御部１０に電気的に接続される駆動信号供給回路３０が備えられている。駆動信号供給回路３０は、表示制御部１０から供給された画像信号Ｓに基づいて、表示画像を形成するための要素となる後述の各駆動信号３１ｒ,３１ｇ,３１ｂを画素単位で生成する。また、駆動信号供給回路３０は、後述の高速走査部３２で使用される高速駆動信号３３と、低速走査部３４で使用される低速駆動信号３５とをそれぞれ出力する。

また、光源部１２には、Ｒ（赤色）レーザ３７、Ｇ（緑色）レーザ３８、Ｂ（青色）レーザ３９をそれぞれ駆動するためのＲレーザドライバ４１、Ｇレーザドライバ４２、Ｂレーザドライバ４３が設けられている。Ｒ,Ｇ,Ｂレーザドライバ４１,４２,４３は、駆動信号供給回路３０から画素単位で出力されるＲ,Ｇ,Ｂ駆動信号３１ｒ,３１ｇ,３１ｂをそれぞれ受信し、Ｒ,Ｇ,Ｂ駆動信号３１ｒ,３１ｇ,３１ｂに応じた大きさの駆動電流をＲ,Ｇ,Ｂレーザ３７,３８,３９に出力する。これにより、各レーザ３７,３８,３９は、画像信号Ｓに基づいて生成された各駆動信号３１ｒ,３１ｇ,３１ｂに応じてそれぞれ強度変調されたレーザ光（「光束」とも呼ぶ。）を出射する。各レーザ３７,３８,３９は、例えば、半導体レーザや高調波発生機構付き固体レーザとして構成することが可能である。なお、半導体レーザを用いる場合は駆動電流を直接変調して、レーザ光の強度変調を行うことができるが、固体レーザを用いる場合は、各レーザそれぞれに外部変調器を備えてレーザ光の強度変調を行う必要がある。

さらに、光源部１２には、各レーザ３７,３８,３９より出射されたレーザ光を平行光にコリメートするように設けられたコリメート光学系４５,４６,４７と、このコリメートされたレーザ光を合波するためのダイクロイックミラー４８,４９,５０と、合波されたレーザ光を伝送ケーブル７に導く結合光学系５１とが設けられている。従って、各レーザ３７,３８,３９から出射したレーザ光は、コリメート光学系３５,３６,３７によってそれぞれ平行化された後に、ダイクロイックミラー３８,３９,４０に入射される。その後、これらのダイクロイックミラー３８,３９,４０により、各レーザ光が波長選択的に反射または透過して結合光学系５１に達し、集光されて伝送ケーブル７へ出力される。

（画像表示ユニット４）
画像表示ユニット４は、伝送ケーブル７を介して入射する画像光を走査してユーザＰの眼１１０に投射する。この画像表示ユニット４には、走査部６０と、第２リレー光学系６４と、ハーフミラー３と、撮像部５とが備えられている。走査部６０は、光源部１２で生成され、伝送ケーブル７を介して出射されるレーザ光（画像光）を２次元方向に走査する。

具体的には、走査部６０には、伝送ケーブル７を介して出射されるレーザ光を平行光化するコリメート光学系６２と、このコリメート光学系６２で平行光化されたレーザ光を画像表示のために第１の方向に往復走査する高速走査部３２とが設けられている。また、走査部６０には、高速走査部３２で第１の方向に走査されたレーザ光を、第１の方向と直交する第２の方向に走査する低速走査部３４と、高速走査部３２と低速走査部３４との間に設けられた第１リレー光学系６３とが設けられている。走査部６０により走査されたレーザ光は、走査部６０から第２リレー光学系６４へ向けて出射される。なお、前述の第１の方向及び第２の方向は、例えば、表示する画像の水平方向を第１の方向をとし、表示する画像の垂直方向を第２の方向とすることが可能であるが、第１の方向が垂直方向、第２の方向が水平方向であっても良いのは言うまでもない。本実施形態に係るＨＭＤ１は、第１の方向を水平方向、第２の方向を垂直方向として説明する。

高速走査部３２及び低速走査部３４は、伝送ケーブル７から入射されたレーザ光を、画像としてユーザＰの網膜１１０ｂに投影可能な状態にするために、水平方向と垂直方向に走査して走査光束とする光学系である。高速走査部３２は、レーザ光を水平方向に走査するための偏向面（反射面）３２ｂを有する共振型の偏向素子３２ａと、この偏向素子３２ａを共振させて偏向面３２ｂを揺動させる駆動信号を高速駆動信号３３に基づいて発生する高速走査駆動回路３２ｃを備えている。一方、低速走査部３４は、レーザ光を垂直方向に走査するための偏向面（反射面）３４ｂを有する非共振型の偏向素子３４ａと、この偏向素子３４ａの偏向面３４ｂを非共振状態で強制的に揺動させる駆動信号を低速駆動信号３５に基づいて発生する低速走査制御回路３４ｃとを備えている。そして、低速走査部３４は、表示すべき画像の１フレームごとに、水平方向に走査された画像を形成するためのレーザ光を垂直方向に走査して２次元走査された画像を形成している。なお、偏向素子３２ａ,３４ａとしてガルバノミラーなどを用いることができる。

また、高速走査部３２と低速走査部３４との間でレーザ光を中継する第１リレー光学系６３は、偏向素子３２ａの偏向面３２ｂによって水平方向に走査されたレーザ光を偏向素子３４ａの偏向面３４ｂに収束させる。そして、このレーザ光が偏向素子３４ａの偏向面３４ｂによって垂直方向に走査され、画像光Ｌｂとして第２リレー光学系６４へ向け出射される。

第２リレー光学系６４には、正の屈折力を持つ第１レンズ６４ａと第２レンズ６４ｂとが直列配置されている。第２リレー光学系６４は、走査部６０によって走査されたレーザ光を収束させ、ハーフミラー３を介してユーザＰの眼１１０にその瞳孔１１０ａから入射する。これによってユーザＰは、網膜１１０ｂ上に投影されたレーザ光よる画像を認識することができる。

また、本実施形態に係る画像表示ユニット４には、撮像部５が備えられている。撮像部５は、ハーフミラー３を介して外光Ｌａを受光し外景を撮像するＣＣＤカメラ５ａと、ＣＣＤカメラ５ａに備えられた図示しないレンズ系を操作してズームイン又はズームアウトを行うズーム光学機構２５と、ＣＣＤカメラ５ａを凹球面状の軌跡に沿って移動させることによりパンチルトを行うパンチルト機構２６とを備えている。

ＣＣＤカメラ５ａは、重複領域に該当する部分の外景をハーフミラー３を介して撮像し、撮像信号５ｂとして表示制御部１０へ送信する。

ズーム光学機構２５は、ＨＭＤ１がスタンバイモード又は録画モードの際に、ユーザＰが操作入力部１４のズームボタン１７ａ,１７ｂを操作することで表示制御部１０より出力されるズーム信号２５ａに応じて、ＣＣＤカメラ５ａのレンズ系を操作する。

パンチルト機構２６は、ＨＭＤ１がスタンバイモード又は録画モードの際に、ユーザＰが操作入力部１４のパンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄを操作することで表示制御部１０より出力されるパンチルト信号２６ａに応じて、ＣＣＤカメラ５ａの移動を行う。

〔表示制御部１０の電気的構成〕
次に、表示制御部１０の構成について、図６を参照しながら説明する。図６は、表示制御部１０の電気的構成を示したブロック図である。

表示制御部１０は、ＣＰＵ１００と、ＲＯＭ１０１と、ＲＡＭ１０２と、駆動信号供給回路用インターフェース１０３と、駆動信号供給回路用ＶＲＡＭ１０４と、ＣＣＤカメラ用インターフェース１０５と、ＣＣＤカメラ用ＶＲＡＭ１０６と、周辺機器用インターフェース１０７と、通信インターフェース１０８とを備える。これらの表示制御部１０の構成要素は、システムバス１０９を介して相互に接続されている。

ＲＯＭ１０１には、ＣＰＵ１００で実行されることにより、後述するフローチャートに従った処理を実現するためのプログラムが記憶されている。

ＲＡＭ１０２は、ＲＯＭ１０１に記憶されているプログラムをＣＰＵ１００が実行する際に参照する各種変数などを記憶しておく一時記憶領域として機能する。

駆動信号供給回路用インターフェース１０３は、駆動信号供給回路３０との接続を担うものであり、駆動信号供給回路用ＶＲＡＭ１０４を参照して、画像信号Ｓを生成し駆動信号供給回路３０に供給する。なお、駆動信号供給回路用ＶＲＡＭ１０４のデータは、ＣＰＵ１００によって書き込まれる。すなわち、ＣＰＵ１００はコンテンツ記憶部１１から周辺機器用インターフェース１０７を介してコンテンツデータを読み出し、駆動信号供給回路用ＶＲＡＭ１０４に書き込んで展開するようにしている。

ＣＣＤカメラ用インターフェース１０５は、ＣＣＤカメラ５ａとの接続を担うものであり、ＣＣＤカメラ５ａから送信される撮像信号を受信して所定のデータに変換し、ＣＣＤカメラ用ＶＲＡＭ１０６に書き込みを行う。

周辺機器用インターフェース１０７は、表示制御部１０に接続された周辺機器類の動作制御や信号の送受信を担うものである。この周辺機器用インターフェース１０７には、コンテンツ記憶部１１や、電源ボタン１３や、操作入力部１４や、設定切替スイッチ１９や、ズーム光学機構２５や、パンチルト機構２６や、画像データ記憶部２７が接続されている。

周辺機器用インターフェース１０７は、ＣＰＵ１００からの命令により、コンテンツ記憶部１１からコンテンツデータを読み出し、ＲＡＭ１０２上の所定アドレスに書き込みを行う。

電源ボタン１３や操作入力部１４から送信される操作信号を受信した周辺機器用インターフェース１０７は、それぞれに対応するＲＡＭ１０２上の所定アドレスに、これらのボタンの操作があった旨を示すフラグを立てる。また、周辺機器用インターフェース１０７は設定切替スイッチ１９のスライド位置を監視しており、そのスライド位置をＲＡＭ１０２上の所定アドレスに書き込みを行う。

また、操作入力部１４のズームボタン１７ａ,１７ｂをユーザＰが操作した際には、周辺機器用インターフェース１０７は、ＣＰＵ１００からの命令により、ズーム光学機構２５に対してズーム信号を送信する。

また、操作入力部１４のパンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄをユーザＰが操作した際には、周辺機器用インターフェース１０７は、ＣＰＵ１００からの命令により、パンチルト機構２６に対してパンチルト信号２６ａを送信する。

また、周辺機器用インターフェース１０７は、画像データ記憶部２７に対して、撮像画像や合成画像の書き込みや読み出しを行う。

なお、上述のＲＡＭ１０２上に記憶されるフラグや設定切替スイッチ１９のスライド位置は、後述のフローチャートに示す処理を実行する際に、ＣＰＵ１００から参照可能としており、これによりＣＰＵ１００は各種ボタンやスイッチなどのユーザＰによる操作を検出する。

通信インターフェース１０８は、表示制御部１０に接続された機器類との信号の送受信を担うものであり、外部入出力端子２０が接続されている。

〔表示制御部１０の処理動作〕
次に、ＨＭＤ１における表示制御部１０での処理について、図７〜図１０を用いて説明する。図７は、本実施形態に係るＨＭＤ１のメイン処理を示したフローチャートであり、図８はメイン処理にて実行されるスタンバイモード処理を示したフローチャートであり、図９はスタンバイモード処理や録画モード処理にて実行されるカメラ調整及び画像加工処理を示したフローチャートであり、図１０は録画モード処理を示したフローチャートである。

まず、図７のメイン処理から順に説明する。表示制御部１０のＣＰＵ１００は、ＲＡＭ１０２のアクセス許可、作業領域を初期化等の初期設定を実行する（ステップＳ１１）。

次にＣＰＵ１００は、コンテンツ画像表示処理を実行する（ステップＳ１２）。このコンテンツ画像表示処理でＣＰＵ１００は、駆動信号供給回路用インターフェース１０３に対し、コンテンツ記憶部１１より取得したコンテンツデータに応じて強度変調された光を出射させるための画像信号Ｓを生成するよう命令し、表示部２２にコンテンツデータに応じた表示を行わせる。

次にＣＰＵ１００は、ＲＡＭ１０２の所定アドレスを参照し、録画ボタン１６ａが半押し状態、または、全押し状態であるか否かについて判断を行う（ステップＳ１３）。ここで、録画ボタン１６ａが半押し状態または全押し状態であると判断した場合（ステップＳ１３：Ｙｅｓ）には、ＣＰＵ１００は、処理をステップＳ１４へ移す。一方、ステップＳ１３において、録画ボタン１６ａが半押し状態または全押し状態ではないと判断した場合（ステップＳ１３：Ｎｏ）には、ＣＰＵ１００は処理をステップＳ１５へ移す。なお、ＣＰＵ１００が本ステップＳ１３を実行することにより、後述の取得手段で取得したコンテンツデータに応じた表示と、後述の加工手段によって加工したコンテンツデータに応じた表示とを選択的に表示手段により実行させる制御手段として機能する。また、ＣＰＵ１００が、ユーザＰの操作により変化する録画ボタン１６ａの状態を判断して本ステップＳ１３を実行することにより、ユーザによる所定操作に基づき、表示手段に表示させるコンテンツデータを、後述の取得手段で取得したコンテンツデータから後述の加工手段によって加工したコンテンツデータへ切り替える制御手段となる。

ステップＳ１４においてＣＰＵ１００は、スタンバイモード処理を実行する。このスタンバイモード処理が行われている間は、ＣＣＤは撮り回し状態、すなわち、フレームレート毎にＣＣＤカメラ５ａから撮像信号がＣＣＤカメラ用ＶＲＡＭ１０６に送られる状態となる。このスタンバイモード処理については、図８を参照しながら後に詳述する。このステップＳ１４を終えると、ＣＰＵ１００は処理をステップＳ１５へ移す。

ステップＳ１５においてＣＰＵ１００は、電源ボタン１３や図示しない画像停止ボタンが押下されるなどして、画像表示が停止されたか否かについて判断を行う。ここで画像表示が停止されていないと判断された場合（ステップＳ１５：Ｎｏ）には、ＣＰＵ１００は、処理を再びステップＳ１２へ戻す。一方、画像表示が停止されたと判断された場合（ステップＳ１５：Ｙｅｓ）には、ＣＰＵ１００は、処理を終了する。

次に、メインフローにおけるステップＳ１４にて実行されるスタンバイモード処理について図８を参照しながら説明する。

まず、スタンバイモード処理においてＣＰＵ１００は、カメラ調整及び画像加工処理を実行する（ステップＳ２１）。このカメラ調整及び画像加工処理については、図９を参照しながら後に詳述する。

次にＣＰＵ１００は、ＲＡＭ１０２の所定アドレスを参照し、録画ボタン１６ａが全押し状態であるか否かについて判断を行う（ステップＳ２２）。ここで録画ボタン１６ａが全押し状態であると判断された場合（ステップＳ２２：Ｙｅｓ）には、ＣＰＵ１００は処理をステップＳ２３へ移す。

ステップＳ２３においてＣＰＵ１００は、録画モード処理を実行する。この録画モード処理については、図１０を参照しながら後に詳述する。この録画モード処理を終了するとＣＰＵ１００は、処理をメインフローへ戻す。

一方、ステップＳ２２において、録画ボタン１６ａが全押し状態ではないと判断された場合（ステップＳ２２：Ｎｏ）には、ＣＰＵ１００は処理をステップＳ２４へ移す。

ステップＳ２４においてＣＰＵ１００は、録画ボタン１６ａの半押し状態が維持されているか、または、録画ボタン１６ａを解放してから５秒以内であるか否かについて判断を行う。ここで前記条件に合致すると判断した場合（ステップＳ２４：Ｙｅｓ）には、ＣＰＵ１００は再び処理をステップＳ２１へ戻す。一方、前記条件に合致しないと判断した場合（ステップＳ２４：Ｎｏ）には、ＣＰＵ１００は処理をメインフローへ戻す。なお、本実施形態では、ズームボタン１７ａ,１７ｂやパンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄの操作状態にかかわらず、録画ボタン１６ａを解放してから５秒経過すると処理をメインフローへ戻す（ファインダー領域Ｆをなくす）こととしたが、ズームボタン１７ａ,１７ｂやパンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄを操作している場合には、録画ボタン１６ａを解放してから５秒経過しても、ファインダー領域Ｆを形成したままの状態を維持するよう構成しても良い。

次に、スタンバイモード処理におけるステップＳ２１にて実行されるカメラ調整及び画像加工処理について図９を参照しながら説明する。

まず、カメラ調整及び画像加工処理においてＣＰＵ１００は、ＲＡＭ１０２の所定アドレスを参照し、ズームボタン１７ａ,１７ｂの操作があるか否かについて判断を行う（ステップＳ３１）。ここで、ズームボタン１７ａ,１７ｂの操作があったと判断した場合（ステップＳ３１：Ｙｅｓ）には、ＣＰＵ１００は処理をステップＳ３２へ移す。

ステップＳ３２においてＣＰＵ１００は、ズーム処理を実行する。このズーム処理でＣＰＵ１００は、周辺機器用インターフェース１０７に、ズーム光学機構２５に対し、押下したズームボタン１７ａ,１７ｂの種類や、押下時間に応じたズーム信号を送出させるよう命令する。このズーム処理を終了するとＣＰＵ１００は、処理をステップＳ３３へ移す。

一方、ステップＳ３１においてズームボタン１７ａ,１７ｂの操作がないと判断した場合（ステップＳ３１：Ｎｏ）には、ＣＰＵ１００は処理をステップＳ３３へ移す。

ステップＳ３３においてＣＰＵ１００は、ＲＡＭ１０２の所定アドレスを参照し、パンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄの操作があるか否かについて判断を行う。ここで、パンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄの操作があったと判断した場合（ステップＳ３３：Ｙｅｓ）には、ＣＰＵ１００は処理をステップＳ３４へ移す。

ステップＳ３４においてＣＰＵ１００は、パンチルト処理を実行する。このパンチルト処理でＣＰＵ１００は、周辺機器用インターフェース１０７に、パンチルト機構２６に対し、押下したパンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄの種類や、押下時間に応じたパンチルト信号を送出させるよう命令する。このパンチルト処理を終了するとＣＰＵ１００は、処理をステップＳ３５へ移す。

一方、ステップＳ３３においてパンチルトボタン１５ａ,１５ｂ,１５ｃ,１５ｄの操作がないと判断した場合（ステップＳ３３：Ｎｏ）には、ＣＰＵ１００は処理をステップＳ３５へ移す。

ステップＳ３５においてＣＰＵ１００は、周辺機器用インターフェース１０７に対して、コンテンツ記憶部１１からコンテンツデータを取得し、ＲＡＭ１０２上の所定アドレスに書き込むよう命令する。なお、ＣＰＵ１００が本ステップＳ３５を実行することにより、コンテンツデータを取得する取得手段として機能する。

なお、本実施形態に係るＨＭＤ１は、上述のように、制御ユニット部２内に内蔵したコンテンツ記憶部１１よりコンテンツデータを取得することとしたが、これに限定されるものではない。例えば、外部入出力端子２０に、コンテンツデータを備える外部接続機器が接続され、ＨＭＤ１は、この外部接続機器からコンテンツデータを取得しても良い。

次にＣＰＵ１００は、ＲＡＭ１０２上のコンテンツデータを加工して、コンテンツデータを構成する文字や図形のうち、表示される場所が重複領域内となる文字や図形を重複領域外に移動させるレイアウト変更処理を実行する（ステップＳ３６）。なお、重複領域は、表示されるコンテンツデータ上の座標との対応がとられている。具体的には、画像が視認される方向と画角とは、画像表示ユニット４では定まっている。また、ＣＣＤカメラ５ａの方向と視野角とは、ズーム信号２５a及びパンチルト信号２６ａをモニタすることで分かる。そして、両者の関係から、画像上のどの位置が重複領域となるのかが分かることとなる。

次にＣＰＵ１００は、レイアウト変更処理が施されたコンテンツデータのうち、重複領域に該当する部分の輝度に関するデータを、輝度を低下させるデータに書き換えてファインダー領域Ｆを形成し、加工画像データを生成する（ステップＳ３７）。なお、ＣＰＵ１００が前述のステップＳ３６及び本ステップＳ３７を実行することにより、取得手段で取得したコンテンツデータを加工して、重複領域の輝度を低減させ、当該領域において前記ユーザによる外景の視認を可能にする加工手段として機能する。本ステップＳ３７を終えたＣＰＵ１００は、処理を分岐前のフローに戻す。

次に、スタンバイモード処理におけるステップＳ２３にて実行される録画モード処理について図１０を参照しながら説明する。

まず、録画モード処理においてＣＰＵ１００は、カメラ調整及び画像加工処理を実行する（ステップＳ４１）。このカメラ調整及び画像加工処理については、先に図９を用いて述べたため、説明を省略する。

次にＣＰＵ１００は、ＣＣＤカメラ用ＶＲＡＭ１０６上の撮像画像データを、ＲＡＭ１０２の所定アドレスにコピーする。（ステップＳ４２）。

次にＣＰＵ１００は、ＲＡＭ１０２の所定アドレスを参照し、設定切替スイッチ１９の設定が合成設定であるか否かについて判断を行う（ステップＳ４３）。ここで設定切替スイッチ１９の設定が合成設定であると判断した場合（ステップＳ４３：Ｙｅｓ）には、処理をステップＳ４４へ移す。一方、設定切替スイッチ１９の設定が合成設定ではないと判断した場合（ステップＳ４３：Ｎｏ）には、ＣＰＵ１００は、処理をステップＳ４５へ移す。

ステップＳ４４においてＣＰＵ１００は、ステップＳ４１にてＲＡＭ１０２上に形成された加工画像データのうち、ファインダー領域Ｆに該当する部分のデータを、撮像画像データで置換して合成画像を生成する。なお、ＣＰＵ１００が本ステップＳ４４を実行することにより、撮像手段から出力される画像データを加工手段で加工したコンテンツデータと合成して、取得手段で取得したコンテンツデータに応じた表示領域のうち撮像手段の撮像範囲と重なる領域に、撮像手段の撮像画像を嵌め込んだ画像のデータを生成する合成手段として機能する。

ステップＳ４５においてＣＰＵ１００は、生成された画像データを画像データ記憶部２７に書き込むよう、周辺機器用インターフェース１０７に対して命令する。具体的には、設定切替スイッチ１９が合成設定であった場合には、画像データ記憶部２７に合成画像データが書き込まれて録画され、設定切替スイッチ１９が標準設定であった場合には、画像データ記憶部２７に撮像画像データが書き込まれて録画されることとなる。

次にＣＰＵ１００は、ＲＡＭ１０２の所定アドレスを参照し、録画停止ボタン１６ｂが押下されたか否かについて判断を行う（ステップＳ４６）。ここで録画停止ボタン１６ｂは押下されていないと判断した場合（ステップＳ４６：Ｎｏ）には、ＣＰＵ１００は処理を再びステップＳ４１へ戻す。一方、録画停止ボタン１６ｂが押下されたと判断した場合（ステップＳ４６：Ｙｅｓ）には、ＣＰＵ１００は処理をスタンバイモード処理へ戻す。

このように、本実施形態に係るＨＭＤ１は、上述してきたフローチャートの処理に従って、動作することとなる。

上述してきたように、本実施形態に係るＨＭＤ１によれば、コンテンツデータを加工して、このコンテンツデータに応じた表示領域のうちＣＣＤカメラ５ａの撮像範囲と重なる領域（重複領域）の輝度を低減させ、当該領域においてユーザＰによる外景の視認を可能としたため、コンテンツデータに応じた表示から撮像範囲に対応する一部が、ユーザから視認可能に切り抜かれた状態となり、コンテンツデータの加工前後の表示の差が鮮明に現れるため、ユーザは撮像範囲の把握が極めて容易になる。

また、ズーム光学機構２５やパンチルト機構２６により変更されたＣＣＤカメラ５ａの撮像範囲に対応させて、輝度を低減させる領域を変更することとしたため、撮像範囲の把握の容易さを維持しつつ、ユーザは所望の範囲を撮像することが可能となる。

また、コンテンツデータに応じた表示のうちで所望の範囲が撮像範囲となって見られなくなったときでも、撮像範囲を上下左右に動かすことにより、撮像範囲を移動させて所望の範囲を見ることが可能となる。

また、ＣＣＤカメラ５ａから出力される撮像画像データを加工画像データと合成して、重複領域に撮像画像を嵌め込んだ画像のデータを生成する合成手段を備えることとしたため、コンテンツデータに応じた表示の一部に撮像画像を嵌め込んだ画像のデータ（合成画像データ）を生成することができ、例えば、作業説明書と実作業の画像とを合成したコンテンツを生成することが容易となる。

また、ユーザＰによる所定操作に基づき、表示部２２に表示させるコンテンツデータを、加工画像データへ切り替えることとしたため、ユーザＰの所望するタイミングで、ファインダー領域Ｆを出現させることができる。

最後に、上述した各実施の形態の説明は本発明の一例であり、本発明は上述の実施の形態に限定されることはない。このため、上述した各実施の形態以外であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能であることは勿論である。

本実施形態に係るＨＭＤ１では、変更手段としてズーム光学機構２５とパンチルト機構２６を用いることによりＣＣＤカメラ５ａを物理的に動かす構成としたが、これに限定されるものではなく、例えば、ＣＣＤカメラ５ａで撮像する範囲とコンテンツ画像の表示範囲とを略一致させ、得られた撮像画像データを適宜トリミングするなどしてデジタルズームやデジタルパンチルトを再現し、ＣＣＤカメラ５ａの撮像範囲を変更するよう構成しても良い。

また、本実施形態に係るＨＭＤ１では、撮像範囲とファインダー領域Ｆとを一致させる構成としたが、これに限定されるものではなく、略一致する構成としても良い。

また、録画モード中のさらなる機能として、所定操作により、撮像範囲の大きさを変えずに、ファインダー領域の大きさを変更可能に構成しても良い。具体的には、録画モード中に形成されるファインダー領域Ｆで、コンテンツ画像が見づらいときには、例えば所定のスイッチを操作することにより、撮像範囲はそのままで、ファインダー領域Ｆの大きさが縮小する構成とする。このような構成とすることにより、コンテンツ画像がファインダー領域Ｆにより見えにくいことがあっても、かかる問題に対応させることができる。なお、録画モード中においてユーザＰは、すでに撮像範囲がわかっているので、撮像の中心さえ分かっていればよく、コンテンツ画像の見やすさを優先させることが可能である。

１ ＨＭＤ
２ 制御ユニット部
３ ハーフミラー
４ 画像表示ユニット
５ａ ＣＣＤカメラ
１０ 表示制御部
１１ コンテンツ記憶部
１２ 光源部
１６ａ 録画ボタン
１９ 設定切替スイッチ
２２ 表示部
２５ ズーム光学機構
２６ パンチルト機構
２７ 画像データ記憶部
１００ ＣＰＵ
１０１ ＲＯＭ
１０２ ＲＡＭ
１１０ 眼
Ｆ ファインダー領域
Ｌａ 外光
Ｌｂ 画像光
Ｐ ユーザ
Ｓ 画像信号

Claims (6)

1. コンテンツデータに応じて強度変調された光を外光と共にユーザの眼に入射させ、前記コンテンツデータに応じた表示を外景と重ねて行う表示手段を備えたシースルー型ヘッドマウントディスプレイにおいて、
   前記ユーザの視野範囲と重なる前記表示手段の表示領域の一部を撮像する撮像手段と、
   前記コンテンツデータを取得する取得手段と、
   前記取得手段で取得したコンテンツデータを加工して、当該コンテンツデータに応じた表示領域のうちの一部であって前記撮像手段の撮像範囲と重なる領域の輝度を、前記表示領域のうち前記撮像範囲と重なる領域以外の領域に対して低減させ、前記撮像範囲と重なる領域において前記ユーザによる外景の視認を可能にする加工手段と、
   前記取得手段で取得したコンテンツデータに応じた表示と前記加工手段によって加工したコンテンツデータに応じた表示とを選択的に前記表示手段により実行させる制御手段と、
   を備えたことを特徴とするシースルー型ヘッドマウントディスプレイ。
2. コンテンツデータに応じて強度変調された光を外光と共にユーザの眼に入射させ、前記コンテンツデータに応じた表示を外景と重ねて行う表示手段を備えたシースルー型ヘッドマウントディスプレイにおいて、
   前記ユーザの視野範囲と重なる前記表示手段の表示領域の一部を撮像する撮像手段と、
   前記コンテンツデータを取得する取得手段と、
   前記取得手段で取得したコンテンツデータを加工して、当該コンテンツデータに応じた表示領域のうちの一部であって前記撮像手段の撮像範囲と重なる領域の輝度を、前記表示領域のうち前記撮像範囲と重なる領域以外の領域の輝度は保ちつつ低減させ、当該領域において前記ユーザによる外景の視認を可能にする加工手段と、
   前記取得手段で取得したコンテンツデータに応じた表示と前記加工手段によって加工したコンテンツデータに応じた表示とを選択的に前記表示手段により実行させる制御手段と、
   を備えたことを特徴とするシースルー型ヘッドマウントディスプレイ。
3. 前記撮像手段は、前記撮像手段の撮像範囲を変更する変更手段をさらに備え、
   前記加工手段は、前記変更手段により変更された前記撮像手段の撮像範囲に対応させて、前記輝度を低減させる領域を変更することを特徴とする請求項１又は請求項２に記載のシースルー型ヘッドマウントディスプレイ。
4. 前記変更手段は、ズーム光学機構及び／又はパンチルト機構を備えたことを特徴とする請求項３に記載のシースルー型ヘッドマウントディスプレイ。
5. 前記撮像手段から出力される画像データを前記加工手段で加工したコンテンツデータと合成して、前記取得手段で取得したコンテンツデータに応じた表示領域のうち前記撮像手段の撮像範囲と重なる領域に、前記撮像手段の撮像画像を嵌め込んだ画像のデータを生成する合成手段を備えたことを特徴とする請求項１〜４のいずれか１項に記載のシースルー型ヘッドマウントディスプレイ。
6. 前記制御手段は、ユーザによる所定操作に基づき、前記表示手段に表示させるコンテンツデータを、前記取得手段で取得したコンテンツデータから前記加工手段によって加工したコンテンツデータへ切り替えることを特徴とする請求項１〜５のいずれか１項に記載のシースルー型ヘッドマウントディスプレイ。

Images