JP2015049883A - 頭部装着型表示装置、頭部装着型表示装置を制御する方法、画像表示システム - Google Patents

Abstract

【課題】外部装置の表示画面を、頭部装着型表示装置に適した画像の表示態様を用いて、頭部装着型表示装置に表示させる。【解決手段】使用者が虚像と外景を視認可能な頭部装着型表示装置であって、頭部装着型表示装置に接続されている外部装置が有する複数の画像の配置を、頭部装着型表示装置用に変更して一覧画像を生成する生成部と、生成された一覧画像を虚像として使用者に視認させる画像表示部とを備える。【選択図】図４

Description

本発明は、頭部装着型表示装置に関する。

頭部に装着する表示装置である頭部装着型表示装置（ヘッドマウントディスプレイ（Head Mounted Display、ＨＭＤ））が知られている。頭部装着型表示装置は、例えば、液晶ディスプレイと光源とを利用して画像を表す画像光を生成し、生成された画像光を投写光学系や導光板等を利用して使用者の眼に導くことにより、使用者に虚像を認識させる。このような頭部装着型表示装置は、例えばＵＳＢ（Universal Serial Bus）等の有線インターフェイスや、例えば無線ＬＡＮ等の無線インターフェイスを持ち、携帯情報端末等（例えば、スマートフォンやタブレット等）の外部装置と接続することができる。

特許文献１には、携帯情報端末に搭載された所定の機能を、携帯情報端末の表示画面と、頭部装着型表示装置の表示画面との一方に表示させる際に、携帯情報端末の開閉状態に応じて表示先を決定する構成が記載されている。特許文献２には、頭部装着型表示装置において、携帯情報端末に表示中の画像の少なくとも一部領域である部分画像を表示させる構成が記載されている。特許文献３には、頭部装着型表示装置において、使用者の頭部姿勢情報に基づいて、情報端末から受信した画像データーが表す画像の一部を表示させる構成が記載されている。

特開２０１３−９２７８１号公報 特開２０１２−４４４２９号公報 特開２０１３−９３７０５号公報

特許文献１に記載された技術では、携帯情報端末に搭載された所定の機能を、頭部装着型表示装置の表示画面において、どのように表示させるかについて十分な工夫がされていないという課題があった。また、特許文献２に記載された技術では、携帯情報端末の部分画像をそのまま頭部装着型表示装置に表示させるため、使用者の眼前が部分画像によって遮られることとなり、利用者は不便を感じる場合があるという課題があった。同様に、特許文献３に記載された技術では、情報端末からの画像データーが表す画像の一部をそのまま頭部装着型表示装置に表示させるため、使用者の眼前が画像によって遮られることとなり、利用者は不便を感じる場合があるという課題があった。

このため、外部装置の表示画面を、頭部装着型表示装置に適した画像の表示態様を用いて、頭部装着型表示装置に表示させることが望まれていた。そのほか、頭部装着型表示装置には、ユーザビリティーの向上、汎用性の向上、利便性の向上、信頼性の向上、製造コストの低減といった、種々の要望があった。

本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態として実現することが可能である。

（１）本発明の一形態によれば、使用者が虚像と外景を視認可能な頭部装着型表示装置が提供される。この頭部装着型表示装置は；前記頭部装着型表示装置に接続されている外部装置が有する複数の画像の配置を、前記頭部装着型表示装置用に変更して一覧画像を生成する生成部と；前記生成された一覧画像を前記虚像として前記使用者に視認させる画像表示部と、を備える。この形態の頭部装着型表示装置によれば、画像表示部は、外部装置が有する複数の画像の配置を、頭部装着型表示装置用に変更して生成された一覧画像を、虚像として使用者に視認させる。外部装置の画像とは、外部装置の表示画面に表示される画像である。この画像の配置を頭部装着型表示装置用に変更することは、すなわち、外部装置の表示画面を、頭部装着型表示装置に適した画像の表示態様に変更することを意味する。この結果、画像表示部は、外部装置の表示画面を、頭部装着型表示装置に適した画像の表示態様を用いて、頭部装着型表示装置に表示させることができる。

（２）上記形態の頭部装着型表示装置では、さらに；前記外部装置から前記複数の画像を取得する取得部を備え；前記生成部は、前記取得された複数の画像の配置を前記虚像の中心部を回避した位置へと変更することによって、前記一覧画像を生成してもよい。この形態の頭部装着型表示装置によれば、画像表示部は、画像の配置が虚像の中心部を回避した位置へと変更された一覧画像を表示させるため、使用者の眼前が画像によって遮られることを抑制することができる。この結果、画像表示部は、外部装置の表示画面を、頭部装着型表示装置に適した画像の表示態様を用いて、頭部装着型表示装置に表示させることができる。

（３）上記形態の頭部装着型表示装置では、さらに；前記一覧画像に対する前記使用者の操作を取得する操作取得部と；前記取得された操作が一の画像に対する操作であった場合に、前記外部装置における前記一の画像の位置を識別するための位置情報と、前記外部装置における前記一の画像のリンク先を識別するためのリンク先情報と、のうちの少なくとも一方を、前記外部装置に対して通知する通知部と、を備えてもよい。この形態の頭部装着型表示装置によれば、通知部は、頭部装着型表示装置に表示されている一覧画像の一の画像に対する操作が行われた場合に、外部装置に対して、位置情報とリンク先情報との内の少なくとも一方を通知する。位置情報は外部装置における一の画像の位置を識別するための情報であるため、座標等を用いた文字列標記が可能であり、データー量が小さい。同様に、リンク先情報は外部装置における一の画像のリンク先を識別するための情報であるため、ファイルパス等を用いた文字列標記が可能であり、データー量が小さい。従って、この形態の頭部装着型表示装置によれば、頭部装着型表示装置から外部装置へ送信される情報のデーター量を小さくすることができ、通信負荷を低減することができる。

（４）上記形態の頭部装着型表示装置において；前記取得部は、前記複数の画像と共に、前記外部装置における前記複数の画像の位置をそれぞれ識別するための位置情報と、前記外部装置における前記複数の画像のリンク先をそれぞれ識別するためのリンク先情報と、のうちの少なくとも一方を取得し；前記生成部は、前記一覧画像を生成する際に、前記画像と、前記画像の前記位置情報または前記画像の前記リンク先情報と、を対応付けて記憶し；前記通知部は、前記対応付けを用いて、前記一の画像の前記位置情報と、前記一の画像の前記リンク先情報と、のうちの少なくとも一方を通知してもよい。この形態の頭部装着型表示装置によれば、通知部は、画像と画像の位置情報または画像のリンク先情報との対応付けを用いて、簡単に、操作された一の画像の位置情報またはリンク先情報を通知することができる。

（５）上記形態の頭部装着型表示装置において；前記生成部は、前記前記画面一覧画像を生成する際に、さらに、前記取得された複数の画像に対して、形状の変更と、透過率の変更と、色の変更と、大きさの変更と、装飾の付与と、のうちの少なくともいずれかを実施してもよい。この形態の頭部装着型表示装置によれば、生成部は、画像に対して、形状の変更と、透過率の変更と、色の変更と、大きさの変更と、装飾の付与と、のうちの少なくともいずれかを実施する。この結果、画像表示部は、外部装置の表示画面をより一層頭部装着型表示装置に適した画像の表示態様とすることができる。

（６）上記形態の頭部装着型表示装置において；前記生成部は、前記取得された複数の画像から、所定の条件を満たす少なくとも一部の画像を抽出し、前記抽出された画像の配置を変更することによって、前記一覧画像を生成してもよい。この形態の頭部装着型表示装置によれば、生成部は、一覧画像に配置される画像を、所定の条件を用いてフィルタリングすることができる。例えば、所定の条件を使用者によって任意に設定可能とすれば、画像表示部は、使用者の好みの画像が残るようにフィルタリングされた一覧画像を使用者に視認させることが可能となるため、使用者の利便性を向上させることができる。

（７）上記形態の頭部装着型表示装置において；前記複数の画像には、少なくとも、前記外部装置にインストールされているアプリケーションの起動用のアイコン画像が含まれてもよい。この形態の頭部装着型表示装置によれば、画像には、外部装置にインストールされているアプリケーションの起動用のアイコン画像を含むことができる。

（８）上記形態の頭部装着型表示装置において；前記生成部は、前記一覧画像に対して、さらに、前記頭部装着型表示装置が有する複数の画像を、前記外部装置の前記複数の画像と識別可能な態様で配置してもよい。この形態の頭部装着型表示装置によれば、画像表示部は、外部装置の画像と、頭部装着型表示装置の画像と、の両方を、識別可能な態様で使用者に視認させることができるため、使用者の利便性を向上させることができる。

（９）本発明の一形態によれば、画像表示システムが提供される。この画像表示システムは；使用者が虚像と外景を視認可能な頭部装着型表示装置と；前記頭部装着型表示装置に接続されている外部装置と、を備え；前記外部装置は；前記外部装置が有する複数の画像を取得すると共に、前記取得された複数の画像を前記頭部装着型表示装置へ送信する送信部を備え；前記頭部装着型表示装置は；前記外部装置の前記複数の画像の配置を、前記頭部装着型表示装置用に変更して一覧画像を生成する生成部と；前記生成された一覧画像を前記虚像として前記使用者に視認させる画像表示部と、を備える。

上述した本発明の各形態の有する複数の構成要素は全てが必須のものではなく、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、適宜、前記複数の構成要素の一部の構成要素について、その変更、削除、新たな構成要素との差し替え、限定内容の一部削除を行うことが可能である。また、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、上述した本発明の一形態に含まれる技術的特徴の一部または全部を上述した本発明の他の形態に含まれる技術的特徴の一部または全部と組み合わせて、本発明の独立した一形態とすることも可能である。

例えば、本発明の一形態は、生成部と、画像表示部と、の２つの要素のうちの一部または全部の要素を備えた装置として実現可能である。すなわち、この装置は、生成部を有していてもよく、有していなくてもよい。また、この装置は、画像表示部を有していてもよく、有していなくてもよい。こうした装置は、例えば頭部装着型表示装置として実現できるが、頭部装着型表示装置以外の他の装置としても実現可能である。前述した頭部装着型表示装置の各形態の技術的特徴の一部または全部は、いずれもこの装置に適用することが可能である。

なお、本発明は、種々の態様で実現することが可能であり、例えば、頭部装着型表示装置、頭部装着型表示装置の制御方法、頭部装着型表示装置を用いた画像表示システム、これらの方法、装置またはシステムの機能を実現するためのコンピュータープログラム、そのコンピュータープログラムを記録した記録媒体等の形態で実現することができる。

本発明の一実施形態における画像表示システム１０００の概略構成を示す説明図である。 ヘッドマウントディスプレイ１００の構成を機能的に示すブロック図である。 フレーム情報１２２に記憶されているフレームの一例を示す説明図である。 再配置処理の手順を示すシーケンス図である。 アイコン画像の情報について説明するための説明図である。 ヘッドマウントディスプレイ１００において一覧画像が表示されている様子を示す説明図である。 通知処理の手順を示すシーケンス図である。 フレーム情報１２２に記憶されているフレームの他の例を示す説明図である。 ヘッドマウントディスプレイ１００においてフレームＦＭ２を用いて生成された一覧画像が表示されている様子を示す説明図である。 フレーム情報１２２に記憶されているフレームの他の例を示す説明図である。 ヘッドマウントディスプレイ１００においてフレームＦＭ３を用いて生成された一覧画像が表示されている様子を示す説明図である。 第２実施形態におけるヘッドマウントディスプレイ１００ａの構成を機能的に示すブロック図である。 第２実施形態における再配置処理の手順を示すシーケンス図である。 ヘッドマウントディスプレイ１００ａにおいて第２実施形態の一覧画像が表示されている様子を示す説明図である。 変形例におけるヘッドマウントディスプレイの外観の構成を示す説明図である。

Ａ．第１実施形態：
Ａ−１．画像表示システムの構成：
図１は、本発明の一実施形態における画像表示システム１０００の概略構成を示す説明図である。画像表示システム１０００は、頭部装着型表示装置１００と、外部装置としての携帯情報端末３００とを備えている。画像表示システム１０００は、携帯情報端末３００の表示画面を、頭部装着型表示装置１００に適した画像の表示態様を用いて、頭部装着型表示装置１００に表示させるシステムである。

頭部装着型表示装置１００は、頭部に装着する表示装置であり、ヘッドマウントディスプレイ（Head Mounted Display、ＨＭＤ）とも呼ばれる。本実施形態のヘッドマウントディスプレイ１００は、使用者が、虚像を視認すると同時に外景も直接視認可能な光学透過型の頭部装着型表示装置である。携帯情報端末３００は、携帯可能な情報通信端末である。本実施形態では、携帯情報端末として、スマートフォン（smartphone）を例示する。ヘッドマウントディスプレイ１００と、スマートフォン３００とは、無線通信または有線通信可能に接続されている。

Ａ−２．頭部装着型表示装置の構成：
図２は、ヘッドマウントディスプレイ１００の構成を機能的に示すブロック図である。図１、２に示すように、ヘッドマウントディスプレイ１００は、使用者の頭部に装着された状態において使用者に虚像を視認させる画像表示部２０と、画像表示部２０を制御する制御部（コントローラー）１０とを備えている。画像表示部２０と制御部１０とは、接続部４０によって接続され、接続部４０を介して各種信号の伝送を行う。接続部４０には、金属ケーブルや光ファイバーを採用することができる。

Ａ−２−１．制御部の構成：
制御部１０は、ヘッドマウントディスプレイ１００を制御するための装置である。制御部１０は、入力情報取得部１１０と、記憶部１２０と、電源１３０と、無線通信部１３２と、ＧＰＳモジュール１３４と、ＣＰＵ１４０と、インターフェイス１８０と、送信部（Ｔｘ）５１および５２とを備え、各部は図示しないバスにより相互に接続されている（図２）。

入力情報取得部１１０は、例えば、タッチパッド、十字キー、フットスイッチ（使用者の足により操作するスイッチ）、ジェスチャー検出（カメラ等を用いて使用者のジェスチャーを検知し、ジェスチャーに対応付けられたコマンドによる操作入力を取得する）、視線検出（赤外線センサー等を用いて使用者の視線を検出し、視線の動きに対応付けられたコマンドによる操作入力を取得する）、マイクロホン等の入力デバイスに対する操作入力に応じた信号を取得する。なお、ジェスチャー検出の際は、使用者の指先や、使用者の手に付けられた指輪や、使用者が手に持つ道具等を動き検出のための目印にしてもよい。フットスイッチ、視線検出、マイクロホンによる操作入力を取得することとすれば、使用者が手を用いて操作することが困難な現場（例えば、医療現場、建設業や製造業などの手元作業を必要とする現場など）において、ヘッドマウントディスプレイ１００が使用される場合の、使用者の利便性を大きく向上させることができる。

記憶部１２０は、ＲＯＭ、ＲＡＭ、ＤＲＡＭ、ハードディスク等によって構成されている。記憶部１２０は、フレーム情報１２２と、対応関係１２４とを含んでいる。フレーム情報１２２には、少なくとも１つのフレームが記憶されている。フレーム情報１２２に記憶されているフレームは、生成部１４２によって実行される再配置処理（図４）において、画像を再配置するための枠として使用される。ここで、再配置処理とは、スマートフォン３００が有する複数の画像の配置を、ヘッドマウントディスプレイ１００に適した画像の表示態様に変更し、ヘッドマウントディスプレイ１００に表示させるための処理である。

以降の本実施形態では、「スマートフォン３００が有する複数の画像」の具体例として、「スマートフォン３００の表示画面に表示されるアイコン画像」を例示して説明する。ここで、「アイコン画像」とは、プログラムやデバイスの内容を図、絵、文字、記号等を用いて分かり易く表現した画像である。本実施形態の「アイコン画像」は、スマートフォン３００にインストールされているアプリケーションの起動用の画像を意味する。なお、「アイコン画像」には、このほか、スマートフォン３００にインストールされているアプリケーション（いわゆるウィジェットやガジェット）によって描画されている画像や、スマートフォン３００に記憶されているデーター（各種のファイル）の起動用の画像、スマートフォン３００に含まれるデバイスの存在を表す画像等を含んでもよい。アイコン画像は、換言すれば、アプリケーション（プログラム）やデーターやデバイスを抽象化したシンボルとも言える。

図３は、フレーム情報１２２に記憶されているフレームの一例を示す説明図である。図３に示すフレームＦＭ１は、長方形状の領域（以降、「フレームＦＭ１の領域」とも呼ぶ。）の内側に、画像リストＬＴ１が配置された構成を有する。フレームＦＭ１の領域は、ヘッドマウントディスプレイ１００の表示素子（図２：右ＬＣＤ２４１、左ＬＣＤ２４２）の縦横比と同じ縦横比を有することが好ましい。

画像リストＬＴ１は、後述の再配置処理（図４）において、アイコン画像が実際に配置される領域である。図３の例では、画像リストＬＴ１は、フレームＦＭ１の領域の左端の全体にわたって配置されている。なお、画像リストＬＴ１は、フレームＦＭ１の領域の任意の場所に配置することができる。ただし、フレームＦＭ１を用いて生成された一覧画像がヘッドマウントディスプレイ１００に表示された際、使用者の視界を妨げないという観点から、画像リストＬＴ１は、フレームＦＭ１の中心部を回避した位置（例えば四辺に近接する領域内）に配置されることが好ましい。具体的には、例えば、画像リストＬＴ１は、フレームＦＭ１の領域の左端の一部に配置されてもよく、フレームＦＭ１の領域の右端の一部または全体に配置されてもよく、フレームＦＭ１の領域の上端の一部または全体に配置されてもよく、フレームＦＭ１の領域の下端の一部または全体に配置されてもよい。

画像リストＬＴ１は、複数（図の例では１２個）の長方形状の画像枠Ｂ１〜Ｂ１２を含んでいる。画像枠Ｂ１〜Ｂ１２は、画像リストＬＴ１内において、長方形状の長辺が互いに隣接するように配置されている。画像枠Ｂ１〜Ｂ１２は、後述の再配置処理（図４）において、スマートフォン３００が有するアイコン画像を配置するための領域である。

図２の対応関係１２４は、スマートフォン３００のアイコン画像と、スマートフォン３００におけるアイコン画像の位置を識別するための位置情報（詳細は後述）またはスマートフォン３００におけるアイコン画像のリンク先を識別するためのリンク先情報（詳細は後述）の内の少なくとも一方と、を対応付けて記憶するための記憶部である。対応関係１２４への対応付けの記憶は、後述の再配置処理（図４）において、生成部１４２が一覧画像を生成する際に行われる。

電源１３０は、ヘッドマウントディスプレイ１００の各部に電力を供給する。電源１３０としては、例えば二次電池を用いることができる。無線通信部１３２は、所定の無線通信規格（例えば、赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）に例示される近距離無線通信、ＩＥＥＥ８０２．１１に例示される無線ＬＡＮ等）に則って、外部装置との間で無線通信を行う。外部装置とは、ヘッドマウントディスプレイ１００以外の他の機器を意味し、図１に示したスマートフォン３００のほか、タブレット、パーソナルコンピューター、ゲーム端末、ＡＶ（Audio Video）端末、家電製品等がある。ＧＰＳモジュール１３４は、ＧＰＳ衛星からの信号を受信することにより、ヘッドマウントディスプレイ１００の使用者の現在位置を検出し、使用者の現在位置情報を表す現在位置情報を生成する。なお、現在位置情報は、例えば緯度経度を表す座標によって実現することができる。

ＣＰＵ１４０は、記憶部１２０に格納されているコンピュータープログラムを読み出して実行することにより、生成部１４２、通知部１４４、オペレーティングシステム（ОＳ）１５０、画像処理部１６０、音声処理部１７０、表示制御部１９０として機能する。

生成部１４２は、再配置処理（図４）において、スマートフォン３００から取得されたアイコン画像の配置を変更し、一覧画像を生成する。通知部１４４は、通知処理（図７）において、一覧画像からアイコン画像に対する操作が行われた場合に、操作された一のアイコン画像の位置情報またはリンク先情報のうちの少なくとも一方を、スマートフォン３００へ通知する。

画像処理部１６０は、生成部１４２や、インターフェイス１８０や、無線通信部１３２等からＯＳ１５０を介して入力される映像信号に基づいて信号を生成する。画像処理部１６０は、生成した信号を、接続部４０を介して画像表示部２０に供給することで、画像表示部２０における表示を制御する。画像表示部２０に供給するための信号は、アナログ形式とディジタル形式の場合で異なる。

例えば、ディジタル形式の場合、ディジタルＲ信号と、ディジタルＧ信号と、ディジタルＢ信号と、クロック信号ＰＣＬＫとが同期した状態の映像信号が入力される。画像処理部１６０は、ディジタルＲ信号、ディジタルＧ信号、ディジタルＢ信号からなる画像データーＤａｔａに対して、必要に応じて周知の解像度変換処理、輝度彩度の調整などの種々の色調補正処理、キーストーン補正処理等の画像処理を実行する。その後、画像処理部１６０は、クロック信号ＰＣＬＫと、画像データーＤａｔａとを、送信部５１、５２を介して送信する。

アナログ形式の場合、アナログＲ信号と、アナログＧ信号と、アナログＢ信号と、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃとからなる映像信号が入力される。画像処理部１６０は、入力された信号から垂直同期信号ＶＳｙｎｃと水平同期信号ＨＳｙｎｃを分離し、それらの周期に応じて、図示しないＰＬＬ回路等を用いてクロック信号ＰＣＬＫを生成する。また、画像処理部１６０は、アナログＲ信号と、アナログＧ信号と、アナログＢ信号とを、Ａ／Ｄ変換回路等を用いてディジタル信号に変換する。画像処理部１６０は、変換後のディジタルＲ信号、ディジタルＧ信号、ディジタルＢ信号からなる画像データーＤａｔａに対して、必要に応じて周知の画像処理を実行した後、クロック信号ＰＣＬＫと、画像データーＤａｔａと、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃとを、送信部５１、５２を介して送信する。なお、以降では、送信部５１を介して送信される画像データーＤａｔａを「右眼用画像データーＤａｔａ１」とも呼び、送信部５２を介して送信される画像データーＤａｔａを「左眼用画像データーＤａｔａ２」とも呼ぶ。

表示制御部１９０は、画像表示部２０が有する右表示駆動部２２と左表示駆動部２４とを制御する制御信号を生成する。制御信号とは、右ＬＣＤ制御部２１１による右ＬＣＤ２４１の駆動ＯＮ／ＯＦＦ、右バックライト制御部２０１による右バックライト２２１の駆動ＯＮ／ＯＦＦ、左ＬＣＤ制御部２１２による左ＬＣＤ２４２の駆動ＯＮ／ＯＦＦ、左バックライト制御部２０２による左バックライト２２２の駆動ＯＮ／ＯＦＦを個別に切り替えるための信号である。表示制御部１９０は、これらの制御信号によって、右表示駆動部２２と左表示駆動部２４とにおける画像光の生成および射出を制御する。表示制御部１９０は、生成した制御信号を、送信部５１、５２を介して送信する。

音声処理部１７０は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、右イヤホン３２の図示しないスピーカーと、左イヤホン３４の図示しないスピーカーとに対して供給する。

インターフェイス１８０は、所定の有線通信規格（例えば、ＵＳＢ（Universal Serial Bus）、ＨＤＭＩ（High Definition Multimedia Interface、ＨＤＭＩは登録商標）、ＤＶＩ（Digital Visual Interface）、ＶＧＡ（Video Graphics Array）、コンポジット、ＲＳ−２３２Ｃ（Recommended Standard 232）、ＩＥＥＥ８０２．３に例示される有線ＬＡＮ等）に則って、外部装置との間で無線通信を行う。外部装置とは、ヘッドマウントディスプレイ１００以外の他の機器を意味し、図１に示したスマートフォン３００のほか、タブレット、パーソナルコンピューター、ゲーム端末、ＡＶ端末、家電製品等がある。

Ａ−２−２．画像表示部の構成：
画像表示部２０は、使用者の頭部に装着される装着体であり、本実施形態では眼鏡形状を有している。画像表示部２０は、右表示駆動部２２と、左表示駆動部２４と、右光学像表示部２６（図１）と、左光学像表示部２８（図１）と、９軸センサー６６とを含んでいる。

右表示駆動部２２と左表示駆動部２４とは、使用者が画像表示部２０を装着した際の使用者のこめかみに対向する位置に配置されている。本実施形態における右表示駆動部２２と左表示駆動部２４とは、液晶ディスプレイ（Liquid Crystal Display、以下「ＬＣＤ」と呼ぶ）や投写光学系を用いて、画像を表す画像光を生成し射出する。右表示駆動部２２は、受信部（Ｒｘ）５３と、光源として機能する右バックライト（ＢＬ）制御部２０１および右バックライト（ＢＬ）２２１と、表示素子として機能する右ＬＣＤ制御部２１１および右ＬＣＤ２４１と、右投写光学系２５１とを含んでいる。

受信部５３は、送信部５１から送信されるデーターを受信する。右バックライト制御部２０１は、入力された制御信号に基づいて、右バックライト２２１を駆動する。右バックライト２２１は、例えば、ＬＥＤやエレクトロルミネセンス（ＥＬ）等の発光体である。右ＬＣＤ制御部２１１は、入力されたクロック信号ＰＣＬＫと右眼用画像データーＤａｔａ１と、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃとに基づいて、右ＬＣＤ２４１を駆動する。右ＬＣＤ２４１は、複数の画素をマトリクス状に配置した透過型液晶パネルである。右ＬＣＤ２４１は、マトリクス状に配置された各画素位置の液晶を駆動することによって、右ＬＣＤ２４１を透過する光の透過率を変化させることにより、右バックライト２２１から照射される照明光を、画像を表す有効な画像光へと変調する。右投写光学系２５１は、右ＬＣＤ２４１から射出された画像光を並行状態の光束にするコリメートレンズによって構成される。

左表示駆動部２４は、右表示駆動部２２とほぼ同様の構成を有し、右表示駆動部２２と同様に動作する。すなわち、左表示駆動部２４は、受信部（Ｒｘ）５４と、光源として機能する左バックライト（ＢＬ）制御部２０２および左バックライト（ＢＬ）２２２と、表示素子として機能する左ＬＣＤ制御部２１２および左ＬＣＤ２４２と、左投写光学系２５２とを含んでいる。詳細な説明は省略する。なお、本実施形態ではバックライト方式を採用することとしたが、フロントライト方式や、反射方式を用いて画像光を射出してもよい。

右光学像表示部２６と左光学像表示部２８とは、使用者が画像表示部２０を装着した際に使用者の左右の眼前にそれぞれ位置するように配置されている（図１参照）。右光学像表示部２６は、右導光板２６１と、図示しない調光板を含んでいる。右導光板２６１は、光透過性の樹脂材料等によって形成されている。右導光板２６１は、右表示駆動部２２から出力された画像光を、所定の光路に沿って反射させつつ使用者の右眼ＲＥへ導く。右導光板２６１には、回折格子を用いても良いし半透過反射膜を用いても良い。調光板は、薄板状の光学素子であり、画像表示部２０の表側を覆うように配置されている。調光板は、右導光板２６１を保護し、右導光板２６１の損傷や汚れの付着等を抑制する。また、調光板の光透過率を調整することによって、使用者の眼に入る外光量を調整して虚像の視認のしやすさを調整することができる。なお、調光板は省略可能である。

左光学像表示部２８は、右光学像表示部２６とほぼ同様の構成を有し、右光学像表示部２６と同様に動作する。すなわち、左光学像表示部２８は、左導光板２６２と、図示しない調光板を含み、左表示駆動部２４から出力された画像光を、使用者の左眼ＬＥへ導く。詳細な説明は省略する。

このようにして、ヘッドマウントディスプレイ１００の使用者の両眼に導かれた画像光が使用者の網膜に結像することにより、使用者は虚像を視認することができる。なお、本明細書において、「ヘッドマウントディスプレイ１００が画像を表示する」ことには、ヘッドマウントディスプレイ１００の使用者に対して虚像を視認させることも含む。

９軸センサー６６は、加速度（３軸）、角速度（３軸）、地磁気（３軸）を検出するモーションセンサーである。９軸センサー６６は、画像表示部２０に設けられているため、画像表示部２０が使用者の頭部に装着されているときには、ヘッドマウントディスプレイ１００の使用者の頭部の動きを検出する動き検出部として機能する。ここで、頭部の動きとは、頭部の速度・加速度・角速度・向き・向きの変化を含む。

Ａ−３．再配置処理：
図４は、再配置処理の手順を示すシーケンス図である。再配置処理は、スマートフォン３００の表示画面に表示されるアイコン画像の配置を、ヘッドマウントディスプレイ１００に適した画像の表示態様に変更した一覧画像を生成し、生成された一覧画像をヘッドマウントディスプレイ１００に表示させる処理である。再配置処理は、主として生成部１４２により実行される。

ステップＳ１００において、再配置処理を行うためのアプリケーションが起動される。ステップＳ１００のアプリケーションの起動は、入力情報取得部１１０が使用者による起動操作を検出したことをトリガーとしてもよく、他のアプリケーションからの起動命令の検出をトリガーとしてもよい。ステップＳ１００のアプリケーションの起動によって、ＣＰＵ１４０に対して、生成部１４２および通知部１４４の機能が実現される。

ステップＳ１０２において無線通信部１３２またはインターフェイス１８０は、スマートフォン３００が接続されたことを検出する。なお、以降では、ヘッドマウントディスプレイ１００とスマートフォン３００とがＩＥＥＥ８０２．１１に準拠した無線ＬＡＮを用いて通信する場合を例示する。ステップＳ１０４において生成部１４２は、無線通信部１３２を介して接続されているスマートフォン３００の認証を行う。この認証は、種々の認証技術を利用して実施することが可能である。例えば、生成部１４２は、スマートフォン３００のＭＡＣ（Media Access Control）アドレスを用いてスマートフォン３００を認証してもよく、ユーザー名とパスワードを用いてスマートフォン３００を認証してもよい。また、生成部１４２は、認証局が発行するディジタル証明書を用いてスマートフォン３００を認証してもよく、使用者の身体的特徴（顔、指紋、声紋）を認識してスマートフォン３００を認証してもよい。ステップＳ１０４における認証が成功した後、ステップＳ１０６において生成部１４２は、スマートフォン３００との間でコネクションを確立する。

ステップＳ１０８においてスマートフォン３００は、スマートフォン３００の表示画面に表示されているアイコン画像の情報を収集する。

図５は、アイコン画像の情報について説明するための説明図である。図４のステップＳ１０８においてスマートフォン３００が収集するアイコン画像の情報には、アイコン画像６０と、アイコン画像の座標７０と、アイコン画像のリンク先８０と、が含まれる。

アイコン画像６０は、スマートフォン３００の表示画面のうちの、いわゆる「待ち受け画面」に表示されているアイコン画像の集合である。図５の例では、アイコン画像６０には、カメラのアプリケーションの起動用のアイコン画像６１と、ＳＮＳサービスのアプリケーションの起動用のアイコン画像６２と、スピーカーのアプリケーションの起動用のアイコン画像６３と、メールサービスのアプリケーションの起動用のアイコン画像６４とが含まれている。

アイコン画像の座標７０は、スマートフォン３００の待ち受け画面において、アイコン画像６０（図の例ではアイコン画像６１〜６４）が配置されている位置を識別するための座標の集合である。アイコン画像の座標７０は、スマートフォン３００の表示画面の所定の点（例えば、左上端部）を原点（０、０）と定めたうえで、原点に対するアイコン画像の中心位置の移動量（ｘ、ｙ）として定義することができる。アイコン画像の座標７０は「位置情報」として機能する。図５の例では、アイコン画像の座標７０には、アイコン画像６１の座標（ｘａ、ｙａ）と、アイコン画像６２の座標（ｘｂ、ｙｂ）と、アイコン画像６３の座標（ｘｃ、ｙｃ）と、アイコン画像６４の座標（ｘｄ、ｙｄ）とが含まれている。

アイコン画像のリンク先８０は、スマートフォン３００に表示されているアイコン画像６０（図の例ではアイコン画像６１〜６４）が表すアプリケーションの実行ファイルのリンク先（換言すれば、実行ファイルのファイルパス）の集合である。なお、アイコン画像が、スマートフォン３００に記憶されているデーターの起動用の画像である場合、アイコン画像のリンク先は、データーのリンク先（換言すれば、データのファイルパス）となる。アイコン画像のリンク先８０は「リンク先情報」として機能する。図５の例では、アイコン画像のリンク先８０には、アイコン画像６１のリンク先である「/sdcard/android/data/XXXa」と、アイコン画像６２のリンク先である「/sdcard/android/data/XXXb」と、アイコン画像６３のリンク先である「/sdcard/android/data/XXXc」と、アイコン画像６４のリンク先である「/sdcard/android/data/XXXd」とが含まれている。

このように、図４のステップＳ１０８においてスマートフォン３００は、スマートフォン３００の表示画面に表示されている全て（例えばｎ個とする）のアイコン画像について、ｎ組のアイコン画像と、アイコン画像の座標と、アイコン画像のリンク先と、からなるアイコン画像６０と、アイコン画像の座標７０と、アイコン画像のリンク先８０とを「アイコン画像の情報」として収集する。なお、アイコン画像の座標７０と、アイコン画像のリンク先８０とは、いずれか一方を省略してもよい。その後、ステップＳ１１０においてスマートフォン３００は、ステップＳ１０８で収集したアイコン画像の情報を、ヘッドマウントディスプレイ１００へ送信する。

ステップＳ１１２において生成部１４２は、無線通信部１３２を介してアイコン画像の情報を取得する。このとき、生成部１４２と無線通信部１３２とは「取得部」として機能する。アイコン画像の情報を取得後、ステップＳ１１２において生成部１４２は、アイコン画像の情報をフィルタリングする。例えば、生成部１４２は、以下に挙げる条件ａ１〜ａ３の少なくとも１つ以上の条件を用いて、アイコン画像の情報をフィルタリングすることができる。

（ａ１）生成部１４２は、アイコン画像の情報における重複した情報を破棄する。具体的には、生成部１４２は、アイコン画像の情報に、アイコン画像のリンク先８０の内容が同一で、かつ、アイコン画像の座標７０の内容が異なる複数の情報が含まれる場合、「同一のリンク先を参照する複数の（重複した）アイコン画像が存在する」とみなして、いずれか一方の情報を破棄する。このようにすれば、生成部１４２は、同一のリンク先を参照する重複したアイコン画像が、一覧画像に含まれることを抑制することができる。

（ａ２）生成部１４２は、アイコン画像が表すアプリケーションに応じて、一部の情報を破棄する。具体的には、生成部１４２は、アイコン画像のリンク先８０（８１〜８ｎ）の内容から、個々のアイコン画像６０（６１〜６ｎ）が表すアプリケーションを特定する。生成部１４２は、特定したアプリケーションが、所定のアプリケーションである場合、当該アイコン画像についての情報を破棄する。このようにすれば、生成部１４２は、所定のアプリケーションについてのアイコン画像が、一覧画像に含まれることを抑制することができる。ここで、「所定のアプリケーション」を、例えば、ヘッドマウントディスプレイ１００において実行不可能なアプリケーションとすれば、生成部１４２は、ヘッドマウントディスプレイ１００において実行不可能なアプリケーションのアイコン画像が、一覧画像に含まれることを抑制することができる。

（ａ３）生成部１４２は、アイコン画像が表すアプリケーション（またはデーター）の使用頻度に応じて、一部の情報を破棄する。この場合、スマートフォン３００が収集、送信するアイコン画像の情報には、さらに、個々のアイコン画像６０（６１〜６ｎ）が表すアプリケーション（またはデーター）の使用頻度を含ませる。生成部１４２は、使用頻度が所定の頻度以下である場合、当該アイコン画像についての情報を破棄する。このようにすれば、生成部１４２は、スマートフォン３００において使用頻度の低いアプリケーション（またはデーター）のアイコン画像が、一覧画像に含まれることを抑制することができる。

なお、ステップＳ１１２におけるフィルタリングの条件は、使用者によって任意に設定可能としてもよい。そうすれば、使用者は、自分の好みのアイコン画像が残るようにフィルタリングされた一覧画像を視認することが可能となるため、使用者の利便性を向上させることができる。

ステップＳ１１４において生成部１４２は、アイコン画像の情報をグルーピングし、ソートする。例えば、生成部１４２は、以下に挙げる条件ｂ１〜ｂ３の少なくとも１つ以上の条件を用いて、アイコン画像の情報をグルーピングやソートをすることができる。

（ｂ１）生成部１４２は、アイコン画像の種類に応じて、アイコン画像の情報をグルーピング、ソートする。ここで、アイコン画像の種類とは、個々のアイコン画像６０（６１〜６ｎ）が、（ｉ）スマートフォン３００にインストールされているアプリケーションの起動用の画像であるか、（ｉｉ）スマートフォン３００にインストールされているアプリケーション（ウィジェットやガジェット）によって描画されている画像であるか、（ｉｉｉ）スマートフォン３００に記憶されているデーターの起動用の画像であるか、を意味する（ステップＳ１０８参照）。

（ｂ２）生成部１４２は、アイコン画像が表すアプリケーション（またはデーター）の名前や種類に応じて、アイコン画像の情報グルーピング、ソートする。なお、アプリケーション（またはデーター）の名前は、アイコン画像のリンク先８０の内容から取得可能である。

（ｂ３）生成部１４２は、アイコン画像が表すアプリケーション（またはデーター）の使用頻度に応じて、アイコン画像の情報をグルーピング、ソートする。なお、アプリケーション（またはデーター）の使用頻度の取得方法は、上記の条件ａ３と同様である。

このように、条件ｂ１〜ｂ３を用いれば、生成部１４２は、アイコン画像の情報を、種々の条件を用いてグルーピングやソートをすることができる。この結果、一覧画像における個々のアイコン画像６０（６１〜６ｎ）の視認性を向上させることができる。

ステップＳ１１６において生成部１４２は、ステップＳ１１４の終了後のアイコン画像の情報を用いて、フレームＦＭ１（図３）にアイコン画像６０を配置することで、一覧画像を生成する。具体的には、生成部１４２は、フレーム情報１２２からフレームＦＭ１を取得し、取得したフレームＦＭ１の画像リストＬＴ１の画像枠Ｂ１〜Ｂ１２に対して、ソート後のアイコン画像の情報に含まれる個々のアイコン画像６０（６１〜６ｎ）を順次配置する。生成部１４２は、画像枠Ｂ１〜Ｂ１２に対してアイコン画像６０を配置する際、個々のアイコン画像６０（６１〜６ｎ）に対して、以下のｃ１〜ｃ５に例示するような加工を施してもよい。なお、加工ｃ１〜ｃ５は、単独で採用されてもよく、組み合わせて採用されてもよい。

（ｃ１）生成部１４２は、アイコン画像の形状を変更する。例えば、生成部１４２は、四角形状のアイコン画像を円形状に変更することができる。
（ｃ２）生成部１４２は、アイコン画像の透過率を変更する。例えば、生成部１４２は、アイコン画像の透過率を上下させることができる。アイコン画像の透過率を上げれば、虚像として表示されている一覧画像を視認した際に、使用者の視界がアイコン画像によって妨げられることを抑制することができる。
（ｃ３）生成部１４２は、アイコン画像に対して色変換処理を施す。例えば、画像表示部２０に対して、使用者の視界方向の外景（外部の景色）を撮像し、外景画像を取得するカメラを備える構成とする。そして、生成部１４２は、アイコン画像に対して外景画像の補色を強める色変換処理を施す。このようにすれば、生成部１４２は、アイコン画像を外景と比して目立たせることができる。

（ｃ４）生成部１４２は、アイコン画像の大きさを変更する。例えば、生成部１４２は、アイコン画像を画像枠Ｂ１〜Ｂ１２の大きさに合わせて拡大、縮小する。
（ｃ５）生成部１４２は、アイコン画像に文字、図形、記号等の装飾を付加する。例えば、生成部１４２は、アイコン画像に対して、アイコン画像を説明するための文字を追加することができる。このようにすれば、虚像として表示されている一覧画像を視認した際に、使用者は、各アイコン画像が何であるかを識別しやすくなる。また、例えば、生成部１４２は、アイコン画像に対して、アイコン画像の周囲を縁取る枠を追加することもできる。このようにすれば、生成部１４２は、アイコン画像を外景と比して目立たせることができる。

ステップＳ１１８において生成部１４２は、フレームＦＭ１上のアイコン画像６０の座標と、位置情報またはリンク先情報の内の少なくとも一方と、を対応付けて、対応関係１２４に記憶させる。フレームＦＭ１上のアイコン画像６０の座標は、フレームＦＭ１の所定の点（例えば、左上端部）を原点（０、０）と定めたうえで、原点に対するアイコン画像の中心位置の移動量（ｘ、ｙ）として定義することができる。生成部１４２は、上記のようにして、フレームＦＭ１上の個々のアイコン画像６０（６１〜６ｎ）の座標をそれぞれ求める。生成部１４２は、求めたフレームＦＭ１上の座標と、対応するアイコン画像の座標７０（７１〜７ｎ）または対応するアイコン画像のリンク先８０（８１〜８ｎ）と、を対応関係１２４に記憶させる。

ステップＳ１２０において生成部１４２は、ヘッドマウントディスプレイ１００に一覧画像を表示させる。具体的には、生成部１４２は、ステップＳ１１６で生成した一覧画像を画像処理部１６０へ送信する。一覧画像を受信した画像処理部１６０では、上述の表示処理が行われる。この結果、ヘッドマウントディスプレイ１００の使用者の両眼に導かれた画像光が使用者の網膜に結像することにより、ヘッドマウントディスプレイ１００の使用者は、視野に一覧画像の虚像を視認することができる。換言すれば、ヘッドマウントディスプレイ１００は、一覧画像を表示することができる。

図６は、ヘッドマウントディスプレイ１００において、一覧画像が表示されている様子を示す説明図である。図６（Ａ）は、画像リストＬＴ１が折り畳まれた状態の一覧画像を表す。図６（Ｂ）は、画像リストＬＴ１が展開された状態の一覧画像を表す。図６（Ａ）に示すように、画像処理部１６０は、使用者による操作が検出されない間は、画像リストＬＴ１が折り畳まれた状態の一覧画像を表示させる。そして、折り畳まれた画像リストＬＴ１に対する使用者の所定の操作（例えば、クリック、ダブルクリック、ドラッグ、オンフォーカス、タップ、ダブルタップ、フリック等）を入力情報取得部１１０が取得したことをトリガーとして、図６（Ｂ）に示すように、画像リストＬＴ１が展開された状態の一覧画像を表示させる。なお、画像処理部１６０は、図６（Ａ）の状態を省略してもよい。この場合、図６（Ｂ）に示す一覧画像が常に表示される。

図６に示すように、ヘッドマウントディスプレイ１００の使用者は、視野ＶＲにおいて、フレームＦＭ１に配置された一覧画像の虚像ＶＩを視認することができる。このとき、使用者は、右光学像表示部２６および左光学像表示部２８（図１）を透過して外景ＳＣを視認することができる。換言すれば、本実施形態のヘッドマウントディスプレイ１００の使用者は、視野ＶＲのうち虚像ＶＩが表示された部分については、虚像ＶＩと、虚像ＶＩの背後の外景ＳＣとを同時に見ることができる。また、視野ＶＲのうち虚像ＶＩが表示されていない部分については、左右の光学像表示部２６、２８を透過して、外景ＳＣを直接見ることができる。

以上のように、第１実施形態の再配置処理によれば、画像表示部２０は、スマートフォン３００（外部装置）が有するアイコン画像６０の配置を、ヘッドマウントディスプレイ１００（頭部装着型表示装置）用に変更して生成された一覧画像を、虚像ＶＩとして使用者に視認させる。スマートフォン３００が有するアイコン画像６０とは、スマートフォン３００の表示画面に表示される画像である。このアイコン画像６０の配置をヘッドマウントディスプレイ１００用に変更することは、すなわち、スマートフォン３００の表示画面を、ヘッドマウントディスプレイ１００に適した画像の表示態様に変更することを意味する。この結果、画像表示部２０は、スマートフォン３００の表示画面を、ヘッドマウントディスプレイ１００に適した画像の表示態様を用いて、ヘッドマウントディスプレイ１００に表示させることができる。

また、第１実施形態の再配置処理によれば、生成部１４２は、フレームＦＭ１の中心部を回避した位置（例えば四辺に近接する領域内）に画像リストＬＴ１（アイコン画像６０が実際に配置される領域）が配置されたフレームＦＭ１を用いて、一覧画像を生成する。このため、画像表示部２０は、アイコン画像６０の配置が虚像ＶＩの中心部を回避した位置へと変更された一覧画像を表示させることができる。従って、使用者の眼前がアイコン画像６０によって遮られることを抑制することができる。

Ａ−４．通知処理：
図７は、通知処理の手順を示すシーケンス図である。通知処理は、ヘッドマウントディスプレイ１００に表示されている一覧画像から一のアイコン画像が操作された場合に、操作された一のアイコン画像の位置情報またはリンク先情報をスマートフォン３００へ通知する処理である。通知処理は、主として通知部１４４により実行される。

ステップＳ２００において入力情報取得部１１０は、ヘッドマウントディスプレイ１００に表示されている一覧画像の中の任意のアイコン画像に対する操作を検出し、操作が行われたアイコン画像の座標（ｘ、ｙ）を取得する。この時、入力情報取得部１１０は「操作取得部」として機能する。ステップＳ２０２において通知部１４４は、入力情報取得部１１０から座標（ｘ、ｙ）を受信し、受信した座標をキーとして対応関係１２４の「フレームＦＭ１上のアイコン画像６０の座標」を検索し、対応する位置情報（スマートフォン３００上のアイコン画像の座標７０）またはリンク先情報（スマートフォン３００上のアイコン画像のリンク先８０）を取得する。

ステップＳ２０４において通知部１４４は、取得した位置情報またはリンク先情報をスマートフォン３００へ送信する。なお、ステップＳ２０４において通知部１４４は、位置情報とリンク先情報との両方をスマートフォン３００へ通知してもよい。また、ステップＳ２０４において通知部１４４は、位置情報またはリンク先情報に加えて、ステップＳ２００において検出された操作の内容（例えば、クリック、ダブルクリック、ドラッグ、オンフォーカス、タップ、ダブルタップ、フリック等）をスマートフォン３００へ送信してもよい。ステップＳ２０６においてスマートフォン３００は、ヘッドマウントディスプレイ１００から受信した位置情報またはリンク先情報から、操作されたスマートフォン３００のアイコン画像を特定し、ステップＳ２００において検出された操作に応じた処理を行う。

以上のように、第１実施形態の通知処理によれば、通知部１４４は、ヘッドマウントディスプレイ１００（頭部装着型表示装置）に表示されている一覧画像の一のアイコン画像に対する操作（例えば、クリック、ダブルクリック、ドラッグ、オンフォーカス、タップ、ダブルタップ、フリック等）が行われた場合に、スマートフォン３００（外部装置）に対して、位置情報（スマートフォン３００上のアイコン画像の座標７０）とリンク先情報（スマートフォン３００上のアイコン画像のリンク先８０）との内の少なくとも一方を通知する。位置情報はスマートフォン３００における一のアイコン画像の位置を識別するための情報であるため、座標等を用いた文字列標記が可能であり、データー量が小さい。同様に、リンク先情報はスマートフォン３００における一のアイコン画像のリンク先を識別するための情報であるため、ファイルパス等を用いた文字列標記が可能であり、データー量が小さい。従って、この形態のヘッドマウントディスプレイ１００によれば、ヘッドマウントディスプレイ１００からスマートフォン３００へ送信される情報のデーター量を小さくすることができ、通信負荷を低減することができる。

また、第１実施形態の通知処理によれば、通知部１４４は、アイコン画像６０とアイコン画像の座標７０（位置情報）またはアイコン画像のリンク先８０（リンク先情報）との対応付けである対応関係１２４を用いて、簡単に、操作された一のアイコン画像の位置情報またはリンク先情報を通知することができる。

Ａ−５．フレームの他の例：
再配置処理（図４）で使用可能なフレームの他の例について説明する。フレーム情報１２２には、図３で説明したフレームに代えて、または、図３で説明したフレームと共に、以下に説明する種々のフレームが記憶されていてもよい。フレーム情報１２２に複数のフレームが記憶されている場合、再配置処理において使用されるフレームは、使用者が任意に選択可能な構成とすることができる。

図８は、フレーム情報１２２に記憶されているフレームの他の例を示す説明図である。図８に示すフレームＦＭ２は、長方形状の領域（以降、「フレームＦＭ２の領域」とも呼ぶ。）の内側に、画像リストＬＴ２が配置された構成を有する。フレームＦＭ２の領域の横の比率は、ヘッドマウントディスプレイ１００の表示素子の横の比率と同じである。また、フレームＦＭ２の領域の縦の比率は、ヘッドマウントディスプレイ１００の表示素子の縦の比率よりも大きい。これは、ヘッドマウントディスプレイ１００に表示された一覧画像において、鉛直方向ＰＥへの縦スクロールを可能とするためである。なお、図８において、ヘッドマウントディスプレイ１００の表示素子の領域を一点鎖線で示す。

画像リストＬＴ２は、再配置処理（図４）において、アイコン画像が実際に配置される領域であり、図８の例では、画像リストＬＴ２は、フレームＦＭ２の領域の右端の全体にわたって配置されている。画像リストＬＴ２は、フレームＦＭ２の領域の任意の場所に配置することができる。ただし、フレームＦＭ２を用いて生成された一覧画像がヘッドマウントディスプレイ１００に表示された際、使用者の視界を妨げないという観点から、画像リストＬＴ２は、フレームＦＭ２の中心部を回避した位置（例えば四辺に近接する領域内）に配置されることが好ましい。具体的には、例えば、画像リストＬＴ２は、フレームＦＭ２の領域の右端の一部に配置されてもよく、フレームＦＭ２の領域の左端の一部または全体に配置されてもよく、フレームＦＭ２の領域の上端の一部または全体に配置されてもよく、フレームＦＭ２の領域の下端の一部または全体に配置されてもよい。

画像リストＬＴ２は、複数（図の例では１２個）の正方形状の画像枠Ｂ１〜Ｂ１２を含んでいる。画像枠Ｂ１〜Ｂ１２は、画像リストＬＴ２内において、互いに隣接するように配置されている。画像枠Ｂ１〜Ｂ１２は、再配置処理（図４）において、スマートフォン３００が有するアイコン画像６０を配置するための領域である。なお、画像リストＬＴ２をフレームＦＭ２の上下端に配置する場合、フレームＦＭ２の領域の横の比率を表示素子の横の比率よりも大きくし、フレームＦＭ２の領域の縦の比率を表示素子の縦の比率と同一とする。そうすれば、ヘッドマウントディスプレイ１００に表示された一覧画像において、水平方向ＨＦへの横スクロールが可能となる。

図９は、ヘッドマウントディスプレイ１００において、フレームＦＭ２を用いて生成された一覧画像が表示されている様子を示す説明図である。図９（Ａ）は、画像リストＬＴ２がスクロールされる前の一覧画像を表す。図９（Ｂ）は、画像リストＬＴ２がスクロールされた後の一覧画像を表す。

このように、図８で説明したフレームＦＭ２を用いて一覧画像が生成された場合であっても、図３のフレームＦＭ１を用いた場合と同様の効果を得ることができる。

図１０は、フレーム情報１２２に記憶されているフレームの他の例を示す説明図である。図１０に示すフレームＦＭ３は、長方形状の領域（以降、「フレームＦＭ３の領域」とも呼ぶ。）の内側に、４つの画像リストＬＴ３ａ〜ＬＴ３ｄが配置された構成を有する。フレームＦＭ３の領域は、ヘッドマウントディスプレイ１００の表示素子の縦横比と同じ縦横比を有することが好ましい。

４つの画像リストＬＴ３ａ〜ＬＴ３ｄは、再配置処理（図４）において、アイコン画像が実際に配置される領域である。図１０の例では、画像リストＬＴ３ａはフレームＦＭ３の上端から中央近傍に向かって台形形状に延伸して配置されている。同様に、画像リストＬＴ３ｂはフレームＦＭ３の右端から中央近傍に向かって、画像リストＬＴ３ｃはフレームＦＭ３の下端から中央近傍に向かって、画像リストＬＴ３ｄはフレームＦＭ３の左端から中央近傍に向かって、それぞれ、台形形状に延伸して配置されている。

画像リストＬＴ３ａ〜ＬＴ３ｄは、それぞれ、複数（図の例では１２個）の台形状の画像枠Ｂ１〜Ｂ１２を含んでいる。画像枠Ｂ１〜Ｂ１２は、画像リストＬＴ３ａ〜ＬＴ３ｄ内において、タイル状に隣接して配置されている。画像枠Ｂ１〜Ｂ１２は、再配置処理（図４）において、スマートフォン３００が有するアイコン画像６０を配置するための領域である。生成部１４２は、例えば、ステップＳ１１４においてアイコン画像の情報を複数のグループに分割した場合、第１のグループに属するアイコン画像を画像リストＬＴ３ａに配置し、第２のグループに属するアイコン画像を画像リストＬＴ３ｂに配置する、という処理を行うことができる。生成部１４２は、一覧画像を生成する際、画像リストＬＴ３ａ〜ＬＴ３ｄを全て使用してもよく、一部のみを使用してもよい。

図１１は、ヘッドマウントディスプレイ１００において、フレームＦＭ３を用いて生成された一覧画像が表示されている様子を示す説明図である。図１１の例では、画像リストＬＴ３ｂを用いてアイコン画像６０が配置されている。

このように、図１０で説明したフレームＦＭ３を用いて一覧画像が生成された場合であっても、図３のフレームＦＭ１を用いた場合と同様の効果を得ることができる。

Ｂ．第２実施形態：
本発明の第２実施形態では、スマートフォンから取得したアイコン画像に加えて、さらに、ヘッドマウントディスプレイが有するアイコン画像を配置した一覧画像を生成可能な構成について説明する。以下では、第１実施形態と異なる構成および動作を有する部分についてのみ説明する。なお、図中において第１実施形態と同様の構成部分については先に説明した第１実施形態と同様の符号を付し、その詳細な説明を省略する。

Ｂ−１．画像表示システムの構成：
第２実施形態における画像表示システムの概略構成は、図１に示す第１実施形態と同様である。

Ｂ−２．頭部装着型表示装置の構成：
図１２は、第２実施形態におけるヘッドマウントディスプレイ１００ａの構成を機能的に示すブロック図である。図２に示した第１実施形態との違いは、制御部１０に代えて制御部１０ａを備える点である。制御部１０ａは、生成部１４２に代えて生成部１４２ａを備え、通知部１４４に代えて通知部１４４ａを備える。生成部１４２ａは、再配置処理の処理内容が図４で説明した第１実施形態と異なる。通知部１４４ａは、通知処理の処理内容が図７で説明した第１実施形態と異なる。

Ｂ−３．再配置処理：
図１３は、第２実施形態における再配置処理の手順を示すシーケンス図である。図４に示した第１実施形態との違いは、ステップＳ１１２〜Ｓ１１８に代えてステップＳ３００〜Ｓ３０８を備える点のみであり、他の処理内容は第１実施形態と同じである。

ステップＳ３００において生成部１４２ａは、ヘッドマウントディスプレイ１００ａの表示画面に表示されているアイコン画像の情報を収集する。第２実施形態における「アイコン画像」とは、第１実施形態で説明したスマートフォン３００にインストールされているアプリケーションの起動用の画像に加えて、さらに、ヘッドマウントディスプレイ１００にインストールされているアプリケーションの起動用の画像も含む。また、「アイコン画像」には、このほか、ヘッドマウントディスプレイ１００にインストールされているウィジェットやガジェットによって描画されている画像や、ヘッドマウントディスプレイ１００に記憶されているデーターの起動用の画像を含んでもよい。ステップＳ３００における生成部１４２ａの処理内容の詳細は、第１実施形態のステップＳ１０８の説明、および、図５の説明と同様である。ただし、「スマートフォン３００」との記載を「ヘッドマウントディスプレイ１００ａ」と読み替える。

ステップＳ３０２において生成部１４２ａは、スマートフォン３００のアイコン画像の情報と、ヘッドマウントディスプレイ１００ａのアイコン画像の情報とをフィルタリングする。詳細は第１実施形態のステップＳ１１２と同様である。

ステップＳ３０４において生成部１４２ａは、スマートフォン３００のアイコン画像の情報と、ヘッドマウントディスプレイ１００ａのアイコン画像の情報とをグルーピングし、ソートする。詳細は第１実施形態のステップＳ１１４と同様である。なお、ステップＳ３０４では、ステップＳ１１４で説明した条件ｂ１〜ｂ３に加えて、以下の条件ｂ４を用いたグルーピングまたはソートを行うことが好ましい。
（ｂ４）生成部１４２ａは、アイコン画像の情報の抽出元デバイス（具体的には、ヘッドマウントディスプレイ１００ａのアイコン画像か、スマートフォン３００のアイコン画像か）に応じて、アイコン画像の情報をグルーピングまたはソートする。このように、条件ｂ４を用いれば、生成部１４２ａは、アイコン画像の情報を、アイコン画像の情報の抽出元デバイスに応じてグルーピングやソートをすることができる。この結果、一覧画像における個々のアイコン画像６０（６１〜６ｎ）の視認性を向上させることができる。

ステップＳ３０６において生成部１４２ａは、ステップＳ３０４の終了後のアイコン画像の情報を用いて、フレームＦＭ１（図３）にアイコン画像６０を配置することで、一覧画像を生成する。詳細は第１実施形態のステップＳ１１６と同様である。なお、ステップＳ３０６では、個々のアイコン画像６０（６１〜６ｎ）に対して、ステップＳ１１６で説明した加工ｃ１〜ｃ５に加えて、さらに、以下のｃ６に示す加工を施すことが好ましい。
（ｃ６）生成部１４２ａは、アイコン画像に対して、当該アイコン画像の情報の抽出元デバイスが異なることが使用者に識別可能となるような装飾を施す。例えば、ヘッドマウントディスプレイ１００ａのアイコン画像を縁取る枠と、スマートフォン３００のアイコン画像を縁取る枠とを、異なる表示とする。また、例えば、ヘッドマウントディスプレイ１００ａのアイコン画像の色と、ヘッドマウントディスプレイ１００ａのアイコン画像の色とを、異なる色とする。そのほか、生成部１４２ａは、アイコン画像の形状を変えてもよく、アイコン画像の透過率を変えてもよく、アイコン画像の大きさを変えてもよく、アイコン画像に付す注釈（文字、図形、記号等）を変えてもよい。

ステップＳ３０８において生成部１４２ａは、フレームＦＭ１上のアイコン画像６０の座標と、ヘッドマウントディスプレイ１００ａの位置情報またはリンク先情報の内の少なくとも一方と、を対応付けて、対応関係１２４に記憶させる。同様に、生成部１４２ａは、フレームＦＭ１上のアイコン画像６０の座標と、スマートフォン３００の位置情報またはリンク先情報の内の少なくとも一方と、を対応付けて、対応関係１２４に記憶させる。
詳細は第１実施形態のステップＳ１１８と同様である。

図１４は、ヘッドマウントディスプレイ１００ａにおいて、第２実施形態の一覧画像が表示されている様子を示す説明図である。なお、図１４では、フレームＦＭ１の領域の左端に画像リストＬＴ１ａが配置され、左端に画像リストＬＴ１ｂが配置されたフレームＦＭ１を用いて生成された一覧画像を示す。画像リストＬＴ１ａには、スマートフォン３００から取得されたアイコン画像の情報に基づいて、スマートフォン３００のアイコン画像が配置されている。また、画像リストＬＴ１ｂには、ヘッドマウントディスプレイ１００ａから取得されたアイコン画像の情報に基づいて、ヘッドマウントディスプレイ１００ａのアイコン画像が配置されている。さらに、画像リストＬＴ１ａに配置されているアイコン画像は太い縁取りを用いて装飾され、画像リストＬＴ１ｂに配置されているアイコン画像は細い縁取りを用いて装飾されている。

以上のように、第２実施形態の再配置処理によれば、画像表示部２０は、スマートフォン３００（外部装置）のアイコン画像と、ヘッドマウントディスプレイ１００ａ（頭部装着型表示装置）のアイコン画像と、の両方を、相互に識別可能な態様で使用者に視認させることができるため、使用者の利便性を向上させることができる。なお、図１４では、説明の便宜上、画像リストＬＴ１ａ、ＬＴ１ｂが折り畳まれた状態は図示していない。しかし、図６と同様に、画像リストＬＴ１ａ、ＬＴ１ｂは、折り畳み可能とされてもよい。

Ｂ−４．通知処理：
第２実施形態における通知処理は、図７で説明した第１実施形態とほぼ同様である。ただし、ステップＳ２０４において通知部１４４ａは、操作が行われたアイコン画像の抽出元デバイスに対して、位置情報またはリンク先情報を送信する。すなわち、通知部１４４ａは、操作が行われたアイコン画像の抽出元デバイスがヘッドマウントディスプレイ１００ａである場合は、ＯＳ１５０に対して位置情報またはリンク先情報を送信する。一方で、通知部１４４ａは、操作が行われたアイコン画像の抽出元デバイスがスマートフォン３００である場合は、スマートフォン３００に対して位置情報またはリンク先情報を送信する。その後、位置情報またはリンク先情報を受信したヘッドマウントディスプレイ１００ａのＯＳ１５０と、スマートフォン３００と、のいずれか一方において、ステップＳ２０６で説明した処理が実施される。

Ｃ．変形例：
上記実施形態において、ハードウェアによって実現されるとした構成の一部をソフトウェアに置き換えるようにしてもよく、逆に、ソフトウェアによって実現されるとした構成の一部をハードウェアに置き換えるようにしてもよい。その他、以下のような変形も可能である。

・変形例１：
上記実施形態では、画像表示システムの構成について例示した。しかし、画像表示システムの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、画像表示システムを構成する各装置の追加・削除・変換等を行うことができる。また、画像表示システムを構成する装置のネットワーク構成の変更を行うことができる。

例えば、ヘッドマウントディスプレイには、複数の外部装置（例えば、スマートフォンとＰＤＡ）が接続されてもよい。この場合、第２実施形態と同様にして生成部は、第１の外部装置のアイコン画像と、第２の外部装置のアイコン画像と、第ｍ（ｍは３以上の整数）の外部装置のアイコン画像と、の全てが、相互に識別可能な態様で配置された一覧画像を生成してもよい。このようにすれば、画像表示部は、複数の外部装置のアイコン画像を、相互に識別可能な態様で使用者に視認させることができるため、ヘッドマウントディスプレイにおける使用者の利便性をより一層向上させることができる。

例えば、外部装置（のうちの少なくとも１つ）として、インターネットＩＮＴを介したクラウドサーバーが使用されてもよい。この場合であっても、生成部は、上記第１実施形態および第２実施形態と同様の処理を行うことにより、上記第１実施形態および第２実施形態と同様の効果を得ることができる。

上記実施例では、「外部装置が有する複数の画像」の具体例として、「外部装置の表示画面に表示されるアイコン画像」を例示して説明した。しかし、外部装置が有する複数の画像は、外部装置に記憶されている画像であればよく、必ずしも、外部装置に「表示される」画像や、外部装置の「アイコン」画像には限られない。

・変形例２：
上記実施形態では、ヘッドマウントディスプレイの構成について例示した。しかし、ヘッドマウントディスプレイの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、各構成部の追加・削除・変換等を行うことができる。

上記実施形態における制御部と、画像表示部とに対する構成要素の割り振りはあくまで一例であり、種々の態様を採用可能である。例えば、以下のような態様としてもよい。（i）制御部にＣＰＵやメモリー等の処理機能を搭載、画像表示部には表示機能のみを搭載する態様、（ｉｉ）制御部と画像表示部との両方にＣＰＵやメモリー等の処理機能を搭載する態様、（ｉｉｉ）制御部と画像表示部とを一体化した態様（例えば、画像表示部に制御部が含まれ眼鏡型のウェアラブルコンピューターとして機能する態様）、（ｉｖ）制御部の代わりにスマートフォンや携帯型ゲーム機を使用する態様、（ｖ）制御部と画像表示部とを無線通信かつワイヤレス給電可能な構成とすることにより接続部（コード）を廃した態様。（ｖｉ）制御部からタッチパッドを廃し、画像表示部にタッチパッドを設けた態様。

上記実施形態では、説明の便宜上、制御部が送信部を備え、画像表示部が受信部を備えるものとした。しかし、上記実施形態の送信部および受信部は、いずれも、双方向通信が可能な機能を備えており、送受信部として機能することができる。また、例えば、図５に示した制御部は、有線の信号伝送路を介して画像表示部と接続されているものとした。しかし、制御部と、画像表示部とは、無線ＬＡＮや赤外線通信やＢｌｕｅｔｏｏｔｈ（登録商標）等の無線の信号伝送路を介した接続により接続されていてもよい。

例えば、図２に示した制御部、画像表示部の構成は任意に変更することができる。具体的には、例えば、制御部は、上述した各種の入力デバイス（タッチパッド、十字キー、フットスイッチ、ジェスチャー検出、視線検出、マイクロホン）のほか、種々の入力デバイス（例えば、操作用スティック、キーボード、マウス等）を備えることができる。また、上記実施形態では、電源として二次電池を用いることしたが、電源としては二次電池に限らず、種々の電池を使用することができる。例えば、一次電池や、燃料電池、太陽電池、熱電池等を使用してもよい。

例えば、ヘッドマウントディスプレイは、両眼タイプの透過型ヘッドマウントディスプレイであるものとしたが、単眼タイプのヘッドマウントディスプレイとしてもよい。また、使用者がヘッドマウントディスプレイを装着した状態において外景の透過が遮断される非透過型ヘッドマウントディスプレイとして構成してもよい。上記実施形態では、画像表示部を眼鏡のように装着するヘッドマウントディスプレイであるとしているが、例えば、帽子のように装着するタイプの画像表示部等、他の形状の画像表示部を採用したヘッドマウントディスプレイとしてもよい。また、イヤホンは耳掛け型やヘッドバンド型を採用してもよく、省略してもよい。さらに、例えば、自動車や飛行機等の車両に搭載されるヘッドアップディスプレイ（ＨＵＤ、Head-Up Display）として構成されてもよい。そのほか、ヘルメット等の身体防護具に内蔵されたヘッドマウントディスプレイとして構成されてもよい。

図１５は、変形例におけるヘッドマウントディスプレイの外観の構成を示す説明図である。図１５（Ａ）の例では、画像表示部２０ａが、右光学像表示部２６に代えて右光学像表示部２６ａを備え、左光学像表示部２８に代えて左光学像表示部２８ａを備えている。右光学像表示部２６ａおよび左光学像表示部２８ａは、第１実施形態の光学部材よりも小さく形成され、ヘッドマウントディスプレイの装着時における使用者の右眼および左眼の斜め上に配置されている。図１５（Ｂ）の例では、画像表示部２０ｂが、右光学像表示部２６に代えて右光学像表示部２６ｂを備え、左光学像表示部２８に代えて左光学像表示部２８ｂを備えている。右光学像表示部２６ｂおよび左光学像表示部２８ｂは、第１実施形態の光学部材よりも小さく形成され、ヘッドマウントディスプレイの装着時における使用者の右眼および左眼の斜め下に配置されている。このように、光学像表示部は使用者の眼の近傍に配置されていれば足りる。また、光学像表示部を形成する光学部材の大きさも任意であり、光学像表示部が使用者の眼の一部分のみを覆う態様、換言すれば、光学像表示部が使用者の眼を完全に覆わない態様のヘッドマウントディスプレイとして実現することもできる。なお、図１５のような構成とした場合においても、使用者における視認性を向上させつつヘッドマウントディスプレイに適した態様となるように、外部装置が有する複数の画像の配置を適宜調整することができる。この場合、上記実施形態に例示した配置の例には限られない。

例えば、上記実施形態では、表示駆動部は、バックライトと、バックライト制御部と、ＬＣＤと、ＬＣＤ制御部と、投写光学系を用いて構成されるものとした。しかし、上記の態様はあくまで例示である。表示駆動部は、これらの構成部と共に、またはこれらの構成部に代えて、他の方式を実現するための構成部を備えていても良い。例えば、表示駆動部は、有機ＥＬ（有機エレクトロルミネッセンス、Organic Electro-Luminescence）のディスプレイと、有機ＥＬ制御部と、投写光学系とを備える構成としても良い。また、例えば、表示駆動部は、ＬＣＤに代えてデジタル・マイクロミラー・デバイス等を用いることもできる。また、例えば、レーザー網膜投影型の頭部装着型表示装置に対して本発明を適用することも可能である。

例えば、生成部、通知部、画像処理部、表示制御部、音声処理部等の各機能部は、ＣＰＵがＲＯＭやハードディスクに格納されているコンピュータープログラムをＲＡＭに展開して実行することにより実現されるものとして記載した。しかし、これら機能部は、当該機能を実現するために設計されたＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）を用いて構成されてもよい。

・変形例３：
上記実施形態では、再配置処理の一例を示した。しかし、再配置処理の手順はあくまで一例であり、種々の変形が可能である。例えば、一部のステップを省略してもよいし、更なる他のステップを追加してもよい。また、実行されるステップの順序を変更してもよい。

例えば、生成部は、フレームを使用せずに一覧画像を生成してもよい。具体的には、ステップＳ１１６において生成部は、フレームに代えて、予め定められた座標位置にアイコン画像を配置することで一覧画像を生成してもよい。他の例として、ステップＳ１１６において生成部は、取得したアイコン画像の大きさから動的に計算した座標位置にアイコン画像を配置することで一覧画像を生成してもよい。このようにすれば、フレーム情報を必要とせずに一覧画像を生成することができる。

例えば、生成部は、使用者の視線方向を避けるように、動的に一覧画像を生成してもよい。具体的には、上記ヘッドマウントディスプレイにおいて、使用者の眼を撮像するカメラや赤外線センサー等、使用者の視線方向を検出する構成（「視線方向検出部」とも呼ぶ。）を追加する。ステップＳ１１６において生成部は、フレーム情報に記憶されている複数のフレームの中から、検出された視線方向の反対側に画像リストが配置されているフレームを選択することができる。他の例として、ステップＳ１１６において生成部は、図１０のようにフレームが複数の画像リストを備える場合に、この複数の画像リストのうち、検出された視線方向の反対側の画像リストを優先的に選択し、アイコン画像の配置を行うこともできる。このようにすれば、一覧画像において、使用者の視線方向を避けた動的なアイコン画像の配置が可能となる。

例えば、ステップＳ１１２のフィルタリングは省略してもよい。また、ステップＳ１１２のフィルタリングは、スマートフォン側において、アイコン画像の情報の収集（ステップＳ１０８）と、アイコン画像の情報の送信（ステップＳ１１０）との間に実行されてもよい。

例えば、ステップＳ１１４のグルーピングおよびソートは、いずれか一方、または両方を省略してもよい。また、ステップＳ１１４のグルーピングおよびソートは、スマートフォン側において、アイコン画像の情報の収集（ステップＳ１０８）と、アイコン画像の情報の送信（ステップＳ１１０）との間に実行されてもよい。

例えば、上記実施形態で説明したアイコン画像は、２次元的に表現された画像を想定した。しかし、画像処理部は、右眼用画像データーと左眼用画像データーとを異なるデーターとすることで、アイコン画像を３次元的に表現してもよい。

例えば、ステップＳ１０４のスマートフォンの認証と、Ｓ１０６のコネクションの確立と、はいずれか一方を省略してもよく、実行順序を入れ替えてもよい。

・変形例４：
上記実施形態では、通知処理の一例を示した。しかし、通知処理の手順はあくまで一例であり、種々の変形が可能である。例えば、一部のステップを省略してもよいし、更なる他のステップを追加してもよい。また、実行されるステップの順序を変更してもよい。

・変形例５：
上記実施形態では、位置情報としてアイコン画像の座標を、リンク先情報としてアイコン画像のリンク先を、それぞれ例示した。しかし、位置情報は、スマートフォン（外部装置）におけるアイコン画像の位置を識別可能な情報であればよく、座標には限られない。同様に、リンク先情報は、スマートフォンにおけるアイコン画像のリンク先を識別可能な情報であればよく、実行ファイルのリンク先（ファイルパス）には限られない。

・変形例６：
上記実施形態では、フレーム情報に記憶されているフレームの例を示した。しかし、上記フレームの詳細はあくまで一例であり、種々の変更が可能である。例えば、構成要素の追加、削除、変更を行うことができる。

例えば、上記実施形態のフレームＦＭ１（図３）と、フレームＦＭ２（図８）とは、それぞれ、１つの画像リストＬＴ１、ＬＴ２を有するものとした。しかし、これらのフレームは、複数の画像リストを有していてもよい。

例えば、フレームＦＭ１、フレームＦＭ２、フレームＦＭ３（図１０）の領域の大きさや縦横比は任意に定めることができる。これらのフレームの縦横比は、ヘッドマウントディスプレイの表示素子の縦横比とは異なっていてもよい。

例えば、フレームＦＭ１、フレームＦＭ２、フレームＦＭ３に配置されている画像リストが有する画像枠の形状、大きさ、個数は任意に定めることができる。また、これらのフレームが複数の画像リストを備える場合に、一の画像リストと、他の画像リストとの間で、画像枠の個数が異なっていてもよい。

・変形例７：
本発明は、上述の実施形態や実施例、変形例に限られるものではなく、その趣旨を逸脱しない範囲において種々の構成で実現することができる。例えば、発明の概要の欄に記載した各形態中の技術的特徴に対応する実施形態、実施例、変形例中の技術的特徴は、上述の課題の一部または全部を解決するために、あるいは、上述の効果の一部または全部を達成するために、適宜、差し替えや組み合わせを行うことが可能である。また、その技術的特徴が本明細書中に必須なものとして説明されていなければ、適宜、削除することが可能である。

１０…制御部
２０…画像表示部
２２…右表示駆動部
２４…左表示駆動部
２６…右光学像表示部
２８…左光学像表示部
３２…右イヤホン
３４…左イヤホン
４０…接続部
５１…送信部
５２…送信部
５３…受信部
６０（６１〜６４）…アイコン画像
７０（７１〜７４）…アイコン画像の座標（位置情報）
８０（８１〜８４）…アイコン画像のリンク先（リンク先情報）
１００…ヘッドマウントディスプレイ（頭部装着型表示装置）
１１０…入力情報取得部（操作取得部）
１２０…記憶部
１２２…フレーム情報
１２４…対応関係
１３０…電源
１３２…無線通信部（取得部）
１４０…ＣＰＵ
１４２…生成部（取得部、生成部）
１４４…通知部（通知部）
１６０…画像処理部
１７０…音声処理部
１８０…インターフェイス
１９０…表示制御部
２０１…右バックライト制御部
２０２…左バックライト制御部
２２１…右バックライト
２２２…左バックライト
２５１…右投写光学系
２５２…左投写光学系
２６１…右導光板
２６２…左導光板
３００…スマートフォン（外部装置）
１０００…画像表示システム
Ｄａｔａ…画像データー
ＬＴ１…画像リスト
ＬＴ１ａ、ｂ…画像リスト
ＬＴ２…画像リスト
ＬＴ３ａ〜ｄ…画像リスト
Ｂ１〜１２…画像枠
ＳＣ…外景
ＲＥ…右眼
ＬＥ…左眼
ＰＥ…鉛直方向
ＨＦ…水平方向
ＶＩ…虚像
ＶＲ…視野
ＦＭ１…フレーム
ＦＭ２…フレーム
ＦＭ３…フレーム
ＩＮＴ…インターネット

Claims (10)

1. 使用者が虚像と外景を視認可能な頭部装着型表示装置であって、
   前記頭部装着型表示装置に接続されている外部装置が有する複数の画像の配置を、前記頭部装着型表示装置用に変更して一覧画像を生成する生成部と、
   前記生成された一覧画像を前記虚像として前記使用者に視認させる画像表示部と、
   を備える、頭部装着型表示装置。
2. 請求項１に記載の頭部装着型表示装置であって、さらに、
   前記外部装置から前記複数の画像を取得する取得部を備え、
   前記生成部は、前記取得された複数の画像の配置を前記虚像の中心部を回避した位置へと変更することによって、前記一覧画像を生成する、頭部装着型表示装置。
3. 請求項２に記載の頭部装着型表示装置であって、さらに、
   前記一覧画像に対する前記使用者の操作を取得する操作取得部と、
   前記取得された操作が一の画像に対する操作であった場合に、前記外部装置における前記一の画像の位置を識別するための位置情報と、前記外部装置における前記一の画像のリンク先を識別するためのリンク先情報と、のうちの少なくとも一方を、前記外部装置に対して通知する通知部と、
   を備える、頭部装着型表示装置。
4. 請求項３に記載の頭部装着型表示装置であって、
   前記取得部は、前記複数の画像と共に、前記外部装置における前記複数の画像の位置をそれぞれ識別するための位置情報と、前記外部装置における前記複数の画像のリンク先をそれぞれ識別するためのリンク先情報と、のうちの少なくとも一方を取得し、
   前記生成部は、前記一覧画像を生成する際に、前記画像と、前記画像の前記位置情報または前記画像の前記リンク先情報と、を対応付けて記憶し、
   前記通知部は、前記対応付けを用いて、前記一の画像の前記位置情報と、前記一の画像の前記リンク先情報と、のうちの少なくとも一方を通知する、頭部装着型表示装置。
5. 請求項１から請求項４のいずれか一項に記載の頭部装着型表示装置であって、
   前記生成部は、前記前記画面一覧画像を生成する際に、さらに、前記取得された複数の画像に対して、形状の変更と、透過率の変更と、色の変更と、大きさの変更と、装飾の付与と、のうちの少なくともいずれかを実施する、頭部装着型表示装置。
6. 請求項１から請求項５のいずれか一項に記載の頭部装着型表示装置であって、
   前記生成部は、前記取得された複数の画像から、所定の条件を満たす少なくとも一部の画像を抽出し、前記抽出された画像の配置を変更することによって、前記一覧画像を生成する、頭部装着型表示装置。
7. 請求項１から請求項６のいずれか一項に記載の頭部装着型表示装置であって、
   前記複数の画像には、少なくとも、前記外部装置にインストールされているアプリケーションの起動用のアイコン画像が含まれる、頭部装着型表示装置。
8. 請求項１から請求項７のいずれか一項に記載の頭部装着型表示装置であって、
   前記生成部は、前記一覧画像に対して、さらに、前記頭部装着型表示装置が有する複数の画像を、前記外部装置の前記複数の画像と識別可能な態様で配置する、頭部装着型表示装置。
9. 頭部装着型表示装置を制御する方法であって、
   （ａ）前記頭部装着型表示装置に接続されている外部装置が有する複数の画像の配置を、前記頭部装着型表示装置用に変更して一覧画像を生成する工程と、
   （ｂ）前記生成された一覧画像を前記虚像として前記使用者に視認させる工程と、
   を含む、方法。
10. 画像表示システムであって、
    使用者が虚像と外景を視認可能な頭部装着型表示装置と、
    前記頭部装着型表示装置に接続されている外部装置と、
    を備え、
    前記外部装置は、
    前記外部装置が有する複数の画像を取得すると共に、前記取得された複数の画像を前記頭部装着型表示装置へ送信する送信部を備え、
    前記頭部装着型表示装置は、
    前記外部装置の前記複数の画像の配置を、前記頭部装着型表示装置用に変更して一覧画像を生成する生成部と、
    前記生成された一覧画像を前記虚像として前記使用者に視認させる画像表示部と、
    を備える、画像表示システム。

Images