JP2016081338A - 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム - Google Patents

Abstract

【課題】仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりづらい頭部装着型表示装置を提供する。
【解決手段】利用者が虚像を視認可能な頭部装着型表示装置は、利用者に虚像を視認させる画像表示部と、現実世界に実在する実オブジェクトに付加的に表示するための仮想オブジェクトを含んだ虚像を画像表示部に形成させる拡張現実感処理部と、を備え、拡張現実感処理部は、第１の表示態様での仮想オブジェクトを含んだ虚像を形成させた後、所定の維持時間の経過後に、第２の表示態様での仮想オブジェクトを含んだ虚像を形成させる。実オブジェクトに対する第２の表示態様での仮想オブジェクトの視認性阻害度は、実オブジェクトに対する第１の表示態様での仮想オブジェクトの視認性阻害度よりも低い。
【選択図】図４

Description

本発明は、頭部装着型表示装置に関する。

現実世界に実在するオブジェクトである実オブジェクトに対して、コンピューターを用いて情報を付加提示する拡張現実感（ＡＲ、Augmented Reality）と呼ばれる技術が知られている。拡張現実感において、実オブジェクトに付加的に表示される情報を「仮想オブジェクト」とも呼ぶ。拡張現実感は、例えば、ヘッドマウントディスプレイ（以降、「ＨＭＤ」または「頭部装着型表示装置」とも呼ぶ。）に搭載される。

ＨＭＤは、カメラで外景を撮像し、撮像により得られた画像を画像認識し、仮想オブジェクトを生成または取得する。ＨＭＤを装着した状態において利用者の視界が遮断される非透過型のＨＭＤでは、撮影された画像と仮想オブジェクトとを重畳させて利用者に視認させる。ＨＭＤを装着した状態において利用者の視界が遮断されない透過型のＨＭＤでは、仮想オブジェクトのみを利用者に視認させる。透過型のＨＭＤを装着した利用者は、現実世界の実オブジェクトと仮想オブジェクトとの両方を見ることで、拡張現実感を体感することができる。特許文献１には、透過型のＨＭＤにおいて拡張現実感を実現するための技術が記載されている。

特開２０１０−６７０８３号公報 特開２００５−３８００８号公報

上述した仮想オブジェクトは、実オブジェクトに重畳されるように配置、または、実オブジェクトの近傍に配置されることが多い。このため、非透過型／透過型のＨＭＤにおける仮想オブジェクトの表示は、利用者が実オブジェクトを視認する際の妨げとなる場合があるという課題があった。特許文献１、２に記載された技術では、このような課題については何ら考慮されていない。また、仮想オブジェクトを表示することが必要ないと思われる場合にも、仮想オブジェクトが表示されてしまい、利用者が実オブジェクトを視認する際の妨げとなり、利用者が煩わしさを感じる場合があるという課題もあった。

このため、仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりづらい頭部装着型表示装置が望まれていた。

本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態として実現することが可能である。

（１）本発明の一形態によれば、利用者が虚像を視認可能な頭部装着型表示装置が提供される。この頭部装着型表示装置は；前記利用者に前記虚像を視認させる画像表示部と；現実世界に実在する実オブジェクトに付加的に表示するための仮想オブジェクトを含んだ前記虚像を前記画像表示部に形成させる拡張現実感処理部と、を備え；前記拡張現実感処理部は；第１の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させた後；所定の維持時間の経過後に、第２の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させ、前記実オブジェクトに対する前記第２の表示態様での前記仮想オブジェクトの視認性阻害度は、前記実オブジェクトに対する前記第１の表示態様での前記仮想オブジェクトの視認性阻害度よりも低い。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、第１の表示態様での仮想オブジェクトを含んだ虚像を画像表示部に形成させた後、維持時間の経過後に、第１の表示態様よりも視認性阻害度が低い第２の表示態様での仮想オブジェクトを含んだ虚像を画像表示部に形成させる。このようにして、維持時間の経過後に自動的に、表示される虚像に占める仮想オブジェクトの視認性阻害度が下がるため、利用者は、現実世界に実在する実オブジェクトを視認しやすくなる。この結果、仮想オブジェクトの表示が、実オブジェクトまたはその背景を視認する際の妨げとなりづらい頭部装着型表示装置を提供することができる。

（２）上記形態の頭部装着型表示装置において；前記維持時間は、可変長であってもよい。
この形態の頭部装着型表示装置によれば、視認性阻害度が高い第１の表示態様から、視認性阻害度が低い第２の表示態様へと表示態様を遷移させるための維持時間を、例えば種々の条件に応じて変更することができる。

（３）上記形態の頭部装着型表示装置では、さらに；前記拡張現実感処理部において過去に使用された前記維持時間を取得する維持時間取得部を備え；前記拡張現実感処理部は；取得された過去の前記維持時間の統計値を求め；求めた統計値に基づいて、現在の処理で使用する前記維持時間を変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、拡張現実感処理部における過去の処理で使用された維持時間（視認性阻害度を自動的に下げるまでの時間）の統計値、すなわち、過去の処理で使用された維持時間の傾向に基づいて、自動的に、現在の処理で使用する維持時間を変更することができる。

（４）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は；前記第１の表示態様での前記仮想オブジェクトの情報量を求め；求めた情報量に基づいて、現在の処理で使用する前記維持時間を変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、視認性阻害度が高い第１の表示態様での仮想オブジェクトの情報量に基づいて、現在の処理で使用する維持時間（視認性阻害度を自動的に下げるまでの時間）を変更することができる。このようにすれば、拡張現実感処理部は、例えば、第１の表示態様での仮想オブジェクトの情報量が多い場合、換言すれば、利用者が仮想オブジェクトの内容の確認に多くの時間を要すると推定される場合の維持時間を、情報量が少ない場合の維持時間よりも長くすることもできるため、利用者の利便性を向上させることができる。

（５）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は；前記情報量の求め方を、前記第１の表示態様での前記仮想オブジェクトの種類に応じて変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、第１の表示態様での仮想オブジェクトの種類に適した方法で仮想オブジェクトの情報量を求めることができるため、より正確に仮想オブジェクトの情報量を把握することができる。

（６）上記形態の頭部装着型表示装置では、さらに；前記維持時間についての前記利用者の設定を取得する維持時間取得部を備え；前記拡張現実感処理部は；取得された前記利用者の設定に基づいて、現在の処理で使用する前記維持時間を変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、利用者の好みに応じて、現在の処理で使用する維持時間（視認性阻害度を自動的に下げるまでの時間）を変更することができる。

（７）上記形態の頭部装着型表示装置では、さらに；前記拡張現実感処理部において過去に使用された前記維持時間と、その際の前記第１の表示態様での前記仮想オブジェクトの情報量と、その際の前記利用者を識別するための識別情報と、を対応付けた維持時間情報を取得する維持時間取得部を備え；前記拡張現実感処理部は；取得された前記維持時間情報と、前記第１の表示態様での前記仮想オブジェクトの情報量とに基づいて、現在の処理で使用する前記維持時間を変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、維持時間情報を用いて、利用者が単位時間あたりに認識することのできる情報量を求めることができる。このため、拡張現実感処理部は、例えば、求めた情報量（利用者が単位時間あたりに認識することのできる情報量）と、第１の表示態様での仮想オブジェクトの情報量と、に基づいて、現在の処理で使用する維持時間（視認性阻害度を自動的に下げるまでの時間）を変更することができる。このようにすれば、拡張現実感処理部は、例えば、利用者が単位時間あたりに認識することのできる情報量が少ない場合、換言すれば、利用者が仮想オブジェクトの内容の確認に多くの時間を要すると推定される場合の維持時間を、情報量が多い場合の維持時間よりも長くすることができる。この結果、拡張現実感処理部は、利用者の個人差に応じて維持時間を変更することができるため、利用者の利便性を向上させることができる。

（８）上記形態の頭部装着型表示装置において；前記第２の表示態様での前記仮想オブジェクトは、前記第１の表示態様での前記仮想オブジェクトの内容を示唆する文字と、図形と、絵柄と、記号と、または、これらの組み合わせと、のうちの少なくともいずれかを含んでもよい。
この形態の頭部装着型表示装置によれば、視認性阻害度が低い第２の表示態様の仮想オブジェクトを用いて、第１の表示態様での仮想オブジェクトの内容を示唆することができる。

（９）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は；前記維持時間の経過の待機中において、前記利用者からの第１の要求を取得した場合に、前記第１の表示態様から前記第２の表示態様への遷移を中止してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、利用者からの第１の要求に応じて、第１の表示態様から第２の表示態様への遷移を中止することができるため、利用者の利便性を向上させることができる。

（１０）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は；前記維持時間の経過の待機中において、前記利用者からの第２の要求を取得した場合に、前記維持時間の経過前であっても、前記第１の表示態様から前記第２の表示態様へ遷移させてもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、利用者からの第２の要求に応じて、維持時間の経過前であっても、第１の表示態様から第２の表示態様へ強制的に遷移させることができるため、利用者の利便性を向上させることができる。

（１１）上記形態の頭部装着型表示装置において；前記利用者の手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによってなされる要求を、前記第１の要求または前記第２の要求として取得する要求取得部を備えてもよい。
この形態の頭部装着型表示装置によれば、利用者は、手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによって、第１の要求または第２の要求を行うことができる。

（１２）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は、前記第１の表示態様から前記第２の表示態様への遷移を段階的に変化させてもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、第１の表示態様から第２の表示態様への遷移を段階的に変化させるため、表示態様の変化に伴って利用者に与える違和感を低減させることができる。

（１３）本発明の一形態によれば、利用者が虚像と外景とを視認可能な頭部装着型表示装置が提供される。この頭部装着型表示装置は；前記利用者に前記虚像を視認させる画像表示部と；現実世界に実在する実オブジェクトに付加的に表示するための仮想オブジェクトを含んだ前記虚像を前記画像表示部に形成させる拡張現実感処理部と、を備え；前記拡張現実感処理部は；前記実オブジェクトに対する所定の基準時間に亘る注目動作の継続に応じて；少なくとも前記注目動作のなされた前記実オブジェクトに関連する仮想オブジェクトであって、第１の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させる。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、所定の基準時間に亘る注目動作の継続に応じて、少なくとも注目動作のなされた実オブジェクトに関連する仮想オブジェクトであって、第１の表示態様での仮想オブジェクトを含んだ虚像を画像表示部に形成させる。このようにして、拡張現実感処理部は、注目動作の継続という利用者の意図によって仮想オブジェクトを表示させるため、利用者は、注目動作を継続して行わない限り、現実世界に実在する実オブジェクトを視認しやすい状態を維持することができる。この結果、仮想オブジェクトの表示が、実オブジェクトまたはその背景を視認する際の妨げとなりづらい頭部装着型表示装置を提供することができる。

（１４）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は、さらに；前記第１の表示態様での前記仮想オブジェクトを含んだ前記虚像の形成に先立って第２の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させた場合においては；前記第２の表示態様での前記仮想オブジェクトと前記実オブジェクトとのうちのいずれかに対する、前記基準時間に亘る前記注目動作の継続に応じて；少なくとも前記注目動作のなされた前記仮想オブジェクトまたは前記実オブジェクトに関連する仮想オブジェクトであって、前記第１の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させてもよい。前記実オブジェクトに対する前記第２の表示態様での前記仮想オブジェクトの視認性阻害度は、前記実オブジェクトに対する前記第１の表示態様での前記仮想オブジェクトの視認性阻害度よりも低くてもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、第２の表示態様での仮想オブジェクトを含んだ虚像を画像表示部に形成させた後においては、実オブジェクトに加えて、第２の表示態様での仮想オブジェクトに対する所定の基準時間に亘る注目動作の継続に応じて、第２の表示態様よりも視認性阻害度が高い第１の表示態様での仮想オブジェクトを含んだ虚像を画像表示部に形成させることができる。また、注目動作の継続という利用者の意図によって、第２の表示状態から第１の表示状態へと仮想オブジェクトの表示状態が遷移し、視認性阻害度が高くなるため、利用者は、注目動作を継続して行わない限り、現実世界に実在する実オブジェクトを視認しやすい状態を維持することができる。換言すれば、利用者は、自分の意図で仮想オブジェクトの視認性阻害度を制御することができる。この結果、仮想オブジェクトの表示が、実オブジェクトまたはその背景を視認する際の妨げとなりづらい頭部装着型表示装置を提供することができる。

（１５）上記形態の頭部装着型表示装置では、さらに；前記注目動作としての前記利用者の視線の動きを取得する視線取得部を備えてもよい。
この形態の頭部装着型表示装置によれば、利用者は、手や足を動かさずに視線の動きを用いて注目動作を行うことが可能となる。このため、利用者が手を離すことが困難である作業中等の場面においても、利用者は、簡単に注目動作を行うことができる。

（１６）上記形態の頭部装着型表示装置では、さらに；前記注目動作としての前記利用者の手の動きを取得する動き取得部を備えてもよい。
この形態の頭部装着型表示装置によれば、利用者は、普段の動作において慣れた手の動きを用いて、簡単に注目動作を行うことが可能となる。

（１７）上記形態の頭部装着型表示装置において；前記基準時間は、可変長であってもよい。
この形態の頭部装着型表示装置によれば、第１の表示態様へと表示態様を遷移させるための基準時間を、例えば種々の条件に応じて変更することができる。

（１８）上記形態の頭部装着型表示装置では、さらに；前記拡張現実感処理部において過去に使用された前記基準時間を取得する基準時間取得部を備え；前記拡張現実感処理部は；取得された過去の前記基準時間の統計値を求め；求めた統計値に基づいて、現在の処理で使用する前記基準時間を変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、拡張現実感処理部における過去の処理で使用された基準時間の統計値、すなわち、過去の処理で使用された基準時間の傾向に基づいて、自動的に、現在の処理で使用する基準時間を変更することができる。

（１９）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は；前記第１の表示態様での前記仮想オブジェクトの情報量を求め；求めた情報量に基づいて、現在の処理で使用する前記基準時間を変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、視認性阻害度が高い第１の表示態様での仮想オブジェクトの情報量に基づいて、現在の処理で使用する基準時間を変更することができる。このようにすれば、拡張現実感処理部は、例えば、第１の表示態様での仮想オブジェクトの情報量が多い場合、換言すれば、第１の表示態様への遷移に伴う仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりやすい場合の基準時間を、情報量が少ない場合の基準時間よりも長くすることもできるため、利用者の利便性を向上させることができる。

（２０）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は；前記情報量の求め方を、前記第１の表示態様での前記仮想オブジェクトの種類に応じて変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、第１の表示態様での仮想オブジェクトの種類に適した方法で仮想オブジェクトの情報量を求めることができるため、より正確に仮想オブジェクトの情報量を把握することができる。

（２１）上記形態の頭部装着型表示装置において；前記基準時間についての前記利用者の設定を取得する基準時間取得部を備え；前記拡張現実感処理部は；取得された前記利用者の設定に基づいて、現在の処理で使用する前記基準時間を変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、利用者の好みに応じて、現在の処理で使用する基準時間を変更することができる。

（２２）上記形態の頭部装着型表示装置では、さらに；前記拡張現実感処理部において過去に使用された前記基準時間と、その際の前記第１の表示態様での前記仮想オブジェクトの情報量と、その際の前記利用者を識別するための識別情報と、を対応付けた基準時間情報を取得する基準時間取得部を備え；前記拡張現実感処理部は；取得された前記基準時間情報と、前記第１の表示態様での前記仮想オブジェクトの情報量とに基づいて、現在の処理で使用する前記基準時間を変更してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、基準時間情報を用いて、利用者が単位時間当たりに注目することのできる情報量を求めることができる。このため、拡張現実感処理部は、例えば、求めた情報量（利用者が単位時間当たりに注目することのできる情報量）と、第１の表示態様での仮想オブジェクトの情報量と、に基づいて、現在の処理で使用する基準時間を変更することができる。このようにすれば、拡張現実感処理部は、例えば、利用者が単位時間あたりに注目することのできる情報量が少ない場合、換言すれば、第１の表示態様への遷移に伴う仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりやすい場合の基準時間を、情報量が多い場合の基準時間よりも長くすることができる。この結果、拡張現実感処理部は、利用者の個人差に応じて基準時間を変更することができるため、利用者の利便性を向上させることができる。

（２３）上記形態の頭部装着型表示装置において；前記第２の表示態様での前記仮想オブジェクトは、前記第１の表示態様での前記仮想オブジェクトの内容を示唆する文字と、図形と、絵柄と、記号と、または、これらの組み合わせと、のうちの少なくともいずれかを含んでもよい。
この形態の頭部装着型表示装置によれば、視認性阻害度が低い第２の表示態様の仮想オブジェクトを用いて、第１の表示態様での仮想オブジェクトの内容を示唆することができる。

（２４）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は；前記基準時間の経過の待機中において前記利用者からの第１の要求を取得した場合に、前記第１の表示態様への遷移を中止してもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、利用者からの第１の要求に応じて、第１の表示態様への遷移を中止することができるため、利用者の利便性を向上させることができる。

（２５）上記形態の頭部装着型表示装置において；前記拡張現実感処理部は；前記基準時間の経過の待機中において、前記利用者からの第２の要求を取得した場合に、前記基準時間の経過前であっても、前記第１の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させてもよい。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、利用者からの第２の要求に応じて、基準時間の経過前であっても、第１の表示態様での仮想オブジェクトを表示させることができるため、利用者の利便性を向上させることができる。

（２６）上記形態の頭部装着型表示装置において；前記利用者の手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによってなされる要求を、前記第１の要求または前記第２の要求として取得する要求取得部を備えてもよい。
この形態の頭部装着型表示装置によれば、利用者は、手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによって、第１の要求または第２の要求を行うことができる。

（２７）本発明の一形態によれば、利用者が虚像を視認可能な頭部装着型表示装置が提供される。この頭部装着型表示装置は；前記利用者に前記虚像を視認させる画像表示部と；現実世界に実在する実オブジェクトに付加的に表示するための仮想オブジェクトを含んだ前記虚像を前記画像表示部に形成させる拡張現実感処理部と、を備え；前記拡張現実感処理部は；所定の基準時間以内に前記利用者による所定の動作が開始されていない場合には、少なくとも前記実オブジェクトに関連する仮想オブジェクトであって、第１の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させる。
この形態の頭部装着型表示装置によれば、拡張現実感処理部は、所定の基準時間以内に利用者による所定の動作が開始されていない場合に、第１の表示態様での仮想オブジェクトを含んだ虚像を画像表示部に形成させる。換言すれば、拡張現実感処理部は、基準時間以内に利用者による所定の動作が開始されている場合は、第１の表示態様での仮想オブジェクトを表示させない。このため、例えば、利用者が所定の動作（例えば何らかの作業）をしている場合に、第１の表示態様での仮想オブジェクトが表示されて、使用者の眼前を遮るという可能性を低減することができる。この結果、仮想オブジェクトの表示が、実オブジェクトまたはその背景を視認する際の妨げとなりづらい頭部装着型表示装置を提供することができる。

上述した本発明の各形態の有する複数の構成要素は全てが必須のものではなく、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、適宜、前記複数の構成要素の一部の構成要素について、その変更、削除、新たな構成要素との差し替え、限定内容の一部削除を行うことが可能である。また、上述の課題の一部または全部を解決するため、あるいは、本明細書に記載された効果の一部または全部を達成するために、上述した本発明の一形態に含まれる技術的特徴の一部または全部を上述した本発明の他の形態に含まれる技術的特徴の一部または全部と組み合わせて、本発明の独立した一形態とすることも可能である。

例えば、本発明の一形態は、画像表示部と、拡張現実感処理部と、の２つの要素のうちの一部または全部の要素を備えた装置として実現可能である。すなわち、この装置は、画像表示部を有していてもよく、有していなくてもよい。また、この装置は、拡張現実感処理部を有していてもよく、有していなくてもよい。こうした装置は、例えば頭部装着型表示装置として実現できるが、頭部装着型表示装置以外の他の装置としても実現可能である。前述した頭部装着型表示装置の各形態の技術的特徴の一部または全部は、いずれもこの装置に適用することが可能である。例えば、本発明の一形態としての装置は、仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりづらいことを課題としている。しかし、この装置には、他にも、装置の小型化、利便性の向上、装置製造の際の低コスト化、省資源化、製造の容易化、等が望まれている。

なお、本発明は、種々の態様で実現することが可能であり、例えば、頭部装着型表示装置および頭部装着型表示装置の制御方法、頭部装着型表示装置を含むシステム、これらの方法、装置、システムの機能を実現するためのコンピュータープログラム、そのコンピュータープログラムを記憶した記憶媒体等の形態で実現することができる。

本発明の一実施形態における頭部装着型表示装置の概略構成を示す説明図である。 頭部装着型表示装置の構成を機能的に示すブロック図である。 利用者に視認される虚像の一例を示す説明図である。 拡張現実感処理の状態遷移図である。 通常表示処理の手順を示すフローチャートである。 利用者に視認される通常表示用画像の一例を示す説明図である。 簡易表示処理の手順を示すフローチャートである。 非表示の一例を示す説明図である。 端部アイコン表示の一例を示す説明図である。 近傍アイコン表示の一例を示す説明図である。 強調表示の一例を示す説明図である。 遷移条件１の成立の監視の手順を示すフローチャートである。 遷移条件２の成立の監視の手順を示すフローチャートである。 変形例における頭部装着型表示装置の外観の構成を示す説明図である。

Ａ．実施形態：
Ａ−１．頭部装着型表示装置の構成：
図１は、本発明の一実施形態における頭部装着型表示装置の概略構成を示す説明図である。本実施形態の頭部装着型表示装置１００は、頭部に装着する表示装置であり、ヘッドマウントディスプレイ（Head Mounted Display、ＨＭＤ）とも呼ばれる。ＨＭＤ１００は、利用者が、虚像を視認すると同時に外景も直接視認可能な光学透過型のヘッドマウントディスプレイである。

本実施形態のＨＭＤ１００は、現実世界に実在するオブジェクトである「実オブジェクト」に対して、ＨＭＤ１００のＣＰＵを用いて情報を付加する拡張現実感（ＡＲ、Augmented Reality）処理を行うことができる。ここで、オブジェクトとは、任意の人、任意の動植物、任意の物（人工物、自然物等を含む）等を意味する。また、拡張現実感処理において、実オブジェクトに対して、付加的に表示される情報を「仮想オブジェクト」と呼ぶ。本実施形態のＨＭＤ１００は、拡張現実感処理において付加提示する仮想オブジェクトの表示態様を「第１の表示態様」と、「第２の表示態様」と、の間で切り替えることで、仮想オブジェクトの表示が実オブジェクトを視認する際の妨げとなりづらい拡張現実感処理を実現することができる。ここで、第１の表示態様での仮想オブジェクトは、第２の表示態様での仮想オブジェクトに対して、視認性阻害度が高い。換言すれば、第２の表示態様での仮想オブジェクトは、第１の表示態様での仮想オブジェクトに対して、視認性阻害度が低い。

視認性阻害度とは、利用者が、仮想オブジェクトを含んだ虚像を介して現実世界を視認する際の「利用者の視認性を妨げる程度」を意味する。視認性阻害度は、換言すれば、視認性抑制度と表現することもできる。

本実施形態において、第１の表示態様の仮想オブジェクトと、第２の表示態様の仮想オブジェクトとは、以下に列挙するいずれかの態様をとることにより、その視認性阻害度を向上／低下させることができる。
（Ａ）仮想オブジェクトが虚像に占める面積を大きく／小さくする。ここで、「仮想オブジェクトが虚像に占める面積」とは、虚像が利用者の眼前に現れ得る範囲に対して、仮想オブジェクトが占める面積を意味する。この場合、第２の表示態様での仮想オブジェクトは、虚像に占める面積が「０」のものも含む。
（Ｂ）仮想オブジェクトのうち、少なくとも一部の透過率を下げる／上げる。この場合、第２の表示態様での仮想オブジェクトは、第１の表示態様での仮想オブジェクトの全体の透過率が上げられている態様や、第１の表示態様での仮想オブジェクトの影だけが表示されている（影以外の部分の透過率を上げる）態様や、第１の表示態様での仮想オブジェクトの輪郭だけが表示されている（輪郭以外の部分の透過率を上げる）態様を含む。
（Ｃ）仮想オブジェクトを含む虚像を両眼表示／片眼表示する。ここで、両眼表示とは、左右の画像光生成部から画像光を利用者の両眼に向けて射出することを意味し、片眼表示とは、右または左の画像光生成部から画像光を利用者の片目に向けて射出することを意味する。

以降の例では、第１の表示態様の仮想オブジェクトと、第２の表示態様の仮想オブジェクトと、の視認性阻害度を向上／低下させるための方法として、態様Ａを採用した場合を例示して説明する。なお、拡張現実感処理の詳細や、各表示態様の詳細については後述する。

ＨＭＤ１００は、利用者の頭部に装着された状態において利用者に虚像を視認させる画像表示部２０と、画像表示部２０を制御する制御部（コントローラー）１０とを備えている。なお、以降の説明において、ＨＭＤ１００によって利用者が視認する虚像を便宜的に「表示画像」とも呼ぶ。また、ＨＭＤ１００が画像データーに基づいて生成された画像光を射出することを「画像を表示する」ともいう。

Ａ−１−１．画像表示部の構成：
図２は、ＨＭＤ１００の構成を機能的に示すブロック図である。画像表示部２０は、利用者の頭部に装着される装着体であり、本実施形態では眼鏡形状である（図１）。画像表示部２０は、右保持部２１と、右表示駆動部２２と、左保持部２３と、左表示駆動部２４と、右光学像表示部２６と、左光学像表示部２８と、カメラ６１と、視線検出部６２と、９軸センサー６６と、を備えている。以降、利用者が画像表示部２０を装着した状態における、画像表示部２０の各部の位置関係と機能について説明する。

図１に示すように、右光学像表示部２６および左光学像表示部２８は、利用者の右の眼前と、左の眼前とにそれぞれ位置するように配置されている。右光学像表示部２６の一端と左光学像表示部２８の一端とは、利用者の眉間に対応する位置で接続されている。図２に示すように、右光学像表示部２６は、右導光板２６１と調光板（図示省略）とを備えている。右導光板２６１は、光透過性の樹脂材料等によって形成され、右表示駆動部２２から出力された画像光を、所定の光路に沿って反射させつつ利用者の右眼ＲＥに導く。調光板は、薄板状の光学素子であり、画像表示部２０の表側（利用者の眼の側とは反対の側）を覆うように配置されている。調光板は、導光板２６１を保護し、導光板２６１の損傷や汚れの付着等を抑制する。また、調光板の光透過率を調整することによって、利用者の眼に入る外光量を調整して虚像の視認のしやすさを調整することができる。なお、調光板は省略可能である。

左光学像表示部２８は、左導光板２６２と調光板（図示省略）とを備えている。これらの詳細は、右光学像表示部２６と同様である。なお、右光学像表示部２６および左光学像表示部２８を総称して単に「光学像表示部」とも呼ぶ。光学像表示部は、画像光を用いて利用者の眼前に虚像を形成する限りにおいて任意の方式を用いることができ、例えば、回折格子を用いて実現されても良いし、半透過反射膜を用いて実現されても良い。

図１に示すように、右保持部２１は、右光学像表示部２６の他端ＥＲから利用者の側頭部に対応する位置にかけて延伸して設けられている。左保持部２３は、左光学像表示部２８の他端ＥＬから利用者の側頭部に対応する位置にかけて、延伸して設けられている。右保持部２１および左保持部２３は、眼鏡のテンプル（つる）のようにして、利用者の頭部に画像表示部２０を保持する。なお、右保持部２１および左保持部２３を総称して単に「保持部」とも呼ぶ。

図１に示すように、右表示駆動部２２は、右保持部２１の内側（利用者の頭部に対向する側）に配置されている。左表示駆動部２４は、左保持部２３の内側に配置されている。図２に示すように、右表示駆動部２２は、受信部（Ｒｘ）５３と、光源として機能する右バックライト（ＢＬ）制御部２０１および右バックライト（ＢＬ）２２１と、表示素子として機能する右ＬＣＤ（液晶ディスプレイ、Liquid Crystal Display）制御部２１１および右ＬＣＤ２４１と、右投写光学系２５１とを備えている。なお、右バックライト制御部２０１と、右ＬＣＤ制御部２１１と、右バックライト２２１と、右ＬＣＤ２４１とを総称して「画像光生成部」とも呼ぶ。受信部５３は、制御部１０と画像表示部２０との間におけるシリアル伝送のためのレシーバーとして機能する。右バックライト制御部２０１は、入力された制御信号に基づいて右バックライト２２１を駆動する。右バックライト２２１は、例えばＬＥＤ（Light Emitting Diode）やエレクトロルミネセンス（ＥＬ）等の発光体である。右ＬＣＤ制御部２１１は、受信部５３を介して入力されたクロック信号ＰＣＬＫと、垂直同期信号ＶＳｙｎｃと、水平同期信号ＨＳｙｎｃと、右眼用画像データーＤａｔａ１とに基づいて、右ＬＣＤ２４１を駆動する。右ＬＣＤ２４１は、複数の画素をマトリクス状に配置した透過型液晶パネルである。右投写光学系２５１は、右ＬＣＤ２４１から射出された画像光を並行状態の光束にするコリメートレンズである。

左表示駆動部２４は、受信部（Ｒｘ）５４と、光源として機能する左バックライト（ＢＬ）制御部２０２および左バックライト（ＢＬ）２２２と、表示素子として機能する左ＬＣＤ制御部２１２および左ＬＣＤ２４２と、左投写光学系２５２とを備えている。これらの詳細は、右表示駆動部２２と同様である。なお、右表示駆動部２２および左表示駆動部２４を総称して単に「表示駆動部」とも呼ぶ。

図１に示すように、カメラ６１は、利用者の左右の目尻の上方に対応する位置にそれぞれ配置されているステレオカメラである。左右のカメラ６１は、画像表示部２０の表側方向、換言すれば、ＨＭＤ１００を装着した状態における利用者の視界方向の外景（外部の景色）をそれぞれ撮像し、左右に対応した２枚の外景画像を取得する。カメラ６１はいわゆる可視光カメラであり、カメラ６１により取得される外景画像は、物体から放射される可視光から物体の形状を表す画像である。カメラ６１によって得られる２枚の外景画像を画像認識することで、制御部１０のＣＰＵ１４０は、利用者の手の動きを検出し、取得することができる。画像認識の精度を向上させるために、ＣＰＵ１４０は、利用者の指先や、利用者の手に付けられた指輪や、利用者が手に持っている特定の道具等を、検出のための目印にすることができる。この場合、カメラ６１とＣＰＵ１４０とは、利用者の手の動きを取得する「動き取得部」として機能する。なお、本実施形態におけるカメラ６１はステレオカメラであるが、単眼カメラとしてもよい。

図１に示すように、視線検出部６２は、利用者の左右の目尻の下方に対応する位置にそれぞれ配置されている。左右の視線検出部６２は、図示しない赤外線発光部と赤外線受光部とをそれぞれ備える。右側の視線検出部６２は、赤外線発光部から射出されて、利用者の右眼に当たり反射した赤外線を受光する。制御部１０のＣＰＵ１４０は、右側の視線検出部６２が受光した赤外線の強さに基づいて、利用者の右眼の視線の動きを取得する。同様に、左側の視線検出部６２は、赤外線発光部から射出されて、利用者の左眼に当たり反射した赤外線を受光する。ＣＰＵ１４０は、左側の視線検出部６２が受光した赤外線の強さに基づいて、利用者の左眼の視線を検出する。赤外線の反射率は、赤外線が虹彩（黒目）に当たった場合と、赤外線がまぶたに当たった場合と、赤外線が白目に当たった場合と、でそれぞれ異なる。具体的には、赤外線の反射率は、赤外線が虹彩に当たった場合が最も低く、次いで、まぶた、白目の順に高くなる。このため、ＣＰＵ１４０は、視線検出部６２が受光した赤外線の強さによって、利用者の視線の動きを取得することができる。この場合、視線検出部６２とＣＰＵ１４０とは、利用者の視線の動きを取得する「視線取得部」として機能する。なお、本実施形態における視線検出部６２は左右それぞれに設けられるとしたが、左右いずれか一方でもよい。

図１に示すように、９軸センサー６６は、利用者の右側のこめかみに対応する位置に配置されている。９軸センサー６６は、加速度（３軸）、角速度（３軸）、地磁気（３軸）を検出するモーションセンサーである。９軸センサー６６は、画像表示部２０に設けられているため、画像表示部２０が頭部に装着されているときには、利用者の頭部の動きを検出し、取得することができる。ここで、頭部の動きとは、頭部の速度・加速度・角速度・向き・向きの変化を含む。

図１に示すように、画像表示部２０は、画像表示部２０と制御部１０とを接続するための接続部４０を備えている。接続部４０は、制御部１０に接続される本体コード４８と、本体コード４８が分岐した右コード４２および左コード４４と、分岐点に設けられた連結部材４６と、を含んでいる。右コード４２は、右表示駆動部２２に接続され、左コード４４は、左表示駆動部２４に接続されている。連結部材４６には、イヤホンプラグ３０を接続するためのジャックが設けられている。イヤホンプラグ３０からは、右イヤホン３２および左イヤホン３４が延伸している。本体コード４８における連結部材４６とは反対側の端部には、コネクター（図示省略）が設けられている。このコネクターは、制御部１０に設けられたコネクター（図示省略）との嵌合／嵌合解除により、制御部１０と画像表示部２０との接続／接続解除を実現する。画像表示部２０と制御部１０とは、接続部４０を介して各種信号の伝送を行う。右コード４２と、左コード４４と、本体コード４８には、例えば、金属ケーブルや光ファイバーを採用することができる。

Ａ−１−２．制御部の構成：
制御部１０はＨＭＤ１００を制御するための装置である。図１に示すように、制御部１０は、決定キー１１と、点灯部１２と、表示切替キー１３と、トラックパッド１４と、輝度切替キー１５と、方向キー１６と、メニューキー１７と、電源スイッチ１８と、を備えている。決定キー１１は、押下操作を検出して、制御部１０において操作された内容を決定するための信号を出力する。点灯部１２は、例えばＬＥＤによって実現され、ＨＭＤ１００の動作状態（例えば電源のＯＮ／ＯＦＦ等）を発光状態によって通知する。表示切替キー１３は、押下操作を検出して、例えばコンテンツ動画の表示モードを３Ｄと２Ｄとに切り替える信号を出力する。トラックパッド１４は、トラックパッド１４の操作面上における利用者の指の操作を検出して、検出内容に応じた信号を出力する。トラックパッド１４としては、静電式や圧力検出式、光学式といった種々の方式を採用できる。輝度切替キー１５は、押下操作を検出して、画像表示部２０の輝度を増減する信号を出力する。方向キー１６は、上下左右方向に対応するキーへの押下操作を検出して、検出内容に応じた信号を出力する。電源スイッチ１８は、スイッチのスライド操作を検出することで、ＨＭＤ１００の電源投入状態を切り替える。

図２に示すように、制御部１０は、入力情報取得部１１０と、記憶部１２０と、電源１３０と、無線通信部１３２と、ＧＰＳモジュール１３４と、ＣＰＵ１４０と、インターフェイス１８０と、送信部（Ｔｘ）５１および５２とを備え、各部は図示しないバスにより相互に接続されている。

入力情報取得部１１０は、決定キー１１、表示切替キー１３、トラックパッド１４、輝度切替キー１５、方向キー１６、メニューキー１７、および、電源スイッチ１８に対する操作入力に応じた信号を取得する。入力情報取得部１１０は、上記以外の種々の方法を用いた操作入力を取得することができる。例えば、フットスイッチ（利用者の足により操作するスイッチ）による操作入力を取得してもよい。フットスイッチによる操作入力を取得可能とすれば、利用者が手を離すことが困難である作業においても、入力情報取得部１１０は、利用者からの操作入力を取得することができる。

記憶部１２０は、ＲＯＭ、ＲＡＭ、ＤＲＡＭ、ハードディスク等によって構成されている。記憶部１２０には、オペレーティングシステム（ОＳ）をはじめとする種々のコンピュータープログラムが格納されている。また、記憶部１２０には、表示状態１２１と、過去維持時間１２２と、維持時間設定１２３と、過去基準時間１２４と、基準時間設定１２５と、簡易表示態様１２６と、が予め記憶されている。

表示状態１２１には、現在の拡張現実感処理における仮想オブジェクトの表示態様が、第１の表示態様であるか、第２の表示態様であるか、を表すための情報が格納される。表示状態１２１には、例えば、フラグを用いて表示態様の種別が格納されてもよいし、数字や文字列を用いて表示態様の種別が格納されてもよい。

過去維持時間１２２には、過去の拡張現実感処理において使用された維持時間の履歴が格納される。ここで「維持時間」とは、拡張現実感処理において、仮想オブジェクトの表示態様を、第１の表示態様から第２の表示態様へと遷移させるまでの時間を意味する。過去維持時間１２２には、過去の拡張現実感処理において使用された維持時間と、その際の第１の表示状態での仮想オブジェクトの情報量と、その際の利用者の識別子と、を対応付けて格納することができる。

維持時間設定１２３には、利用者が設定した維持時間が格納される。維持時間設定１２３の内容は、ＨＭＤ１００の製造時において、何らかの初期値が記憶されてもよい。維持時間設定１２３の内容は、利用者によって適宜変更可能であってもよい。

過去基準時間１２４には、過去の拡張現実感処理において使用された基準時間の履歴が格納される。ここで、「基準時間」とは、拡張現実感処理において、仮想オブジェクトの表示態様を、第２の表示態様から第１の表示態様へと遷移させるまでの時間を意味する。過去基準時間１２４には、過去の拡張現実感処理において使用された基準時間と、その際の第１の表示状態での仮想オブジェクトの情報量と、その際の利用者の識別子と、を対応付けて格納することができる。

基準時間設定１２５には、利用者が設定した基準時間が格納される。基準時間設定１２５の内容は、ＨＭＤ１００の製造時において、何らかの初期値が記憶されてもよい。基準時間設定１２５の内容は、利用者によって適宜変更可能であってもよい。

簡易表示態様１２６には、仮想オブジェクトの第２の表示態様において採用される、具体的な表示態様を表すための情報が格納される。本実施形態では、第２の表示態様において採用される具体的な表示態様としては、（態様１）端部アイコン表示と、（態様２）近傍アイコン表示と、（態様３）強調表示と、（態様４）非表示と、がある。各態様の詳細な説明は後述する。簡易表示態様１２６には、上述した態様１〜４のうちの、いずれかを表す情報が格納される。簡易表示態様１２６には、例えば、フラグを用いて具体的な表示態様が格納されてもよいし、数字や文字列を用いて具体的な表示態様が格納されてもよい。

電源１３０は、ＨＭＤ１００の各部に電力を供給する。電源１３０としては、例えば二次電池を用いることができる。

無線通信部１３２は、所定の無線通信規格に則って、外部装置との間で無線通信を行う。所定の無線通信規格とは、例えば、赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）に例示される近距離無線通信、ＩＥＥＥ８０２．１１に例示される無線ＬＡＮ等である。

ＧＰＳモジュール１３４は、ＧＰＳ衛星からの信号を受信することにより、ＨＭＤ１００の利用者の現在位置を検出し、利用者の現在位置情報を表す現在位置情報を生成する。現在位置情報は、例えば緯度経度を表す座標によって実現することができる。

ＣＰＵ１４０は、記憶部１２０に格納されているコンピュータープログラムを読み出して実行することにより、拡張現実感処理部１４２、ＯＳ１５０、画像処理部１６０、音声処理部１７０、表示制御部１９０として機能する。

拡張現実感処理部１４２は、拡張現実感処理を実行する。拡張現実感処理部１４２は、さらに、通常表示処理部１４４と、簡易表示処理部１４６と、を含んでいる。通常表示処理部１４４は、後述する通常表示処理を実行することで、第１の表示態様での仮想オブジェクトを含む虚像を画像表示部２０に形成させる。簡易表示処理部１４６は、後述する簡易表示処理を実行することで、第２の表示態様での仮想オブジェクトを含む虚像を画像表示部２０に形成させる。拡張現実感処理部１４２は、後述する遷移条件に基づいて、通常表示処理部１４４による通常表示処理と、簡易表示処理部１４６による簡易表示処理と、を切り替えて実行させる。すなわち、本実施形態において、通常表示処理と簡易表示処理とは、拡張現実感処理のサブルーチンとして実行される。

画像処理部１６０は、インターフェイス１８０や無線通信部１３２を介して入力されるコンテンツ（映像）に基づいて信号を生成する。例えば、コンテンツがディジタル形式の場合、画像処理部１６０は、クロック信号ＰＣＬＫと、画像データーＤａｔａとを生成する。なお、ディジタル形式の場合、クロック信号ＰＣＬＫが画像信号に同期して出力されるため、垂直同期信号ＶＳｙｎｃおよび水平同期信号ＨＳｙｎｃの生成と、アナログ画像信号のＡ／Ｄ変換とは不要である。画像処理部１６０は、生成されたクロック信号ＰＣＬＫ、垂直同期信号ＶＳｙｎｃ、水平同期信号ＨＳｙｎｃと、記憶部１２０内のＤＲＡＭに格納された画像データーＤａｔａとを、送信部５１、５２を介して、画像表示部２０へ送信する。送信部５１を介して送信される画像データーＤａｔａを「右眼用画像データーＤａｔａ１」とも呼び、送信部５２を介して送信される画像データーＤａｔａを「左眼用画像データーＤａｔａ２」とも呼ぶ。なお、画像処理部１６０は、記憶部１２０に格納された画像データーＤａｔａに対して、解像度変換処理、輝度や彩度の調整といった種々の色調補正処理、キーストーン補正処理等の画像処理を実行してもよい。

表示制御部１９０は、右表示駆動部２２および左表示駆動部２４を制御する制御信号を生成する。具体的には、表示制御部１９０は、制御信号により、左右のＬＣＤ制御部２１１、２１２による左右のＬＣＤ２４１、２４２の駆動ＯＮ／ＯＦＦや、左右のバックライト制御部２０１、２０２による左右のバックライト２２１、２２２の駆動ＯＮ／ＯＦＦを個別に制御することにより、右表示駆動部２２および左表示駆動部２４のそれぞれによる画像光の生成および射出を制御する。表示制御部１９０は、これらの制御信号を、送信部５１、５２を介して画像表示部２０へ送信する。

音声処理部１７０は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、右イヤホン３２の図示しないスピーカーと、左イヤホン３４の図示しないスピーカーとに対して供給する。

インターフェイス１８０は、所定の有線通信規格に則って、外部装置ＯＡとの間で通信を行う。所定の有線通信規格としては、例えば、ＭｉｃｒｏＵＳＢ（Universal Serial Bus）、ＵＳＢ、ＨＤＭＩ（High Definition Multimedia Interface、ＨＤＭＩは登録商標）、ＤＶＩ（Digital Visual Interface）、ＶＧＡ（Video Graphics Array）、コンポジット、ＲＳ−２３２Ｃ（Recommended Standard 232）、ＩＥＥＥ８０２．３に例示される有線ＬＡＮ等である。外部機器ОＡとしては、例えば、パーソナルコンピューターＰＣや携帯電話端末、ゲーム端末等を利用することができる。

図３は、利用者に視認される虚像の一例を示す説明図である。図３（Ａ）は、拡張現実感処理を実行していない場合の利用者の視野ＶＲを例示している。上述のようにして、ＨＭＤ１００の利用者の両眼に導かれた画像光が利用者の網膜に結像することにより、利用者は虚像ＶＩを視認する。図３（Ａ）の例では、虚像ＶＩは、ＨＭＤ１００のＯＳ１５０の待ち受け画面である。利用者は、右光学像表示部２６および左光学像表示部２８を透過して外景ＳＣを視認する。このように、本実施形態のＨＭＤ１００の利用者は、視野ＶＲのうち虚像ＶＩが表示された部分については、虚像ＶＩと、虚像ＶＩの背後に外景ＳＣとを見ることができる。また、視野ＶＲのうち虚像ＶＩが表示されていない部分については、光学像表示部を透過して、外景ＳＣを直接見ることができる。

図３（Ｂ）は、拡張現実感処理を実行している場合の利用者の視野ＶＲを例示している。後述の拡張現実感処理を実行することによって、利用者は、仮想オブジェクトＶＯ１〜ＶＯ３を含んだ虚像ＶＩを視認する。仮想オブジェクトＶＯ１は、外景ＳＣ内の現実世界の山（実オブジェクト）の近傍に表示された吹き出し形状の情報である。仮想オブジェクトＶＯ２，ＶＯ３は、外景ＳＣ内の現実世界の木（実オブジェクト）に重畳するように表示されたノート形状の情報である。このように、利用者は、虚像ＶＩに含まれる仮想オブジェクトＶＯ１〜ＶＯ３と、虚像ＶＩの背後に透過して見える外景ＳＣ内の実オブジェクトと、の両方を見ることで、拡張現実感を体感することができる。

Ａ−２．拡張現実感処理：
拡張現実感処理は、現実世界に実在する実オブジェクトに対して、情報（仮想オブジェクト）を付加提示するための処理である。拡張現実感処理は、拡張現実感処理部１４２がＯＳ１５０や他のアプリケーションから拡張現実感処理の開始指示を受信したことや、拡張現実感処理部１４２がＨＭＤ１００の電源がＯＮされた旨を受信したことに伴って開始される。

Ａ−２−１．拡張現実感処理の状態遷移：
図４は、拡張現実感処理の状態遷移図である。本実施形態の拡張現実感処理は、通常表示状態ＳＴ１と、簡易表示状態ＳＴ２と、をとることができる。通常表示状態ＳＴ１では、拡張現実感処理部１４２は、通常表示処理部１４４に通常表示処理を実行させる。この結果、画像表示部２０には、第１の表示態様での仮想オブジェクトを含む虚像が形成される。一方、簡易表示状態ＳＴ２では、拡張現実感処理部１４２は、簡易表示処理部１４６に簡易表示処理を実行させる。この結果、画像表示部２０には、第２の表示態様での仮想オブジェクトを含む虚像が形成される。

拡張現実感処理が開始された後、拡張現実感処理部１４２は、遷移条件１の成立を監視する。遷移条件１は、拡張現実感処理の状態を、開始後の状態から、通常表示状態ＳＴ１へと遷移させるための条件であり、換言すれば、第１の表示状態での仮想オブジェクトを表示させるための条件である。拡張現実感処理部１４２は、複数の条件を遷移条件１として利用することができるため、遷移条件１の詳細については後述する。

通常表示状態ＳＴ１において、拡張現実感処理部１４２は、遷移条件２の成立と、無効化アクションと、を監視する。遷移条件２は、拡張現実感処理の状態を、通常表示状態ＳＴ１から簡易表示状態ＳＴ２へと遷移させるための条件であり、換言すれば、第２の表示状態での仮想オブジェクトを表示させるための条件である。拡張現実感処理部１４２は、複数の条件を遷移条件２として利用することができるため、遷移条件２の詳細については後述する。

無効化アクションは、拡張現実感処理の状態遷移を取り消すために、利用者によって行われる所定の動作である。本実施形態では、無効化アクションとして「手を振る動作」を採用する。拡張現実感処理部１４２は、動き検出部（カメラ６１およびＣＰＵ１４０の拡張現実感処理部１４２）によって取得された利用者の手の動きが、予め記憶されている手を振る動作のパターンに一致するか否かを判定する。一致する場合、拡張現実感処理部１４２は無効化アクションが行われたと判定し、一致しない場合、拡張現実感処理部１４２は無効化アクションが行われていないと判定する。この場合、拡張現実感処理部１４２は「要求取得部」として機能し、無効化アクションは「第１の要求」として機能する。

なお、無効化アクションとしては、利用者の手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによってなされる他の動作を採用してもよい。例えば、無効化アクションとしては、手を所定の形とする動作、制御部１０に対するキャンセル入力動作、図示しないマイクを介した音声によるキャンセル入力動作等を採用してもよい。

通常表示状態ＳＴ１において、遷移条件２が成立し、かつ、無効化アクションを検出していない場合、拡張現実感処理部１４２は、拡張現実感処理の状態を、通常表示状態ＳＴ１から簡易表示状態ＳＴ２へと遷移させる。一方、通常表示状態ＳＴ１において、遷移条件２が成立し、かつ、無効化アクションを検出した場合、拡張現実感処理部１４２は、拡張現実感処理の状態を通常表示状態ＳＴ１のままとする。

このようにすれば、拡張現実感処理部１４２は、利用者からの第１の要求（無効化アクション）に応じて、第１の表示態様から第２の表示態様への遷移、換言すれば、通常表示状態ＳＴ１から簡易表示状態ＳＴ２への遷移を中止することができるため、利用者の利便性を向上させることができる。さらに、要求取得部として機能する拡張現実感処理部１４２は、利用者の手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによる利用者からの要求を、第１の要求として取得することができる。

簡易表示状態ＳＴ２において、拡張現実感処理部１４２は、遷移条件３の成立と、無効化アクションと、を監視する。遷移条件３は、拡張現実感処理の状態を、簡易表示状態ＳＴ２から通常表示状態ＳＴ１へと遷移させるための条件であり、換言すれば、第１の表示状態での仮想オブジェクトを表示させるための条件である。拡張現実感処理部１４２は、複数の条件を遷移条件３として利用することができるため、遷移条件３の詳細については後述する。また、無効化アクションについては、通常表示状態ＳＴ１における無効化アクションと同じである。

簡易表示状態ＳＴ２において、遷移条件３が成立し、かつ、無効化アクションを検出していない場合、拡張現実感処理部１４２は、拡張現実感処理の状態を、簡易表示状態ＳＴ２から通常表示状態ＳＴ１へと遷移させる。一方、簡易表示状態ＳＴ２において、遷移条件３が成立し、かつ、無効化アクションを検出した場合、拡張現実感処理部１４２は、拡張現実感処理の状態を簡易表示状態ＳＴ２のままとする。

このようにすれば、拡張現実感処理部１４２は、利用者からの要求（無効化アクション）に応じて、第２の表示態様から第１の表示態様への遷移、換言すれば、簡易表示状態ＳＴ２から通常表示状態ＳＴ１への遷移を中止することができるため、利用者の利便性を向上させることができる。さらに、要求取得部として機能する拡張現実感処理部１４２は、利用者の手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによる利用者からの要求を取得し、拡張現実感処理部１４２における第２の表示態様から第１の表示態様への遷移を中止させることができる。

Ａ−２−２．通常表示処理：
図５は、通常表示処理の手順を示すフローチャートである。通常表示処理は、第１の表示態様での仮想オブジェクトを表す虚像を画像表示部２０に形成させるための処理である。通常表示処理は、通常表示状態ＳＴ１（図４）において、拡張現実感処理部１４２からの指示に基づいて開始され、通常表示処理部１４４によって実行される。

ステップＳ１００において通常表示処理部１４４は、処理内で使用する変数ｉに「０」をセットする。ステップＳ１０２において通常表示処理部１４４は、カメラ６１に外景画像を取得させる。

ステップＳ１０４において通常表示処理部１４４は、取得した外景画像から、対象オブジェクトの特徴を抽出する。ここで、「対象オブジェクト」とは、外景画像に含まれている複数の実オブジェクトのうち、遷移条件１または遷移条件３の成立時において「利用者の視界内に入った実オブジェクト」または「注目動作の対象となった実オブジェクト」を意味する。「注目動作」とは、利用者が、特定の１点を注目する動作を意味する。注目動作は、視線取得部（図２）によって取得される利用者の視線や、動き取得部（図２）によって取得される利用者の手の動きを利用して特定することができる。注目動作の取得方法については後述する。

具体的には、ステップＳ１０４において通常表示処理部１４４は、以下に例示するａ１、ａ２のような画像認識の方法を用いて、取得した外景画像に含まれる対象オブジェクトの特徴を抽出する。なお、方法ａ１と方法ａ２とは、組み合わせてもよい。
（ａ１）対象オブジェクトのエッジ（特徴部）を検出する。
（ａ２）対象オブジェクトに予め付されたマーカー（特徴部）を検出する。なお、オブジェクトに付すマーカーは種々の種類のマーカーを使用可能であり、例えば、テープ、シール、マジック、レーザーマーカー、マジックテープ（登録商標）等を使用することができる。また、オブジェクトに付すマーカーの数は任意である。

ステップＳ１０６において拡張現実感処理部１４２は、ＨＭＤ１００の利用者の視野内における対象オブジェクトの位置と、ＨＭＤ１００と対象オブジェクトの間の距離と、を取得する。具体的には、拡張現実感処理部１４２は、ステップＳ１０４で抽出した特徴部の位置を、視野内における対象オブジェクトの位置とする。また、拡張現実感処理部１４２は、ステップＳ１０４で抽出した特徴から、対象オブジェクトが何であるか、および、対象オブジェクトが外景画像全体に占める大きさを特定する。拡張現実感処理部１４２は、特定した物体および大きさから、対象オブジェクトがＨＭＤ１００からどの程度離れた位置に存在するか（両者間の距離）を推定する。なお、ＨＭＤ１００が深度センサーや、測距センサーを備える場合、ステップＳ１０６において拡張現実感処理部１４２は、これらセンサーの測定値を用いて、ＨＭＤ１００と対象オブジェクトとの間の距離を取得してもよい。そうすれば、拡張現実感処理部１４２は、より正確な距離を取得することができる。

ステップＳ１０８において拡張現実感処理部１４２は、対象オブジェクトに対応する１つまたは複数の仮想オブジェクトを取得する。拡張現実感処理部１４２は、仮想オブジェクトを、ＨＭＤ１００内の図示しないデータベースから取得してもよく、ＨＭＤ１００にネットワークを介して接続されている他の装置（サーバー等）内の図示しないデータベースから取得してもよい。

ステップＳ１１０において拡張現実感処理部１４２は、対象オブジェクトの位置および距離に合わせて仮想オブジェクトを配置して、通常表示用画像を生成する。具体的には、拡張現実感処理部１４２は、ステップＳ１０８で取得した仮想オブジェクト（文字や画像）を、ステップＳ１０６で取得した対象オブジェクトの距離に合わせた大きさに加工し、ステップＳ１０６で取得した対象オブジェクトの位置に合わせた位置に配置する。また、拡張現実感処理部１４２は、通常表示用画像のうち、仮想オブジェクトが配置されていない領域については、画像が表示された際における外景ＳＣの視認性を向上させるために、黒色のデーターを配置する。

図６は、利用者に視認される通常表示用画像の一例を示す説明図である。図５のステップＳ１１２において拡張現実感処理部１４２は、通常表示用画像を表示させる。具体的には、拡張現実感処理部１４２は、ステップＳ１１０で生成した通常表示用画像を画像処理部１６０へ送信する。画像を受信した画像処理部１６０は、図２で説明した表示処理を実行する。この結果、図６に示すように、利用者は、視野ＶＲにおいて、仮想オブジェクトＶＯ１〜ＶＯ３が含まれた通常表示用画像ＮＩを表す虚像ＶＩを視認することができる。また、利用者は、虚像ＶＩの背後の外景ＳＣにおいて、仮想オブジェクトＶＯ１〜ＶＯ３が装飾する対象オブジェクト（実オブジェクト）を視認することができる。

図６の例では、対象オブジェクトは、作業現場に置かれているテーブルカッターである。また、仮想オブジェクトＶＯ１は、部品の場所を表す地図の画像であり、仮想オブジェクトＶＯ２は、利用者に対する作業内容の指示を表す文字であり、仮想オブジェクトＶＯ３は、作業内容の指示を補助する矢印の画像である。仮想オブジェクトＶＯ１，ＶＯ２は、テーブルカッターの近傍に配置されており、仮想オブジェクトＶＯ３はテーブルカッターに重畳されて配置されている。このように、拡張現実感処理部１４２は、仮想オブジェクトを対象オブジェクトの近傍に表示させてもよいし、仮想オブジェクトを対象オブジェクトに重ねて表示させてもよい。なお、図６の例では、１つの対象オブジェクトに３つの仮想オブジェクトが対応付けられている例を示した。しかし、１つの対象オブジェクトに対応付けられている仮想オブジェクトの数は任意であり、１つでもよく、複数でもよい。

図５のステップＳ１１４において拡張現実感処理部１４２は、変数ｉが「０」である場合に、通常表示用画像ＮＩの表示時間の計測を開始する。ステップＳ１１６において拡張現実感処理部１４２は、変数ｉに「１」をセットする。その後、拡張現実感処理部１４２は、ステップＳ１０２へ処理を遷移させ、上述した処理を繰り返す。

以上のように、通常表示処理（図５）において通常表示処理部１４４は、ＨＭＤ１００の利用者に対して、拡張現実感を与えるための仮想オブジェクトＶＯ１〜ＶＯ３を含む虚像ＶＩを、画像表示部２０に表示させることができる。通常表示処理において表示される仮想オブジェクトＶＯ１〜ＶＯ３は、利用者の仮想オブジェクトの視認性を優先した、換言すれば、視認性阻害度が高い「第１の表示態様」である。

Ａ−２−３．簡易表示処理：
図７は、簡易表示処理の手順を示すフローチャートである。簡易表示処理は、第２の表示態様での仮想オブジェクトを表す虚像を画像表示部２０に形成させるための処理である。簡易表示処理は、簡易表示状態ＳＴ２（図４）において、拡張現実感処理部１４２からの指示に基づいて開始され、簡易表示処理部１４６によって実行される。

ステップＳ２００において簡易表示処理部１４６は、通常表示処理（図５）のステップＳ１１４において開始した、通常表示用画像ＮＩの表示時間の計測を終了する。簡易表示処理部１４６は、計測した表示時間を、既存のデーター区別可能な態様で過去維持時間１２２に記憶させる。

ステップＳ２０２において簡易表示処理部１４６は、簡易表示態様１２６（第２の表示態様において採用される具体的な表示態様）を取得する。ステップＳ２０２およびＳ２０６において簡易表示処理部１４６は、取得した簡易表示態様１２６の値を参照する。

図８は、非表示の一例を示す説明図である。図７において、簡易表示態様１２６が「非表示」であることを示している場合（ステップＳ２０２：非表示）、ステップＳ２０４において簡易表示処理部１４６は、通常表示用画像ＮＩ（図６）を非表示とする。具体的には、簡易表示処理部１４６は、以下に例示するｂ１〜ｂ４のいずれかの方法を用いて、通常表示用画像ＮＩを非表示とすることができる。

（ｂ１）仮想オブジェクトを突然消す：
簡易表示処理部１４６は、各仮想オブジェクトＶＯ１〜ＶＯ３を突然消す態様で、通常表示用画像ＮＩを非表示とする。具体的には、簡易表示処理部１４６は、画像処理部１６０への通常表示用画像ＮＩの送信を停止する。または、簡易表示処理部１４６は、表示制御部１９０に対して表示駆動部（ＬＣＤまたはバックライト）の駆動を停止させる旨の要求を送信する。これにより、画像表示部２０による通常表示用画像ＮＩを表す虚像ＶＩの表示が中止される。

（ｂ２）仮想オブジェクトを枠外へフェードアウトさせる：
簡易表示処理部１４６は、各仮想オブジェクトＶＯ１〜ＶＯ３を画像の枠外へフェードアウトさせる態様で、通常表示用画像ＮＩを非表示とする。具体的には、簡易表示処理部１４６は、各仮想オブジェクトＶＯ１〜ＶＯ３が、通常表示用画像ＮＩの枠外へフェードアウトしている途中の通常表示用画像の生成と、生成した画像の画像処理部１６０への送信と、を繰り返せばよい。これにより、図８に示すように、処理が繰り返される毎に、仮想オブジェクトの位置は画像の枠外（図８において矢印で示す方向）に向かって徐々に移動する。この結果、利用者には、仮想オブジェクトが枠外に向かって段階的に消えていくように見えるため、表示態様の変化に伴って利用者に与える違和感を低減させることができる。

（ｂ３）仮想オブジェクトの透過率を上げてフェードアウトさせる：
簡易表示処理部１４６は、各仮想オブジェクトＶＯ１〜ＶＯ３の透過率を徐々に上げてフェードアウトさせる態様で、通常表示用画像ＮＩを非表示とする。具体的には、簡易表示処理部１４６は、各仮想オブジェクトＶＯ１〜ＶＯ３のドットをｎ個（ｎは任意の整数）抜いた通常表示用画像の生成と、生成した画像の画像処理部１６０への送信と、を繰り返せばよい。これにより、処理が繰り返される毎に、仮想オブジェクトのドットがｎ個ずつ減っていく。この結果、利用者には、仮想オブジェクトの透過率が上がって段階的に消えていくように見えるため、表示態様の変化に伴って利用者に与える違和感を低減させることができる。なお、簡易表示処理部１４６は、仮想オブジェクトのドットを抜く代わりに、仮想オブジェクトのドットを黒ドットと置き換えてもよく、仮想オブジェクトを輪郭だけ表示した仮想オブジェクトに置き換えてもよく、通常表示用画像ＮＩのα値を上げてもよく、通常表示用画像ＮＩの彩度を下げてもよい。

（ｂ４）仮想オブジェクトの透過率を上げつつ、枠外へフェードアウトさせる：
方法ｂ２と方法ｂ３との組み合わせである。これにより、処理が繰り返される毎に、仮想オブジェクトのドットがｎ個ずつ減ると共に、仮想オブジェクトの位置は画像の枠外（図８において矢印で示す方向）に向かって徐々に移動していく。この結果、利用者には、仮想オブジェクトの透過率が上がりつつ、仮想オブジェクトが枠外に向かって段階的に消えていくように見えるため、表示態様の変化に伴って利用者に与える違和感を低減させることができる。

図９は、端部アイコン表示の一例を示す説明図である。図７において、簡易表示態様１２６が「端部アイコン表示」であることを示している場合（ステップＳ２０２：その他、ステップＳ２０６：端部アイコン表示）、ステップＳ２１０において簡易表示処理部１４６は、通常表示用画像ＮＩ（図６）に表示されている各仮想オブジェクトＶＯ１〜ＶＯ３に対応する１つまたは複数のアイコン画像を取得する。簡易表示処理部１４６は、アイコン画像を、ＨＭＤ１００内の図示しないデータベースから取得してもよく、ＨＭＤ１００にネットワークを介して接続されている他の装置（サーバー等）内の図示しないデータベースから取得してもよい。アイコン画像は、仮想オブジェクトと１対１の関係で対応付けられていてもよいし、１対多、多対１の関係で対応付けられていてもよい。

ステップＳ２１２において簡易表示処理部１４６は、ステップＳ２１０で取得した全てのアイコン画像を端部に配置し、簡易表示用画像を生成する。ここで「端部」とは、上下左右どこでもよい。ただし、情報受容能力に優れる有効視野である水平約３０°、垂直約２０°の範囲内、または、注視点が迅速に安定して見える安定注視野である水平６０°〜９０°、垂直４５°〜７０°の範囲内を避けることが好ましい。また、簡易表示処理部１４６は、簡易表示用画像のうち、アイコン画像が配置されていない領域については、画像が表示された際における外景ＳＣの視認性を向上させるために、黒色のデーターを配置する。

ステップＳ２４０において簡易表示処理部１４６は、通常表示用画像ＮＩ（図６）に代えて、生成した簡易表示用画像を表示させる。この結果、図９に示すように、利用者は、視野ＶＲにおいて、仮想オブジェクト（アイコン画像）ＶＯ４，ＶＯ５が含まれた簡易表示用画像ＳＩを表す虚像ＶＩを視認することができる。また、利用者は、虚像ＶＩの背後の外景ＳＣにおいて、仮想オブジェクトＶＯ４，ＶＯ５が装飾する対象オブジェクト（実オブジェクト）を視認することができる。

図９の例では、対象オブジェクトは、図６と同様に、作業現場に置かれているテーブルカッターである。また、仮想オブジェクトＶＯ４は、地図のアイコン画像であり、仮想オブジェクトＶＯ５は、マニュアルのアイコン画像である。仮想オブジェクトＶＯ４は、仮想オブジェクトＶＯ１に対応付けられている。仮想オブジェクトＶＯ５は、仮想オブジェクトＶＯ２およびＶＯ３に対応付けられている。仮想オブジェクトＶＯ４，ＶＯ５は、共に、簡易表示用画像ＳＩの右下端部に配置されている。

図１０は、近傍アイコン表示の一例を示す説明図である。図７において、簡易表示態様１２６が「近傍アイコン表示」であることを示している場合（ステップＳ２０２：その他、ステップＳ２０６：近傍アイコン表示）、ステップＳ２２０において簡易表示処理部１４６は、通常表示用画像ＮＩ（図６）に表示されている各仮想オブジェクトＶＯ１〜ＶＯ３に対応する１つまたは複数のアイコン画像を取得する。詳細は、ステップＳ２１０と同様である。

ステップＳ２２２において簡易表示処理部１４６は、カメラ６１に外景画像を取得させる。ステップＳ２２４において簡易表示処理部１４６は、取得した外景画像から、対象オブジェクトの特徴を抽出する。詳細は、図５のステップＳ１０４と同様である。ステップＳ２２６において簡易表示処理部１４６は、対象オブジェクトの位置と、距離とを取得する。詳細は、図５のステップＳ１０６と同様である。

ステップＳ２２８において簡易表示処理部１４６は、対象オブジェクトの位置および距離に合わせてアイコン画像を配置して、簡易表示用画像を生成する。具体的には、簡易表示処理部１４６は、ステップＳ２２０で取得したアイコン画像を、ステップＳ２２６で取得した対象オブジェクトの距離に合わせた大きさに加工し、ステップＳ２２６で取得した対象オブジェクトの位置に合わせた位置（近傍）に配置する。また、簡易表示処理部１４６は、簡易表示用画像のうち、アイコン画像が配置されていない領域については、画像が表示された際における外景ＳＣの視認性を向上させるために、黒色のデーターを配置する。

ステップＳ２４０において簡易表示処理部１４６は、通常表示用画像ＮＩ（図６）に代えて、生成した簡易表示用画像を表示させる。この結果、図１０に示すように、利用者は、視野ＶＲにおいて、仮想オブジェクト（アイコン画像）ＶＯ４，ＶＯ５が含まれた簡易表示用画像ＳＩを表す虚像ＶＩを視認することができる。図１０の例では、対象オブジェクト、および、仮想オブジェクトＶＯ４，ＶＯ５は、図９と同様である。図１０が図９と相違する点は、仮想オブジェクトが簡易表示用画像の端部ではなく、対象オブジェクト（実オブジェクト）の近傍に配置されている点である。

図１１は、強調表示の一例を示す説明図である。図７において、簡易表示態様１２６が「強調表示」であることを示している場合（ステップＳ２０２：その他、ステップＳ２０６：強調表示）、ステップＳ２３０において簡易表示処理部１４６は、カメラ６１に外景画像を取得させる。ステップＳ２３２において１３６は、取得した外景画像から、対象オブジェクトの特徴を抽出する。詳細は、図５のステップＳ１０４と同様である。ステップＳ２３４において簡易表示処理部１４６は、対象オブジェクトの位置と、距離とを取得する。詳細は、図５のステップＳ１０６と同様である。

ステップＳ２３６において簡易表示処理部１４６は、対象オブジェクトの装飾用画像を生成する。具体的には、簡易表示処理部１４６は、ステップＳ２３２で特定した対象オブジェクトの特徴と、ステップＳ２３４で取得した対象オブジェクトの位置と距離とに応じて、対象オブジェクトの少なくとも一部分を装飾するための画像を生成する。ここで、「装飾」とは、強調することを意味する。このため、「装飾するための画像」とは、対象オブジェクトの少なくとも一部分が発光（点灯、点滅含む）しているように見せるための画像や、対象オブジェクトの少なくとも一部分を縁取るための画像や、対象オブジェクトの少なくとも一部分を浮き出して見せるための画像等を意味する。

ステップＳ２３８において簡易表示処理部１４６は、対象オブジェクトの位置および距離に合わせて、ステップＳ２３６で生成した装飾用画像を配置して、簡易表示用画像を生成する。また、簡易表示処理部１４６は、簡易表示用画像のうち、装飾用画像が配置されていない領域については、画像が表示された際における外景ＳＣの視認性を向上させるために、黒色のデーターを配置する。

ステップＳ２４０において簡易表示処理部１４６は、通常表示用画像ＮＩ（図６）に代えて、生成した簡易表示用画像を表示させる。この結果、図１１に示すように、利用者は、視野ＶＲにおいて、仮想オブジェクト（装飾用画像）ＶＯ６が含まれた簡易表示用画像ＳＩを表す虚像ＶＩを視認することができる。

図１１の例では、対象オブジェクト（実オブジェクト）は、図６と同様に、作業現場に置かれているテーブルカッターである。また、仮想オブジェクトＶＯ６は、テーブルカッターの一部分、すなわち、刃の部分を強調するための装飾用画像である。

図７のステップＳ２４０が終了した後、簡易表示処理部１４６は、ステップＳ２０２へ処理を遷移させ、上述した処理を繰り返す。

以上のように、簡易表示処理（図７）において、簡易表示処理部１４６が「端部アイコン表示」と、「近傍アイコン表示」と、「強調表示」と、のうちのいずれかである場合、簡易表示処理部１４６は、ＨＭＤ１００の利用者に対して、拡張現実感を与えるための仮想オブジェクトＶＯ４〜ＶＯ６を含む虚像ＶＩを、画像表示部２０に表示させることができる。簡易表示処理において表示される仮想オブジェクトＶＯ４〜ＶＯ６は、利用者の外景の視認性を優先した、換言すれば、視認性阻害度が低い「第２の表示態様」である。

以上のように、簡易表示処理（図７）によれば、第１の表示態様の仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）と比較して、虚像ＶＩに占める仮想オブジェクトの面積が小さい（視認性阻害度が低い）第２の表示態様の仮想オブジェクト（図８、図９、図１０、図１１、ＶＯ４〜ＶＯ６）を用いて、第１の表示態様での仮想オブジェクトの内容を示唆することができる。

なお、上述した端部アイコン表示、近傍アイコン表示、強調表示の各説明において、通常表示用画像ＮＩ（図６）と簡易表示用画像ＳＩ（図９、図１０、図１１）との遷移は、突然行われるものとした。しかし、通常表示用画像ＮＩから簡易表示用画像ＳＩへの遷移は、徐々に行ってもよい。具体的には、ステップＳ２０４の方法ｂ２〜ｂ４と同様の方法を用いることができる。このようにすれば、利用者には、通常表示用画像ＮＩが段階的に簡易表示用画像ＳＩへ変化するように見えるため、表示態様の変化に伴って利用者に与える違和感を低減させることができる。

また、上述した端部アイコン表示、近傍アイコン表示の各説明において、仮想オブジェクトＶＯ４，ＶＯ５は、アイコン画像であるとした。また、強調表示の説明において、仮想オブジェクトＶＯ６は、図形画像であるとした。しかし、これら第２の表示態様での仮想オブジェクトは、必ずしもアイコン画像や図形画像でなくともよい。第２の表示態様での仮想オブジェクトは、第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）の内容を示唆する文字と、図形と、絵柄と、記号と、または、これらの組み合わせとからなる限りにおいて、任意の態様を採用することができる。例えば、第２の表示態様での仮想オブジェクトは、単なる文字列であってもよいし、単なる記号であってもよいし、絵柄と文字列との組み合わせであってもよい。

以降では、拡張現実感処理において拡張現実感処理部１４２が実施する、遷移条件１〜３の成立の監視の手順について説明する。

Ａ−２−４．遷移条件１の成立の監視：
図１２は、遷移条件１の成立の監視の手順を示すフローチャートである。拡張現実感処理部１４２には、以下に列挙する条件１−１〜１−５のうちの少なくともいずれか１つ（複数でもよい）が、遷移条件１として予め設定されている。拡張現実感処理部１４２は、設定されている条件（１−１〜１−５）のうちの、少なくともいずれか１つが成立した場合に、遷移条件１が成立したと判定する。

（１−１）利用者の視界内に、仮想オブジェクトの表示対象である実オブジェクトが入った場合
（１−２）利用者による注目動作が、過去の拡張現実感処理における基準時間の統計値以上、継続された場合
（１−３）利用者による注目動作が、仮想オブジェクトの情報量から求めた時間以上、継続された場合
（１−４）利用者による注目動作が、利用者によって設定された設定値以上、継続された場合
（１−５）利用者による注目動作が、利用者の個人差と仮想オブジェクトの情報量とを考慮して求めた時間以上、継続された場合

以降、拡張現実感処理部１４２が条件１−１〜１−５の成立を判定するための具体的な手順について、図１２を用いて説明する。

（１−１）ＣＡＳＥ（視界内）：利用者の視界内に、仮想オブジェクトの表示対象である実オブジェクトが入った場合

ステップＳ３１０において拡張現実感処理部１４２は、カメラ６１を用いて外景画像を取得する。ステップＳ３１２において拡張現実感処理部１４２は、取得した外景画像を画像認識することで、外景画像に仮想オブジェクトの表示対象である実オブジェクトが含まれているか否かを判定する。この「仮想オブジェクトの表示対象である実オブジェクト」は、通常表示処理（図５）における「対象オブジェクト」となる。

対象オブジェクトが含まれている場合（ステップＳ３１２：ＹＥＳ）、ステップＳ３１４において拡張現実感処理部１４２は、遷移条件１が成立したと判定する。なお、対象オブジェクトが含まれていない場合、拡張現実感処理部１４２は、条件１−１〜１−５の成立を引き続き監視する。

このように、条件１−１を用いれば、拡張現実感処理部１４２は、仮想オブジェクトの表示対象である実オブジェクト（対象オブジェクト）が利用者の視界内に入った場合に、遷移条件１が成立したと判定し、拡張現実感処理の状態（図４）を、初期状態から通常表示状態ＳＴ１へと遷移させることができる。この結果、通常表示処理部１４４による通常表示処理（図５）が実行され、ＨＭＤ１００は、第１の表示状態での仮想オブジェクトを含む虚像ＶＩ（図６）を利用者に視認させることができる。

（１−２）ＣＡＳＥ（過去基準時間）：利用者による注目動作が、過去の拡張現実感処理における基準時間の統計値以上、継続された場合

ステップＳ３２０において拡張現実感処理部１４２は、利用者による注目動作（利用者が特定の１点を注目する動作）の開始を検出する。本実施形態では、視線取得部（視線検出部６２およびＣＰＵ１４０の拡張現実感処理部１４２）によって取得された利用者の視線が、所定時間以上に亘ってある１点から動かない場合に、注目動作が開始されたと判定することができる。所定時間とは任意に定めることができる。また、「ある１点から動いたか否か」の判定においては、眼球振盪に起因する視線のぶれを考慮して、所定の範囲内のぶれを許容することが好ましい。なお、動き検出部（カメラ６１およびＣＰＵ１４０の拡張現実感処理部１４２）によって取得された利用者の手の動きが、所定時間以上に亘ってある１点から動かない場合に、注目動作が開始されたと判定してもよい。この場合も、「ある１点から動いたか否か」の判定において、手ぶれを考慮して、所定の範囲内のぶれを許容することが好ましい。

ステップＳ３２２において拡張現実感処理部１４２は、過去基準時間１２４に記憶されている、過去の拡張現実感処理において使用された基準時間（以降、「過去の基準時間」とも呼ぶ。）の履歴を、他の利用者の履歴も含めて、全て取得する。なお、ステップＳ３２２において拡張現実感処理部１４２は「基準時間取得部」として機能し、過去基準時間１２４は「基準時間情報」として機能する。

ステップＳ３２４において拡張現実感処理部１４２は、取得した履歴を用いて、過去の基準時間の統計値を求める。統計値は、任意の統計的手法によって求めることができ、例えば、平均値、最頻値、中央値等とすることができる。拡張現実感処理部１４２は、求めた統計値を「今回の処理で使用する基準時間」とする。

ステップＳ３２６において拡張現実感処理部１４２は、ステップＳ３２０から検出を開始した利用者の注目動作の継続時間が、今回の処理で使用する基準時間（ステップＳ３２４の統計値）以上となったか否かを判定する。

統計値以上となった場合（ステップＳ３２６：ＹＥＳ）、ステップＳ３２８において拡張現実感処理部１４２は、遷移条件１が成立したと判定する。そして、拡張現実感処理部１４２は、ステップＳ３２０から検出を開始した実際の利用者の注目動作の継続時間と、第１の表示態様での仮想オブジェクトの情報量と、利用者の識別子と、を過去基準時間１２４に記憶させる。第１の表示態様での仮想オブジェクトの情報量の求め方は、ステップＳ３３２で説明する。

さらに、ステップＳ３２８において拡張現実感処理部１４２は、注目動作の対象となった実オブジェクトを特定する。具体的には、拡張現実感処理部１４２は、ステップＳ３２０によって検出された利用者の視線の方向と、カメラ６１によって得られた外景画像とを照合することによって、注目動作の対象となった実オブジェクトを特定することができる。この「注目動作の対象となった実オブジェクト」は、通常表示処理（図５）および簡易表示処理（図７）における「対象オブジェクト」となる。なお、ステップＳ３２０において利用者の手の動きを用いる場合、拡張現実感処理部１４２は、カメラ６１によって得られた外景画像を画像解析し、利用者の手（例えば指先）によって示されているオブジェクトを、注目動作の対象となった実オブジェクトとしてもよい。

なお、統計値以上となる前に注目動作が終了した場合、拡張現実感処理部１４２は、条件１−１〜１−５の成立を引き続き監視する。

このように、条件１−２を用いれば、拡張現実感処理部１４２は、過去の拡張現実感処理で使用された基準時間（過去の基準時間）の統計値、すなわち、過去の基準時間の傾向に基づいて、自動的に、現在の拡張現実感処理で使用する基準時間を変更することができる。また、拡張現実感処理部１４２は、利用者の注目動作の継続時間が、現在の拡張現実感処理で使用する基準時間以上となった場合に、遷移条件１が成立したと判定し、拡張現実感処理の状態（図４）を、初期状態から通常表示状態ＳＴ１へと遷移させることができる。

（１−３）ＣＡＳＥ（情報量）：利用者による注目動作が、仮想オブジェクトの情報量から求めた時間以上、継続された場合

ステップＳ３３０において拡張現実感処理部１４２は、利用者による注目動作の開始を検出する。詳細は、ステップＳ３２０と同様である。

ステップＳ３３２において拡張現実感処理部１４２は、仮想オブジェクトの情報量を取得する。具体的には、拡張現実感処理部１４２は、ステップＳ３２０において検出された、注目動作の対象となった実オブジェクト（すなわち、対象オブジェクト）を特定する。詳細は、ステップＳ３２６と同様である。拡張現実感処理部１４２は、特定した対象オブジェクトに対応する１つまたは複数の仮想オブジェクト（第１の表示態様の仮想オブジェクト）を取得する。詳細は、図５のステップＳ１０８と同様である。拡張現実感処理部１４２は、取得した１つまたは複数の仮想オブジェクトの情報量を求める。拡張現実感処理部１４２は、仮想オブジェクトの情報量を、例えば、以下に例示するｃ１〜ｃ３のいずれかの方法を用いて求めることができる。仮想オブジェクトが複数取得された場合は、複数の平均値を情報量としてもよいし、複数の合計値を情報量としてもよい。

（ｃ１）仮想オブジェクトのファイルサイズ：拡張現実感処理部１４２は、仮想オブジェクトが文字と画像との結合である場合や、仮想オブジェクトが映像である場合や、仮想オブジェクトの種類が不明である場合において、方法ｃ１を採用することが好ましい。
（ｃ２）仮想オブジェクトに含まれる文字数：拡張現実感処理部１４２は、仮想オブジェクトが文字である場合に、方法ｃ２を採用することが好ましい。
（ｃ３）仮想オブジェクトを二値化した際の黒色ドットの割合：拡張現実感処理部１４２は、仮想オブジェクトが画像である場合に、方法ｃ３を採用することが好ましい。

上述した方法ｃ１〜ｃ３を使い分ければ、拡張現実感処理部１４２は、第１の表示態様での仮想オブジェクトの種類に適した方法で仮想オブジェクトの情報量を求めることができるため、より正確に仮想オブジェクトの情報量を把握することができる。

ステップＳ３３４において拡張現実感処理部１４２は、ステップＳ３３２で取得した仮想オブジェクトの情報量から、今回の処理で使用する基準時間の閾値を求める。閾値は、任意の方法で求めることができ、例えば、情報量に所定の係数を乗じて閾値としてもよいし、情報量の候補と閾値の候補とを対応付けたテーブルを用いて閾値を求めてもよい。拡張現実感処理部１４２は、求めた閾値を「今回の処理で使用する基準時間」とする。

ステップＳ３３６において拡張現実感処理部１４２は、ステップＳ３３０から検出を開始した利用者の注目動作の継続時間が、今回の処理で使用する基準時間（ステップＳ３３４の閾値）以上となったか否かを判定する。

閾値以上となった場合（ステップＳ３３６：ＹＥＳ）、ステップＳ３３８において拡張現実感処理部１４２は、遷移条件１が成立したと判定する。遷移条件１成立後の処理（過去基準時間１２４への記憶、注目動作の対象となった実オブジェクトの特定）は、ステップＳ３２８と同様である。なお、閾値以上となる前に注目動作が終了した場合、拡張現実感処理部１４２は、条件１−１〜１−５の成立を引き続き監視する。

このように、条件１−３を用いれば、拡張現実感処理部１４２は、虚像ＶＩに占める面積が大きな（視認性阻害度が高い）第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）の情報量に基づいて、現在の拡張現実感処理で使用する基準時間を変更することができる。このようにすれば、拡張現実感処理部１４２は、例えば、第１の表示態様での仮想オブジェクトの情報量が多い場合、換言すれば、初期状態から第１の表示態様への遷移に伴う仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりやすい場合の基準時間を、情報量が少ない場合の基準時間よりも長くすることもできるため、利用者の利便性を向上させることができる。また、拡張現実感処理部１４２は、利用者の注目動作の継続時間が、現在の拡張現実感処理で使用する基準時間以上となった場合に、遷移条件１が成立したと判定し、拡張現実感処理の状態（図４）を通常表示状態ＳＴ１へと遷移させることができる。

（１−４）ＣＡＳＥ（利用者の設定）：利用者による注目動作が、利用者によって設定された設定値以上、継続された場合

ステップＳ３４０において拡張現実感処理部１４２は、利用者による注目動作の開始を検出する。詳細は、ステップＳ３２０と同様である。

ステップＳ３４２において拡張現実感処理部１４２は、基準時間設定１２５に記憶されている、利用者が設定した基準時間の設定値を取得する。なお、ステップＳ３４２において拡張現実感処理部１４２は「基準時間取得部」として機能する。拡張現実感処理部１４２は、取得した設定値を「今回の処理で使用する基準時間」とする。

ステップＳ３４４において拡張現実感処理部１４２は、ステップＳ３４０から検出を開始した利用者の注目動作の継続時間が、今回の処理で使用する基準時間（ステップＳ３４２の設定値）以上となったか否かを判定する。

設定値以上となった場合（ステップＳ３４４：ＹＥＳ）、ステップＳ３４６において拡張現実感処理部１４２は、遷移条件１が成立したと判定する。遷移条件１成立後の処理（過去基準時間１２４への記憶、注目動作の対象となった実オブジェクトの特定）は、ステップＳ３２８と同様である。なお、設定値以上となる前に注目動作が終了した場合、拡張現実感処理部１４２は、条件１−１〜１−５の成立を引き続き監視する。

このように、条件１−４を用いれば、拡張現実感処理部１４２は、基準時間設定１２５に記憶されている利用者の好みの設定値に応じて、現在の拡張現実感処理で使用する基準時間を変更することができる。また、拡張現実感処理部１４２は、利用者の注目動作の継続時間が、現在の拡張現実感処理で使用する基準時間以上となった場合に、遷移条件１が成立したと判定し、拡張現実感処理の状態（図４）を、初期状態から通常表示状態ＳＴ１へと遷移させることができる。

（１−５）ＣＡＳＥ（利用者の個人差）：利用者による注目動作が、利用者の個人差と仮想オブジェクトの情報量とを考慮して求めた時間以上、継続された場合

ステップＳ３５０において拡張現実感処理部１４２は、利用者による注目動作の開始を検出する。詳細は、ステップＳ３２０と同様である。

ステップＳ３５２において拡張現実感処理部１４２は、過去基準時間１２４に記憶されている過去の拡張現実感処理において使用された基準時間の履歴から、現在のＨＭＤ１００の利用者についての履歴を取得する。拡張現実感処理部１４２は、利用者の識別子をキーとして過去基準時間１２４を検索すればよい。なお、ステップＳ３２２において拡張現実感処理部１４２は「基準時間取得部」として機能する。

ステップＳ３５４において拡張現実感処理部１４２は、取得した履歴の「情報量」を「注目動作の継続時間」で除することで、ＨＭＤ１００の利用者が単位時間あたりに注目することのできる情報量を求める。次に拡張現実感処理部１４２は、第１の表示態様での仮想オブジェクトの情報量を、求めた情報量（単位時間あたりに注目することのできる情報量）で除することで、理想基準時間を求める。拡張現実感処理部１４２は、求めた理想基準時間を「今回の処理で使用する基準時間」とする。なお、第１の表示態様での仮想オブジェクトの情報量の求め方は、ステップＳ３３２と同様である。

ステップＳ３５６において拡張現実感処理部１４２は、ステップＳ３２０から検出を開始した利用者の注目動作の継続時間が、今回の処理で使用する基準時間（ステップＳ３５４の理想基準時間）以上となったか否かを判定する。

理想基準時間以上となった場合（ステップＳ３５６：ＹＥＳ）、ステップＳ３５８において拡張現実感処理部１４２は、遷移条件１が成立したと判定する。遷移条件１成立後の処理（過去基準時間１２４への記憶、注目動作の対象となった実オブジェクトの特定）は、ステップＳ３２８と同様である。なお、理想基準時間以上となる前に注目動作が終了した場合、拡張現実感処理部１４２は、条件１−１〜１−５の成立を引き続き監視する。

このように、条件１−５を用いれば、拡張現実感処理部１４２は、基準時間情報（過去基準時間１２４）を用いて、利用者が単位時間当たりに注目することのできる情報量を求めることができる。このため、拡張現実感処理部１４２は、例えば、求めた情報量（利用者が単位時間当たりに注目することのできる情報量）と、第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）の情報量と、に基づいて、現在の拡張現実感処理で使用する基準時間を変更することができる。このようにすれば、拡張現実感処理部１４２は、例えば、利用者が単位時間あたりに注目することのできる情報量が少ない場合、換言すれば、初期状態から第１の表示態様への遷移に伴う仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりやすい場合の基準時間を、情報量が多い場合の基準時間よりも長くすることができる。この結果、拡張現実感処理部１４２は、利用者の個人差に応じて基準時間を変更することができるため、利用者の利便性を向上させることができる。また、拡張現実感処理部１４２は、利用者の注目動作の継続時間が、現在の拡張現実感処理で使用する基準時間以上となった場合に、遷移条件１が成立したと判定し、拡張現実感処理の状態（図４）を、初期状態から通常表示状態ＳＴ１へと遷移させることができる。

以上のように、拡張現実感処理（遷移条件１の成立に伴う、初期状態から通常表示状態ＳＴ１への遷移）によれば、拡張現実感処理部１４２は、所定の基準時間に亘る注目動作の継続に応じて、少なくとも注目動作のなされた実オブジェクト（対象オブジェクト）について、第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）を含んだ虚像ＶＩ（ＮＩ）を画像表示部２０に形成させる。このようにして、注目動作の継続という利用者の意図によって仮想オブジェクトを表示させるため、利用者は、注目動作を継続して行わない限り、現実世界に実在する実オブジェクトを視認しやすい状態を維持することができる。この結果、仮想オブジェクトの表示が、実オブジェクトまたはその背景を視認する際の妨げとなりづらい頭部装着型表示装置（ＨＭＤ１００）を提供することができる。

さらに、拡張現実感処理（遷移条件１の成立の監視）によれば、拡張現実感処理部１４２は、張現実感処理が開始された後、虚像ＶＩに占める仮想オブジェクトＶＯ１〜ＶＯ３の面積が大きな（視認性阻害度が高い）第１の表示態様（図６）へと表示態様を遷移させるための基準時間を、例えば、条件１−２〜１−５に列挙したような、種々の条件に応じて変更することができる。

さらに、拡張現実感処理（遷移条件１の成立の監視）において、視線取得部（視線検出部６２およびＣＰＵ１４０の拡張現実感処理部１４２）によって取得された利用者の視線を用いることとすれば、利用者は、手や足を動かさずに視線を用いて注目動作を行うことが可能となる。このため、利用者が手を離すことが困難である作業中等の場面においても、利用者は、簡単に注目動作を行うことができる。また、拡張現実感処理（遷移条件１の成立の監視）において、動き検出部（カメラ６１およびＣＰＵ１４０の拡張現実感処理部１４２）によって取得された利用者の手の動きを用いることとすれば、利用者は、普段の動作において慣れた手の動きを用いて、簡単に注目動作を行うことが可能となる。

Ａ−２−５．遷移条件３の成立の監視：
遷移条件３の成立の監視の手順は、図１２に示した遷移条件１とほぼ同じである。以降、相違点について説明する。拡張現実感処理部１４２には、以下に列挙する条件３−１〜３−５のうちの少なくともいずれか１つ（複数でもよい）が、遷移条件３として予め設定されている。拡張現実感処理部１４２は、設定されている条件（３−１〜３−５）のうちの、少なくともいずれか１つが成立した場合に、遷移条件３が成立したと判定する。

（３−１）利用者の視界内に仮想オブジェクトの表示対象である実オブジェクトが入り、かつ、利用者が所定の動作を行った場合
（３−２）利用者による注目動作が、過去の拡張現実感処理における基準時間の統計値以上、継続された場合
（３−３）利用者による注目動作が、仮想オブジェクトの情報量から求めた時間以上、継続された場合
（３−４）利用者による注目動作が、利用者によって設定された設定値以上、継続された場合
（３−５）利用者による注目動作が、利用者の個人差と仮想オブジェクトの情報量とを考慮して求めた時間以上、継続された場合

（３−１）利用者の視界内に仮想オブジェクトの表示対象である実オブジェクトが入り、かつ、利用者が所定の動作を行った場合

ステップＳ３１０、Ｓ３１２は図１２と同様である。ステップＳ３１２において対象オブジェクトが含まれている場合（ステップＳ３１２：ＹＥＳ）、拡張現実感処理部１４２は、利用者によって所定の動作が行われたか否かを監視する。所定の動作としては、図４で説明した無効化アクションとは異なる動作である限りにおいて任意の動作を採用することができ、例えば、特定の「ジェスチャー」を採用することができる。ジェスチャーの取得方法は、無効化アクションの取得方法と同様である。所定の動作が行われた場合、ステップＳ３１４において拡張現実感処理部１４２は、遷移条件３が成立したと判定する。

このように、条件３−１を用いれば、拡張現実感処理部１４２は、仮想オブジェクトの表示対象である実オブジェクト（対象オブジェクト）が利用者の視界内に入り、かつ、利用者が所定の動作を行った場合に、遷移条件３が成立したと判定し、拡張現実感処理の状態（図４）を、簡易表示状態ＳＴ２から通常表示状態ＳＴ１へと遷移させることができる。

（３−２）利用者による注目動作が、過去の拡張現実感処理における基準時間の統計値以上、継続された場合

ステップＳ３２０〜Ｓ３２６は図１２と同様である。ステップＳ３２８において拡張現実感処理部１４２は、遷移条件３が成立したと判定後、過去基準時間１２４への記憶（ステップＳ３２８と同様）を実施する。その後、拡張現実感処理部１４２は、以下ｄ１、ｄ２いずれかの実オブジェクトを特定する。特定方法は、ステップＳ３２８と同様である。
（ｄ１）注目動作の対象となった実オブジェクト
（ｄ２）注目動作の対象となった第２の表示態様での仮想オブジェクトに対応付けられている実オブジェクト

このように、条件３−２を用いれば、拡張現実感処理部１４２は、条件１−２と同様に、過去の基準時間の統計値（過去の基準時間）の傾向に基づいて、自動的に、現在の拡張現実感処理で使用する基準時間を変更することができる。また、拡張現実感処理部１４２は、利用者の注目動作の継続時間が、現在の拡張現実感処理で使用する基準時間以上となった場合に、遷移条件３が成立したと判定し、拡張現実感処理の状態（図４）を、簡易表示状態ＳＴ２から通常表示状態ＳＴ１へと遷移させることができる。

（３−３）利用者による注目動作が、仮想オブジェクトの情報量から求めた時間以上、継続された場合

ステップＳ３３０、Ｓ３３４、Ｓ３３６は図１２と同様である。ステップＳ３３２、Ｓ３３８については、「注目動作の対象となった実オブジェクト」との記載を「条件３−２で説明したｄ１、ｄ２いずれかの実オブジェクト」と読み替えればよい。

このように、条件３−３を用いれば、拡張現実感処理部１４２は、条件１−３と同様に、虚像ＶＩに占める面積が大きな（視認性阻害度が高い）第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）の情報量に基づいて、現在の拡張現実感処理で使用する基準時間を変更することができる。このようにすれば、拡張現実感処理部１４２は、例えば、第１の表示態様での仮想オブジェクトの情報量が多い場合、換言すれば、第２の表示態様（図８、図９、図１０、図１１）から第１の表示態様への遷移に伴う仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりやすい場合の基準時間を、情報量が少ない場合の基準時間よりも長くすることもできるため、利用者の利便性を向上させることができる。また、拡張現実感処理部１４２は、利用者の注目動作の継続時間が、現在の拡張現実感処理で使用する基準時間以上となった場合に、遷移条件３が成立したと判定し、拡張現実感処理の状態（図４）を、簡易表示状態ＳＴ２から通常表示状態ＳＴ１へと遷移させることができる。

（３−４）利用者による注目動作が、利用者によって設定された設定値以上、継続された場合

ステップＳ３４０〜Ｓ３４４は図１２と同様である。ステップＳ３４６については、「注目動作の対象となった実オブジェクト」との記載を「条件３−２で説明したｄ１、ｄ２いずれかの実オブジェクト」と読み替えればよい。

このように、条件３−４を用いれば、拡張現実感処理部１４２は、条件１−４と同様に、基準時間設定１２５に記憶されている利用者の好みの設定値に応じて、現在の拡張現実感処理で使用する基準時間を変更することができる。また、拡張現実感処理部１４２は、利用者の注目動作の継続時間が、現在の拡張現実感処理で使用する基準時間以上となった場合に、遷移条件３が成立したと判定し、拡張現実感処理の状態（図４）を、簡易表示状態ＳＴ２から通常表示状態ＳＴ１へと遷移させることができる。

（３−５）利用者による注目動作が、利用者の個人差と仮想オブジェクトの情報量とを考慮して求めた時間以上、継続された場合

ステップＳ３５０〜Ｓ３５６は図１２と同様である。ステップＳ３５８については、「注目動作の対象となった実オブジェクト」との記載を「条件３−２で説明したｄ１、ｄ２いずれかの実オブジェクト」と読み替えればよい。

このように、条件３−５を用いれば、拡張現実感処理部１４２は、条件１−５と同様に、例えば、利用者が単位時間当たりに注目することのできる情報量と、第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）の情報量と、に基づいて、現在の拡張現実感処理で使用する基準時間を変更することができる。このようにすれば、拡張現実感処理部１４２は、例えば、利用者が単位時間あたりに注目することのできる情報量が少ない場合、換言すれば、第２の表示態様（図８、図９、図１０、図１１）から第１の表示態様への遷移に伴う仮想オブジェクトの表示が、実オブジェクトを視認する際の妨げとなりやすい場合の基準時間を、情報量が多い場合の基準時間よりも長くすることができる。この結果、拡張現実感処理部１４２は、利用者の個人差に応じて基準時間を変更することができるため、利用者の利便性を向上させることができる。また、拡張現実感処理部１４２は、利用者の注目動作の継続時間が、現在の拡張現実感処理で使用する基準時間以上となった場合に、遷移条件３が成立したと判定し、拡張現実感処理の状態（図４）を、簡易表示状態ＳＴ２から通常表示状態ＳＴ１へと遷移させることができる。

以上のように、拡張現実感処理（遷移条件３の成立に伴う、簡易表示状態ＳＴ２から通常表示状態ＳＴ１への遷移）によれば、拡張現実感処理部１４２は、第２の表示態様での仮想オブジェクト（図８、図９、図１０、図１１、ＶＯ４〜ＶＯ６）を含んだ虚像ＶＩ（ＳＩ）を画像表示部２０に形成させた後においては、実オブジェクト（上記ｄ１）に加えて、第２の表示態様での仮想オブジェクト（上記ｄ２）に対する所定の基準時間に亘る注目動作の継続に応じて、第２の表示態様よりも虚像に占める仮想オブジェクトの面積が大きい（視認性阻害度が高い）第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）を含んだ虚像ＶＩ（ＮＩ）を画像表示部２０に形成させることができる。また、注目動作の継続という利用者の意図によって、第２の表示状態から第１の表示状態へと仮想オブジェクトの表示状態が遷移し、表示される虚像に占める仮想オブジェクトの面積が大きくなる（視認性阻害度が高くなる）ため、利用者は、注目動作を継続して行わない限り、現実世界に実在する実オブジェクトを視認しやすい状態を維持することができる。換言すれば、利用者は、自分の意図で仮想オブジェクトの視認性阻害度を制御することができる。この結果、仮想オブジェクトの表示が、実オブジェクトまたはその背景を視認する際の妨げとなりづらい頭部装着型表示装置（ＨＭＤ１００）を提供することができる。

さらに、拡張現実感処理（遷移条件３の成立の監視）によれば、拡張現実感処理部１４２は、虚像ＶＩに占める仮想オブジェクトＶＯ４〜ＶＯ６の面積が小さな（視認性阻害度が低い）第２の表示態様（図８、図９、図１０、図１１）から、虚像ＶＩに占める仮想オブジェクトＶＯ１〜ＶＯ３の面積が大きな（視認性阻害度が高い）第１の表示態様（図６）へと表示態様を遷移させるための基準時間を、例えば、条件３−２〜３−５に列挙したような、種々の条件に応じて変更することができる。

Ａ−２−６．遷移条件２の成立の監視：
図１３は、遷移条件２の成立の監視の手順を示すフローチャートである。拡張現実感処理部１４２には、以下に列挙する条件２−１〜２−５のうちの少なくともいずれか１つ（複数でもよい）が、遷移条件２として予め設定されている。拡張現実感処理部１４２は、設定されている条件（２−１〜２−５）のうちの、少なくともいずれか１つが成立した場合に、遷移条件２が成立したと判定する。

（２−１）利用者の視界内から、仮想オブジェクトの表示対象である実オブジェクトが外れた場合
（２−２）第１の表示態様での仮想オブジェクトの表示後、過去の拡張現実感処理における維持時間の統計値以上の時間が経過した場合
（２−３）第１の表示態様での仮想オブジェクトの表示後、仮想オブジェクトの情報量から求めた時間以上の時間が経過した場合
（２−４）第１の表示態様での仮想オブジェクトの表示後、利用者によって設定された設定値以上の時間が経過した場合
（２−５）第１の表示態様での仮想オブジェクトの表示後、利用者の個人差と仮想オブジェクトの情報量とを考慮して求めた時間以上の時間が経過した場合

以降、拡張現実感処理部１４２が条件２−１〜２−５の成立を判定するための具体的な手順について、図１３を用いて説明する。

（２−１）ＣＡＳＥ（視界外）：利用者の視界から、仮想オブジェクトの表示対象である実オブジェクトが外れた場合

ステップＳ４１０において拡張現実感処理部１４２は、カメラ６１を用いて外景画像を取得する。ステップＳ４１２において拡張現実感処理部１４２は、取得した外景画像を画像認識することで、外景画像に第１の表示態様で表示している仮想オブジェクトについての実オブジェクトが含まれているか否かを判定する。この「仮想オブジェクトの表示対象である実オブジェクト」は、簡易表示処理（図７）における「対象オブジェクト」となる。

対象オブジェクトが含まれていない場合（ステップＳ４１２：ＮＯ）、ステップＳ４１４において拡張現実感処理部１４２は、遷移条件２が成立したと判定する。なお、対象オブジェクトが含まれている場合、拡張現実感処理部１４２は、条件２−１〜２−５の成立を引き続き監視する。

このように、条件２−１を用いれば、拡張現実感処理部１４２は、第１の表示態様で表示している仮想オブジェクトについての実オブジェクト（対象オブジェクト）が利用者の視界から外れた場合に、遷移条件２が成立したと判定し、拡張現実感処理の状態（図４）を、通常表示状態ＳＴ１から簡易表示状態ＳＴ２へと遷移させることができる。この結果、簡易表示処理部１４６による簡易表示処理（図７）が実行され、ＨＭＤ１００は、第２の表示態様での仮想オブジェクトを含む虚像ＶＩ（図８、図９、図１０、図１１）を利用者に視認させることができる。

（２−２）ＣＡＳＥ（過去維持時間）：第１の表示態様での仮想オブジェクトの表示後、過去の拡張現実感処理における維持時間の統計値以上の時間が経過した場合

ステップＳ４２０において拡張現実感処理部１４２は、過去維持時間１２２に記憶されている、過去の拡張現実感処理において使用された維持時間（以降、「過去の維持時間」とも呼ぶ。）の履歴を、他の利用者の履歴も含めて、全て取得する。なお、ステップＳ４２０において拡張現実感処理部１４２は「維持時間取得部」として機能し、過去維持時間１２２は「維持時間情報」として機能する。

ステップＳ４２２において拡張現実感処理部１４２は、取得した履歴を用いて、過去の維持時間の統計値を求める。統計値は、任意の統計的手法によって求めることができ、例えば、平均値、最頻値、中央値等とすることができる。拡張現実感処理部１４２は、求めた統計値を「今回の処理で使用する維持時間」とする。

ステップＳ４２４において拡張現実感処理部１４２は、図５のステップＳ１１４から計測を開始している通常表示用画像ＮＩ（図６）の表示時間が、今回の処理で使用する維持時間（ステップＳ４２２の統計値）以上となったか否かを判定する。なお、通常表示用画像ＮＩ（図６）の表示時間とは、すなわち、第１の表示態様での仮想オブジェクトの表示時間と同義である。

統計値以上となった場合（ステップＳ４２４：ＹＥＳ）、ステップＳ４２６において拡張現実感処理部１４２は、遷移条件２が成立したと判定する。なお、表示時間が統計値より小さい場合、拡張現実感処理部１４２は、条件２−１〜２−５の成立を引き続き監視する。

このように、条件２−２を用いれば、拡張現実感処理部１４２は、拡張現実感処理部１４２は、過去の拡張現実感処理で使用された維持時間（過去の維持時間）の統計値、すなわち、過去の維持時間の傾向に基づいて、自動的に、現在の拡張現実感処理で使用する維持時間を変更することができる。また、拡張現実感処理部１４２は、通常表示用画像ＮＩの表示時間（第１の表示態様での仮想オブジェクトＶＯ１〜ＶＯ３の表示時間）が、現在の拡張現実感処理で使用する維持時間以上となった場合に、遷移条件２が成立したと判定し、拡張現実感処理の状態（図４）を、通常表示状態ＳＴ１から簡易表示状態ＳＴ２へと遷移させることができる。

（２−３）ＣＡＳＥ（情報量）：第１の表示態様での仮想オブジェクトの表示後、仮想オブジェクトの情報量から求めた時間以上の時間が経過した場合

ステップＳ４３０において拡張現実感処理部１４２は、第１の表示態様で表示している仮想オブジェクトの情報量を取得する。仮想オブジェクトの情報量の取得方法については、図１２のステップＳ３３２の方法ｃ１〜ｃ３と同様である。

ステップＳ４３２において拡張現実感処理部１４２は、ステップＳ４３０で取得した仮想オブジェクトの情報量から、今回の処理で使用する維持時間の閾値を求める。閾値は、任意の方法で求めることができ、例えば、情報量に所定の係数（図１２のステップＳ３３４とは異なる係数とする）を乗じて閾値としてもよいし、情報量の候補と閾値の候補とを対応付けたテーブル（図１２のステップＳ３３４とは異なるテーブルとする）を用いて閾値を求めてもよい。拡張現実感処理部１４２は、求めた閾値を「今回の処理で使用する維持時間」とする。

ステップＳ４３４において拡張現実感処理部１４２は、図５のステップＳ１１４から計測を開始している通常表示用画像ＮＩ（図６）の表示時間が、今回の処理で使用する維持時間（ステップＳ４３２の閾値）以上となったか否かを判定する。

閾値以上となった場合（ステップＳ４３４：ＹＥＳ）、ステップＳ４３６において拡張現実感処理部１４２は、遷移条件２が成立したと判定する。なお、表示時間が閾値より小さい場合、拡張現実感処理部１４２は、条件２−１〜２−５の成立を引き続き監視する。

このように、条件２−３を用いれば、拡張現実感処理部１４２は、虚像ＶＩに占める面積が大きな（視認性阻害度が高い）第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）の情報量に基づいて、現在の拡張現実感処理で使用する維持時間を変更することができる。このようにすれば、拡張現実感処理部１４２は、例えば、第１の表示態様での仮想オブジェクトの情報量が多い場合、換言すれば、利用者が仮想オブジェクトの内容の確認に多くの時間を要すると推定される場合の維持時間を、情報量が少ない場合の維持時間よりも長くすることもできるため、利用者の利便性を向上させることができる。また、拡張現実感処理部１４２は、第１の表示態様での仮想オブジェクトの表示時間が現在の拡張現実感処理で使用する維持時間以上となった場合に、遷移条件２が成立したと判定し、拡張現実感処理の状態（図４）を、通常表示状態ＳＴ１から簡易表示状態ＳＴ２へと遷移させることができる。

（２−４）ＣＡＳＥ（利用者の設定）：第１の表示態様での仮想オブジェクトの表示後、利用者によって設定された設定値以上の時間が経過した場合

ステップＳ４４０において拡張現実感処理部１４２は、維持時間設定１２３に記憶されている、利用者が設定した維持時間の設定値を取得する。なお、ステップＳ４４０において拡張現実感処理部１４２は「維持時間取得部」として機能する。拡張現実感処理部１４２は、取得した設定値を「今回の処理で使用する維持時間」とする。

ステップＳ４４２において拡張現実感処理部１４２は、図５のステップＳ１１４から計測を開始している通常表示用画像ＮＩ（図６）の表示時間が、今回の処理で使用する維持時間（ステップＳ４４０の設定値）以上となったか否かを判定する。

設定値以上となった場合（ステップＳ４４２：ＹＥＳ）、ステップＳ４４４において拡張現実感処理部１４２は、遷移条件２が成立したと判定する。なお、表示時間が設定値より小さい場合、拡張現実感処理部１４２は、条件２−１〜２−５の成立を引き続き監視する。

このように、条件２−３を用いれば、拡張現実感処理部１４２は、維持時間設定１２３に記憶されている利用者の好みの設定値に応じて、現在の拡張現実感処理で使用する維持時間を変更することができる。また、拡張現実感処理部１４２は、第１の表示態様での仮想オブジェクトの表示時間が現在の拡張現実感処理で使用する維持時間以上となった場合に、遷移条件２が成立したと判定し、拡張現実感処理の状態（図４）を、通常表示状態ＳＴ１から簡易表示状態ＳＴ２へと遷移させることができる。

（２−５）ＣＡＳＥ（利用者の個人差）：第１の表示態様での仮想オブジェクトの表示後、利用者の個人差と仮想オブジェクトの情報量とを考慮して求めた時間以上の時間が経過した場合

ステップＳ４５０において拡張現実感処理部１４２は、過去維持時間１２２に記憶されている過去の拡張現実感処理において使用された維持時間の履歴から、現在のＨＭＤ１００の利用者についての履歴を取得する。拡張現実感処理部１４２は、利用者の識別子をキーとして過去維持時間１２２を検索すればよい。なお、ステップＳ３２２において拡張現実感処理部１４２は「維持時間取得部」として機能し、過去維持時間１２２は「維持時間情報」として機能する。

ステップＳ４５２において拡張現実感処理部１４２は、取得した履歴の「情報量」を「維持時間」で除することで、ＨＭＤ１００の利用者が単位時間あたりに認識することのできる情報量を求める。次に拡張現実感処理部１４２は、第１の表示態様での仮想オブジェクトの情報量を、求めた情報量（単位時間あたりに認識することのできる情報量）で除することで、理想維持時間を求める。拡張現実感処理部１４２は、求めた理想維持時間を「今回の処理で使用する維持時間」とする。なお、仮想オブジェクトの情報量の取得方法については、図１２のステップＳ３３２の方法ｃ１〜ｃ３と同様である。

ステップＳ４５４において拡張現実感処理部１４２は、図５のステップＳ１１４から計測を開始している通常表示用画像ＮＩ（図６）の表示時間が、今回の処理で使用する維持時間（ステップＳ４５２の理想維持時間）以上となったか否かを判定する。

理想維持時間以上となった場合（ステップＳ４５４：ＹＥＳ）、ステップＳ４５６において拡張現実感処理部１４２は、遷移条件２が成立したと判定する。なお、表示時間が理想維持時間より小さい場合、拡張現実感処理部１４２は、条件２−１〜２−５の成立を引き続き監視する。

このように、条件２−５を用いれば、拡張現実感処理部１４２は、維持時間情報（過去維持時間１２２）を用いて、利用者が単位時間あたりに認識することのできる情報量を求めることができる。このため、拡張現実感処理部１４２は、例えば、求めた情報量（利用者が単位時間あたりに認識することのできる情報量）と、第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）の情報量と、に基づいて、現在の拡張現実感処理で使用する維持時間を変更することができる。このようにすれば、拡張現実感処理部１４２は、例えば、利用者が単位時間あたりに認識することのできる情報量が少ない場合、換言すれば、利用者が第１の表示態様での仮想オブジェクトの内容の確認に多くの時間を要すると推定される場合の維持時間を、情報量が多い場合の維持時間よりも長くすることができる。この結果、拡張現実感処理部１４２は、利用者の個人差に応じて維持時間を変更することができるため、利用者の利便性を向上させることができる。また、拡張現実感処理部１４２は、第１の表示態様での仮想オブジェクトの表示時間が現在の拡張現実感処理で使用する維持時間以上となった場合に、遷移条件２が成立したと判定し、拡張現実感処理の状態（図４）を、通常表示状態ＳＴ１から簡易表示状態ＳＴ２へと遷移させることができる。

以上のように、拡張現実感処理（遷移条件２の成立に伴う、通常表示状態ＳＴ１から簡易表示状態ＳＴ２への遷移）によれば、拡張現実感処理部１４２は、第１の表示態様での仮想オブジェクト（図６、ＶＯ１〜ＶＯ３）を含んだ虚像ＶＩ（ＮＩ）を画像表示部２０に形成させた後、所定の維持時間の経過後に、第１の表示態様よりも虚像に占める仮想オブジェクトの面積が小さい（視認性阻害度が低い）第２の表示態様での仮想オブジェクト（図８、図９、図１０、図１１、ＶＯ４〜ＶＯ６）を含んだ虚像ＶＩ（ＳＩ）を画像表示部２０に形成させる。このようにして、維持時間の経過後に自動的に、表示される虚像に占める仮想オブジェクトの面積が小さく（視認性阻害度が低下する）なるため、利用者は、現実世界に実在する実オブジェクトを視認しやすくなる。この結果、仮想オブジェクトの表示が、実オブジェクトまたはその背景を視認する際の妨げとなりづらい頭部装着型表示装置（ＨＭＤ１００）を提供することができる。

さらに、拡張現実感処理（遷移条件２の成立の監視）によれば、拡張現実感処理部１４２は、虚像ＶＩに占める仮想オブジェクトＶＯ１〜ＶＯ３の面積が大きな（視認性阻害度が高い）第１の表示態様（図６）から、虚像ＶＩに占める仮想オブジェクトＶＯ４〜ＶＯ６の面積が小さな（視認性阻害度が低い）第２の表示態様（図８、図９、図１０、図１１）へと表示態様を遷移させるための維持時間を、例えば、条件２−２〜２−５に列挙したような、種々の条件に応じて変更することができる。

Ｂ．変形例：
上記実施形態において、ハードウェアによって実現されるとした構成の一部をソフトウェアに置き換えるようにしてもよく、逆に、ソフトウェアによって実現されるとした構成の一部をハードウェアに置き換えるようにしてもよい。その他、以下のような変形も可能である。

・変形例１：
上記実施形態では、ＨＭＤの構成について例示した。しかし、ＨＭＤの構成は、本発明の要旨を逸脱しない範囲において任意に定めることが可能であり、例えば、各構成部の追加・削除・変換等を行うことができる。

上記実施形態における、制御部と、画像表示部とに対する構成要素の割り振りは、あくまで一例であり、種々の態様を採用可能である。例えば、以下のような態様としてもよい。（i）制御部にＣＰＵやメモリー等の処理機能を搭載、画像表示部には表示機能のみを搭載する態様、（ｉｉ）制御部と画像表示部との両方にＣＰＵやメモリー等の処理機能を搭載する態様、（ｉｉｉ）制御部と画像表示部とを一体化した態様（例えば、画像表示部に制御部が含まれ眼鏡型のウェアラブルコンピューターとして機能する態様）、（ｉｖ）制御部の代わりにスマートフォンや携帯型ゲーム機を使用する態様、（ｖ）制御部と画像表示部とを無線ＬＡＮや赤外線通信やＢｌｕｅｔｏｏｔｈ等の無線の信号伝送路を介した接続により接続し、接続部（コード）を廃した態様。なお、この場合において、制御部または画像表示部に対する給電をワイヤレスにより実施してもよい。

例えば、上記実施形態で例示した制御部、画像表示部の構成は任意に変更することができる。具体的には、例えば、上記実施形態では、制御部が送信部を備え、画像表示部が受信部を備えるものとしたが、送信部および受信部はいずれも、双方向通信が可能な機能を備えており、送受信部として機能してもよい。また、例えば、制御部が備えるとした操作用インターフェイス（各種キーやトラックパッド等）の一部を省略してもよい。また、制御部に操作用スティック等の他の操作用インターフェイスを備えてもよい。また、制御部にはキーボードやマウス等のデバイスを接続可能な構成として、キーボードやマウスから入力を受け付けるものとしてもよい。例えば、電源として二次電池を用いることしたが、電源としては二次電池に限らず、種々の電池を使用することができる。例えば、一次電池や、燃料電池、太陽電池、熱電池等を使用してもよい。

図１４は、変形例におけるＨＭＤの外観の構成を示す説明図である。図１４（Ａ）の例の場合、画像表示部２０ｘは、右光学像表示部２６に代えて右光学像表示部２６ｘを備え、左光学像表示部２８に代えて左光学像表示部２８ｘを備えている。右光学像表示部２６ｘと左光学像表示部２８ｘとは、上記実施形態の光学部材よりも小さく形成され、ＨＭＤの装着時における利用者の右眼および左眼の斜め上にそれぞれ配置されている。図１４（Ｂ）の例の場合、画像表示部２０ｙは、右光学像表示部２６に代えて右光学像表示部２６ｙを備え、左光学像表示部２８に代えて左光学像表示部２８ｙを備えている。右光学像表示部２６ｙと左光学像表示部２８ｙとは、上記実施形態の光学部材よりも小さく形成され、ＨＭＤの装着時における利用者の右眼および左眼の斜め下にそれぞれ配置されている。このように、光学像表示部は利用者の眼の近傍に配置されていれば足りる。また、光学像表示部を形成する光学部材の大きさも任意であり、光学像表示部が利用者の眼の一部分のみを覆う態様、換言すれば、光学像表示部が利用者の眼を完全に覆わない態様のＨＭＤとして実現することもできる。

例えば、制御部が備えるとした各処理部（例えば画像処理部、表示制御部、拡張現実感処理部等）は、ＣＰＵがＲＯＭやハードディスクに格納されているコンピュータープログラムをＲＡＭに展開して実行することにより実現されるものとして記載した。しかし、これら機能部は、当該機能を実現するために設計されたＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）を用いて構成されてもよい。また、各処理部は、制御部ではなく画像表示部に配置されていてもよい。

例えば、ＨＭＤは、両眼タイプの透過型ＨＭＤであるものとしたが、単眼タイプのＨＭＤとしてもよい。また、利用者がＨＭＤを装着した状態において外景の透過が遮断される非透過型ＨＭＤとして構成してもよいし、非透過型ＨＭＤにカメラを搭載したビデオシースルーとして構成してもよい。また、例えば、画像表示部として、眼鏡のように装着する画像表示部に代えて、通常の平面型ディスプレイ装置（液晶ディスプレイ装置、プラズマディスプレイ装置、有機ＥＬディスプレイ装置等）を採用してもよい。この場合にも、制御部と画像表示部との間の接続は、有線の信号伝送路を介した接続であってもよいし、無線の信号伝送路を介した接続であってもよい。このようにすれば、制御部を、通常の平面型ディスプレイ装置のリモコンとして利用することもできる。また、例えば、画像表示部として、眼鏡のように装着する画像表示部に代えて、例えば帽子のように装着する画像表示部といった他の形状の画像表示部を採用してもよい。また、イヤホンは耳掛け型やヘッドバンド型を採用してもよく、省略しても良い。また、例えば、自動車や飛行機等の車両、またはその他の交通手段に搭載されるヘッドアップディスプレイ（ＨＵＤ、Head-Up Display）として構成されてもよい。また、例えば、ヘルメット等の身体防護具に内蔵されたＨＭＤとして構成されてもよい。

例えば、上記実施形態では、画像光生成部は、バックライトと、バックライト制御部と、ＬＣＤと、ＬＣＤ制御部とを用いて構成されるものとした。しかし、上記の態様はあくまで例示である。画像光生成部は、これらの構成部と共に、またはこれらの構成部に代えて、他の方式を実現するための構成部を備えていても良い。例えば、画像光生成部は、有機ＥＬ（有機エレクトロルミネッセンス、Organic Electro-Luminescence）のディスプレイと、有機ＥＬ制御部とを備える構成としても良い。また、例えば、画像生成部は、ＬＣＤに代えてデジタル・マイクロミラー・デバイス等を用いることもできる。また、例えば、レーザー網膜投影型の頭部装着型表示装置に対して本発明を適用することも可能である。

・変形例２：
上記実施形態では、拡張現実感処理の一例を示した。しかし、上記実施形態において示した処理の手順はあくまで一例であり、種々の変形が可能である。例えば、一部のステップを省略してもよいし、更なる他のステップを追加してもよい。また、実行されるステップの順序を変更してもよい。

例えば、拡張現実感処理は、通常表示状態ＳＴ１から開始（すなわち、初期状態から、通常表示状態ＳＴ１へ遷移）することとしたが、拡張現実感処理は簡易表示状態ＳＴ２から開始（すなわち、初期状態から、簡易表示状態ＳＴ２へ遷移）してもよい。

例えば、拡張現実感処理部は、遷移条件１の監視中においても、遷移条件２、３と同様に、無効化アクションを監視し、状態遷移の中止を行ってもよい。また、例えば、拡張現実感処理部は、遷移条件２、３の監視中における無効化アクションの監視を省略してもよい。

例えば、拡張現実感処理部は、遷移条件１、３の監視中において、上記実施形態で説明した視線取得部（視線の動きを取得）や動き取得部（手の動きを取得）に代えて、または、視線取得部や動き取得部と共に、９軸センサーによって取得される利用者の頭部の動きによって実現される「注目動作」を監視してもよい。

例えば、通常表示処理部は、通常表示処理（図５）において、外景画像に含まれている複数の実オブジェクトのうち、遷移条件１または遷移条件３の成立時において、利用者の注目動作の対象となっていない実オブジェクト（以降、「他の実オブジェクト」とも呼ぶ）についても、仮想オブジェクトを表示させてもよい。通常表示処理部は、他の実オブジェクトに付加する仮想オブジェクトの表示態様と、注目動作の対象となった実オブジェクト（すなわち、対象オブジェクト）に付加する仮想オブジェクトの表示態様と、を変えてもよい。表示態様とは、例えば、大きさ、明度、彩度等である。

例えば、上述した無効化アクション（第１の要求）に代えて、または、無効化アクションと共に、拡張現実感処理を強制的に状態遷移させるための強制遷移アクション（第２の要求）を用いてもよい。強制遷移アクションは、利用者の手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによってなされる動作であり、かつ、無効化アクションとは異なる動作である限りにおいて、任意の動作を採用することができる。拡張現実感処理が通常表示状態ＳＴ１である場合に強制遷移アクションが検出された場合、拡張現実感処理部は、拡張現実感処理を簡易表示状態ＳＴ２へと遷移させる。このようにすれば、拡張現実感処理部は、利用者からの第２の要求に応じて、維持時間の経過前であっても、第１の表示態様から第２の表示態様へ強制的に遷移させることができるため、利用者の利便性を向上させることができる。一方、拡張現実感処理が簡易表示状態ＳＴ２である場合に強制遷移アクションが検出された場合、拡張現実感処理部は、拡張現実感処理を通常表示状態ＳＴ１へと遷移させる。このようにすれば、拡張現実感処理部は、利用者からの第２の要求に応じて、基準時間の経過前であっても、第１の表示態様での仮想オブジェクトを表示させることができるため、利用者の利便性を向上させることができる。

・変形例３：
上記実施形態で例示した拡張現実処理に対して、以下に挙げるｅ１〜ｅ８の変形を施せば、ＨＭＤを用いた作業支援を実現することができる。

（ｅ１）記憶部に、作業に関連した情報（例えば、作業内容の指示、作業内容の指示を補助する情報、作業に要する標準時間、作業時の利用者の動きを特定するための情報等を含む）を予め記憶しておく。
（ｅ２）９軸センサーと、カメラと、を利用（単独でもよいし併用でもよい。他のセンサーをさらに併用してもよい）して、利用者の体の動きを取得する。

（ｅ３）作業支援の開始後、記憶部内の作業に関連した情報（作業に要する標準時間、作業時の利用者の動きを特定するための情報）と、変形ｅ２により取得した利用者の体の動きとを照合し、利用者による作業の進捗具合を監視する。
（ｅ４）変形ｅ３の監視結果が、利用者の体の動きが止まっている「作業停止」か、進捗が所定の時間以上遅れている「作業遅延」のどちらかである場合、拡張現実感処理の遷移条件１（初期状態から通常表示状態ＳＴ１への遷移条件）が成立したと判定し、第１の表示態様での仮想オブジェクトを表示させる。表示される仮想オブジェクトは、記憶部内の作業に関連した情報（作業内容の指示、作業内容の指示を補助する情報）に基づく情報である。

（ｅ５）通常表示状態ＳＴ１において、変形ｅ３の監視結果が、進捗が予定通りである「作業中」である場合、拡張現実感処理の遷移条件２（通常表示状態ＳＴ１から簡易表示状態ＳＴ２への遷移条件）が成立したと判定し、第２の表示態様での仮想オブジェクトを表示させる。第２の表示態様での仮想オブジェクトは、上述したように、非表示でもよいし、アイコン画像や文字等を使った表示でもよい。
（ｅ６）通常表示状態ＳＴ１において、変形ｅ３の監視結果が、作業停止または作業遅延である場合、通常表示状態ＳＴ１を継続する。

（ｅ７）簡易表示状態ＳＴ２において、変形ｅ３の監視結果が、作業停止または作業遅延である場合、拡張現実感処理の遷移条件３（簡易表示状態ＳＴ２から通常表示状態ＳＴ１への遷移条件）が成立したと判定し、第１の表示態様での仮想オブジェクトを表示させる。
（ｅ８）簡易表示状態ＳＴ２において、変形ｅ３の監視結果が、作業中である場合、簡易表示状態ＳＴ２を継続する。

このようにすれば、ＨＭＤは、スムーズに作業を進めることができる熟練した作業者の場合は簡易表示状態ＳＴ２（第２の表示態様での仮想オブジェクトの表示／非表示含む）を継続することができ、作業に不慣れな作業者の場合は通常表示状態ＳＴ１（第１の表示態様での仮想オブジェクトの表示）を継続することができる。また、熟練した作業者であっても、途中の手順で不明点が生じた場合等、作業が止まった際には、通常表示状態ＳＴ１へ遷移し、第１の表示態様での仮想オブジェクトを表示させることができる。この結果、作業者における利便性を向上させた作業支援が可能なＨＭＤを提供することができる。また、この結果、熟練した作業者がＨＭＤの利用者となる場合等、仮想オブジェクトを表示することが必要ないと思われる場合には、仮想オブジェクトの表示を省略（または簡略化）することができる。このため、実オブジェクトの視認性が不必要に損なわれる可能性を低減し、利用者が煩わしさを感じるおそれを低減することができる。

以上のように、変形例３において拡張現実感処理部は、所定の基準時間（作業に要する標準時間）以内に、利用者（作業者）による所定の動作（作業時の利用者の動きを特定するための情報）が開始されていない場合に、第１の表示態様での仮想オブジェクトを含んだ虚像を画像表示部に形成させる。換言すれば、拡張現実感処理部は、基準時間以内に利用者による所定の動作が開始されている場合は、第１の表示態様での仮想オブジェクトを表示させない。このため、例えば、利用者が所定の動作（例えば何らかの作業）をしている場合に、第１の表示態様での仮想オブジェクトが表示されて、使用者の眼前を遮るという可能性を低減することができる。この結果、仮想オブジェクトの表示が、実オブジェクトまたはその背景を視認する際の妨げとなりづらい頭部装着型表示装置（ＨＭＤ）を提供することができる。

変形例３においても、上記実施形態と同様に、「所定の基準時間に亘る注目動作の継続」で、通常表示状態ＳＴ１と簡易表示状態ＳＴ２との間を遷移させてもよい。このようにすれば、一連の作業を行う作業者が、次の動作を思い出せない（または知らない）ことにより、作業者が途方に暮れている場合に、簡易表示状態ＳＴ２から通常表示状態ＳＴ１へと状態遷移して、作業支援を行うことができる。

なお、上述した「所定の基準時間以内に、利用者による所定の動作が開始されていない場合に、第１の表示態様での仮想オブジェクトを含んだ虚像を画像表示部に形成させる。」との記載において、「所定の動作」を「注目動作の継続をやめる（停止する）動作」とすれば、上記実施形態の内容と整合する。

・変形例４：
本発明は、上述の実施形態や実施例、変形例に限られるものではなく、その趣旨を逸脱しない範囲において種々の構成で実現することができる。例えば、発明の概要の欄に記載した各形態中の技術的特徴に対応する実施形態、実施例、変形例中の技術的特徴は、上述の課題の一部または全部を解決するために、あるいは、上述の効果の一部または全部を達成するために、適宜、差し替えや組み合わせを行うことが可能である。また、その技術的特徴が本明細書中に必須なものとして説明されていなければ、適宜、削除することが可能である。

１０…制御部
１１…決定キー
１２…点灯部
１３…表示切替キー
１４…トラックパッド
１５…輝度切替キー
１６…方向キー
１７…メニューキー
１８…電源スイッチ
２０…画像表示部
２１…右保持部
２２…右表示駆動部
２３…左保持部
２４…左表示駆動部
２６…右光学像表示部
２８…左光学像表示部
３０…イヤホンプラグ
３２…右イヤホン
３４…左イヤホン
４０…接続部
４２…右コード
４４…左コード
４６…連結部材
４８…本体コード
５１…送信部
５２…送信部
５３…受信部
５４…受信部
６１…カメラ（動き取得部）
６２…視線検出部（視線取得部）
６６…９軸センサー
１１０…入力情報取得部
１００…ＨＭＤ（頭部装着型表示装置）
１２０…記憶部
１２１…表示状態
１２２…過去維持時間（維持時間情報）
１２３…維持時間設定
１２４…過去基準時間（基準時間情報）
１２５…基準時間設定
１２６…簡易表示態様
１３０…電源
１３２…無線通信部
１４０…ＣＰＵ
１４２…拡張現実感処理部（拡張現実感処理部、維持時間取得部、基準時間取得部）
１４４…通常表示処理部
１４６…簡易表示処理部
１６０…画像処理部
１７０…音声処理部
１８０…インターフェイス
１９０…表示制御部
２０１…右バックライト制御部
２０２…左バックライト制御部
２１１…右ＬＣＤ制御部
２１２…左ＬＣＤ制御部
２２１…右バックライト
２２２…左バックライト
２４１…右ＬＣＤ
２４２…左ＬＣＤ
２５１…右投写光学系
２５２…左投写光学系
２６１…右導光板
２６２…左導光板
ＰＣＬＫ…クロック信号
ＶＳｙｎｃ…垂直同期信号
ＨＳｙｎｃ…水平同期信号
Ｄａｔａ…画像データー
Ｄａｔａ１…右眼用画像データー
Ｄａｔａ２…左眼用画像データー
ＯＡ…外部機器
ＰＣ…パーソナルコンピューター
ＳＣ…外景
ＶＩ…虚像
ＶＲ…視野
ＲＥ…右眼
ＬＥ…左眼
ＥＲ…端部
ＥＬ…端部
ＮＩ…通常表示用画像
ＳＩ…簡易表示用画像
ＶＯ１…仮想オブジェクト（第１の表示態様）
ＶＯ２…仮想オブジェクト（第１の表示態様）
ＶＯ３…仮想オブジェクト（第１の表示態様）
ＶＯ４…仮想オブジェクト（第２の表示態様）
ＶＯ５…仮想オブジェクト（第２の表示態様）
ＶＯ６…仮想オブジェクト（第２の表示態様）
ＳＴ１…通常表示状態
ＳＴ２…簡易表示状態

Claims (14)

1. 利用者が虚像を視認可能な頭部装着型表示装置であって、
   前記利用者に前記虚像を視認させる画像表示部と、
   現実世界に実在する実オブジェクトに付加的に表示するための仮想オブジェクトを含んだ前記虚像を前記画像表示部に形成させる拡張現実感処理部と、
   を備え、
   前記拡張現実感処理部は、
   第１の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させた後、
   所定の維持時間の経過後に、第２の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させ、
   前記実オブジェクトに対する前記第２の表示態様での前記仮想オブジェクトの視認性阻害度は、前記実オブジェクトに対する前記第１の表示態様での前記仮想オブジェクトの視認性阻害度よりも低い、頭部装着型表示装置。
2. 請求項１に記載の頭部装着型表示装置であって、
   前記維持時間は、可変長である、頭部装着型表示装置。
3. 請求項２に記載の頭部装着型表示装置であって、さらに、
   前記拡張現実感処理部において過去に使用された前記維持時間を取得する維持時間取得部を備え、
   前記拡張現実感処理部は、
   取得された過去の前記維持時間の統計値を求め、
   求めた統計値に基づいて、現在の処理で使用する前記維持時間を変更する、頭部装着型表示装置。
4. 請求項２に記載の頭部装着型表示装置であって、
   前記拡張現実感処理部は、
   前記第１の表示態様での前記仮想オブジェクトの情報量を求め、
   求めた情報量に基づいて、現在の処理で使用する前記維持時間を変更する、頭部装着型表示装置。
5. 請求項４に記載の頭部装着型表示装置であって、
   前記拡張現実感処理部は、
   前記情報量の求め方を、前記第１の表示態様での前記仮想オブジェクトの種類に応じて変更する、頭部装着型表示装置。
   この形態の頭部装着型表示装置によれば、拡張現実感処理部は、第１の表示態様での仮想オブジェクトの種類に適した方法で仮想オブジェクトの情報量を求めることができるため、より正確に仮想オブジェクトの情報量を把握することができる。
6. 請求項２に記載の頭部装着型表示装置であって、さらに、
   前記維持時間についての前記利用者の設定を取得する維持時間取得部を備え、
   前記拡張現実感処理部は、
   取得された前記利用者の設定に基づいて、現在の処理で使用する前記維持時間を変更する、頭部装着型表示装置。
7. 請求項２に記載の頭部装着型表示装置であって、さらに、
   前記拡張現実感処理部において過去に使用された前記維持時間と、その際の前記第１の表示態様での前記仮想オブジェクトの情報量と、その際の前記利用者を識別するための識別情報と、を対応付けた維持時間情報を取得する維持時間取得部を備え、
   前記拡張現実感処理部は、
   取得された前記維持時間情報と、前記第１の表示態様での前記仮想オブジェクトの情報量とに基づいて、現在の処理で使用する前記維持時間を変更する、頭部装着型表示装置。
8. 請求項１から請求項７のいずれか一項に記載の頭部装着型表示装置であって、
   前記第２の表示態様での前記仮想オブジェクトは、前記第１の表示態様での前記仮想オブジェクトの内容を示唆する文字と、図形と、絵柄と、記号と、または、これらの組み合わせと、のうちの少なくともいずれかを含む、頭部装着型表示装置。
9. 請求項１から請求項８のいずれか一項に記載の頭部装着型表示装置であって、
   前記拡張現実感処理部は、
   前記維持時間の経過の待機中において、前記利用者からの第１の要求を取得した場合に、前記第１の表示態様から前記第２の表示態様への遷移を中止する、頭部装着型表示装置。
10. 請求項１から請求項９のいずれか一項に記載の頭部装着型表示装置であって、
    前記拡張現実感処理部は、
    前記維持時間の経過の待機中において、前記利用者からの第２の要求を取得した場合に、前記維持時間の経過前であっても、前記第１の表示態様から前記第２の表示態様へ遷移させる、頭部装着型表示装置。
11. 請求項９または請求項１０に記載の頭部装着型表示装置であって、
    前記利用者の手と、足と、声と、頭部と、または、これらの組み合わせと、のうちの少なくともいずれかによってなされる要求を、前記第１の要求または前記第２の要求として取得する要求取得部を備える、頭部装着型表示装置。
12. 請求項１から請求項１１のいずれか一項に記載の頭部装着型表示装置であって、
    前記拡張現実感処理部は、前記第１の表示態様から前記第２の表示態様への遷移を段階的に変化させる、頭部装着型表示装置。
13. 頭部装着型表示装置の制御方法であって、
    利用者に虚像を視認させる表示工程と、
    現実世界に実在する実オブジェクトに付加的に表示するための仮想オブジェクトを含んだ前記虚像を前記表示工程において形成させる制御工程と、
    を備え、
    前記制御工程は、
    第１の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させた後、
    所定の維持時間の経過後に、第２の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させ、
    前記実オブジェクトに対する前記第２の表示態様での前記仮想オブジェクトの視認性阻害度は、前記実オブジェクトに対する前記第１の表示態様での前記仮想オブジェクトの視認性阻害度よりも低い、頭部装着型表示装置の制御方法。
14. コンピュータープログラムであって、
    利用者に虚像を視認させる表示機能と、
    現実世界に実在する実オブジェクトに付加的に表示するための仮想オブジェクトを含んだ前記虚像を前記表示機能において形成させる制御機能と、
    をコンピューターに実現させるためのコンピュータープログラムであり、
    前記制御機能は、
    第１の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させた後、
    所定の維持時間の経過後に、第２の表示態様での前記仮想オブジェクトを含んだ前記虚像を形成させ、
    前記実オブジェクトに対する前記第２の表示態様での前記仮想オブジェクトの視認性阻害度は、前記実オブジェクトに対する前記第１の表示態様での前記仮想オブジェクトの視認性阻害度よりも低い、コンピュータープログラム。

Images