JP2014132718A - 表示装置、および、表示装置の制御方法 - Google Patents

Abstract

【課題】旧来の媒体と同様に使い勝手に優れ、かつ情報の即時的な提供を可能とする表示装置、および、表示装置の制御方法を提供する。
【解決手段】頭部装着型表示装置ＨＭは、使用者が視認可能な情報を検出する媒体認識部１５２と、使用者に視認可能に表示を行う表示手段と、媒体認識部１５２により検出された情報の少なくとも一部に重ねて、当該情報に対応する新たな情報を表示手段により表示させる更新処理部１５４と、を備える。
【選択図】図３

Description

本発明は、表示装置、および、表示装置の制御方法に関する。

従来、新聞や雑誌等の既存の媒体に代わってニュース等のコンテンツを提供する方法が提案されている（例えば、特許文献１、２参照）。特許文献１、２記載のシステムは、インターネット等の通信回線を介して新聞の記事を配信し、購読者が情報端末のディスプレイ等により記事を読むよう構成される。

特開２００１−２６５７２３号公報 特開２００５−１８７９４号公報

この種のシステムは、雑誌や新聞等の旧来の媒体に比べて、最新の情報を即時的に提供できるという利点がある。その一方で、多数の情報を一覧できる、携帯性に優れ紛失しても経済的損失が少ない、情報を見られるようになるまでの待ち時間が短い、等の点においては、情報端末のディスプレイよりも旧来の媒体である雑誌や新聞の方が優れており、両方の利点を満たす情報提供の方法は無かった。
本発明は、上述した事情に鑑みてなされたものであり、旧来の媒体と同様に使い勝手に優れ、かつ情報の即時的な提供を可能とする表示装置、および、表示装置の制御方法を提供することを目的とする。

上記目的を達成するために、本発明は、使用者が視認可能な情報を検出する検出手段と、前記使用者が視認可能に表示を行う表示手段と、前記検出手段により検出された情報の少なくとも一部に重ねて、当該情報に対応する別の情報を前記表示手段により表示させる制御手段と、を備えることを特徴とする。
本発明によれば、使用者が視認する情報に重なるように、その情報に対応する別の情報を表示する。これにより、使用者が視認する情報を表示装置によって変更または更新することが可能になるため、使用者が視認可能な範囲に存在する情報そのものを変更しなくても、使用者に異なる情報を提供できる。従って、例えば古い情報を最新の情報に更新するといった動作が可能となるので、雑誌や新聞等の旧来の媒体と同様に使い勝手に優れた形態で情報を表示し、かつ、情報の即時的な提供が可能となる。

また、上記目的を達成するために、本発明は、外景に重ねて視認される画像を表示する表示手段と、前記外景として視認される媒体を検出する媒体検出手段と、前記表示手段により、前記媒体に記録された情報の少なくとも一部に重ねて、この重ねられる領域の前記情報に対応する新たな情報を配置して表示させる制御手段と、を備えることを特徴とする。
本発明によれば、媒体に記録された情報の少なくとも一部に新しい情報を重ねて表示し、重ねて配置される情報は、重ねられる情報に対応する新たな情報である。このため、例えば雑誌や新聞等の媒体に記録された情報が最新の情報に更新されたかのように、情報を表示できる。これにより、雑誌や新聞等の旧来の媒体と同様に使い勝手に優れた形態で情報を表示することができ、かつ情報の即時的な提供が可能となる。

また、本発明は、上記表示装置であって、前記媒体に記録された情報の属性を判定する属性判定手段と、前記表示手段により前記新たな情報が重ねられる対象の前記情報の属性に基づいて、前記情報に対応する前記新たな情報を取得する情報取得手段と、を備え、前記制御手段は、前記情報取得手段により取得された前記新たな情報を前記表示手段により表示させることを特徴とする。
本発明によれば、媒体に記録された情報の属性を表示装置が判定し、隠される情報に関連する新たな情報を表示できる。

また、本発明は、上記表示装置であって、前記制御手段は、前記属性判定手段により判定された情報の属性に基づいて、前記媒体に記録された情報から更新対象の情報を選択することを特徴とする。
本発明によれば、媒体に記録された情報の属性に基づいて隠される情報を選択できるので、媒体に複数の情報が記録されている場合に適切に情報を選択して、新たな情報を提供できる。

また、本発明は、上記表示装置であって、前記制御手段は、前記媒体に記録された情報のうち、前記情報取得手段により前記新たな情報を取得可能な情報を前記更新対象の情報として選択することを特徴とする。
本発明によれば、媒体に複数の情報が記録されている場合に、対応する新しい情報が取得可能なものを選択するので、例えば新たな情報の提供が可能な場合に、媒体の情報を隠すので、適切に情報を選択して最新の情報を提供できる。

また、本発明は、上記表示装置であって、前記制御手段は、前記媒体の情報を隠す領域の形状及びサイズに合わせて新たな情報を配置することを特徴とする。
本発明によれば、隠される情報の周辺に記録されている他の情報の視認性を損なうことなく、適切に最新の情報を提供できる。

また、本発明は、上記表示装置であって、頭部装着型の表示装置として構成され、前記媒体検出手段は前記表示手段が表示する画像に重なる範囲の外景を撮影する撮影手段と、前記撮影手段により撮影された撮影画像から前記媒体を検出する画像処理手段とを備えることを特徴とする。
本発明によれば、頭部に装着された表示装置によって、装着者が見ている媒体の情報に重ねて最新の情報を自動的に提供でき、利便性のさらなる向上を図ることができる。

また、本発明は、上記表示装置であって、使用者に画像を視認させる頭部装着型表示装置であり、前記表示手段は、表示用画像データを用いて画像を表す画像光を生成し射出させる画像光生成部と、射出された前記画像光を前記使用者の眼に導く光学部材と、を含み、前記外景の光は前記光学部材を透過して前記画像光とともに前記使用者の眼に入射することを特徴とする。
本発明によれば、光学部材により使用者の眼に画像光を導くとともに、この光学部材を透過して外景の光を使用者の眼に導く頭部装着型の表示装置によって、外景として視認される情報に重なるように新たな情報を表示できる。これにより、使用者が視認する情報を表示装置によって更新し、使用者に様々な情報を提供できる。

また、上記目的を達成するために、本発明は、使用者が視認可能な情報を検出し、検出された情報の少なくとも一部に重ねて、当該情報に対応する別の情報を、前記使用者が視認可能に表示を行う表示手段によって表示させること、を特徴とする。
本発明によれば、使用者が視認する情報に重なるように、その情報に対応する別の情報を表示する。これにより、使用者が視認する情報を表示装置によって変更または更新することが可能になるため、使用者が視認可能な範囲に存在する情報そのものを変更しなくても、使用者に異なる情報を提供できる。従って、例えば古い情報を最新の情報に更新するといった動作が可能となるので、雑誌や新聞等の旧来の媒体と同様に使い勝手に優れた形態で情報を表示し、かつ、情報の即時的な提供が可能となる。

また、上記目的を達成するために、本発明は、外景に重ねて視認される画像を表示する表示手段を備えた表示装置の制御方法であって、前記外景として視認される媒体を検出し、前記表示手段により、前記媒体に記録された情報の少なくとも一部に重ねて、この重ねられる領域の前記情報に対応する新たな情報を配置して表示させること、を特徴とする。
本発明によれば、媒体に記録された情報の少なくとも一部に新しい情報を重ねて表示し、重ねて配置される情報は、重ねられる情報に対応する新たな情報である。このため、例えば雑誌や新聞等の媒体に記録された情報が最新の情報に更新されたかのように、情報を表示できる。これにより、雑誌や新聞等の旧来の媒体と同様に使い勝手に優れた形態で情報を表示することができ、かつ情報の即時的な提供が可能となる。

本発明によれば、雑誌や新聞等の旧来の媒体と同様に使い勝手に優れた形態で情報を表示し、かつ情報の即時的な提供を行うことができる。

本発明の実施形態に係る頭部装着型表示装置の外観図である。 頭部装着型表示装置の光学系の概略構成を示す図である。 頭部装着型表示装置の制御系の機能ブロック図である。 頭部装着型表示装置の動作を示すフローチャートである。 頭部装着型表示装置が情報を更新表示する動作の説明図であり、（Ａ）は処理対象の媒体が視認される状態を示し、（Ｂ）は媒体を認識する動作例を示す。 頭部装着型表示装置が情報を更新表示する動作の説明図であり、（Ａ）は情報を更新する案内が表示された状態を示し、（Ｂ）は情報が更新された状態を示す。

以下、図面を参照して本発明の実施形態について説明する。
図１は、本発明の実施形態に係る頭部装着型表示装置の外観図である。
頭部装着型表示装置ＨＭは、ユーザー（使用者）の頭部に装着される頭部装着型表示装置であり、ヘッドマウントディスプレイ（ＨＭＤ：Head Mounted Display）と呼ばれる。本実施形態の頭部装着型表示装置ＨＭは、ユーザーが、虚像を視認すると同時に外景も直接視認可能な光学透過型の頭部装着型表示装置である。

図１に示すように、頭部装着型表示装置ＨＭは、ユーザーの頭部に装着される画像表示部２０と、画像表示部２０を制御する制御装置１０とを備えている。画像表示部２０は、右保持部２１、右表示駆動部２２、左保持部２３、左表示駆動部２４、右光学像表示部２６および左光学像表示部２８を備えている。
右光学像表示部２６および左光学像表示部２８は、それぞれユーザーの右眼および左眼の眼前に位置し、ユーザーの眉間に対応する位置で相互に接続されて一体となっている。右光学像表示部２６の端部ＥＲからは右保持部２１が延伸し、左光学像表示部２８の端部ＥＬからは左保持部２３が延伸している。

右保持部２１は、ユーザーの右側頭部の側方に位置し、その先端はユーザーの右耳に係合する。また、左保持部２３はユーザー左側頭部の側方に位置し、その先端はユーザーの左耳に係合する。これら右保持部２１および左保持部２３の先端と、右光学像表示部２６および左光学像表示部２８の接合部の下端に設けられた鼻当て部とによって頭部装着型表示装置ＨＭが支持される。
右保持部２１の基端部には右表示駆動部２２が内蔵され、左保持部２３の基端部には左表示駆動部２４が内蔵される。これら右表示駆動部２２および左表示駆動部２４により、頭部装着型表示装置ＨＭはユーザーの右眼と左眼の各々に画像を視認させる。

右光学像表示部２６および左光学像表示部２８の前面側すなわち表面側には、調光板２０Ａが設けられている。調光板２０Ａは右光学像表示部２６および左光学像表示部２８に対し着脱可能であり、複数種類の調光板２０Ａを交換して装着できる。調光板２０Ａは薄板状の光学素子であり、光透過性がほぼゼロのもの、透明に近いもの、光量を減衰させて光を透過するもの、特定の波長の光を減衰または反射するもの等、種々のものを用いることができ、調光板２０Ａの光学特性を適宜選択することにより、外部から右光学像表示部２６および左光学像表示部２８に入射する外光の光量を調整できる。本実施形態では、少なくとも、頭部装着型表示装置ＨＭを装着したユーザーが外の景色を視認できる程度の光透過性を有する調光板２０Ａを用いる場合について説明する。調光板２０Ａは、後述する右導光板２６１（光学部材）、左導光板２６２（光学部材）を損傷や、汚れの付着等から保護する機能も有する。
また、頭部装着型表示装置ＨＭの前面において右光学像表示部２６と左光学像表示部２８の境目部分には、カメラ６１（撮影手段）が配置されている。カメラ６１の位置は頭部装着型表示装置ＨＭの前面のほぼ中央であり、ユーザーの左右の眼の中間位置となっている。

カメラ６１の撮影方向すなわち画角は、頭部装着型表示装置ＨＭの表側方向、換言すれば、頭部装着型表示装置ＨＭを装着した状態におけるユーザーの視界方向の少なくとも一部の外景を撮像する方向となっている。好ましくは面２６２Ａを通してユーザーが視認する範囲の外景を撮影する方向である。また、より好ましくは、面２６２Ａを通してユーザーに視認される範囲を含み、この範囲より広い範囲を撮影する。すなわち、調光板２０Ａを通したユーザーの視界の全体を撮影できることが望ましい。
カメラ６１は、静止画像の間欠撮影または動画像を撮影して撮影画像データを出力する。なお、本実施形態においてカメラ６１は、１つのデジタルカメラとして例示するが、複数のデジタルカメラからなるステレオビデオカメラを採用してもよい。

図２は、画像表示部２０における光学系の概略構成を示す図である。この図２には、ユーザーの左眼ＬＥに虚像を視認させる左表示駆動部２４および左導光板２６２の構成を平面図により示す。ユーザーの左眼と右眼に虚像を視認させる各構成は左右対称であるため、ここでは左表示駆動部２４および左導光板２６２についてのみ説明する。
画像表示部２０の左表示駆動部２４は、ＬＥＤ等の光源と拡散板とを有する左バックライト２２２、左バックライト２２２の拡散板から発せられる光の光路上に配置される透過型の左ＬＣＤ（Liquid Crystal Display：液晶ディスプレイ）２４２、および、左ＬＣＤ２４２を透過した画像光Ｌを導くレンズ群等を備えた左投写光学系２５２を備えている。
左投写光学系２５２は、左ＬＣＤ２４２から射出された画像光Ｌを並行状態の光束にするコリメートレンズによって構成される。左投写光学系２５２を経た画像光Ｌは左導光板２６２に入射する。左導光板２６２は画像光Ｌを反射する複数の反射面が形成されたプリズムであり、画像光Ｌは左導光板２６２の内部において複数回の反射を経て左眼ＬＥ側に導かれる。そして、左眼ＬＥの眼前に位置する面２６２Ａで反射した画像光Ｌは左眼ＬＥに向けて右光学像表示部２６から射出され、この画像光Ｌが左眼ＬＥの網膜に像を結び、ユーザーに画像を視認させる。
なお、左投写光学系２５２と左導光板２６２とを総称して「導光部」とも呼ぶ。この導光部は、画像光を用いてユーザーの眼前に虚像を形成する限りにおいて任意の方式を用いることができ、例えば、回折格子を用いても良いし、半透過反射膜を用いても良い。

面２６２Ａはハーフミラーで構成される。このため、ユーザーの左眼ＬＥには、面２６２Ａで反射した画像光Ｌだけでなく、調光板２０Ａを透過した外光ＯＬが入射する。つまり、頭部装着型表示装置ＨＭは、内部で処理した画像の画像光Ｌと外光ＯＬとを重ねてユーザーの眼に入射させ、ユーザーにとっては、頭部装着型表示装置ＨＭの調光板２０Ａを透かして外景が見え、この外景に重ねて、画像光Ｌによる画像が視認される。このため、頭部装着型表示装置ＨＭは、シースルー型の表示装置であるということができる。

頭部装着型表示装置ＨＭのユーザーの両眼に導かれた画像光Ｌがユーザーの網膜に結像することにより、ユーザーは虚像を視認する。ここで、ユーザーにとっての外景と虚像の視認性は外光ＯＬと画像光Ｌの光量のバランスに影響され、外光ＯＬの光量が画像光Ｌよりも大きい場合には外景がよく見える一方で頭部装着型表示装置ＨＭが処理（表示）する虚像の視認性は低い。反対に、画像光Ｌの光量が外光ＯＬに比べて大きい場合は、頭部装着型表示装置ＨＭが処理（表示）する虚像の視認性が高いのに対し、外景の視認性は低い。

図１に戻り、頭部装着型表示装置ＨＭは、画像表示部２０を制御装置１０に接続する接続部４０を有している。接続部４０は、制御装置１０に接続される本体コード４８と、本体コード４８から連結部材４６を介して分岐する２本の右コード４２および左コード４４とを有する。右コード４２は、右保持部２１の筐体内に挿入され、右表示駆動部２２に接続される。左コード４４は、左保持部２３の筐体内に挿入され、左表示駆動部２４に接続される。
画像表示部２０と制御装置１０とは、接続部４０を介して各種信号の伝送を行う。右コード４２、左コード４４、および本体コード４８には、例えば、金属ケーブルや、光ファイバーを採用することができる。

制御装置１０は、頭部装着型表示装置ＨＭを操作するための装置である。制御装置１０は、点灯部１２と、タッチパッド１４と、十字キー１６と、電源スイッチ１８とを含んでいる。
点灯部１２は、ＬＥＤ等からなるインジケーターを備え、頭部装着型表示装置ＨＭの動作状態（例えば、電源のＯＮ／ＯＦＦ等）を、その発光状態によって通知する。タッチパッド１４は、ユーザーの指による接触操作を検出して、検出内容に応じた信号を出力する。十字キー１６は、上下左右方向に対応するキーであり、押下操作に応じた信号を出力する。電源スイッチ１８は、頭部装着型表示装置ＨＭの電源状態を切り替えるスイッチである。

図３は、頭部装着型表示装置ＨＭの制御系の構成を示す機能ブロック図である。
制御装置１０は、入力情報取得部１１０と、記憶部１２０と、電源１３０と、制御部１４０と、通信インターフェイス１８５と、送信部（Ｔｘ）５１、５２と、を備える。前述の各部はバス（図示省略）により相互に接続されている。

入力情報取得部１１０は、例えば、タッチパッド１４、十字キー１６、電源スイッチ１８等による入力に応じた信号を取得する。記憶部１２０は、半導体メモリー素子や磁気的記憶装置等によりプログラムやデータを記憶する。電源１３０は、例えば２次電池を備え、頭部装着型表示装置ＨＭの各部に電力を供給する。

制御部１４０は、ＣＰＵ、ＲＯＭ、ＲＡＭ等を備え、ＲＯＭまたは記憶部１２０に記憶されたプログラムを実行することにより、頭部装着型表示装置ＨＭの各部を制御する。制御部１４０は、上記プログラムを実行することにより、媒体認識部１５２(媒体検出手段、属性判定手段、画像処理手段)、更新処理部１５４（制御手段）、更新情報取得部１５６（情報取得手段）、画像処理部１６０、音声処理部１７０、表示制御部１９０としても機能する。

画像処理部１６０は、通信インターフェイス１８５を介して入力されるコンテンツ等に基づいて画像表示部２０に供給する信号を生成し、画像表示部２０へ送信する。画像処理部１６０は、通信インターフェイス１８５を介してアナログ信号が入力された場合には、Ａ／Ｄ変換処理を行ってデジタル画像データ（Ｄａｔａ）を生成し、クロック信号（ＰＣＬＫ）と、垂直同期信号（ＶＳｙｎｃ）と、水平同期信号（ＨＳｙｎｃ）とともに出力する。また、画像処理部１６０は、デジタル画像データが通信インターフェイス１８５に入力された場合、フレームレートの変換や解像度変換等の各種処理を行って、処理後のデジタル画像データをクロック信号、垂直同期信号および水平同期信号を出力する。

画像処理部１６０が出力する信号は送信部５１を介して画像表示部２０の右表示駆動部２２に入力され、送信部５２を介して左表示駆動部２４に入力される。
表示制御部１９０は、右表示駆動部２２および左表示駆動部２４を制御する制御信号を生成する。具体的には、表示制御部１９０は、制御信号により、右ＬＣＤ制御部２１１による右ＬＣＤ２４１の駆動ＯＮ／ＯＦＦや、右バックライト制御部２０１による右バックライト２２１の駆動ＯＮ／ＯＦＦ、左ＬＣＤ制御部２１２による左ＬＣＤ２４２の駆動ＯＮ／ＯＦＦや、左バックライト制御部２０２による左バックライト２２２の駆動ＯＮ／ＯＦＦ、などを個別に制御することにより、右表示駆動部２２および左表示駆動部２４のそれぞれによる画像光の生成および射出を制御する。例えば、表示制御部１９０は、右表示駆動部２２および左表示駆動部２４の両方に画像光を生成させたり、一方のみに画像光を生成させたり、両方共に画像光を生成させなかったりする。
表示制御部１９０は、右ＬＣＤ制御部２１１と左ＬＣＤ制御部２１２とに対する制御信号を、送信部５１および５２を介してそれぞれ送信する。また、表示制御部１９０は、右バックライト制御部２０１と左バックライト制御部２０２とに対する制御信号を、それぞれ送信する。

音声処理部１７０は、コンテンツに含まれる音声信号を取得し、取得した音声信号を増幅して、画像表示部２０の右イヤホン３２および左イヤホン３４に対し、接続部４０を介して供給する。
通信インターフェイス１８５は、外部の通信回線５に接続され、この通信回線５を介して外部のサーバー６との間で通信を実行する。通信インターフェイス１８５は、制御部１４０の制御に従ってサーバー６との間で各種データを送受信する。通信インターフェイス１８５と通信回線５との間、および通信回線５を構成する具体的な通信回線は、有線であっても無線であってもよい。
また、通信インターフェイス１８５は、パーソナルコンピューター、携帯電話端末、ゲーム機、ＤＶＤプレイヤー等の映像再生機器などの外部の機器に接続され、これらの各機器から入力される各種コンテンツのアナログ映像信号または画像データを、表示制御部１９０に出力する。通信インターフェイス１８５は上記機器と有線接続されるコネクターやインターフェイス回路、或いは、無線ＬＡＮやＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線通信インターフェイスを備えていてもよい。

画像表示部２０は、右表示駆動部２２と、左表示駆動部２４と、右光学像表示部２６としての右導光板２６１と、左光学像表示部２８としての左導光板２６２と、カメラ６１と、右イヤホン３２と、左イヤホン３４とを備えている。
右表示駆動部２２は、受信部（Ｒｘ）５３と、右バックライト（ＢＬ）制御部２０１および右バックライト（ＢＬ）２２１と、表示素子として機能する右ＬＣＤ制御部２１１および右ＬＣＤ２４１と、右投写光学系２５１とを備える。
受信部５３は、送信部５１から入力される信号を受信する。右バックライト制御部２０１は、受信部５３に入力された制御信号に基づいて、右バックライト２２１を駆動する。右ＬＣＤ制御部２１１は、受信部５３に入力されたクロック信号と、垂直同期信号と、水平同期信号と、右眼用の画像データとに基づいて、右ＬＣＤ２４１を駆動する。右ＬＣＤ２４１は、複数の画素をマトリクス状に配置した透過型液晶パネルであり、右ＬＣＤ制御部２１１により駆動されて各種画像を描画する。

同様に、左表示駆動部２４は、受信部（Ｒｘ）５４と、左バックライト（ＢＬ）制御部２０２および左バックライト（ＢＬ）２２２と、表示素子として機能する左ＬＣＤ２４２および左ＬＣＤ２４２と、左投写光学系２５２とを備える。
なお、右バックライト制御部２０１、右ＬＣＤ制御部２１１、右バックライト２２１、および右ＬＣＤ２４１を総称して右側の「画像光生成部」と呼び、左バックライト制御部２０２、左ＬＣＤ制御部２１２、左バックライト２２２、および左ＬＣＤ２４２を総称して、左側の「画像光生成部」と呼ぶ。また、右保持部２１および左保持部２３を総称して単に「保持部」と、右表示駆動部２２および左表示駆動部２４を総称して単に「表示駆動部」と、右光学像表示部２６および左光学像表示部２８を総称して単に「光学像表示部」とも呼ぶ。
そして、これら表示駆動部と、画像光生成部とによって本発明の表示手段が構成される。表示手段には、光学像表示部を含んでもよいし、導光部を含んでもよい。

受信部５４は、送信部５２から入力される信号を受信する。左バックライト制御部２０２は、受信部５４に入力された制御信号に基づいて、左バックライト２２２を駆動する。左ＬＣＤ制御部２１２は、受信部５４に入力されたクロック信号と、垂直同期信号と、水平同期信号と、左眼用の画像データとに基づいて、左ＬＣＤ２４２を駆動する。左ＬＣＤ２４２は、複数の画素をマトリクス状に配置した透過型液晶パネルであり、左ＬＣＤ制御部２１２により駆動されて各種画像を描画する。
以下の説明では、頭部装着型表示装置ＨＭによりユーザーが視認する虚像を「画像」と呼ぶ。この画像は、右ＬＣＤ２４１、左ＬＣＤ２４２に形成される画像がユーザーの網膜に結像して認識されるものである。また、頭部装着型表示装置ＨＭがユーザーに虚像を視認させることを「表示」と呼ぶ。

制御部１４０は、通信インターフェイス１８５から入力される各種コンテンツの画像を画像表示部２０によって表示し、音声を含むコンテンツの画像を表示する場合は画像の表示とともに右イヤホン３２、３４から音声を出力する。これにより、ユーザーは各種映像コンテンツを視聴できる。

また、頭部装着型表示装置ＨＭは、情報が可視的に記録された媒体がカメラ６１の撮影画角内に存在する場合に、この媒体に記録された情報を認識し、媒体に記録された情報に対応する新しい情報を表示する機能を有する。ここで、媒体とは、例えば、新聞、雑誌、書籍等の印刷物が挙げられ、印刷物を構成する紙やシートの枚数や製本形態等は問わない。また、画像を表示面に表示する表示装置の表示面を媒体とすることもできる。
制御部１４０が備える媒体認識部１５２は、媒体認識部１５２は、カメラ６１の撮影画像データから上記媒体を検出し、検出した媒体に記録されている情報を認識する。媒体認識部１５２は、検出した媒体に複数の情報が記録されている場合には、これら複数の情報を所定の単位で分離し、分離した各情報を個別に認識できる。さらに、媒体認識部１５２は、認識した情報のうちの複数がひとまとまりの情報を構成している場合には、これらの情報をまとめて一つの情報として認識できるものとしてもよい。

また、媒体認識部１５２は、認識した各情報の属性を特定できるものとしてもよい。この属性とは、主に情報の内容の属性であり、例えば情報の分野（ジャンル）、即時性の重要度（即時性が重要視される情報か否か）等である。さらに、媒体認識部１５２は、撮影画像データから検出した媒体そのものの属性を認識できる構成としてもよく、この場合の属性は、例えば媒体の種類（雑誌、書籍、新聞、その他の印刷物）であってもよいし、媒体の更新に係る属性（定期刊行物か否か）であってもよく、その他の属性としてもよい。
媒体認識部１５２は、認識した各情報の内容に基づく属性に限らず、認識した各情報をコンテンツとして識別し、コンテンツの属性を特定できるものとしてもよい。また、媒体を一つのコンテンツとして認識し、媒体の属性を特定してもよい。例えば、媒体認識部１５２は、認識したコンテンツの決済、配信、或いは流通面における属性を特定してもよい。より具体的には、媒体認識部１５２は、コンテンツとしての媒体またはコンテンツとしての情報が掲載された媒体について、雑誌名、書籍名、発行者名、発行時期または発行日、発行された場所や地域等の属性を特定してもよい。また、例えば、媒体認識部１５２は、頭部装着型表示装置ＨＭのユーザーが、認識したコンテンツに係る権利を有しているかを認証する機能を有し、認証に成功したか否かを一つの属性として認識してもよい。この場合、媒体認識部１５２は、頭部装着型表示装置ＨＭのユーザーが行ったコンテンツの決済履歴に関する情報等に基づき、ユーザーが永続的な、或いは期間限定の視聴権や利用権を購入したコンテンツか否かを特定する。
媒体認識部１５２は、上述したコンテンツの決済、配信、或いは流通面における属性を特定するための情報、当該コンテンツに係る利用権等の決済を行うための情報、及び、決済の履歴に関する情報等を外部から取得してもよい。これらの情報は、後述するサーバー６から取得してもよいし、予め内蔵する記憶部１２０に記憶していてもよいし、媒体に付されたバーコード等に基づき読み取ってもよいし、媒体に付されたＩＣタグを読取装置（図示略）により読み取ることで取得してもよい。
媒体認識部１５２は、上述した各種の属性のうち１または複数の属性のみを特定してもよいし、全ての属性を特定するものであってもよい。

制御部１４０が備える更新処理部１５４は、媒体認識部１５２が認識した各情報に対応する新しい情報（本実施形態では「更新情報」と呼ぶ）が存在するか否かを判定する。すなわち、更新処理部１５４は、更新情報取得部１５６によって更新情報の取得を試行させる。更新情報取得部１５６は、媒体認識部１５２が特定した媒体の属性および／又は各情報の属性に基づいて、サーバー６にアクセスし、サーバー６が保持している情報の中に該当する情報がある場合には、この情報を更新情報として取得する。更新情報取得部１５６は、サーバー６から更新情報を取得した結果を更新処理部１５４に出力する。更新処理部１５４は、更新情報取得部１５６が出力する結果に基づいて、媒体認識部１５２が認識した各情報に対応する更新情報の有無を判定する。更新処理部１５４は、更新情報を取得できた場合、そのもとになった情報を、更新対象の情報とする。つまり、更新処理部１５４は、実質的に更新対象の情報を属性に基づき選択することになり、選択された情報が後述するように更新される。

サーバー６には、新聞や雑誌を発行する発行者としての出版社、放送局、情報配信を業務とする情報配信元等が提供する各種情報が逐次記憶されており、これらの情報を属性に基づいて検索し、取得可能となっている。通信インターフェイス１８５が通信回線５を介してアクセス可能なサーバー６は一つに限らず、複数のサーバー６を利用することも勿論可能である。また、通信回線５を、例えばインターネットのようなオープンなネットワークとし、頭部装着型表示装置ＨＭによる利用を前提としていないウェブサーバー等をサーバー６として利用することもできる。この場合、更新情報取得部１５６は、インターネットを介して利用可能な検索エンジンを利用し、媒体認識部１５２が認識した情報の属性、または属性に対応する文字列等を検索キーとして検索を実行し、検索結果に基づいて情報を取得してもよい。さらに、サーバー６が、インターネットを介して取得可能な情報を他のサーバーから自律的に収集する構成としてもよい。このように、サーバー６の具体的構成について制限はなく、頭部装着型表示装置ＨＭがデータ通信を行うことにより情報を取得可能なものであればよい。

更新処理部１５４は、媒体認識部１５２により認識された情報のうち、更新情報が取得された情報について、更新対象に設定する。更新処理部１５４は、媒体に記録されている更新対象の情報が視認される位置（領域）に重なるように、情報を隠すマスク画像を生成し、この画像に更新情報を重畳した画像を生成して、表示制御部１９０に出力する。すなわち、更新処理部１５４は、更新対象の情報に重なるように、この更新対象の情報に対応する更新情報を配置する。更新対象の情報に重ねて配置され表示される更新情報は、テキストや画像等の情報そのものであってもよい。また、更新対象の情報を隠すような態様であってもよい。本実施形態では、更新情報は、マスク画像に重畳された重畳画像となっている。
マスク画像は、画像表示部２０を通してユーザーが視認する外景の中で更新対象の情報の視認性を低下させる画像であり、例えば、明度の高い色で塗りつぶされた画像である。更新処理部１５４は、マスク画像が更新対象でない情報の視認性を損なわないように、マスク画像の位置および大きさを決定する。記憶部１２０には、例えばマスク画像の色や模様等を指定するデータまたはマスク画像に使用できる画像データ自体で構成されるマスク画像データ１２６が記憶されており、更新処理部１５４はマスク画像データ１２６を利用して、マスク画像を生成する。
このように、本実施形態で表示される更新情報は、マスク画像に重畳された画像となっている。このため、ユーザーが視認する媒体上の情報に重ねて更新情報を配置した場合、媒体上の更新対象の情報は見えなくなる。ここで、更新対象の情報が見えるように、マスク画像を含まない更新情報のみを、更新対象の情報に重なるように配置して表示してもよい。また、更新情報そのものが、表示された場合に媒体上の更新対象の情報の視認性を低下させるような態様のテキストや画像等の情報であってもよいし、更新対象の情報の視認性を低下させずに表示される情報であってもよい。

以下、具体的な表示例を示しながら頭部装着型表示装置ＨＭの動作について説明する。
図４は、頭部装着型表示装置ＨＭの動作を示すフローチャートであり、特に、媒体に可視的に記録された情報を更新表示する動作を示す。
図５および図６は、頭部装着型表示装置ＨＭが情報を更新表示する動作の説明図である。図５（Ａ）は処理対象の媒体が視認される状態を示し、図５（Ｂ）は媒体を認識する動作例を示し、図６（Ａ）は情報を更新する案内が表示された状態を示し、図６（Ｂ）は情報が更新された状態を示す。図５（Ａ）、図６（Ａ）および図６（Ｂ）は、ユーザーが視認する像として示したものである。
図５（Ａ）、（Ｂ）及び図６（Ａ）、（Ｂ）には媒体の一例として横書きの新聞を示す。当然のことながら、媒体における情報の配置や記述方向は図示の例に限定されない。情報が縦方向に配列された（縦書きの）媒体を処理対象とすることも勿論可能である。

図５および図６中の符号ＶＡは、頭部装着型表示装置ＨＭを装着したユーザーの視野（視界）を示し、ＤＡは画像表示部２０による表示可能領域を示す。表示可能領域ＤＡは、画像光Ｌにより画像が視認される範囲を指し、右ＬＣＤ２４１および左ＬＣＤ２４２の表示可能範囲、右バックライト２２１および左バックライト２２２のサイズ、右投写光学系２５１、左投写光学系２５２、右導光板２６１、および左導光板２６２の光学特性等により決定される。本実施形態では視野ＶＡのほぼ中央に矩形の表示可能領域ＤＡが存在する。頭部装着型表示装置ＨＭは、表示可能領域ＤＡの中において画像を表示できる。

タッチパッド１４（図１）や十字キー１６（図１）の操作によって情報の更新表示が指示されると、図４のステップＳ１１で、制御部１４０が情報を更新表示する処理を開始し、カメラ６１により撮影が実行され、ステップＳ１２で媒体認識部１５２が撮影画像データから媒体を検出する。次のステップＳ１３で、媒体認識部１５２は、検出した媒体に記録されている情報を認識する。
図５（Ａ）の例では、表示可能領域ＤＡにほぼ重なる位置に、媒体としての新聞３５０が視認されている。媒体の位置は表示可能領域ＤＡと完全に重なる必要はないが、少なくとも一部が表示可能領域ＤＡに重なっていることが望ましい。新聞３５０の紙面には、新聞３５０の名称３５１、および、新聞３５０の属性（名称、発行者名、発行年月日、紙面構成またはページ等）またはこれらの属性に対応するコード番号等を示すＱＲ（登録商標）コード３５２が印刷されており、このほかに複数の記事が印刷されている。すなわち、見出し３５３、記事本文３５４および画像３５５で構成される第１の記事３７１と、見出し３５６、記事本文３５７および画像３５８で構成される第２の記事３７２と、見出し３５９および記事本文３６０で構成される第３の記事３７３とが印刷されている。

媒体認識部１５２は、カメラ６１が視野ＶＡを含む範囲を撮影した撮影画像データから、新聞３５０全体の画像を抽出する。そして、媒体認識部１５２は、図５（Ｂ）に破線で示すように、名称３５１、ＱＲコード３５２、見出し３５３、３５６、３５９、記事本文３５４、３５７、３６０および画像３５５、３５８をそれぞれ認識する。この認識のアルゴリズムは任意の公知のものを採用することができる。例えば、新聞３５０の画像を構成する各画素のＲＧＢデータに基づいて文字や画像を構成する画素を検出し、文字認識処理や画像抽出処理等を組み合わせることで実現可能である。さらに、媒体認識部１５２は、名称３５１、ＱＲコード３５２、見出し３５３、３５６、３５９、記事本文３５４、３５７、３６０および画像３５５、３５８の組み合わせを認識して、第１の記事３７１、第２の記事３７２および第３の記事３７３を認識する。ここで、媒体認識部１５２は、ＱＲコード３５２を復号して文字列を得るようにしてもよい。
なお、新聞３５０において、媒体認識部１５２が第１の記事３７１、第２の記事３７２および第３の記事３７３の境界を認識しやすいように、枠線を印刷したり、見出し３５３、３５６、３５９、記事本文３５４、３５７、３６０および画像３５５、３５８にバーコードや記号を添えて印刷したりしてもよい。

図４のステップＳ１４で、媒体認識部１５２は、検出した媒体の属性、および、認識した各情報の属性を特定する。例えば、図５（Ｂ）に示すように認識した見出し３５３、３５６、３５９および記事本文３５４、３５７、３６０に含まれる文字列を認識して、認識した文字列を、予め記憶部１２０に記憶した属性判定用のデータベースと照合することで、各見出し３５３、３５６、３５９および記事本文３５４、３５７、３６０の属性を特定できる。また、例えば、画像３５５、３５８の特徴を示す特徴量を算出し、この特徴量を、予め記憶部１２０に記憶した属性判定用のデータベースと照合することで、各画像３５５、３５８の属性を特定できる。そして、これら見出し３５３、３５６、３５９、記事本文３５４、３５７、３６０および画像３５５、３５８の属性に基づき、第１の記事３７１、第２の記事３７２および第３の記事３７３の属性を特定できる。また、例えば、新聞３５０の名称や、ＱＲコード３５２を復号して得た文字列等を上記データベースと照合する方法や、見出し３５３、３５６、３５９、記事本文３５４、３５７、３６０および画像３５５、３５８の各属性、配置、見出しや画像の数等に基づき、新聞３５０の属性を特定できる。また、新聞３５０において、ＱＲコード３５２として符号化された文字列が新聞３５０の属性を示す情報であってもよく、第１の記事３７１、第２の記事３７２および第３の記事３７３の属性を示す情報が、ＱＲコードやバーコードとして見出し３５３、３５６、３５９に添付されていてもよい。この場合、媒体認識部１５２は、これらのＱＲコードやバーコードを復号することで、新聞３５０の属性や各記事の属性を特定できる。さらに、このステップＳ１４で、媒体認識部１５２は、上述したように、認識した媒体や各情報の決済、配信、或いは流通面における属性を特定してもよい。

図４のステップＳ１５で、更新情報取得部１５６は、媒体認識部１５２が認識した情報毎に、各情報の属性に基づいて更新情報の取得を試み、取得結果を更新処理部１５４に出力する。更新処理部１５４が更新情報を取得する情報の単位は、媒体認識部１５２が決定した単位である。例えば図５（Ａ）、（Ｂ）の例では、第１の記事３７１、第２の記事３７２および第３の記事３７３の各々について更新情報を取得する。
ステップＳ１６で、更新処理部１５４は、更新情報取得部１５６が出力した取得結果に基づき、更新情報の有無を判定する。ここで、更新処理部１５４が、更新情報が全く取得されなかったと判定した場合（ステップＳ１６；Ｎｏ）、制御部１４０は本処理を終了する。

一方、更新情報取得部１５６が更新情報を取得したと判定した場合（ステップＳ１６；Ｙｅｓ）、更新処理部１５４はステップＳ１７に移行し、一つの更新情報について、この更新情報に対応する更新対象の情報の領域を特定する。すなわち、更新処理部１５４は、撮影画像データにおける更新対象の情報の位置を特定し、この位置に重なる表示可能領域ＤＡ中の領域を特定し、特定した領域に相当する右ＬＣＤ２４１および左ＬＣＤ２４２の画素を求める。これにより、更新対象の情報に重ねて更新情報を配置する画素が特定される。この特定された画素は、本実施形態では、更新対象の情報を隠すマスク画像を表示する画素として特定される。
ステップＳ１８で、更新処理部１５４は、ステップＳ１７で特定した画素に所定の色を表示させるマスク画像を生成する。ステップＳ１９で、更新処理部１５４は、現在視認されている情報を更新する旨をユーザーに知らせるための案内画像の画像データを生成し、表示制御部１９０に出力して画像表示部２０により表示させる。この案内画像は、ステップＳ１８で生成したマスク画像に、案内用のメッセージ（文字列）を重畳した画像である。

図６（Ａ）には、第２の記事３７２について更新情報を取得した場合の表示例である。図５（Ａ）、（Ｂ）で第２の記事３７２が視認されていた領域に重なるように、案内画像３６２が表示されている。案内画像３６２は、マスク画像に案内のメッセージを重ねた画像であり、案内画像３６２の背景はマスク画像の色となっている。この色は、上述のように、調光板２０Ａおよび右導光板２６１、左導光板２６２を通して見える外景の視認性を低下させる色または光量となっている。案内画像３６２は、更新の対象でない第１の記事３７１や第３の記事３７３の視認性を低下させないように、そのサイズおよび位置が調整されている。なお、マスク画像の色を、新聞３５０の背景色（地の色）に合わせてもよい。

図４のステップＳ２０で、更新処理部１５４は、ステップＳ１５で取得された更新情報を構成する文字列や画像を、ステップＳ１８で生成したマスク画像のサイズや形状に合わせてレイアウトして、更新情報を表示するための画像データを生成する。更新処理部１５４は、ステップＳ２１で、生成した画像データを表示制御部１９０に出力して、表示させる。ここで、更新処理部１５４は、ステップＳ１９で案内画像が表示されてから所定時間後に更新情報が表示されるように、画像データを表示制御部１９０に出力するタイミングを調整する。

図６（Ｂ）には、第２の記事３７２について更新情報が表示された例を示す。図６（Ａ）で案内画像３６２が表示されていた位置に、第２の記事３７２に代わる第４の記事３７４が表示されている。第４の記事３７４は、マスク画像を背景とし、見出し３６４および記事本文３６５により構成される。見出し３６４および記事本文３６５の文字サイズ、1行の文字数、行数等は、マスク画像に合わせて設定されている。
この図６（Ｂ）に示すように、ユーザーには、第２の記事３７２（図５（Ａ）、（Ｂ））の代わりに新しい第４の記事３７４が視認され、新聞３５０自体は古いものであっても、ユーザーは最新の情報を得ることができる。また、新聞３５０に実際に印刷されている第２の記事３７２はマスク画像により隠されるため、第４の記事３７４を良好に視認できる。

図４のステップＳ２２で、更新処理部１５４は、更新情報取得部１５６がステップＳ１５で取得した全ての更新情報を表示したか否かを判定し、全ての更新情報の処理が完了した場合は（ステップＳ２２；Ｙｅｓ）、本処理を終了する。まだ表示されていない更新情報がある場合は（ステップＳ２２；Ｎｏ）、ステップＳ１７に戻り、次の更新情報を表示する処理を行う。

なお、ステップＳ１５で更新情報取得部１５６が複数の更新情報を取得した場合、全ての更新情報についてまとめて処理することも可能である。この場合、更新処理部１５４は、ステップＳ１７で全ての更新情報について更新対象の情報の領域を特定し、ステップＳ１８で、全ての更新対象の領域を隠すマスク画像を生成する。ステップＳ２０では、全ての更新情報を構成する文字列や画像を、マスク画像に合わせてレイアウトする。このステップＳ２０で、更新処理部１５４は、更新対象の情報と更新情報との対応関係を乱さないようにレイアウトを行ってもよい。この場合、複数の情報がまとめて更新されるので、ユーザーが情報の更新を待つ時間を短縮できる。また、マスク画像を使用せず、更新情報のみを、媒体上の更新対象の情報に重なるように配置して表示する場合、複数の更新情報をつなげた大きい更新情報を生成してもよい。この場合、更新処理部１５４は、ステップＳ１７で全ての更新情報について更新対象の情報の領域を特定し、ステップＳ１８で、全ての更新対象の領域に重なるサイズ及び形状を有する画像を生成する。この画像には、複数の更新対象の情報に対応する複数の更新情報が含まれている。この場合も、複数の情報をまとめて更新することで待ち時間を短縮できる。

図４の動作を少なくとも一度実行し、更新情報が頭部装着型表示装置ＨＭにより表示された状態で、再度、図４の動作を実行することも可能である。
この場合、更新処理部１５４は、ステップＳ１２で媒体認識部１５２が検出した媒体が、前回までの動作のステップＳ１２で検出した媒体と同じ媒体であるかどうかを判定し、異なる媒体であると判定した場合には上記と同様の動作を行う。
また、同じ媒体であると判定した場合、更新処理部１５４は、媒体認識部１５２によるステップＳ１３〜Ｓ１４の動作を省略させてもよい。例えば新聞３５０が同じものであれば、印刷されている記事は変化しないから、再度認識や属性の特定を行う必要はない。

その後、更新情報取得部１５６は、ステップＳ１５で通信インターフェイス１８５によりサーバー６にアクセスして更新情報の取得を試行するが、前回までの動作のステップＳ１５で取得した更新情報と同じ情報は取得しない。従って、更新情報取得部１５６は、サーバー６から取得しようとする更新情報が、既に取得した更新情報と同一か否かを判定する機能を有することが好ましい。

更新処理部１５４は、ステップＳ１９において、更新を案内するメッセージをマスク画像に重ねて、案内画像の画像データを生成した場合に、この画像データを、現在表示されている画像データに重ねて表示する処理を実行させる。また、ステップＳ２１においては、更新情報を含む画像データを生成した場合に、この画像データを、現在表示されている画像データに重ねて表示する処理を実行させる。これらの画像データを重畳する処理は、更新処理部１５４が行っても表示制御部１９０が行ってもよい。これにより、前回までの動作で表示された更新情報の表示を保持して、新たに取得された更新情報に対応する案内メッセージや更新情報を表示できる。

さらに、更新処理部１５４は、媒体認識部１５２がステップＳ１３で認識した情報のうち、更新対象となり得る情報を予め選択し、選択した情報についてのみステップＳ１５〜Ｓ２１の処理を行ってもよい。この場合、更新処理部１５４は、媒体認識部１５２が特定した各情報の属性に基づいて情報を選択してもよい。この場合、例えば、更新すべきでない情報として設定された情報を、最新の情報でなくなっても更新せずに視認させることが可能である。さらに、更新すべきでない情報に関する設定をユーザーが行えるようにして、この設定に従って更新処理部１５４が情報を選択する構成とすれば、ユーザーが更新を望まない情報を、更新せずに維持することができる。

また、制御部１４０は、タッチパッド１４や十字キー１６の操作により情報更新の停止の指示が入力されるまで、図４の動作を所定時間毎に実行してもよい。この場合、所定時間毎に情報が更新されるので、ユーザーは最新の情報を取得できる。

また、頭部装着型表示装置ＨＭにより認識される対象の媒体が、画像を表示面に表示する別の表示装置の表示面であり、この表示面に表示された情報に重なるように、新たな情報を頭部装着型表示装置ＨＭが表示してもよい。例えば、媒体認識部１５２が表示面に表示された情報を認識して、この情報の属性、この情報を含む画面全体の属性、または、この情報を表示する表示装置の属性を特定し、更新処理部１５４が情報を取得して、表示を行ってもよい。この場合、ユーザーが頭部装着型表示装置ＨＭを通して視認している表示装置に表示される情報が変わらなくても、頭部装着型表示装置ＨＭが更新された情報を表示することで、ユーザーは最新の情報を視認できる。この場合、頭部装着型表示装置ＨＭと、頭部装着型表示装置ＨＭを通してユーザーが視認している別の表示装置とが通信を実行し、この別の表示装置が表示している情報の属性等を頭部装着型表示装置ＨＭが取得してもよい。別の表示装置の具体的な構成としては、ノート型コンピューター、タブレット型コンピューターまたはデスクトップ型コンピューターのディスプレイ、ゲーム機や携帯型電話機やスマートフォンや携帯型メディアプレーヤーを含む携帯型電子機器、その他の専用機器が有するディスプレイ等を含んでもよい。

以上説明したように、本発明を適用した実施形態に係る頭部装着型表示装置ＨＭは、外景に重ねて視認される画像を表示する表示手段と、外景として視認される媒体を検出する媒体認識部１５２と、表示手段により、媒体に記録された情報の少なくとも一部に重なるように、この重ねられる領域において前記媒体に記録された情報に対応する新たな情報を配置して表示させる更新処理部１５４と、を備える。これにより、媒体に記録された情報の少なくとも一部に重なるように、新しい情報を表示できる。このため、雑誌や新聞等の媒体に記録された情報に代えて最新の情報を表示できる。さらに、情報の表示形態が、媒体に新しい情報が記録されたように見えるという利点がある。これにより、雑誌や新聞等の旧来の媒体と同様に使い勝手に優れた形態で情報を表示することができ、かつ情報の即時的な提供が可能となる。さらにまた、上記実施形態では、媒体に記録された更新対象の情報を隠すようにマスク画像を利用して、更新対象の情報に対応する更新情報を配置して表示する。このため、更新対象の情報を、更新情報により置き換えて視認させることができる。

また、媒体認識部１５２は媒体に記録された情報の属性を判定し、表示手段により更新情報が重ねられる対象（更新対象）の情報の属性に基づいて、新たな情報を取得する更新情報取得部１５６を備え、更新処理部１５４は、更新情報取得部１５６により取得された新たな情報を表示手段により表示させる。これにより、更新情報を重ねて表示する場合に、重ねられる情報に関連する新たな情報を表示できる。
また、更新処理部１５４は、媒体認識部１５２により判定された情報の属性に基づいて、媒体に記録された情報から更新対象の情報を選択するので、媒体に複数の情報が記録されている場合に適切に情報を選択して、新たな情報を提供できる。

また、更新処理部１５４は、媒体に記録された情報のうち、更新情報取得部１５６により新たな情報を取得可能な情報を更新対象の情報として選択するので、例えば新たな情報の提供が可能な場合に、媒体の情報を隠すので、適切に情報を選択して最新の情報を提供できる。
また、更新処理部１５４は、媒体の情報を隠す領域の形状及びサイズに合わせて新たな情報を配置するので、隠される情報の周辺に記録されている他の情報の視認性を損なうことなく、適切に最新の情報を提供できる。
また、上記表示装置は頭部装着型の表示装置ＨＭとして構成され、媒体認識部１５２は表示手段が表示する画像に重なる範囲の外景を撮影するカメラ６１を備え、媒体認識部１５２は、カメラ６１により撮影された撮影画像から媒体を検出するので、装着者が見ている媒体の情報に重ねて最新の情報を自動的に提供でき、利便性のさらなる向上を図ることができる。

また、頭部装着型表示装置ＨＭの表示手段は、表示用画像データを用いて画像を表す画像光を生成し射出させる右表示駆動部２２及び左表示駆動部２４と、射出された画像光をユーザーの眼に導く右導光板２６１及び左導光板２６２と、を含み、外景の光は右導光板２６１及び左導光板２６２を透過して画像光とともにユーザーの右眼ＲＥ、左眼ＬＥに入射する。
このため、右導光板２６１及び左導光板２６２により右眼ＲＥ、左眼ＬＥに画像光を導くとともに、右導光板２６１及び左導光板２６２を透過して、外景の光を右眼ＲＥ、左眼ＬＥに導く頭部装着型の表示装置によって、外景として視認される情報に重なるように新たな情報を表示できる。これにより、ユーザーが視認する情報を表示装置によって更新し、ユーザーに様々な情報を提供できる。

また、実施形態に係る頭部装着型表示装置ＨＭは、ユーザーが視認可能な情報を媒体認識部１５２により検出し、検出した情報の少なくとも一部に重ねて、当該情報に対応する別の情報を、ユーザーが視認可能に表示を行う表示手段により表示させる。これにより、ユーザーが視認する情報を表示装置によって変更または更新することが可能になるため、ユーザーが視認可能な範囲に存在する情報そのものを変更しなくても、ユーザーに異なる情報を提供できる。
そして、本発明は、ユーザーの頭部に装着される頭部装着型表示装置ＨＭに限らず適用可能である。例えば、表示画面を備えるノート型コンピューター、タブレット型コンピューターまたはデスクトップ型コンピューター、ゲーム機や携帯型電話機やスマートフォンや携帯型メディアプレーヤーを含む携帯型電子機器、その他の専用機器等の表示装置に適用できる。また、外光を透過しない表示手段を備え、ユーザーの眼に外景の光が届かないタイプの頭部装着型の表示装置にも適用できる。すなわち、上記表示装置によって、画像ファイル、ＰＤＦ（Portable Document Format）ファイル、テキストファイル、または、情報を含むその他のファイルを表示する場合に、表示画面に表示された情報の少なくとも一部の情報に重なるように、当該情報（重ねられる対象の情報）に対応する別の情報を表示してもよい。この場合、上記表示装置が表示中のファイルの内容を変更することなく、表示される情報の一部または全部を変更または更新できる。この場合、いわゆる電子書籍のファイルを上記表示装置により表示中に、電子書籍に含まれる情報を別の情報に置き換えて表示することができ、かつ、電子書籍のデータを変更することはない。そして、雑誌や新聞等の媒体を模した電子書籍のファイルを利用し、電子書籍に記録された情報が最新の情報に更新されたかのように、情報を表示できる。これにより、雑誌や新聞等の旧来の媒体と同様に使い勝手に優れた形態で情報を表示することができ、かつ、電子書籍のファイル自体を更新することなく、情報の即時的な提供が可能となる。ここで、別の情報の表示態様は、変更または更新される対象の情報に対応していることが視認できる態様であればよく、対象に重なる態様に限定されない。例えば、対象の情報が表示された領域とは異なる位置または領域に、別の情報を表示してもよい。この場合、直線や図形や記号（例えば、吹き出しや注釈）により、対象の情報と別の情報とを結びつけて、対象の情報との対応関係が視認できるようにすればよい。

なお、上述した実施形態は本発明を適用した一例を示すものであって、本発明の構成および本発明の適用範囲は上記実施形態の構成に限定されない。例えば、媒体に記録された情報を隠す方法は、右ＬＣＤ２４１および左ＬＣＤ２４２によりマスク画像を表示する方法に限定されない。隠す対象である更新対象の情報以外の情報の視認性を高めることにより、相対的に更新対象の情報の視認性を低くする方法としてもよいし、他の方法により情報の視認性を低くしてもよい。また、上記実施形態では、媒体に記録された更新対象の情報に重なるように頭部装着型表示装置ＨＭが新たな情報を表示する例を挙げて説明したが、本発明の実施態様としては、更新対象の情報に対応する別の情報を表示するものであればよい。また、本発明は、更新対象の情報の領域に重ねて表示する例に限らず、更新対象の情報が表示された領域とは異なる位置または領域に、新たな情報や別の情報を表示してもよい。この場合、更新対象の情報と別の情報（または新たな情報）とを結びつけて、各情報の対応関係が視認できるようにすればよく、記号、図形、文字等または配色により、対応関係を明示してもよい。
また、上記実施形態では、ユーザーが眼鏡のように装着する画像表示部２０を備えた構成を例に挙げて説明したが、本発明はこれに限定されるものではなく、画像表示部２０に代えて、例えば帽子のように装着する画像表示部や、ヘルメット等に組み込まれた画像表示部を備えた構成としてもよい。また、イヤホン３２、３４は耳掛け型やヘッドバンド型を採用してもよく、省略しても良い。

また、上記実施形態では、例えば、画像光生成部が左右のバックライト２２１、２２２と、左右のバックライト制御部２０１、２０２と、左右のＬＣＤ２４１、２４２と、左右のＬＣＤ制御部２１１、２１２とを備えた構成として説明した。この実施形態の態様はあくまで一例であり、画像光生成部は、上記の構成部と共に、またはこれらの構成部に代えて、他の方式を実現するための構成部を備えていても良い。例えば、画像光生成部は、有機ＥＬ（有機エレクトロルミネッセンス、Organic Electro-Luminescence）パネル等の自発光型のディスプレイと、その発光を制御する制御部とを備える構成としても良い。また、例えば、画像光生成部は、ＬＣＤに代えて、ＬＣＯＳ（登録商標）（Liquid crystal on silicon）や、デジタル・マイクロミラー・デバイス（ＤＭＤ）等を用いることもできる。この場合、画像光生成部はＬＥＤ等の光源を備え、この光源が発する光をＬＣＯＳやＤＭＤにより変調して画像光を生成する。

また、例えば、レーザー網膜投影型のヘッドマウントディスプレイに対して本発明を適用することも可能である。すなわち、画像光生成部が、レーザー光源と、レーザー光源をユーザーの眼に導く光学系とを備え、レーザー光をユーザーの眼に入射させて網膜上を走査し、網膜に結像させることにより、ユーザーに画像を視認させる構成を採用してもよい。レーザー網膜投影型のヘッドマウントディスプレイを採用する場合、「画像光生成部における画像光の射出可能領域」とは、使用者の眼に認識される画像領域として定義することができる。

ヘッドマウントディスプレイにおいて画像光生成部が生成した画像光をユーザーの眼に導く光学系としては、外部から装置に向けて入射する外光を透過する光学部材を備え、画像光とともにユーザーの眼に入射させる構成を採用できる。また、ユーザーの眼の前方に位置してユーザーの視界の一部または全部に重なる光学部材を用いてもよい。さらに、レーザー光等を走査させて画像光とする走査方式の光学系を採用してもよい。また、光学部材の内部で画像光を導光させるものに限らず、ユーザーの眼に向けて画像光を屈折及び／または反射させて導く機能のみを有するものであってもよい。

また、本発明を、ＭＥＭＳディスプレイ技術を利用した表示装置に適用することも可能である。
実施形態の頭部装着型表示装置ＨＭは、左右のバックライト２２１、２２２、左右のバックライト制御部２０１、２０２、左右のＬＣＤ２４１、２４２、及び左右のＬＣＤ制御部２１１、２１２を備える画像光生成部が生成した光を導光板２６１、２６２によりユーザーの眼に導く構成とした。
これに対し、ＭＥＭＳミラーを用いた走査光学系を採用してもよい。すなわち、画像表示素子として、信号光形成部と、信号光形成部が射出する光を走査するＭＥＭＳミラーを有する走査光学系と、走査光学系により走査される光によって虚像が形成される光学部材とを備えてもよい。この構成では、信号光形成部が射出した光がＭＥＭＳミラーにより反射され、光学部材に入射し、光学部材の中を導かれて、虚像形成面に達する。ＭＥＭＳミラーが光を走査することにより、虚像形成面に虚像が形成され、この虚像をユーザーが眼で捉えることで、画像が認識される。この場合の光学部品は、例えば上記実施形態の右導光板２６１及び左導光板２６２のように、複数回の反射を経て光を導くものであってもよく、虚像形成面は、面２６２Ａのようにハーフミラー面となっていてもよい。

本実施形態の図４で説明した動作において、制御部１４０は、右ＬＣＤ２４１および左ＬＣＤ２４２の画素を単位として情報の表示および更新の領域を制御していた。ＭＥＭＳディスプレイ技術を採用した場合、制御部１４０は、ＭＥＭＳミラーにより走査する領域と、この走査により虚像が形成される範囲とを基準として処理を行う。これにより、ＭＥＭＳディスプレイ技術を用いて、本発明を実施し、媒体の情報の変更や更新を行うことができる。

また、本発明の表示装置は、上述した頭部装着型の表示装置に限定されず、フラットパネルディスプレイやプロジェクター等の各種の表示装置に適用できる。
さらに、本発明の実施態様は、制御部１４０が実行するプログラムを記憶部１２０に記憶する構成に限定されない。例えば、上記プログラムを、コンピューター読み取り可能な可搬型の記録媒体や制御装置１０に外部接続される記憶装置、或いは、制御装置１０に有線または無線通信回線を介して接続される装置に記憶させてよい。この場合、必要に応じて制御装置１０がプログラムを読み込んで実行するようにしてもよい。その他の頭部装着型表示装置ＨＭの細部構成についても任意に変更可能であることは勿論である。

６…サーバー、１０…制御装置、１４…タッチパッド、１６…十字キー、２０…画像表示部、２０Ａ…調光板、２２…右表示駆動部、２４…左表示駆動部、２６…右光学像表示部、２８…左光学像表示部、６１…カメラ（撮影手段）、１２０…記憶部、１４０…制御部、１５２…媒体認識部（媒体検出手段、属性判定手段、画像処理手段）、１５４…更新処理部（制御手段）、１５６…更新情報取得部（情報取得手段）、１６０…画像処理部、１８５…通信インターフェイス、１９０…表示制御部、２２１…右バックライト、２２２…左バックライト、２４１…右ＬＣＤ、２４２…左ＬＣＤ、２５１…右投写光学系、２５２…左投写光学系、２６１…右導光板（光学部材）、２６２…左導光板（光学部材）、２６２Ａ…面、３５０…新聞（媒体）、ＨＭ…頭部装着型表示装置（表示装置）、Ｌ…画像光、ＯＬ…外光。

Claims (10)

1. 使用者が視認可能な情報を検出する検出手段と、
   前記使用者が視認可能に表示を行う表示手段と、
   前記検出手段により検出された情報の少なくとも一部に重ねて、当該情報に対応する別の情報を前記表示手段により表示させる制御手段と、
   を備えることを特徴とする表示装置。
2. 外景に重ねて視認される画像を表示する表示手段と、
   前記外景として視認される媒体を検出する媒体検出手段と、
   前記表示手段により、前記媒体に記録された情報の少なくとも一部に重ねて、この重ねられる領域の前記情報に対応する新たな情報を配置して表示させる制御手段と、
   を備えることを特徴とする表示装置。
3. 請求項２記載の表示装置であって、
   前記媒体に記録された情報の属性を判定する属性判定手段と、
   前記表示手段により前記新たな情報が重ねられる対象の前記情報の属性に基づいて、前記情報に対応する前記新たな情報を取得する情報取得手段と、を備え、
   前記制御手段は、前記情報取得手段により取得された前記新たな情報を前記表示手段により表示させることを特徴とする表示装置。
4. 請求項３記載の表示装置であって、
   前記制御手段は、前記属性判定手段により判定された情報の属性に基づいて、前記媒体に記録された情報から更新対象の情報を選択することを特徴とする表示装置。
5. 請求項４記載の表示装置であって、
   前記制御手段は、前記媒体に記録された情報のうち、前記情報取得手段により前記新たな情報を取得可能な情報を前記更新対象の情報として選択することを特徴とする表示装置。
6. 請求項２ないし５のいずれか一項記載の表示装置であって、
   前記制御手段は、前記媒体の情報を隠す領域の形状及びサイズに合わせて新たな情報を配置することを特徴とする表示装置。
7. 請求項２ないし６のいずれか一項記載の表示装置であって、
   頭部装着型の表示装置として構成され、
   前記媒体検出手段は前記表示手段が表示する画像に重なる範囲の外景を撮影する撮影手段と、前記撮影手段により撮影された撮影画像から前記媒体を検出する画像処理手段とを備えることを特徴とする表示装置。
8. 請求項２ないし７のいずれか一項記載の表示装置であって、
   前記表示装置は、使用者に画像を視認させる頭部装着型表示装置であり、
   前記表示手段は、
   表示用画像データを用いて画像を表す画像光を生成し射出させる画像光生成部と、
   射出された前記画像光を前記使用者の眼に導く光学部材と、
   を含み、
   前記外景の光は前記光学部材を透過して前記画像光とともに前記使用者の眼に入射することを特徴とする表示装置。
9. 使用者が視認可能な情報を検出し、
   検出された情報の少なくとも一部に重ねて、当該情報に対応する新たな情報を、前記使用者が視認可能に表示を行う表示手段によって表示させること、
   を特徴とする表示装置の制御方法。
10. 外景に重ねて視認される画像を表示する表示手段を備えた表示装置の制御方法であって、
    前記外景として視認される媒体を検出し、
    前記表示手段により、前記媒体に記録された情報の少なくとも一部に重ねて、この重ねられる前記情報に対応する新たな情報を配置して表示させること、
    を特徴とする表示装置の制御方法。

Images